sinat_33677430的博客

原创 修改jupyter notebook的默认打开存储文件位置

前言本篇文章解决的问题是：anaconda默认jupyter notebook的文件目录在C盘，这里是要改变jupter notebook的文件目录。1.前提在系统的环境path中已经添加了anaconda的路径。若是没有配置环境变量的，请参考Anaconda的安装及环境配置（图文）。2.生成jupyter_notebook_config.py文件打开Anaconda Prompt输...

原创 Anaconda的安装及环境配置（图文）

1.Anaconda的下载官方下载地址：https://www.anaconda.com/distribution/可以根据需要进行合适的版本下载。2.安装Anaconda双击安装应用程序下面按照图示选择即可3.配置环境变量打开我的电脑–属性–高级系统设置–系统设置–环境变量–path添加anaconda的安装地址的路经：D:\ProgramData\An...

原创 大数据的基础环境搭建之CDH伪分布式环境搭建

安装环境服务部署规划第一步：上传压缩包并解压将我们重新编译之后支持snappy压缩的hadoop包上传到第一台服务器并解压第一台机器执行以下命令cd /export/softwares/mv hadoop-2.6.0-cdh5.14.0-自己编译后的版本.tar.gz hadoop-2.6.0-cdh5.14.0.tar.gztar -zxvf hadoop-2.6.0-cdh5.1...

原创 大数据的基础环境搭建之zookeeper的安装

1、ZooKeeper 概述Zookeeper 是一个分布式协调服务的开源框架。 主要用来解决分布式集群中应用系统的一致性问题，例如怎样避免同时操作同一数据造成脏读的问题。ZooKeeper 本质上是一个分布式的小文件存储系统。 提供基于类似于文件系统的目录树方式的数据存储，并且可以对树中的节点进行有效管理。从而用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化，从而可以达...

原创 大数据的基础环境搭建之大数据集群群环境准备

1、三台虚拟机关闭防火墙三台机器执行以下命令（root用户来执行）service iptables stopchkconfig iptables off2、三台机器关闭selinuxvim /etc/selinux/config3、三台机器更改主机名vim /etc/sysconfig/network4、三台机器做主机名与IP地址的映射vim /etc/hosts...

原创 大数据的基础环境搭建之Centos的安装

1.通过iso镜像文件来进行安装centos第一步：创建一台虚拟机出来2.2、为我们的虚拟机挂载操作系统2.3、开启我们的虚拟机，为我们的虚拟机进行安装操作系统2.4、配置虚拟机连接网络修改linux的mac地址修改mac地址配置文件需要启动我们的linux的虚拟机，然后更改mac地址的配置文件vim /etc/ud...

原创 大数据的基础环境搭建之VMWare的安装

前言大数据的基础环境搭建之Vmware.这里主要是版本14的安装指南。我选择的是11版本的安装，安装过程相似。![在这里插入图片描述](https://img-blog.csdnimg.cn/20200211102555812.png...

转载 经典50道SQL

--1.学生表Student(S,Sname,Sage,Ssex) --S 学生编号,Sname 学生姓名,Sage 出生年月,Ssex 学生性别--2.课程表 Course(C,Cname,T) --C --课程编号,Cname 课程名称,T 教师编号--3.教师表 Teacher(T,Tname) --T 教师编号,Tname 教师姓名--4.成绩表 SC(S,...

原创 大数据之笔试题2

原创 大数据之笔试题1

原创 转载CSDN文章的步骤

1、在需要转载的页面，空白处点击鼠标右键，点击查看2、出现html页面，找到在html页面右击鼠标，点击copy，再点击copy outerHTML即可3、点击自己的编辑博客界面，进行粘贴，保存发布即可。...

转载 数据仓库之数据建模

同时，业务建模阶段的另一个重要工作就是确定我们数据建模的范围，例如：在某些数据准备不够充分的业务模块内，我们可以考虑先不建设相应的数据模型。等到条件充分成熟的情况下，我们可以再来考虑数据建模的问题。...

翻译 大数据项目总体流程

大数据项目的大概流程都是差不多的，上图是一种数据采集层：数据存储与计算处理：数据可视化：参考：https://blog.csdn.net/qq_39839745/article/details/86521444里面的图片...