- 博客(8)
- 收藏
- 关注
RSS订阅原创 大数据之路——flume（1.9.0官网学习）
Flume简介Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。2011 年 10 月 22 号，cloudera 完成了 Flume-728，对 Flume 进行了里程碑式的改动：重构核心组件、核心配置以及代码架构，重构后的版本统称为 Flume NG（next generation）；改动的另一原因是将 Flume 纳...
2019-04-22 09:53:55
826
原创 大数据之路(二)——MapReduce 编程案例(WordCount)
WordCount案例导入相关jar包——share文件夹下的hadoop文件夹下的common、hdfs、mapreduce文件夹下所有jar包，以及mapreduce文件夹下的依赖jar包，即lib文件夹下的所有jar包。import org.apache.hadoop.mapreduce.Mapper; /**KEYIN:map task 读取到的数据的key类型，是一行的起始偏...
2019-03-22 09:39:24
232
原创 大数据之路(一)——HDFS分布式文件系统
HDFS介绍HDFSHDFS是一个主/从（Mater/Slave）体系结构，从最终用户的角度来看，它就像传统的文件系统一样，可以通过目录路径对文件执行CRUD。HDFS一般是用来“一次写入，多次读取”，不适合做实时交互性很强的事情，不适合存储大量小文件。HDFS实现将文件分布式存储在很多服务器上， 其功能是帮用户管理文件。其顶层目录为"/",用户可以将文件存放在相关目录下。例如：/data/20...
2019-03-19 23:16:30
300
原创 Windows10 修改hosts文件
非管理员修改hosts步骤1.找到 hosts文件所在位置：C:\Windows\System32\drivers\etc2. 将hosts文件拖到桌面，出现权限管理提醒，单击“继续”3. 在桌面，单击hosts文件——打开方式——记事本——添加相应内容4. 单击“文件”——保存5. 保存完成后，将桌面的hosts文件重新拉回C:\Windows\System32\drivers\etc...
2019-03-19 19:42:29
416
原创 Windows10 jdk1.8安装导向及环境变量配置
去官网下载jdkjdk下载地址下载后双击安装按照安装导向一路 “下一步”安装完成，进行环境变量配置单击计算机——系统属性——系统信息在环境变量对话框中的系统变量中点击“新建”按钮，在弹出的新建系统变量里的变量名中输入JAVA_HOME，在变量值中输入JDK的安装目录： C:\Program Files\Java\jdk1.8.0_201 ，然后点击确定在系统变量中查看是...
2019-03-19 19:40:43
200
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人