- 博客(3)
- 资源 (18)
- 收藏
- 关注
原创 MapReduce执行流程
MapReduce执行流程一. MapReduce工作原理MapReduce执行,会在Mapper任务运行时读取HDFS中的数据文件,然后调用map方法处理数据,输出。Reducer任务接收Mapper任务输出的数据,作为自己的输入数据调用reduce方法,最后输出到HDFS文件中 (1)Mapper任务详解 每个Mapper任务是一个独立java进程,读取HD...
2017-08-10 15:25:51 17
原创 应用MapReduce(1)
应用MapReduce(1) 编写一个数据去重的MapReduce应用 一、准备数据文件1200001-3-1 a200001-3-2 b200001-3-3 c200001-3-4 d200001-3-5 a200001-3-6 b200001-3-7 c200001-3-3 c 文件2200002-3-1 a200002-3-2 b200002-3-3 ...
2017-08-03 19:02:29 13
原创 单机部署hadoop
单机部署Hadoop 一、系统及版本:CentOS release 6.8 (Final) hadoop-2.8.1 JDK1.7(安装并配置环境变量) 安装前提:ssh安装 单机模式:运行在一个单独机器上的独立Java进程,适用于开发或调试...
2017-08-03 15:10:37 23
构建全栈式Flex、BlazeDS和Spring集成解决方案–第三部分 整合全部应用.pdf
2008-11-06
构建全栈式Flex、BlazeDS和Spring集成解决方案\构建全栈式Flex、BlazeDS和Spring集成解决方案–第二部分 编写to-do list服务器端.pdf
2008-11-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人