- 博客(1)
- 收藏
- 关注
原创 spark streaming 实时日志清洗和统计
1、数据处理加工模型(1)输入:文件,数据库,消息队列(2)处理:函数,sql,mapreduce,bolt,transform/action(3)输出:文件,数据库2、spark简介spark与hadoop开发wordcount对比hadoop(1)主方法(2)map(3)reducespark(1)启动(2)转换transform(3)动作actionspark常用函数转换(transform...
2018-05-12 19:30:32 2572
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人