- 博客(5)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 2021-09-02
zepeelin org/apache/hive/service/rpc/thrift/TCLIService$Ifacezepeelin中缺少hive-service-rpc-****.jar包
2021-09-22 16:01:58
65
原创 Spark简介
Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎Apache Spark是一个快速的、多用途的集群计算系统。它提供了Java、Scala、python和R的高级API，以及一个支持通用的执行图计算的优化过的引擎，它还支持一组丰富的高级工具，包括使用SQL处理结构化数据处理的Spark SQL,用于机器学习的MLlib,用于图计算的Graphx,以及Spark Streami...
2019-05-27 19:43:38
186
原创 scala——var和val的区别
var:修饰的变量可以改变val:修饰的变量不可以改变，相当于Java语法中的final只有val修饰的变量才能被lazy修饰，使用lazy定义变量后，只有在调用该变量时才会实例化这个变量的值，而且惰性变量只能是不可变变量使用var声明的一个变量var修饰的变量，内容和引用都可变使用val声明的一个常量和值val修饰的变量时不可变的，注意不可变的不是内容，而是内容可变和不可变...
2019-05-21 17:30:35
2573
原创 HQL的一些优化
一、hql的查询1、hql语句的执行顺序from 加载，进行表的查找和加载on 关联字段join 关联表where 过滤group by 分组having 过滤select 去重order by 排序limit 限制输出数量2、hql的部分优化原则一：分区一定要加原则二：多表连接时使用相同的关联词，这样只会产生一个job文件a 文件b ...
2019-05-15 19:27:02
1418
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人