4 大肥肥哈哈哈

尚未进行身份认证

我要认证

暂无相关简介

等级
TA的排名 47w+

datax parquet hdfswriter

datax parquet hdfswriter背景为什么我要开发这个工具呢?我之前安装的cdh集群版本是5.14,里面的impala支持parquet,不支持orc,但是偏偏呀,datax不支持直接写到hdfs的parquet。虽说datax和impala同时还支持txt格式,但是查询速度比较慢,问了很多,见别人有开发datax parquet reader的,就是没有writer,于是就...

2020-04-21 18:12:14

hive udf 读写存储到hbase的roaringbitmap

本项目源码地址https://github.com/sunyaf/bitmapudf本项目主要是将hive udf 、roaringbitmap 、hbase集成到一起打包方法mvn clean package然后将target下jar包上传到hdfs指定目录,以方便创建udf函数,或者您也可以直接上传到服务器,通过add jar命令创建udf函数。本人上传到了/utils/hiveU...

2020-04-01 18:32:38

Elasticsearch-Sql+Mybatis+SpringBoot集成

Elasticsearch-Sql+Mybatis+SpringBoot集成本文介绍了springboot如何集成elasticsearch-sql+mybatisrest方式使用es-sqlJDBC方式用springboot+mybatis访问本文介绍了springboot如何集成elasticsearch-sql+mybatis大家好!ElasticSearch(下面用es作为缩减)作为开...

2018-12-21 10:54:19

Hadoop 2.7.4伪分布式安装步骤与排坑

概述本教程适合于在 CentOS 6.x 系统中安装原生 Hadoop 2X,适用于Hadoop 2.6.0, Hadoop 2.7.4 等版本,主要参考了官方安装教程,步骤详细,辅以适当说明,相信按照步骤来,都能顺利在 CentOS 中安装并运行 Hadoop。环境准备在装好了centos以后还有一些环境需要准备一下,下面一一列举创建hadoop用户su 输入密码useradd hadoo

2017-09-07 11:55:11
勋章 我的勋章
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。
  • 分享学徒
    分享学徒
    成功上传1个资源即可获取