- 博客(55)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 Flink1.14学习测试:接收kafka消息将结构化数据通过JDBC保存到数据库中
Flink1.14 kafka 结构化数据 通过jdbc连接 保存到目标数据表
2022-07-15 11:19:11
1812
原创 Parquet文件测试（二）——Java方式对Parquet文件进行文件生成和解析
Java方式对Parquet文件进行文件生成和解析 此处属于对Parquet文件测试（一）——使用Java方式生成Parqeut格式文件并直接入库的Hive中的补充，因为之前只是写了生成，并没有写如何解析，其次就是弄懂结构定义的问题。最终目的是生成正确的Parquet文件，使用Spark可以正常的读取文件内容（可参考Spark练习测试（二）——定义Parquet文件的字段结构）。测试准备 首先定义一个结构，到时候生成的Parquet文件会储存如下结构的内容：import lombok.Data;
2021-05-25 14:56:38
3296
2
原创 Spark练习测试（二）——定义Parquet文件的字段结构
定义生成Parquet文件的字段结构 相关依赖在《Spark练习测试——读写Parquet格式文件（一）》中的开头处。定义生成数据的结构 定义一个表结构，在该类中有个conversionToRow()方法，这个方法将会在定义Parquet文件字段的时候用到。import lombok.Data;import org.apache.spark.sql.Row;import org.apache.spark.sql.RowFactory;/** * 测试结构 * 属性为表字段 */@
2021-05-22 17:36:37
465
3
原创 如何获取Hive库表字段分区信息
如何获取Hive库表字段分区信息 使用Hive关联的Mysql读取Hive的库表字段分区信息，也可以使用Hive的sys数据库查询相关的信息，但是会比较慢。所以直接使用Mysql去读，Hive在Mysql保存的信息如下图所示：获取Hive的所有数据库信息 &emsp；如果注释字段中文乱码，则需要修改字符集（正常情况都需要修改）。SELECT `NAME` NAME, ANY_VALUE ( `DESC` ) COMMENT, ANY_VALUE ( `DB_LOCATION_URI
2020-12-26 15:02:04
5140
1
原创 Parquet文件测试（一）——使用Java方式生成Parqeut格式文件并直接入库的Hive中
验证Parquet格式的操作验证目标Parquet格式是否可以直接将上传到Hdfs中的文件，加载到目标数据表中（Hive）。将无结构化数据转成Parquet格式文件，并上传到Hdfs中。使用datax工具同步数据（将指定Parquet文件同步到Hive中）。创建测试表 表信息如下(注意stored as parquet默认为orcfile)： 建表语句如下：create table parquet_test( name string, age int)comment 'p
2020-12-19 16:23:30
2338
3
原创 实现自己的首字母索引导航列表（四）——字母导航条与列表联动
文章目录1、修改SuspensionDecoration类，完善悬浮头效果2、修改MainActivity的布局文件，查看界面效果3、设置字母导航条的回调函数，完成联动功能 目标效果如下。实现步骤：修改SuspensionDecoration类，完善悬浮头效果修改MainActivity的布局文件，查看界面效果设置字母导航条的回调函数，完成联动功能1、修改SuspensionD...
2020-04-20 21:49:15
1131
原创 实现自己的首字母索引导航列表（三）——实现列表的悬浮头效果
文章目录实现自己的首字母索引导航列表（三）——实现列表的悬浮头效果1、绘制悬浮头效果2、处理列表向上滑动3、处理列表向下滑动实现自己的首字母索引导航列表（三）——实现列表的悬浮头效果 目标效果如下。 实现步骤：绘制悬浮头效果处理列表向上滑动处理列表向下滑动 实现这样的效果只需要一个装饰器就可以了。如果对ItemDecoration不太了解。那就请看这篇教程，这位大神写的...
2020-04-20 14:53:41
537
原创 实现自己的首字母索引导航列表（二）——拼音首字母分类列表
文章目录实现自己的首字母索引导航列表（二）——拼音首字母分类列表1、创建多类型布局列表1.1 定义列表加载数据格式1.1 创建适配器1.2 添加假数据展示列表2、对数据源进行首字母拼音分组3、添加分割线实现自己的首字母索引导航列表（二）——拼音首字母分类列表 目标效果如下。 实现步骤：创建多类型布局列表对数据源进行首字母拼音分组添加分割线（此步不重要，凑数用的）1、创建多...
2020-04-19 23:56:00
1231
原创 Android使用usb线传输大文件笔记
使用usb线传输大文件参考资料：使用USB数据线连接PC端和Android端进行数据的交互安卓设备通过USB接口实现与pc端的简单数据通信Socket TCP/IP协议数据传输过程中的粘包和分包问题【Android学习】socket长连接，数据粘包问题 由于客户应用使用的场景比较特殊。明确要求不能使用网络进行数据交互，所以不得不研究了一下使用usb通信这方面。原理就是当连上usb...
2019-04-21 00:54:46
4405
2
原创 微信小程序笔记（五）Wepy使用记录—Wepy-Redux基本使用
Wepy使用记录—Wepy-Redux基本使用 wepy-redux刚开始看的时候真是不知道是啥一头雾水。网上找的资料大部分鬼话连篇。要说良心之作不是没有，请看这篇手把手教你在小程序里使用 Redux。这篇讲的是非常不错的，结合wepy示例代码讲的。由于我个人理解比较慢，所以我不得不看了点视频再了解一下。React16.4 快速上手（怕直接看下面的不懂，提前积累了点基础）在React中使...
2019-01-30 22:49:07
2303
5
原创 微信小程序笔记（三）Wepy使用记录—Stylus预编译基本使用
Wepy使用记录—Stylus预编译基本使用坏境搭建请前往wepy框架官网淘宝 NPM 镜像wepy新建wpy初始化模板参考创建空项目 使用wepy init empty 项目名称命令来创建项目。如下如所示，几乎一路回车就可以了。 创建完项目，就可以打开它了。使用wepy build -w开启时时预览。随后就会在项目根目录生成一个dist文件夹。然后使用微信小程序开发工具打开...
2019-01-30 11:09:21
972
原创 Flutter布局练习
练习布局 前段时间Flutter的文章超多，再加上以前的同事也在开始使用Flutter开发项目了，为了积累吹NB的资料，不得不了解一下，然后写个练习练练手。总体感觉还不错，虽然这类文章也很多。但毕竟是别人学习后的总结，跟自己敲一遍的理解是没法比的。看着永远比做着简单。（就像这段文字的缩进，之前我一直都用的全角空格。直到后来失效我才发现原来两个 就能实现这样的效果，当然还有别的...
2018-11-06 15:23:48
1494
原创 JavaWeb练习之使用Mybatis Plus
Mybatis-Plus使用练习这里使用的是2.3的版本，因为公司项目中用的就是2.3的版本。所以就没再去瞎捅咕（Mybatis-Plus2.x的说明文档）。具体作用就是用来快速生成文件模板的工具，相当于一键生成Controller、Service、Mapper和pojo类而且还支持lombok（这个只需要在配置中开启就行，当然别忘了添加依赖），可以说是相当的方便了。Pom.xml配置相关的...
2018-09-17 22:34:30
1677
原创 微信小程序笔记（二）摆脱不会css的烦恼，快速引用三方UI库
整理资料 在学习小程序的过程中，积累了一些小经验。说实话有点脸红，这些在小程序开发文档中都有。在这里先整理了一些非常实用的内容。 - 使用模板（template） - 使用自定义控件（Component） - 引用外部JS - 第三方UI组件库关于template和Component的使用最好还是过一遍官方文档的框架部分。然后剩下的疑问只需要百度一下你就知道。...
2018-08-16 00:56:37
3113
原创 WebService的使用备忘
WebService的使用备忘 Android端需要的Jar ksoap2的下载地址，现在下载积分很贵啊，反正我是没有积分。 https://github.com/simpligility/ksoap2-android/releases 为了方便这里先自行准备个接口用来练习。一、制作WebService接口（准备工作，如果只看请求此处可以跳过） 这里我使用...
2018-07-31 10:43:36
368
原创 SpringBoot?Kotlin?Mybatis?Thymeleaf?简单的了解一波！
扯淡也需要积累资料 这里列个菜单，备注下需要哪些准备。 1. 开发工具：Intellij idea（用惯了AS用这个绝对顺手） 2. Java环境：JDK1.8（高了的没用过，反正对于Android来说1.8够用了） 3. 数据库：Mysql（下个压缩包的就行，感觉解压版的很是好配，也很省时间） 4. Maven：自己也行，用Intellij idea自带的也行，反正别忘了配置下镜...
2018-07-04 23:31:18
625
原创 微信小程序笔记（一）初次接触小程序开发
微信小程序练习 昨个写了个Vue的小练习，今天再来个微信小程序的练习。数据绑定上大致跟vue的用法差不多，可惜了不会CSS，要不写起来能顺溜不少。这么一看还是写Android顺手。1、创建项目 不得不说小程序的文档写的相当不错，创建项目看微信小程序开发文档就能知道咋回事了，这里留个截图以作纪念。 创建完page后，界面的路径会自动在app.json里配置好。但是注意一...
2018-06-28 22:02:45
4229
2
原创 一个Vue.js的小练习
小小的练习相关引用bootstrap3.0用来做些样式jquery-1.12.4.min.js不知道bootstrap用来做什么，我用它来异步请求数据vue.min.js用来数据绑定1.布局<!DOCTYPE html><!--suppress ALL --
2018-06-27 23:41:02
1722
原创 Mui本地打包笔记（四）Android自定义插件的配置（以动态申请权限为例）
通过自定义插件方式实现Android平台的动态申请权限功能Android平台第三方插件开发指导系统通知栏显示进度条Android插件 在上一章中完成了在Mui中调用Android原生的动态权限请求功能（Android动态申请权限的问题）。虽然说完成了功能，但是在使用上并不是十分的方便。比如说每次要请求权限的时候都要写类名和方法名去引用对应的类的方法。总这么写迟早都会感觉到恶...
2018-03-29 13:47:08
2933
12
原创 Mui本地打包笔记（三）Android动态申请权限的问题（以获取地理位置信息为例）
使用Mui调用Android拓展方法来完成动态申请权限的功能android离线打包6.0以上的权限动态申请Native.js for Android官方说明文档 说白了还是JS与原生交互，只不过这里mui为我们封装了好了交互的功能，我们只需要知道如何调用就行了，这里将会以上一章的内容为基础，因为为了做本章的准备已经将如何引入Html5+插件的配置，在上一章进行了说明（Mui...
2018-03-28 22:20:14
6028
6
原创 Mui本地打包笔记（二）集成第三方SDK（以百度地图为例）
离线打包集成百度地图SDK官方文档【Android离线打包地图插件配置】HBuilder中地图的配置和百度地图AppKey的申请说明 这里我将百度地位和百度地图需要的SDK都集成到Android原生项目中。这一章只是让地图能正常的显示出来，定位这里将会在下一章的动态权限请求中用到。这一章只要地图能正常显示就集成成功了，Andorid原生项目集成5+SDK运行Mui的项目请参考Mui本地打...
2018-03-23 16:12:51
4958
4
原创 Mui本地打包笔记（一）使用AndroidStudio运行项目
使用AndroidStudio运行HBuilder本地打包的Mui项目Mui官网5+SDK下载地址官网的AndroidStudio打包说明离线打包说明（包括引入aar包的图文教程） 我这里使用SDK的是18年3月19日发布的版本，所以配置上与官网上的说明有些出入。这里我先创建Android原生项目，并配置好SDK和manifest再使用HBuilder创建移动A...
2018-03-20 23:43:36
6615
3
原创 在Maven工程中引入JSTL标签库
使用Maven导入jstl报错：The absolute uri: [http://java.sun.com/jsp/jstl/core] cannot be resolved in either web.xml or the jar files deployed with this application
2017-11-03 11:17:42
12175
3
原创 Spring+Mybatis整合练习笔记
简单的配置一下Spring+Mybatis 有些东西，真的得自己记录一下。就算有太多的资料，但是自己实现起来还不是那么顺利。
2017-10-20 19:55:10
473
原创 MPAndroidChart绘制折线图柱状图混合图表练习
简单的使用MPAndroidChart图表库 之前一直在使用Hellocharts绘制图表，后来发现还是MPAndroidChart强大一些（比如这个双Y轴图表，我觉得还是使用MPAndroidChart好实现），反正都挺好用的。
2017-09-18 23:16:38
4300
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人