2 晴々明雅

尚未进行身份认证

暂无相关简介

等级
TA的排名 11w+

指定程序立即退出执行的方法

需要程序 退出 当前执行System.exit(-1) Java JDK中 提供的方法sys.exit() Scala 提供的方法

2020-04-24 11:13:53

postgreSQL中时间类型的操作

postgre SQL 中的時間類型有4種:timestamp (時間類型 格式 : ‘YYYY-MM-DD HH24:MI:SS’)date (日期 格式: ‘YYYY-MM-DD’)time (時間 格式: ‘HH24:MI:SS’)interval (間隔 格式: day hour hours second )時間進行計算時...

2020-04-12 11:20:07

java.lang.NoSuchMethodError: org.apache.spark.sql.types.StructType.names()[Ljava/lang/String;

原jar包版本2.4.3,现在集群运行环境是2.3.2,代码中有一段要调用StructType.names()方法,结果报错java.lang.NoSuchMethodError: org.apache.spark.sql.types.StructType.names()[Ljava/lang/String;使用如下文章中的方法:https://blog.csdn.net/wuhuimin9...

2020-04-10 11:09:46

安装elasticsearch及报错could not find java in JAVA_HOME or bundled at /root/jdk-11/bin/java

安装elasticsearch参考的文档https://blog.51cto.com/hwg1227/2299995因为我下载的最新版本7.4,对jdk版本要求为jdk11,去官网下载jdk时,要求登录Oracle账户,使用了别人分享的账户密码:2696671285@qq.com密码:Oracle123原版链接:https://blog.csdn.net/WNsshssm/article/...

2019-11-10 14:33:20

开启程序员之路---上班感悟

上班快两个月了,工作不是很忙,与之前的区别是:可以看着真正的需求,真实的项目将之前学的知识系统化,之前喜欢专研一个知识点,由点及面的拓展知识,所以,上班没有太手忙脚乱的感觉大数据在实际运用中spark部分sparkSql会用的比较多,因为它可以将各种结构化和非结构化的数据转换成自己的数据集,并且提供的两种风格的语法,可以实现大部分对数据增删改查的处理逻辑,当然sparkstreaming在实时...

2019-11-05 21:10:08

定时任务

终于完成了第一个定时任务。定时语句如下:/1 * * * * [需要执行的任务]使用crontab -e定时之后,控制台没有显示,但是会有一个您在 /var/spool/mail/root 中有新邮件*提示定时任务后面是的comment,可以写的复杂点那么上面的不能打印到控制台,可以将文件追加到指定文件中,使用tail -f 来监控文件即可。又新发现还会来更新的...

2019-08-14 13:55:07

hive优化之动态分区--静态分区

最近做项目,hive表中导入数据时使用了一个之前没有见过的语法set hive.exec.dynamic.partition.mode=nonstrict;insert overwrite table dws_uv_detail_mn partition( mn)select mid, ... ....date_format('2019-02-03','yyyy-...

2019-08-03 20:43:40

打开虚拟机报错VMware虚拟机报错:无法打开内核设备"\\.\Global\vmx86": 系统找不到指定的文件.是否在安装 VMwar

今天打开虚拟机的时候报错了:VMware虚拟机报错:无法打开内核设备"\.\Global\vmx86": 系统找不到指定的文件.是否在安装 VMwar可能是清理电脑的时候将其服务关闭的原因好在网上有完整的处理方法阶段1 :https://blog.csdn.net/qq_36798272/article/details/88563907Windows+R打开运行对话框,输入cmd 回车...

2019-06-26 16:27:11

spark 中生成包含元组(1,“a") (2,"b”) (3,"c”)...(25,"y") (26,"z")的RDD

需求:把26个字母与数字组合在一起,并形成RDD算子将字母和数字放一起有很多形式val strings = 'a' to 'z'for (i <- 0 to 25) {(i + 1, strings(i).toString)}这样就可以打印出需要的格式但是怎么生成RDD呢首先RDD中的是一系列的元组,类似与Array((Int,String))=((1,“a") (2,"...

2019-06-25 14:05:43

小白心中的反编译操作步骤

经常听说编译编译,但是不太了解其意义先说一下反编译的操作首先的有反编译工具 jd-gui.exe (由于本人还不会上传运行文件,看见的宝宝自行下载吧)下载好后,在ecilpse或者idea中找 out 或者target(maven项目) 文件夹,里面是已经编译好的字节码文件.class格式右键选中的目录,选择中间位置有一个show in explorer 进入Windows中...

2019-06-01 21:33:07

编写一个扑克牌 4 种花色的枚举,让其 toString 方法分别返回♣,♦,♥,♠,并实现一个函数,检查某张牌的花色是否为红色

//继承枚举类实现枚举类的方法 //继承App 可以省略main方法,直接进行测试object Four extends Enumeration with App { type Suits = Value val Spade = Value("♣") val Club = Value("♦") val Heart = Value("♥") val Diamond...

2019-05-31 20:14:51

idea中的CTRL+alt+L快捷键不能用

在idea中输入CTRL+alt+L没有使idea代码格式化,反而出现QQ的

2019-05-23 11:00:52

Windows , IDEA 与 Linux->vim中常用命令大全

之前总结了一些很常用的快捷方式,但是最最常用的记住了,还有很多慢慢淡忘了,再来复习一遍windows中的快捷键1,关于CTRL键CTRL+a 全选CTRL+s 保存CTRL+x 剪切CTRL+c 复制CTRL+v 粘贴CTRL+z 撤销/相当于文档中的向左箭头CTRL+y 恢复上一步的撤销/相当与文档中的右箭头CTRL+shift+ESC 打开任务管理器CTRL...

2019-05-19 20:10:20

hive整合HBase:HBase table xsg:test05 doesn't exist while the table is declared as an external table

版本 虚拟机centOS7 hive 1.2.1 hbase 1.2.61,在hive-site.xml中添加配置 <property> <name>hbase.zookeeper.quorum</name> <value>test-hadoop-2-21,test-hadoop-2-22,test-hadoop-2-23...

2019-05-17 20:08:46

关于数组中的大括号{}和数组的遍历

byte[][] = {}; 看见这种格式不要惊讶这个{}是个什么鬼,这是数组存值的格式//一维数组int [] a ={1,5,2,51,5};//二维数组int [][] b ={{1,5,2,},{7875,555578}};//一维数组的遍历for (int i:a ) { System.out.println(i);}System.out.printl...

2019-05-08 18:30:07

zookeeper.RecoverableZooKeeper: ZooKeeper create failed after 4 attempts,Master exiting

as closed socket, closing socket connection and attempting reconnect2019-05-08 09:52:34,896 ERROR [main] zookeeper.RecoverableZooKeeper: ZooKeeper create failed after 4 attempts2019-05-08 09:52:34,8...

2019-05-08 10:25:29

大数据开发资料大集合

Hadoop集群的搭建https://www.iqiyi.com/v_19rrd8arz8.htmlzookeeper详解https://www.bilibili.com/video/av31971404/?p=17

2019-05-08 08:57:40

桌球游戏小项目及注意事项

这是对于Java初学者培养兴趣很好的项目,今天花了一个小时,代码部分没有出错,但是最终没有图片效果,先上代码,说不定你的没问题import javax.swing.*;import java.awt.*;//实现动画,小球沿着水平方向移动并作出边界检测public class BallGame03 extends JFrame { Image ball = Toolkit.g...

2019-05-06 10:12:55

resourcemanager起不来,找不到修改的路径

今天配置了oozie ,但是配置好了之后,重启了yarn服务后,发现resource manager起不来了,平常都不看日志的,今天可算是练习了一下查看日志。。。。。首先找到日志的地址,如果日志中没有做特殊设置,日志就会在Hadoop目录下,如果有单独配置,既然都配了,想一想吧 /root/apps/hadoop-2.8.1/logs找到日志了,有两种方法 less yarn-root...

2019-04-26 09:28:04

flume自定义拦截器中常见的坑与maven打jar包两步走

一个flume拦截器,几起几伏的

2019-04-15 20:37:08

查看更多

勋章 我的勋章
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。