1 晴々明雅

尚未进行身份认证

暂无相关简介

等级
TA的排名 16w+

定时任务

终于完成了第一个定时任务。定时语句如下:/1****[需要执行的任务]使用crontab-e定时之后,控制台没有显示,但是会有一个您在/var/spool/mail/root中有新邮件*提示定时任务后面是的comment,可以写的复杂点那么上面的不能打印到控制台,可以将文件追加到指定文件中,使用tail-f来监控文件即可。又新发现还会来更新的...

2019-08-14 13:55:07

hive优化之动态分区--静态分区

最近做项目,hive表中导入数据时使用了一个之前没有见过的语法sethive.exec.dynamic.partition.mode=nonstrict;insertoverwritetabledws_uv_detail_mnpartition(mn)selectmid,.......date_format('2019-02-03','yyyy-...

2019-08-03 20:43:40

javaSpringBoot 快速创建maven项目的方法

https://start.spring.io/我创建了项目后没有创建Java包的提示,而且不能只能使用和springBoot有关的,不能创建scala–spark等,局限性太大,

2019-08-02 11:13:55

打开虚拟机报错VMware虚拟机报错:无法打开内核设备"\\.\Global\vmx86": 系统找不到指定的文件.是否在安装 VMwar

今天打开虚拟机的时候报错了:VMware虚拟机报错:无法打开内核设备"\.\Global\vmx86":系统找不到指定的文件.是否在安装VMwar可能是清理电脑的时候将其服务关闭的原因好在网上有完整的处理方法阶段1:https://blog.csdn.net/qq_36798272/article/details/88563907Windows+R打开运行对话框,输入cmd回车...

2019-06-26 16:27:11

spark 中生成包含元组(1,“a") (2,"b”) (3,"c”)...(25,"y") (26,"z")的RDD

需求:把26个字母与数字组合在一起,并形成RDD算子将字母和数字放一起有很多形式valstrings='a'to'z'for(i<-0to25){(i+1,strings(i).toString)}这样就可以打印出需要的格式但是怎么生成RDD呢首先RDD中的是一系列的元组,类似与Array((Int,String))=((1,“a")(2,"...

2019-06-25 14:05:43

spark中报错

1,启动集群时报错:failedtolaunch:nice-n0/opt/spark-2.1.1/bin/spark-classorg.apache.spark.deploy.worker.Worker高可用的spark再启动集群时报错failedtolaunch:nice-n0/opt/spark-2.1.1/bin/spark-classorg.apache.s...

2019-06-15 08:32:12

小白心中的反编译操作步骤

经常听说编译编译,但是不太了解其意义先说一下反编译的操作首先的有反编译工具jd-gui.exe(由于本人还不会上传运行文件,看见的宝宝自行下载吧)下载好后,在ecilpse或者idea中找out或者target(maven项目)文件夹,里面是已经编译好的字节码文件.class格式右键选中的目录,选择中间位置有一个showinexplorer进入Windows中...

2019-06-01 21:33:07

编写一个扑克牌 4 种花色的枚举,让其 toString 方法分别返回♣,♦,♥,♠,并实现一个函数,检查某张牌的花色是否为红色

//继承枚举类实现枚举类的方法//继承App可以省略main方法,直接进行测试objectFourextendsEnumerationwithApp{typeSuits=ValuevalSpade=Value("♣")valClub=Value("♦")valHeart=Value("♥")valDiamond...

2019-05-31 20:14:51

idea中的CTRL+alt+L快捷键不能用

在idea中输入CTRL+alt+L没有使idea代码格式化,反而出现QQ的

2019-05-23 11:00:52

Windows , IDEA 与 Linux->vim中常用命令大全

之前总结了一些很常用的快捷方式,但是最最常用的记住了,还有很多慢慢淡忘了,再来复习一遍windows中的快捷键1,关于CTRL键CTRL+a全选CTRL+s保存CTRL+x剪切CTRL+c复制CTRL+v粘贴CTRL+z撤销/相当于文档中的向左箭头CTRL+y恢复上一步的撤销/相当与文档中的右箭头CTRL+shift+ESC 打开任务管理器CTRL...

2019-05-19 20:10:20

hive整合HBase:HBase table xsg:test05 doesn't exist while the table is declared as an external table

版本虚拟机centOS7hive1.2.1hbase1.2.61,在hive-site.xml中添加配置<property><name>hbase.zookeeper.quorum</name><value>test-hadoop-2-21,test-hadoop-2-22,test-hadoop-2-23...

2019-05-17 20:08:46

关于数组中的大括号{}和数组的遍历

byte[][]={};看见这种格式不要惊讶这个{}是个什么鬼,这是数组存值的格式//一维数组int[]a={1,5,2,51,5};//二维数组int[][]b={{1,5,2,},{7875,555578}};//一维数组的遍历for(inti:a){System.out.println(i);}System.out.printl...

2019-05-08 18:30:07

zookeeper.RecoverableZooKeeper: ZooKeeper create failed after 4 attempts,Master exiting

asclosedsocket,closingsocketconnectionandattemptingreconnect2019-05-0809:52:34,896ERROR[main]zookeeper.RecoverableZooKeeper:ZooKeepercreatefailedafter4attempts2019-05-0809:52:34,8...

2019-05-08 10:25:29

大数据开发资料大集合

Hadoop集群的搭建https://www.iqiyi.com/v_19rrd8arz8.htmlzookeeper详解https://www.bilibili.com/video/av31971404/?p=17

2019-05-08 08:57:40

桌球游戏小项目及注意事项

这是对于Java初学者培养兴趣很好的项目,今天花了一个小时,代码部分没有出错,但是最终没有图片效果,先上代码,说不定你的没问题importjavax.swing.*;importjava.awt.*;//实现动画,小球沿着水平方向移动并作出边界检测publicclassBallGame03extendsJFrame{Imageball=Toolkit.g...

2019-05-06 10:12:55

resourcemanager起不来,找不到修改的路径

今天配置了oozie,但是配置好了之后,重启了yarn服务后,发现resourcemanager起不来了,平常都不看日志的,今天可算是练习了一下查看日志。。。。。首先找到日志的地址,如果日志中没有做特殊设置,日志就会在Hadoop目录下,如果有单独配置,既然都配了,想一想吧/root/apps/hadoop-2.8.1/logs找到日志了,有两种方法lessyarn-root...

2019-04-26 09:28:04

flume自定义拦截器中常见的坑与maven打jar包两步走

一个flume拦截器,几起几伏的

2019-04-15 20:37:08

搭建Hadoop集群后一直使用的start-all.sh到底是个什么操作

#在sbin路径下看到常见的启动文件,打开看一下源码/root/apps/hadoop-2.8.1/sbin/start-all.sh的路径//注释:开启所有的Hadoop所有进程,在主节点上进行#Startallhadoopdaemons.Runthisonmasternode.//显示echo后面的文字,提示:不推介此脚本,最好使用脚本start-dfs...

2019-03-20 11:51:32

Hadoop知识大纲,终于知道整个过程都会学什么了

通过看各种视频,把Hadoop中会涉及到的知识,构造成一份合适的大纲1.Hadoop发展简史特点,实际开发中的应用2.Hadoop集群搭建1)集群的分工HDFS集群负责海量数据的存储 Yarn集群负责海量数据运算时的资源调度 MapReducer负责运算2)服务器准备 [3)网络环境准备](https://blog.csdn.net/qq_4...

2019-03-18 19:27:31

关于idea运行hadoop中出现Process finished with exit code -1073741819 (0xC0000005)并且异常中断的解决

刚学过Hadoop集群与网页的链接,可以在网页也就是客户端和服务器之间进行上传和下载的任务然后开始练习用Java程序来实现logger日志的打印,也属于以上知识点的运用吧配置好log4j.properties文件,在log4j.appender.test1.File=处修改好路径在file–ProjectStructure–Dependencies–+--JARs中添加log4j-...

2019-03-09 14:13:59

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。