4 kerryJiang666

尚未进行身份认证

暂无相关简介

等级
TA的排名 15w+

这段时间的思考

这段时间不用天天去公司上班,考虑了很多东西!毕业几年感觉自己活得也不太好!首先感情方面没有去主动!工作方面也没有起色!生活方面也一团糟!想住的好一点,有了房贷!爸妈整天吵架,也让我好像患上了抑郁!...

2020-02-13 18:59:47

学习笔记

1.kettle与sqoop的区别https://blog.csdn.net/qq_39680564/article/details/100520215

2020-01-19 10:19:56

namenode启动不起来

查看日志文件报如下错误org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /usr/local/hadoop/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible....

2020-01-16 20:40:58

hadoop datanode 启动不起来

先执行stop-all.sh暂停所有服务将所有Salve节点上的tmp(即 hdfs-site.xml 中指定的 dfs.data.dir 文件夹,DataNode存放数据块的位置)、 logs 文件夹删除 , 然后重新建立tmp , logs 文件夹将所有Salve节点上的/usr/hadoop/conf下的core-site.xml删除,将master节点的core-site.xml文件...

2020-01-15 21:46:28

maven scala

之前有建过maven scala 项目,但还是有遇到几个问题。1.Could not find artifact org.scala-tools:maven-scala-plugin:pom: in scala-tools.org (http://scala-tools.org/repo-releases),plugins标红解决方法:file-settings-plugins,搜索scala...

2020-01-12 18:36:41

hive,hbase,kudu的区别

1.hive和hbase都是基于hdfs,hbase实时计算比较好,hive稳定性比较高2.kudu是基于hbase改进的,不同的是kudu是基于linux不是hdfs,kudu对批量操作数据的支持性比较高,而hbase的实时性比较高!...

2020-01-11 00:21:37

flume安装与部署

https://cloud.tencent.com/developer/article/1474200

2020-01-08 15:43:20

kudu崩溃表需重建

kudu是基于hbase改造的,批量插入的性能好!但因为是新的东西坑多!最近就遇到kudu崩溃表需重建的问题,原因在于只启动了一个master,这种一个节点的如果磁盘什么的坏了,数据就丢了.重新起一个master,下面的tablet的uuid也不一样,数据也恢复不了。至少得3个节点!...

2020-01-05 18:22:51

回顾2019

2019一年过去了!又老了一岁,之所以用老是因为对我这个年龄段来的人来说大一岁并不开心!1.这一年对我来说,不太幸运,在于公司效益差,待遇没有之前好了!让人感觉心寒。10月份本想找个工资翻一倍的工资就走的!但想着还有几个月就拿年终奖就算了!当然当时也在学一些东西!领导也直接问我是不是想走。我当然回答他,还要看明年加薪情况!因为年底绩效没有打,万一他知道我想走,给个差绩效呢!2.最近看公司同事...

2020-01-05 18:16:43

hadoop常用命令

1.查看hadoop详情hadoop dfsadmin -report

2019-10-22 09:37:45

启动hive之前需要初始化hive元数据

hive命令报错:Exception in thread “main” java.lang.RuntimeException: org.apache.hadoop.hive.ql.metadata.HiveException: org.apache.hadoop.hive.ql.metadata.HiveException: MetaException(message:Hive metastor...

2019-10-21 23:08:51

spark常用命令

1.关闭pyspark (CTRL+D)

2019-10-14 09:14:36

hadoop主节点jps出现DataNode

可能是配置从节点的时候添加了主节点ip

2019-10-12 16:16:13

java.io.IOException: Cannot create directory /usr/local/hadoop/hdfs/name/current

用root账号删除current文件夹

2019-10-12 16:13:09

大数据start-all.sh, start-dfs.sh command not found

PATH=$PATH:/usr/local/hadoop/sbinsource $HOME/.bashrc

2019-10-12 14:32:12

scala语法

1.scala语句的结尾可以写逗号,也可以不写

2019-09-29 19:08:26

微信头像加国旗python源码

from PIL import Image, ImageDraw, ImageFontimport loggingclass AvatarTagger(object):def init(self):self.border = 30self.merge_method = Noneself.avatar = Noneself.avatar_size = Noneself.icon = ...

2019-09-29 09:51:49

mybatis

mybatis的时间判空不能出现!=‘’

2019-09-27 14:07:43

mybatis 一个粗心的事解决了一下午

resultType=“java.util.List” 写成 resultMap启动不会直接报错,这个错误影响了调用其它接口

2019-09-18 09:26:04

mybatis 报错

mybatis报错应该采用全局排查,不能单看一个xml文件,因为mybatis初始化的时候已经扫描了全部xml

2019-09-17 21:12:22

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。