MR_WONDER1993-CSDN博客

1.2 Hadoop1.2.1 Hadoop常用端口号hadoop2.x Hadoop3.x访问HDFS端口 50070 9870访问MR执行情况端口 8088 8088历史服务器 19888 19888客户端访问集群端口 9000 80201.2.2 Hadoop配置文件配置文件：hadoop2.x core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml slaveshadoop3.x core-site

2022-02-14 00:28:56 674

原创 1.1 Linux&Shell

1.1 Linux&Shell1.1.1 Linux常用高级命令序号命令命令解释1 top 查看内存2 df -h 查看磁盘存储情况3 iotop 查看磁盘IO读写(yum install iotop安装）4 iotop -o 直接查看比较高的磁盘读写程序5 netstat -tunlp | grep 端口号查看端口占用情况6 uptime 查看报告系统运行时长及平均负载7 ps -ef 查看进程1.1.2 Shell常用工具及写过的脚本1）awk、sed、cut、sor

2022-02-14 00:24:17 71

原创 oracle批量更新

update scott.daily_market_01 aset (Z1_line05 ,Z1_line10 ,Z1_line20 ,Z1_line40 ,z1_va_ratio)=(selectline05,line10,line20,line40,va_ratiofrom(select scott.daily_market.code,scott.daily_market.trading_day,scott.daily_market.voturno

2020-11-20 01:17:03 124

转载 vtoos装载-百度知道

1、打开虚bai拟机VMware Workstation，启动Ubuntu系统，依次点击VMware的菜du单栏，虚拟机，安装zhiVMware Tools。2、弹出对话框，点击是dao即可。3、此时，会发现虚拟机设备下多了VMware Tools这一项，点击它，其里面有一个VMwareTools.tar.gz文件。4、在VMwareTools.tar.gz上右键点击提取到。5、提取完成后会发现桌面的myfile文件夹里多了一个vmware-tools-distrib文件夹。6、按下快

2020-09-13 01:04:45 87

原创 2020-09-27 其他数据库搬迁到 hive一些感受 - 01

1.hive处理时间比较薄弱，其他数据库的时间类的数据类型，到 hive 中最好使用 string 类型，并且最好是符合统一的格式 yyyy-MM-dd HH:mm:ss2.针对上一步做的数据类型改变，如果有相应的存储过程或者SQL转为Hive的HQL，则需要注意将其他数据库的时间类数据的处理，转为hive的等价字符串处理3.hive的instr/locate函数功能非常弱，只能找出子串的第一次出现的位置，如果其他数据库有的instr函数功能较强，到hive中则需要进行等价处理，或者需要自定义函数进行处

2020-09-07 02:30:08 93

原创 2020-09-07 电脑装机--闲散记录01

电脑装机–闲散记录011.这两天有点不顺，笔记本电脑出现了好多次的 No Bootable Device，终于到最后无法开机了2.尝试装机后，又发现无法连接网络了 —— 无网卡驱动3.想到有一个USB无线网卡，内含一个驱动包的，就捣鼓着把网络弄通了4.装的自己以前的win7系统，装上去，然后发现好多设备用起来不顺，所以还是想用win105.找来了一个win8，又装了一遍系统，发现win8超级难用，不如win106.最后还是到系统之家网站上面找到了一个win10镜像7.安装win10（U盘），然

2020-09-07 02:19:20 103

原创 Hive常用函数02

select size(citys) from test where privince='guangdong' -- test 表中 privince是guangdong这一行的citys的大小select map_keys(citys) from test where privince='guangdong' ---- test 表中 privince是guangdong这一行的citys的 map的所有key，类型是数组select map_values(citys) from test...

2020-06-11 01:10:53 83

原创 Hive常用函数01

roundceilfloorupperlowerlengthtrimlpadrpadregexp_replace

2020-06-11 00:47:02 99

原创 HIVE-常用时间函数01

SELECT YEAR('2020-06-11 00:15:12'),MONTH('2020-06-11 00:15:12'),DAY('2020-06-11 00:15:12'),HOUR('2020-06-11 00:15:12'),MINUTE('2020-06-11 00:15:12'),SECOND('2020-06-11 00:15:12');返回2020 6 11 0 15 12Hive 默认解析的日期时间格式为 2020-06-11 00...

2020-06-11 00:43:22 99

原创 linux时间设置与同步

linux时间设置与同步linux时间设置与同步（Centos7)一、常用命令：1、查看Linux系统时间：date2、修改Linux系统时间：date -s (后面跟时间) ，例如：date -s “2019-12-29 20:00”3、查看Linux硬件时间：涉及硬件时间的命令为hwclock或clock（用法相同），以下都用hwclock说明(1)hwclock，(2)hwclock --show，(3)hwclock -r4、修改Linux硬件时间：hwclock –set –date

2020-05-20 00:17:23 376

原创 Linux（CentOS 6）的 MySQL（5.6）安装要点——使用非root账户

Linux（CentOS 6）的 MySQL（5.6）安装要点——使用非root账户前置：查询是否已经安装了mysql，卸载rpm -qa | grep -i mysql如果有查询到，则进行卸载sudo rpm -e --nodeps + 查询到的mysql版本0.sudo rpm -ivh 命令安装服务端和客户端sudo service mysql start1.mysql ...

2020-02-04 23:16:31 178

原创 idea使用-关闭自动更新

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...

2020-01-07 16:12:24 369

原创 Java单链表实现——持续更新

public class OneDirectLinkedList<T> { private int size = 0; //单向链表头结点 Node<T> head = new OneDirectLinkedList.Node(null); //链表元素添加 public void add(T t) { Node node = this.head; w...

2019-10-19 12:27:30 125

原创 00-欢迎使用CSDN-markdown编辑器