3 IT小白虫

尚未进行身份认证

我要认证

闻道有先后,术业有专攻击。-------------人生需要开挂

等级
TA的排名 8w+

Hive SQL之数据类型和存储格式

目录一、数据类型 1、基本数据类型 2、复杂类型 二、存储格式 (1)textfile (2)SequenceFile (3)RCFile (4)ORCFile (5)Parquet 三、数据格式 正文 回到顶部 一、数据类型 1、基本数据类型 Hive 支持关系型数据中大多数基本数据类型 类型 描述 示例 boolean true/false TRUE tinyint 1字节...

2020-07-27 22:40:37

主数据的3个特点、4个超越和3个二八原则

作者:石秀峰,致力于企业数据资产管理、数据治理的布道和实践者。主数据(Master Data)是具有共享性的基础数据,可以在企业内跨越各个业务部门被重复使用的,因此通常长期存在且应用于多个系统。由于主数据是企业基准数据,数据来源单一、准确、权威,具有较高的业务价值,因此是企业执行业务操作和决策分析的数据标准。主数据具备3个主要特征:①高价值:主数据是所有业务处理都离不开的实体数据,与大数据相比价值密度非常高。②高共享:主数据是跨部门、跨系统高度共享的数据。③相对稳定:与交易数据相比主数

2020-07-27 22:35:48

MySQL的INFORMATION_SCHEMA数据库我能获取到什么?

大家在安装或使用MYSQL时,会发现除了自己安装的数据库以外,还有一个 information_schema数据库。information_schema数据库是做什么用的呢? 在MySQL中,把 information_schema 看作是一个数据库,确切说是信息数据库。其中保存着关于MySQL服务器所维护的所有其他数据库的信息。如数据库名,数据库的表,表栏的数据类型与访问权 限等。在INFORMATION_SCHEMA中,有数个只读表。它们实际上是视图,而不是基本表,因此,你将无法...

2020-07-20 16:26:59

Hive数据导入原理和几种方式

Hive数据导入--数据存储在Hadoop分布式文件系统中,往Hive表里面导入数据只是简单的将数据移动到表所在的目录中!最近在执行将hdfs中的数据导入到hive 查看日志参数 可以看出原理往Hive表里面导入数据只是简单的将数据移动到表所在的目录中!开始执行: load data local inpath '/data2/dubhe/codes/T_59960026769183...

2019-07-13 15:30:19

IntelliJ Idea取消Could not autowire. No beans of 'xxxx' type found的错误提示

出处:http://www.cnblogs.com/waterystone/ 1.问题描述  在Idea的spring工程里,经常会遇到Could not autowire. No beans of 'xxxx' type found的错误提示。但程序的编译和运行都是没有问题的,这个错误提示并不会产生影响。但红色的错误提示在有些有强迫症的程序员眼里,多多少少有些不太舒服。 2....

2018-08-02 15:43:17

idea在开启时设置自己手动选择项目并打开

2018-07-22 21:58:37

mysql安装完成之后修改密码详解

前提:安装好mysql的客户端和服务端并启动了mysql的进程存在3306端口也就是mysqld的进程。改密码有多中,我这里只是运行脚本/usr/bin/mysql_secure_installation 改密码1:找到并复制安装mysql自己默认的密码cat /root/.mysql_secret 2:运行脚本/usr/bin/mysql_secure_installatio...

2018-07-19 21:12:39

centos7下安装rpm -ivh MySQL-client-5.6.26-1.linux_glibc2.5.x86_64.rpm和rpm -ivh MySQL-server-5.6.26-1.li

卧槽:花了几个小时,没想到是centos7的启动mysql的命令变了。原先使用:service mysql start    不是service mysqld start  (安装包的原因)报错 Starting MySQL. ERROR! The server quit without updating PID file (/var/lib/mysql/slave2.pid).//sla...

2018-07-19 20:51:16

警告:MySQL-server-5.5.46-1.linux2.6.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 5072e1f5: NOKEY

引用:https://yq.aliyun.com/articles/6742警告:MySQL-server-5.5.46-1.linux2.6.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 5072e1f5: NOKEY 摘要: CentOS安装rpm安装MySQL时爆出警告: 警告:MySQL-server-5.5.46-1.linux2.6.x...

2018-07-19 19:38:41

本地运行yarn实现wordcount报错Exit code: 1 Exception message: /bin/bash: 第 0 行:fg: 无任务控制 Stack trace: ExitCo

eclipse控制台输出错误信息Container id: container_1531823680410_0003_02_000001Exit code: 1Exception message: /bin/bash: 第 0 行:fg: 无任务控制Stack trace: ExitCodeException exitCode=1: /bin/bash: 第 0 行:fg: 无任务控制...

2018-07-17 20:45:17

Linux服务器内存使用情况解释

转自:http://hi.baidu.com/chinalwb/item/a88e47c8da2e4f14b77a24d6 查看内存使用情况,可以使用命令 free -m 其结果大致如下:                   total       used         free     shared    buffers     cachedMem:         ...

2018-07-17 18:21:28

java实现上传文件到hadoop集群中报错to master:9000 failed on socket exception: java.net.SocketException: Permissio

1:我连接的集群是自己学校的服务器,为什么上传文件总报错权限的事情报错“自己的ip  加上  to master:9000 failed on socket exception: java.net.SocketException: Permissio” :疑惑:为什么会使用我的连接以太网的IP192.168.70.194参考文章:https://yq.aliyun.com/...

2018-07-16 21:16:00

centOS7.0 下配置Hadoop集群,Slave1报错:failed on socket timeout exception: java.net.NoRouteToHostException

转:https://blog.csdn.net/u012248381/article/details/39666787centos6和centos7h关闭防火墙的命令不一样

2018-07-16 20:58:14

linux三种网络原理及原理

Host-Only小编的虚拟机是在:VMware 工具中Host-only    仅主机模式1,虚拟机网络设置配置虚拟机的网络设置为hostonly 2,虚拟软件网络设置选择vmware - 编辑 – 虚拟机网络编辑器 3,配置虚拟软件中vmnet1的IP为VMnet1选择一个网段,不修改0号ip地址。  4,查看win7 VMnet1网络此时,win7机器上的vmware vmnet1网络已经改...

2018-07-14 17:36:14

win7系统下u盘安装linux centos7,详细步骤,亲测

一,准备       1. Centos 7镜像文件;​​          下载的话网上很多,这里提供一个下载路径;​                http://isoredirect.centos.org/centos/7/isos/x86_64/       2. 软碟通;(用来制作u盘系统盘)       3.u盘(8G以上,我的u盘是16G的)​二,利用软碟通制作linux系统的u盘启...

2018-07-14 17:23:35

如何成为一名「卓越」的数据科学家?

今天与大家分享一位友人的文章,希望能解决一些数据新人心中的困惑,以便将数据科学的概念形成一个框架,为进一步深入研究打下基础。   编辑于 2017-03-11@杨滔 ,曾任阿里巴巴集团高级数据挖掘专家,F团首席科学家,拥有数据科学领域坚实的理论基础,以及丰富的大数据实战经验。独创的商品推荐算法获取两项专利,主导研发的智能选品系统在淘宝网获得广泛应用。奥克兰大学机器学习博士,悉尼科技大学博士后。机器...

2018-07-11 21:01:01

全国有哪些高等院校开设大数据相关专业?

自己收藏的!觉得有所收获就好!三人行-必有我师焉  加油                                    编辑于 2017-01-10如今是大数据的时代,很多学校都开设了大数据相关的专业和课程。据我了解到,自2015年教育部开设了「数据科学与大数据技术专业」,首批只有北京大学、中南大学和对外经济贸易大学三所学校申报成功。高校填报志愿,过来人的建议,通常情况下:城市比学校更重要...

2018-07-11 20:58:18

linux 不能ping 通外网

1:首先,使用route查看一下路由route2:route add default gw 192.168.8.2   条件一个默认的网关正常会出来的。注意 :192.168.8.2这是我使用的vmware产生的虚拟网关 我使用的是NAT模式 ,自己更改。...

2018-07-11 20:25:37

centos中默认网络配置是如何对应eth0,而不是让MAC地址对应eth1

centos中默认网络配置是如何对应eth0,而不是让MAC地址对应eth11:问题来源克隆虚拟机或者是移动虚拟机2:问题解决:可以查看一下cat  /etc/udev/rules.d/70-persistent-net.ruals   你的可能会有eth11:首先vi   /etc/sysconfig/network-scripts/ifcfg-eth0  删除MAC地址2:把 /etc/ude...

2018-07-11 20:15:23

使用SecureCRT上传下载文件的实现

错误:把liunx中的到本地[root@localhost /]# sz -y download_test -bash: sz: command not found说命令没有发现                解决:yum在线安装                yum install lrzsz -y下载上上传的目录设置下载:sz -y (加上要下载 的文件名) -y 指的是覆盖上传或者是下载上传...

2018-07-05 17:33:06

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。