自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(605)
  • 资源 (1)
  • 问答 (2)
  • 收藏
  • 关注

原创 Tableau 网站流量分析案例汇总

关注微信公共号:小程在线关注CSDN博客:程志伟的博客

2020-09-25 20:44:47 2051

原创 Tableau 超市经典案例汇总

关注微信公共号:小程在线关注CSDN博客:程志伟的博客Tableau 超市经典案例之客户分析(一)https://blog.csdn.net/c1z2w3456789/article/details/108455299Tableau 超市经典案例之客户分析(二)https://blog.csdn.net/c1z2w3456789/article/details/108457594Tableau 超市经典案例之客户分析(三)https://blog.csdn.net..

2020-09-22 21:55:25 8082

转载 R语言 逐步回归分析 AIC

逐步回归分析是以AIC信息统计量为准则,通过选择最小的AIC信息统计量,来达到删除或增加变量的目的

2017-09-19 09:38:40 67510 2

转载 R语言神经网络

R语言 神经网络 neuralnet包,AMORE包,nnet包,Rsnns包,BP神经网络,nnet提供了最常见的前馈反向传播神经网络算法。AMORE包则更进一步提供了更为丰富的控制参数,并可以增加多个隐藏层。neuralnet包的改进在于提供了弹性反向传播算法和更多的激活函数形式。但以上各包均围绕着BP网络,并未涉及到神经网络中的其它拓扑结构和网络模型。而新出炉的RSNNS包则在这方面有了极大的扩充。

2016-09-19 08:33:26 53435 5

转载 R语言 处理缺失值数据

R语言 处理缺失值数据 VIM包 mice包

2016-05-18 11:34:55 58417 5

原创 GP 常用字符串函数

GP 常用字符串函数

2023-02-09 14:50:46 1775 1

原创 GP 常用数学函数

GP 常用数学函数

2023-02-09 10:50:39 980

原创 Hadoop集群搭建--时间同步

2022年05月10日星期二163957CST。2021年09月11日星期六111111CST。2021年09月11日星期六111136CST。2022年05月10日星期二164604CST。如果服务器在公网环境(能连接外网),可以不采用集群时间同步。3.修改/etc/sysconfig/ntpd文件。查看所有节点ntpd服务状态和开机自启动状态。在其他机器配置1分钟与时间服务器同步一次。1分钟后查看机器是否与时间服务器同步。6.修改103的时间。...

2022-07-19 20:00:00 928

原创 Hadoop(HDFS)--Shell操作上传与下载

[atguigu@hadoop103 ~]$ cd /opt/module/hadoop-3.1.3/[atguigu@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh[atguigu@hadoop103 ~]$ cd /opt/module/hadoop-3.1.3/[atguigu@hadoop103 hadoop-3.1.3]$ sbin/start-yarn.sh

2022-07-19 19:00:00 676

原创 Hadoop集群搭建--集群常用脚本

rwxrwxrwx.1atguiguatguigu11305月101507myhadoop.sh。102/103/104都jps看一下。102/103/104都jps看一下。

2022-07-18 21:00:00 331

原创 Hadoop集群搭建--配置日志的聚集

atguigu@hadoop102~]$cd$HADOOP_HOME/etc/hadoop[atguigu@hadoop102hadoop]$vimyarn-site.xml[atguigu@hadoop102hadoop]$xsync$HADOOP_HOME/etc/hadoop/yarn-site.xml[[email protected]]$sbin/stop-yarn.sh[[email protected]]$mapred--daemonst。

2022-07-18 20:30:00 262

原创 Hadoop集群搭建--配置历史服务器

[email protected]]$cd$HADOOP_HOME/etc/hadoop[atguigu@hadoop102hadoop]$vimmapred-site.xml增加红色框的内容将文件进行分发[atguigu@hadoop102hadoop]$xsync$HADOOP_HOME/etc/hadoop/mapred-site.xml[atguigu@hadoop102hadoop]$mapred--daemonstarthistoryserver查看进程[...

2022-07-18 20:00:00 319

原创 Hadoop集群搭建--集群启动

查看HDFS在磁盘存储文件内容,和上面word.txt文件内容一致。红色字体表示每个人的位置不一样,需要根据自己的目录调整pwd。执行wordcount程序。

2022-07-17 21:00:00 4112

原创 Hadoop集群搭建--集群配置

2.4配置mapred-site.xml。2.1配置core-site.xml。2.2配置hdfs-site.xml。2.3配置yarn-site.xml。查看103、104机器上的分发情况。

2022-07-17 20:00:00 219

原创 Hadoop集群搭建--SSH无密登录配置

然后敲(三个回车),就会生成两个文件id_rsa(私钥)、id_rsa.pub(公钥)访问103sshhandoop103,输入密码,退出。可以看到多出来一个authorized_keys文件。不用输入密码就可以访问103,说明配置成功。2.将公钥拷贝到要免密登录的目标机器上。3.测试102访问103机器。账号,配置一下无密登录到。4.配置其他机器。账号配置一下无密登录到。账号配置一下无密登录到。...

2022-07-16 20:15:00 397

原创 Hadoop集群搭建--创建分发脚本xsync

2.在hadoop103上,将hadoop102中/opt/module/hadoop-3.1.3目录拷贝到hadoop103上。3.在hadoop103上操作,将hadoop102中/opt/module目录下所有目录拷贝到hadoop104上。1.在hadoop102上,将hadoop102中/opt/module/1.在/home/atguigu/bin目录下创建xsync文件。在103/104上执行source/etc/profile。输入102的密码,输入yes,在输入104的密码。...

2022-07-15 20:30:00 1201

原创 Hadoop集群搭建-- 安装jdk、hadoop

1. 通过Xftp将本机JDK上传至服务器目录:2. 查看是否上传成功:3. 解压jdktar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/4. 配置环境变量sudo vim /etc/profile.d/my_env.sh #JAVA_HOMEexport JAVA_HOME=/opt/module/jdk1.8.0_212export PATH=$PATH:$JAVA_HOME/bin保存后退出 :wq5. 使环境变量生效sou...

2022-07-15 20:00:00 1419 2

原创 CDH ExecQueryFInstances rpc query_id=1f408154ecf2f590:73af9e1300000000 failed: Failed to get minimum

使用impala时报错: ExecQueryFInstances rpc query_id=1f408154ecf2f590:73af9e1300000000 failed: Failed to get minimum memory reservation of 171.44 MB on daemon node1:22000 for query 1f408154ecf2f590:73af9e1300000000 due to following error: Memory limit

2022-07-14 14:48:00 783

原创 CDH Permission denied: user=root, access=WRITE, inode=“/user“:hdfs:supergroup:dr

hive insert into数据时报错:解决方法:在CDH的HDFS上 配置上搜索hdfs-site.xml在配置上的名称输入:dfs.permissions 值:false

2022-07-14 10:05:00 416

原创 Mysql ERROR 1265 (01000): Data truncated for column ‘XXX‘ at row X

ERROR 1265 (01000): Data truncated for column 'name' at row 520解决方法:修改该字段相应的大小,例如:varchar(20)→varchar(50)原因:数据才执行insert into的过程中,实际数据的大小超过了表开始创建的大小,导致数据插入不进去。mysql系列文章:https://blog.csdn.net/c1z2w3456789/category_6430966.html?spm=1001.2014.30...

2022-06-22 18:01:18 1971

原创 mysql ERROR 1178 (42000) at line 241: The storage engine for the table doesn‘t support native partit

ERROR 1178 (42000) at line 241: The storage engine for the table doesn't support native partitioning解决:修改表的计算引擎为innodb。alter table 表名 engine=innodb;原因:在建表的时候,将引擎设置成为了MyISAM引擎。

2022-06-20 17:55:14 1631 1

原创 mysql ERROR 1114 (HY000): The table ‘XXX‘ is full

mysql ERROR 1114 (HY000): The table 'XXX' is full解决方法:修改 my.cnf 配置文件:在[mysqld]下添加/修改两行: tmp_table_size = 64M // 临时表大小 max_heap_table_size = 32M // 内存表大小 重启 mysql,如果还是不行,可以再次增大上面2个表的大小。原因:这2张表设置的空间太小了show variables like '%table_size%';...

2022-06-20 17:46:55 1293

原创 Mysql 设置MyISAM/InnoDB引擎的三种方法

一、修改my.ini配置文件default-storage-engine=INNODB此设置为全局变量,以后创建表的引擎都默认为INNODB。方法二:创建表的时候设置引擎。在创建表的时候创建引擎只针对该表,其他表的引擎都是默认的。create table test01 (id int,class varchar,amount int,primary key(id)) engine=MyISAM;方法三:将上面创建的 test01的引擎改为innodb。alter table te...

2022-06-20 14:42:47 2266

原创 Mysql A PRIMARY KEY must include all columns in the table‘s partitioning function

A PRIMARY KEY must include all columns in the table's partitioning function原因:分区的字段必须是要包含在主键当中。这时候分区的字段要么是主键,要么把分区字段加入到主键中,从而形成复合主键。解决方法:将我们的分区字段放入到主键中CREATE TABLE test( name INT NOT NULL, sex VARCHAR(50) NOT NULL, year DATE ...

2022-06-17 16:20:28 493

原创 Mysql ERROR 1505 <HY000> Partition management on a not partitioned table is not possible

alter table temp0617 add PARTITION (PARTITION p202010 VALUES LESS THAN ( UNIX_TIMESTAMP('2020-11-01 00:00:00') ))ERROR 1505 Partition management on a not partitioned table is not possible原因:如果想在已经建好的表上进行分区,在创建表的时候,必须至少存在一个分区,否则使...

2022-06-17 15:54:43 2394

原创 Mysql 增加表注释

mysql添加表注释ALTER TABLE 表名 COMMENT '注释字段';实例:alter table test comment '测试表';方法二:在创建表的时候直接增加表注释create table test(name varvhar(10) comment '姓名',sex varchar(3) comment '性别'primary key(name)) comment '测试表';...

2022-06-17 15:44:51 3109

原创 Mysql 存储过程案例教程

CREATE TABLE employees ASSELECT * FROM atguigudb.`employees`;CREATE TABLE departments ASSELECT * FROM atguigudb.`departments`;SELECT * FROM employees;SELECT * FROM departments;一、无参数无返回值存储过程DELIMITER表示自定义结束符号,SQL一般默认;为结束符号红色部分为固定格式下面的查询语...

2022-06-16 18:07:47 2275

原创 Mysql ERROR 1406 (22001) at line 127: Data too long for column ‘XXXX‘ at row 36395

ERROR 1406 (22001) at line 127: Data too long for column 'XXXX' at row 36395解决方法:调整字段长度,使字段长度变大,使用下面的SQL找到最大的值,设置比最大值多一点的长度。select max(lenrgth(字段名)) from 表名原因:插入的数据大于表字段初始设置的值...

2022-06-14 14:17:02 238

原创 Row size too large. The maximum row size for the used table type, not counting BLOBs, is 65535

ERROR 1118 (42000) at line 5: Row size too large. The maximum row size for the used table type, not counting BLOBs, is 65535. This includes storage overhead, check the manual. You have to change some columns to TEXT or BLOBs解决方法:方法一、将长度很长的字段...

2022-06-14 14:10:47 3026

原创 Mysql ERROR 1052 (23000) at line 44: Column ‘XXX‘ in field list is ambiguo

ERROR 1052 (23000) at line 44: Column 'XXX' in field list is ambiguo解决方法:多表关联时,该字段同时出现在多个表,mysql不知道取哪个表的字段,需要增加表名。例如: 将 name 字段改成 a.name

2022-06-14 09:46:50 902

原创 mysql 时间函数案例教程

获取当前时间CURDATE、CURTIME、NOW、SYSDATE、UTC_DATE、UTC_TIMESELECT CURDATE(),CURRENT_DATE(),CURTIME(),NOW(),SYSDATE(),UTC_DATE(),UTC_TIME()FROM DUAL; SELECT CURDATE(),CURDATE() + 0,CURTIME() + 0,NOW() + 0FROM DUAL; 二、日期与时间戳的转换UNIX_TIMESTAMP、UNIX_TI...

2022-06-12 16:18:25 172

原创 Mysql 字符串函数详细案例

1.ASCII(S)、CHAR_LENGTH(s)、LENGTH(s)SELECT ASCII('Abcdfsf'),CHAR_LENGTH('hello'),CHAR_LENGTH('我们'), LENGTH('hello'),LENGTH('我们')FROM DUAL; 2.CONCAT(s1,s2,......,sn)、CONCAT_WS(x,s1,s2,......,sn)SELECT CONCAT('hello','world','hello...

2022-06-12 15:00:20 134

原创 Mysql 数值函数

SELECTABS(-129),ABS(92),SIGN(-29),SIGN(49),PI(),CEIL(92.92),CEILING(-49.29),FLOOR(92.92),FLOOR(-49.29),MOD(12,5)FROM DUAL; SELECT RAND(),RAND(),RAND(5),RAND(5),RAND(-2),RAND(-2)FROM DUAL; SELECT ROUND(12.33),ROUND(12.343,2),ROUND(12.324,-1)

2022-06-11 15:25:59 105

原创 Mysql order by 和limit

一、排序规则使用 ORDER BY 子句排序ASC(ascend): 升序(默认)DESC(descend):降序ORDER BY 子句在SELECT语句的结尾。当多个字段进行排序的时候,依然默认是升序,对个别字段是降序。二、分页:LIMIT [位置偏移量,] 行数2.1 取前10条记录SELECT *FROM employeeslimit 10;取第11至20条记录...

2022-06-04 17:41:19 1003

原创 Mysql 算术运算符和比较运算符

一、算术运算符算术运算符主要用于数学运算,其可以连接运算符前后的两个数值或表达式,对数值或表达式进行加(+)、减(-)、乘(*)、除(/)和取模(%)运算。select 10+3,10-3,10*3,10/3,10%3from dual;注意:1. 一个整数类型的值对整数进行加法和减法操作,结果还是一个整数;2. 一个整数类型的值对浮点数进行加法和减法操作,结果是一个浮点数;3. 加法和减法的优先级相同,进行先加后减操作与进行先减后加操作的结果是一样的;4. 在MySQL中...

2022-06-04 16:20:59 388

原创 Mysql 列别名、去重、空值、着重号、表结构

优点:便于计算操作:紧跟列名,也可以在列名和别名之间加入关键字AS,别名使用双引号,以便在别名中包含空格或特殊的字符并区分大小写,AS 可以省略。建议别名简短,见名知意举例SELECT last_name AS name, commission_pct commFROM employees;在SELECT语句中使用关键字DISTINCT去除重复行SELECT DISTINCT department_idFROM employees;注意:DISTINCT 其实是对后...

2022-06-04 11:25:31 333

原创 Mysql 命令行与Navicat15 分别执行.sql文件

关注微信公共号:小程在线方法一:source 文件路径+文件名进入MySQL:C:\Users\cheng>mysql -u root -pEnter password: ****Welcome to the MySQL monitor. Commands end with ; or \g.Your MySQL connection id is 13Server version: 8.0.19 MySQL Community Server - GPLCopyright (c) 2000, 2020

2022-06-03 16:06:17 739

原创 Mysql5.7 ERROR 1366 (HY000): Incorrect string value: ‘\xD5\xC5\xC8\xFD‘ for column ‘ ‘ atrow 1

关注微信公共号:小程在线mysql5.7 在插入中文数据时报错:ERROR 1366 (HY000): Incorrect string value: '\xD5\xC5\xC8\xFD' for column ' ' at row 1解决方法:步骤一:修改mysql的数据目录下的my.ini配置文件修改1:default-character-set=utf8 #默认字符集修改2:mysqld] # 大概在76行左右,在其下添加:character-set-server=utf8collation-

2022-06-03 15:46:57 673

原创 Azkaban 将任务设置成一个失败不影响其他任务

关注微信公共号:小程在线关注CSDN博客:程志伟的博客

2022-03-30 16:31:25 384

原创 hive报错: cannot recognize input near ‘<EOF>‘ ‘<EOF>‘ ‘<EOF>‘ in subquery source

关注微信公共号:小程在线关注CSDN博客:程志伟的博客hive版本:2.1.1报错:FAILED: ParseException line 28:35 cannot recognize input near '<EOF>' '<EOF>' '<EOF>' in subquery source解决方法:给字表添加别名。报错SQL:select afrom ( select a,b,c,d from asdf);正确SQL:

2022-03-30 16:13:56 19433

VMware安装保姆级教程

VMware安装保姆级教程,从0开始搭建,适用于学习Centos/liunx等人员,适用于大数据,安装hadoop/hive等

2022-05-12

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除