自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(17)
  • 资源 (1)
  • 收藏
  • 关注

原创 第11章综合案例2影评大数据分析

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-30 09:29:17 2114 4

原创 第10章综合案例1广电大数据分析

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-30 09:22:34 2200 3

原创 实验8HiveUDF

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-30 09:18:13 627

原创 实验7HiveJDBC连接

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-30 09:10:50 2121 1

原创 实验6Hive分组排序

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-30 09:07:25 892

原创 实验5Hive查询

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-29 17:23:30 667

原创 实验4Hive分区表和桶表

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-29 17:17:16 1192

原创 实验3Hive数据操作

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-29 17:12:56 1105 1

原创 实验2Hive数据定义

记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.285. Hive3.1.2

2022-11-29 17:06:29 689

原创 实验1Hive安装部署

--记2022上半年hive学习1. Linux Ubuntu 20.042. JDK1.83. Hadoop3.1.04. MySQL8.0.28

2022-11-29 16:50:43 1019

原创 实验SparkSQL编程初级实践

实验SparkSQL编程初级实践-Spark SQL 基本操作-将RDD转换为DataFrame-利用DataFrame读写MySQL的数据

2022-05-02 16:52:10 6861 7

原创 Spark学习笔记20220419-

spark学习-静态IP-pyspark连接mysql

2022-04-19 11:05:29 2036

原创 实验7 Spark初级编程实践

1.实验目的(1)掌握使用Spark访问本地文件和HDFS文件的方法(2)掌握Spark应用程序的编写、编译和运行方法2.实验平台(1)操作系统:Ubuntu18.04(或Ubuntu16.04);(2)Spark版本:2.4.0;(3)Hadoop版本:3.1.3。3.实验步骤(1)Spark读取文件系统的数据1.在spark-shell中读取Linux系统本地文件“/home/hadoop/test.txt”,然后统计出文件的行数;2.在s..

2021-12-22 19:28:47 9959 2

原创 实验5MapReduce初级编程实践

1.实验目的(1)通过实验掌握基本的MapReduce编程方法;(2)掌握用MapReduce解决一些常见的数据处理问题,包括数据去重、数据排序和数据挖掘等。2.实验平台(1)操作系统:Linux(建议Ubuntu16.04或Ubuntu18.04)(2)Hadoop版本:3.1.33.实验步骤(一)编程实现文件合并和去重操作对于两个输入文件,即文件A和文件B,请编写MapReduce程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新的输出文件C。下面是输入文件和..

2021-12-05 14:23:18 12290 10

原创 实验4 NoSQL和关系数据库的操作比较

实验4NoSQL和关系数据库的操作比较1.实验目的(1)理解四种数据库(MySQL、HBase、Redis和MongoDB)的概念以及不同点;(2)熟练使用四种数据库操作常用的Shell命令;(3)熟悉四种数据库操作常用的Java API。2.实验平台(1)操作系统:Linux(建议Ubuntu16.04或Ubuntu18.04);(2)Hadoop版本:3.1.3;(3)MySQL版本:5.6;(4)HBase版本:2.2.2;(5)Redis版本:5.0.5;.

2021-11-21 17:17:59 15431 1

原创 实验3 熟悉常用的HBase操作

一、实验目的理解HBase在Hadoop体系结构中的角色; 熟练使用HBase操作常用的shell命令; 熟悉HBase操作常用的Java API;二、实验平台操作系统:Linux; Hadoop版本:3.1.3; HBase版本:2.2.2; JDK版本:1.8; Java IDE:Eclipse。三、实验步骤(一)编程实现以下指定功能,并利用Hadoop提供的HBase Shell命令完成相同任务;列出HBase所有的表的相关新信息,例如表名; public sta.

2021-10-26 13:46:59 9596

原创 实验2的两道Java编程《大数据技术原理与应用》第3版

1.编程实现一个类“MyFSDataInputStream”,该类继承“org.apache.hadoop.fs.FSDataInputStream”,要求如下:实现按行读取HDFS中指定文件的方法“readLine()”,如果读到文件末尾,则返回空,否则返回文件一行的文本。import java.io.*;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FSDataInputStream;impo

2021-10-18 20:36:21 2942 2

jedis mongo mysql.zip

jedis-2.9.0.jar mongo-java-driver-3.12.1.jar; mysql-connector-java-5.1.40.tar.gz;

2021-11-22

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除