自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(93)
  • 收藏
  • 关注

原创 这一篇万字数仓文章,让我对数仓有了一个新的认知

1、数据仓库的概念数据仓库概念创始人在《建立数据仓库》一书中对数据仓库的定义是:数据仓库(DataWarehouse)是一个面向主题的(SubjectOriented)、数据集成的(Integrated)、相对稳定(非易失)的(Non-Volatile)、反映历史变化(时变)(TimeVariant)的数据集合,用于支持管理决策(DecisionMakingSupport)。数据仓库是决策支持系统(dss)的结构化数据环境,如下图,决策支持系统基于数据仓库进行联机分析处理(OLAP)。常用的技术有,HD

2021-04-16 15:58:33 539 1

原创 在Flink如此火热的时期,这些Flink必备面试题,来看看你掌握了多少(一)

随着近几年大数据的飞速发展,不仅对数据量的存储和计算有着非常高的要求,在实时性方面,也是有着很高的要求。说到实时性,就不得不说到Flink了。在Flink发展的如火如荼的今天,也相信有许多公司在使用。这个小编在今年面试的时候深有体会,虽然也被问得一头雾水~~哈哈。接下来小编就分享一篇关于Flink的必备面试题。希望在复习的同时也能帮助到大家。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!小编博客主页:https://blog.csdn.net/Mr_Yang888尽管当前水平可.

2021-04-11 20:02:04 421

原创 分享一篇常用的办公小知识--流程图的常用形状的说明

前言hello,大家好。好久不见。我还是你们熟悉的那个DJ丶小哪吒。近期呢,小编也是许久没有更新自己的博客啦。今天小编,又回来写自己的博客了。但是今天分享的可能会与往期有所不同。今天分享的是非技术层面的。是关于办公层面的小知识。为什么小编会想到分享这些呢。因为小编最近在职场中,遇到一点小尴尬。领导让我画一个关于我们产品的架构流程图。结果是画的不太规范。关于流程图,第一次画,也没有事先去了解一点。以为是就画得好看,并且易懂就好了。结果整个图画的还可以,流程也让人易懂。但是领导指出了我画的图的一点小问题。因.

2020-12-06 22:08:23 2939 1

原创 Very easy 就能懂得一篇Flink运行时架构

前言首先,还是那个熟悉的开场白。欢迎来到DJ丶小哪吒的博客空间,想想最近因为找工作也是许久没有更新自己的博客了呢。但是请各位放心,你们的DJ丶小哪吒还健在。一有时间肯定会抽出时间来更新自己的博客。最近找工作也是困难重重。也是屡屡碰壁。但是小编相信着,机会总会有的。在最后,小编也算是找到了一份合适的工作。希望在今后的道路中,每天会进步一点点。也希望大家跟我一起努力。感慨的话就不多说了,直接进入正题吧。今天要跟大家分享的是flink的运行时架构。码字不易,先赞再看,养成习惯~~~1、Flink运行架.

2020-08-25 22:00:32 193

原创 带你分分钟完成 Flink-HA集群搭建(standalone&&Yarn)

前言大家好。我是那个那个人见人爱的DJ丶小哪吒。今天我要为大家分享的是Flink集群的搭建。小编写这篇文章目的是为了以后方便自己搭建Flink集群,也方便正在初学flink的同学搭建集群。方便自己也方便大家。希望路过的朋友能给小编一些支持。小编也会继续更新自己的博客。为大家分享更多的知识。码字不易,先赞再看,养成习惯~~~1、Flink 集群搭建Flink 支持多种安装模式。local( 本地) ——单机模式, 一般不使用standalone ——独立模式, Flink 自带集群,开发测.

2020-07-09 17:40:10 567

原创 看完这篇Flink 架构体系,可以放心和面试官聊了

前言首先,还是那个熟悉的开场白。我是英俊潇洒,风流倜傥的DJ丶小哪吒。今天我又来为你们分享知识了。今天要给你们分享的是flink的架构体系。我们在面试过程中,只要你说你会xx框架。那么几乎绕不开架构体系。这也就是小编为什么博客中,关于架构及工作流程写的如此详细的原因了。希望本篇文章也能帮助到各位,也希望各位能通过本篇文章对flink有个新的认识。1、Flink 架构体系1.1、Flink 中的重要角⾊JobManager 处理器:也称之为 Master, 用于协调分布式执行, 它们用来调度.

2020-07-09 14:36:11 1041

原创 刨根问底系列---Flink概述

前言大家好,我是那个英俊潇洒风流倜傥的DJ丶小哪吒。看清楚,是哪(ne)吒(zha),不是那托。~~~今天我又来跟你们分享知识了,好久没更新博客。都快生疏了呢。今天要分享的是大数据热门框架之一,flink。那么,什么是flink呢?既然已经有了SparkStreaming和Store为什么还要有flink呢?看了下面这篇文章,你就懂了。更多谜题,请看小编为你揭晓谜底。文章目录第 1 章 Flink 简介1.1 Flink 的引入1.2 什么是 Flink1.3 Flink流处理特性1.4 Flin.

2020-07-08 17:43:35 487 1

原创 Redis持久化

大家好,我是DJ丶小哪吒,我又来给大家分享知识了。今天要分享的是redis的持久化。希望大家给予支持。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!小编博客主页:https://blog.csdn.net/Mr_Yang888尽管当前水平可能不及各位大佬,但我还是希望自己能够做得更好。因为我相信,努力就会有希望。如果你的内在一直成长,那么你早晚会破土而出码字不易,先赞再看,养成习惯~~~那么,我们开始上课喽,请各位同学,打开课本24页,我们今天讲《Redis的持久化》。.

2020-06-11 14:57:29 325 1

原创 一文学会使用Redis5种数据类型的操作

大家好,我是DJ丶小哪吒,我又来给大家分享知识了。今天要分享的是redis的数据类型以及增删改查。在上一次的redis的介绍和安装中,有读者留言。说能给他介绍一下redis主要功能吗?当时小编也是在评论区给他回复了下。决定在本期的redis的数据类型中。把主要功能也介绍一下。希望大家给予支持。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!小编博客主页:https://blog.csdn.net/Mr_Yang888尽管当前水平可能不及各位大佬,但我还是希望自己能够做得更好。因为.

2020-06-08 15:27:41 292

原创 Redis介绍与安装

前言大家好,我是人见人爱的DJ丶小哪吒。今天我又来给大家分享知识了。最近呢,小编也是在慢慢去改掉以前博客上的陋习了。尽量的去取优掷劣。小编喜欢与人分享知识,因为“独乐了不如众乐乐”嘛。而且写博客也有众多的好处,比如:可以当做笔记、可以帮助他人、还可以提升自己的技术和写作能力。好处那么多,那么何乐而不为呢!!!希望大家给予支持。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!小编博客主页:https://blog.csdn.net/Mr_Yang888尽管当前水平可能不及各位大.

2020-06-07 22:19:46 311 2

原创 spark常见面试题--看了这篇文章,妈妈再也不用担心被问spark了

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。最近小编接到粉丝的留言说,“小编,你的博客怎么写的跟新闻日报似的”,后来小编就回去看了看以前的博客,发现还真是。内容又臭又长。后来小编下定决心,以后的博客要考虑到观众的体验。以后的博客写起来要尽量去简单易懂。因为小编一开始的目的只是为了做笔记,方便自己以后查阅。所以才养成了一种不好的习惯。后来,久而久之,当我有了一定的粉丝之后。我才发现,写博客不能仅仅只为自己着想,我也要为那么多支持我的人着想。直到后来我的博客也是在一点一点改善。但是这次我的粉丝跟我.

2020-06-06 21:36:32 539

原创 一篇压箱底多年的数仓设计原理,今天我拿出来分享了。满满的干货,记得收藏哦

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。最近小编接到粉丝的留言说,“小编,你的博客怎么写的跟新闻日报似的”,后来小编就回去看了看以前的博客,发现还真是。内容又臭又长。后来小编下定决心,以后的博客要考虑到观众的体验。以后的博客写起来要尽量去简单易懂。因为小编一开始的目的只是为了做笔记,方便自己以后查阅。所以才养成了一种不好的习惯。后来,久而久之,当我有了一定的粉丝之后。我才发现,写博客不能仅仅只为自己着想,我也要为那么多支持我的人着想。直到后来我的博客也是在一点一点改善。但是这次我的粉丝跟我.

2020-06-05 16:19:21 1126 2

原创 一篇文章让你学会解决企业中缓慢变化维的问题

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。今天小编要和大家浅谈一下在做项目过程中。我们经常会遇到的缓慢变化维的维问题。码字不易,先赞再看,养成习惯~~~一、缓慢变化维1.1、什么是缓慢变化维(SCD)1.1.1、缓慢变化维简介缓慢变化维,简称SCD(Slowly Changing Dimensi.

2020-06-03 21:12:03 402 1

原创 Hadoop-HA高可用集群的概述

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近在学习Hadoop-HA高可用集群的时候,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。本篇文章是姗姗来迟的一篇文章,小编很早就学了Hadoop-HA的搭建。但一直没有写进博客。今天,他来了。码字不易,先赞再看,养.

2020-05-26 16:01:12 592 1

原创 StructuredStreaming整合kafka&Mysql

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒续更了。上回简单带领大家简单了解了一下StructuredStreaming,那么这一回,我们就来使用StructuredStream.

2020-05-23 20:26:59 374 2

原创 看了这篇文章,再也不用担心面试官问我Structured Streaming了

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。很高兴与大家又见面了。小编要分享的是Structured Streaming,我需要大家竖起耳朵认真听。发现谁开小差,那么这节课站着听。还有把哪位.

2020-05-23 19:51:03 664 1

原创 一篇文章教会你SparkStreaming整合kafka

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。今天你们的小哪吒又来与你们分享知识了,小编也是在百忙之中抽出时间更新博客呀。最近还是在一直准备面试需要准备的材料。也是非常想念大家啊。下面我们来进.

2020-05-22 15:31:37 327

原创 看完了这篇文章,让你对SparkStreaming再也不迷茫了

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。你们阔耐,阳光,积极向上的DJ丶小哪吒又回来了,好像回顾之前,小编已经两个星期没有更新博客了呢。也是最近比较忙,由于跟进老师讲的项目并吃透。每天都.

2020-05-20 19:39:49 403

原创 kettle调优总结

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习kettle,小编平时会对课堂上的知识做一些总结来发表博客。来与大家分享。也会偶尔把分享一些我们的课后练习。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小...

2020-05-03 21:36:26 954

原创 千锤百炼方成刚,想要加薪必看此文章。(Kettle工具之Javascript脚本组件课后练习)

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习kettle,小编平时会对课堂上的知识做一些总结来发表博客。来与大家分享。也会偶尔把分享一些我们的课后练习。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小...

2020-04-30 22:31:36 427

原创 看了本篇文章,才知道Spark-On-Hive原来如此简单

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒又来与各位分享知识了。...

2020-04-29 21:55:53 263

原创 一篇文章教会你如何自定义SparkSQL函数和开窗函数

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒又来与各位分享知识了。...

2020-04-29 21:40:50 593

原创 震惊!!!原来Spark SQL多数据源交互如此easy

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒又来与各位分享知识了。...

2020-04-28 21:08:22 431 2

原创 一篇文章教你如何使用IDEA开发Spark SQL---小编给你安排的明明白白的

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰漏 之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒又来与各位分享知识了。...

2020-04-28 18:30:00 984 1

原创 看了这篇文章,你还敢说你不了解sparkSQL???

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒又来与各位分享知识了。...

2020-04-28 16:49:16 353 2

原创 使用Spark操作JDBC-API实现将数据存入到MySQL并读取出来

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。使用Spark操作JDBC-API...

2020-04-27 21:41:39 211

原创 一篇文章让你深刻了解累加器和广播变量

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒又来与你们分享知识了,...

2020-04-27 21:25:20 320

原创 看了这篇文章,妈妈再也不用担心我的学习了---spark原理

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。上了我DJ丶小哪吒的车,那就坐稳了...

2020-04-24 21:53:07 330

原创 SparkCore篇章---带你你轻松了解DAG

前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。上了我DJ丶小哪吒的车,那就坐稳了...

2020-04-23 21:45:57 282

原创 SparkCore之企业级常用的算子---内涵彩蛋哦

前言小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与 他 人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有 纰 漏之处,欢迎大家在留言区指正。小编也会及时改正。文章目录一、准备工作二、企业中常用算子2.1、WordCount案例2.2、 创建R...

2020-04-22 10:00:55 256

原创 想了解RDD,看这一篇文章就够了---SparkCore之RDD详解(史上最易懂)

前言小编是一名软件工程系大数据应用开发专业大二的学生,对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与他人知识共享。最近小编也在学习spark,对课堂上的内容做了一些总结。来与大家分享。由于水平有限。博客中难免会有一些错误。如有纰漏之处,欢迎大家在留言区指正。小编也会及时改正。1、 什么是RDD- 为什么要有RDD?在许多迭代式算法(比如机器学习、图算法等)和交互式数据...

2020-04-21 10:01:32 621

转载 一篇文章带你了解大数据生态圈---大数据组件图谱

小编一篇文章带你了解大数据生态圈—大数据组件图谱文章目录小编一篇文章带你了解大数据生态圈---大数据组件图谱文件系统数据存储内存技术数据搜集消息系统数据处理查询引擎分析和报告工具调度与管理服务机器学习开发平台转载地址:http://blog.csdn.net/u010039929/article/details/70157376准备好没有,发车了哦~~~~进入正题 阶段 ↓↓↓↓文...

2020-04-20 15:51:33 2270 2

原创 Spark介绍与安装(包含IDEA编写spark程序)

一、Spark概述1.1、Spark官方介绍Spark是什么Apache Spark是用于大规模数据处理的统一分析引擎Spark基于内存计算,提高了在大数据环境下数据处理的实时性,同时保证了高容错性和高可伸缩性,允许用户将Spark部署在大量硬件之上,形成集群。●官网http://spark.apache.orghttp://spark.apachecn.org...

2020-04-20 11:23:47 851

原创 Structured Streaming解析异常(二)

Exception in thread “main” org.apache.spark.sql.AnalysisException: checkpointLocation must be specified either through option(“checkpointLocation”, …) or SparkSession.conf.set(“spark.sql.streaming.che...

2020-04-18 15:10:50 924 2

原创 Structured Streamin解析异常

Exception in thread “main” org.apache.spark.sql.AnalysisException: Data source json does not support1、1、使用Structured Streaming读取Socket数据,把单词和单词的反转组成 json 格式写入到当前目录中的file文件夹中,小编写这个题的时候,遇到如下异常:原因:数据源...

2020-04-18 15:03:51 255

原创 [08001] Could not create connection to database server. Attempted reconnect 3 times. Giving up.

[08001] Could not create connection to database server. Attempted reconnect 3 times. Giving up.IDEA连接linux上的mysql失败我用的是idea19.3版本的,想要连接linux上的目mysql(版本5.1.73)。在linux命令行上可以连接,用户名和密码也都正确。但就是连不上去。解决方案...

2020-04-15 10:04:16 721

原创 scala快速入门--Option类型、偏函数、正则表达式、异常处理、提取器、泛型的使用方法

scala快速入门–Option类型、偏函数、正则表达式、异常处理、提取器的使用方法文章目录scala快速入门--Option类型、偏函数、正则表达式、异常处理、提取器的使用方法1、Option类型2、偏函数3、正则表达式4、异常处理4.1、捕获异常4.2、抛出异常5、提取器(Extractor)5.1、定义提取器6、泛型6.1、定义一个泛型方法6.2、泛型类6.3、泛型的上下界6.3.1、上...

2020-04-13 09:41:05 312 1

原创 快速入门Scala--模式匹配

快速入门Scala–模式匹配哈喽,各位小主,大家好。今天我们来继续讲scala中的模式匹配。scala中的模式匹配就类似于java中的switch。但是scala的模式匹配要更灵活哦。下面来正式看看吧scala中有一个非常强大的模式匹配机制,可以应用在很多场景:switch语句类型查询使用模式匹配快速获取数据1、简单模式匹配语法格式变量 match { case "常量...

2020-04-09 17:53:07 200

原创 使用SparkAPI向Hbase中查询和插入数据

使用SparkSql向Hbase中查询和插入数据create ‘student’, ‘message’scan ‘student’, {COLUMNS => ‘message’}给出以下数据,请使用spark将数据写入到hbase中的student表中,并进行查询出来数据如下:依次是:姓名 班级 性别 省份,对应表中的字段依次是:name,class,sex,province飞...

2020-04-08 11:17:07 432

原创 使用SparkAPI向Mysql写入和查询数据

使用SparkSql向Mysql数据库中写入和查询数据CREATE TABLE user (id int(11) NOT NULL AUTO_INCREMENT,username varchar(32) NOT NULL COMMENT ‘用户名称’,birthday date DEFAULT NULL COMMENT ‘生日’,sex char(1) DEFAULT NULL COM...

2020-04-08 11:02:59 674

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除