- 博客(21)
- 收藏
- 关注
RSS订阅
原创 带你走进大数据时代(简单易懂)(大数据概述一)
个人微信:yinhaoliang6大数据概述(Big Data)问题来了,何为大数据?大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合.是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。Volume： 巨大的数据量• 新浪微博用户数2.5亿+，高峰每天几亿条。Variety ：数据多样性•...
2020-01-07 23:03:20
695
2
原创 2.MapReduce入门(连载)_HelloWorld
MapReduce_WordCountMapReduce_WordCount需求数据准备客户端导入相应的依赖坐标+日志添加（注:Maven项目,不会的请点击这里[maven安装](https://blog.csdn.net/lovemore2/article/details/104548047)）编写程序编写mapper类右键运行查看结果MapReduce_WordCount了解了MapReduce的基本流程之后,我们看一下如何编写helloWorld程序需求在给定的文本文件中统计输出每一个单词出现
2020-08-27 10:32:07
339
1
原创 1.MapReduce入门(连载)
第1章 MapReduce入门1.1 MapReduce定义毫不夸张的说mapreduce是数据分析的鼻祖框架,其实我们学习，并不是说要学会它怎么用，而是要去懂它的一个编程思想，恰恰如此，我们的mapreduce就是这种分布式计算思想的一个体现.Mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据分析应用”的核心框架.Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，并发运行在一个hadoop集群上。框架是一个半成品
2020-06-08 12:00:20
251
原创 个人写的基于使用SpringBoot开发的房屋租赁系统
基于SpringBoot(JavaWeb)的房屋租赁系统项目描述个人写的基于使用SpringBoot开发的房屋租赁系统房屋信息查询:用户可以根据自己的要求，按照不同的查询方式来查询自己需要的房屋类型，查询方式:包括按照房屋区域查询、按照房屋价格查询、按照房屋类型查询、按照房屋面积查询.用户信息模块:用户在成为本系统的用户之前，需要注册成为本系统的用户，同时修改自己的用户资料，在必要时够成修改自己的密码 - 房屋信息管理:在此功能模块中，管理员可以发布房屋的租赁信息，并在发布信息之后查看信息发布结果
2020-06-03 22:36:00
8014
18
原创 Spark_安装(单机版)
邮箱:[email protected]一、安装jdk二、安装sparklink说明：安装单机版spark只需要安装jdk和spark就可以了，因为spark内置的有scala，可不单独安装spark依赖的scala。这是网上的说法，我因为安装了scala就没有再去卸载三、下载四、解压解压的Linux命令：-zxvf spark-2.3.1-bin-hadoop2.7.tgz为了操作方便，我将解压得到的spark-2.3.1-bin-hadoop2.7文件夹改名为spark
2020-05-29 01:40:43
919
1
原创 大数据数据导入导出工具Sqoop的安装
邮箱:[email protected]是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中.Sqoop项目开始于2009年，最早是作为Hadoop的一个第三方模块存在，后来为了让使用者能够快速部署，也为了让开发人员能够更快速的迭代开发，Sqoop
2020-05-29 01:38:19
675
原创 Java老司机带你刨面试题(IO_反射_及JavaWeb，适用者初中级工程师)
Java老司机带你刨面试题(IO_反射_及JavaWeb，适用者初中级工程师)哈哈,最近一大堆事,两天没更新,今天在沙发上总结一下面试题吧,希望对大伙有用,还是那句话,有意见的题目欢迎和我交流.老铁,抱拳了大家在面试的时候任何题都不能轻视,正所谓,细节决定成败,能把简单的事情做好就不简单1.IO1.1什么是IO流?它是一种数据的流从源头流到目的地。比如文件拷贝，输入流和输出流都包括了。输...
2020-03-01 21:28:39
490
1
原创 解决eclipse死活创建不了Maven项目的终极方法~(附带maven安装教程)
解决eclipse死活创建不了Maven项目的终极方法~(附带maven安装教程)最近maven项目整的我很头大,一种什么感觉呢,就是你以前以为它就是个soft,但慢慢变成了你的answer,对于我这种爱钻牛角尖的人来说,必须的飒它(乡村爱情最近看多了！哈哈)Step.1 首先我们要安装maven的话,需要去官网下载源文件maven官网纸飞机走起~然后点击左侧的download界面就会到...
2020-02-28 00:50:06
10578
10
原创 Java老司机带你刨面试题(集合与线程篇_标题党请进)
史上最全面试题(集合与线程篇_标题党请进)1.1 Collection 和 Map掌握Collection和Map的继承体系(有时候他让你画)1.2 List和Set区别List,Set 都是继承自 Collection 接口List 特点：元素有放入顺序，元素可重复Set 特点：元素无放入顺序，元素不可重复，重复元素会覆盖掉（注意：元素虽然无放入顺序，但是元素在 set 中的位...
2020-02-26 21:33:28
220
1
原创 大话数据库_MySQL(二数据库查询操作)
个人微信：yinhaoliang6通过本章学习，您将可以掌握:• 基本的SELECT语句• 过滤和排序数据• 分组函数• 分组查询• 多表查询• 分页查询显示表结构使用 DESCRIBE 命令，表示表结构 DESC[RIBE]过滤和排序数据分组函数多表查询...
2020-01-08 23:22:01
209
原创 大话数据库_MySQL(一数据库简识)
个人微信:yinhaoliang6数据库和SQL概述数据库的好处实现数据持久化使用完整的管理系统统一管理，易于查询DB数据库（database）：存储数据的“仓库”。它保存了一系列有组织的数据.DBMS数据库管理系统（Database Management System）。数据库是通过DBMS创建和操作的容器SQL结构化查询语言（Structure Query Langu...
2020-01-08 23:19:33
446
原创 锋利JavaScript(一js历史介绍)
个人微信：yinhaoliang6JavaScript是世界上最流行的脚本语言，因为你在电脑、手机、平板上浏览的所有的网页，以及无数基于HTML5的手机App，交互逻辑都是由JavaScript驱动的.简单地说，JavaScript是一种运行在浏览器中的解释型的编程语言.那么问题来了，为什么我们要学JavaScript？尤其是当你已经掌握了某些其他编程语言如Java、C++的情况下.简单...
2020-01-08 23:16:37
230
原创 带你走进大数据时代(hadoop生态圈整体介绍二)
个人微信:yinhaoliang6传统开发在这种方法中，一个企业将有一个计算机存储和处理大数据。对于存储而言，程序员会自己选择的数据库厂商，如Oracle，IBM等的帮助下完成，用户交互使用应用程序进而获取并处理数据存储和分析局限性这种方式能完美地处理那些可以由标准的数据库服务器来存储，或直至处理数据的处理器的限制少的大量数据应用程序。但是，当涉及到处理大量的可伸缩数据，这是一个繁忙的...
2020-01-08 23:11:11
309
原创 java基础习题练习
个人微信:yinhaoliang6java习题在做这些练习之前需要先看一下这个控制台输入的方法有多种，常用的一种是使用 Scanner。注意先学会用，涉及到的原理先不做讲解。如下例中是从控制台接收一行字，再原样输出到控制台: 试着运行一下吧～import java.util.Scanner;public class Test{ public static void main(...
2020-01-07 22:52:27
757
原创 Java数据类型介绍
个人微信:yinhaoliang62. Java 数据类型Java 中的数据类型，分为引用类型和基本数据类型。基本类型有 8 种，引用类型将在面向对象时详细讲解，此处了解即可.2.1. 八种基本数据类型 ***整型： byte, short, int, long浮点型： float, double字符型： char布尔型： boolean2.2.整数类型 ***整数类型有 byt...
2020-01-07 22:49:15
177
原创 java变量及作用域（内含进制转换规则）
个人微信:yinhaoliang61.Java变量1.1.变量（variable）的含义 *变量相当于自然语言中的代词。比如“您好”中的“您”就是代词，我们为什么用代词？是因为我们可以跟每个人说“您好”，通用、方便。同理，编程中也是一样的，变量让程序语 言表达更方便。举个例子:Person p ; //代表了一个人int age; //代表了岁数1.2. Java 中的变量 *在...
2020-01-07 22:47:34
165
1
原创 计算机语言及java发展简史（历史还是要懂点的哈,不然怎么和同行吹牛？）
个人微信:yinhaoliang6有问题随时骚扰哈～1 Java简介1.1 计算机语言的发展历史1.1.1 计算机语言简介语言的发展是向着人性化的发展，越来越让编写程序的人员省心第一代计算机语言：机器语言基于二进制，冯诺依曼体系结构（犹太人），写完代码直接让机器去用第一台计算机: 美国 费城 anyac 电子管的结构 体积很大 功耗很大，运行一般地方拉闸限电，速度很慢,每秒5000...
2020-01-07 22:41:53
354
原创 非常诚挚的自我介绍～
Hello,csdn的小伙伴们大家好，我是江南,目前在一家国内第一家上市软件公司work，现在主要在研究数据分析这块，在csdn潜水已经四年了，也非常感谢CSDN各位前辈们的指导（据不完全统计，本人百分之八十的bug全部都是在CSDN查到的）,天王刘德华曾经说过一句话:学到的就要教人,赚到的就要给人,所以从2020年开始，我会定期去更新我对整个互联网架构的认识以及见解，希望前辈们能够多多指教.老铁...
2020-01-07 22:31:40
218
2
原创 Webstorm整合git
Webstorm整合git任何问题联系wechat: yinhaoliang6在此之前确保你安装了git 和webstorm首先打开 WebStorm ，依次点击File -> Settings… 打开系统设置面板，在上面搜索 github 配置 GitHub 相关参数.连接成功后，我们还要连接我们下载的 Git，依旧，在1处搜索 git,在2处输入 Git 安装路径，一般情况下这...
2020-01-07 22:20:37
1643
原创 手把手教你搭建Nginx代理服务器,无论是实施岗还是开发岗,Nginx都是你的不二选择
成功的路上是孤独的手把手教你搭建Nginx代理服务器,无论是实施岗还是开发岗,Nginx都是你的不二选择Nginx是个高性能的HTTP和反向代理服务,也是一个IMAP/POP3/SMTP服务.Nginx作为一款轻量级的Web代理服务器.其由于内存少,并发能力强,渐渐的发展了起来,现在我们熟知的一些知名网络公司如阿里巴巴、百度、京东、新浪、网易、腾讯都在使用Nginx闲话少说,我们开始使用...
2019-01-04 18:05:38
1934
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人