Jeremy_Hzf-CSDN博客

原创 hadoop学习（三）集群搭建

目录1.Hadoop运行模式2.集群搭建3.集群规划安装Hadoop修改配置文件（1）核心配置文件（2）HDFS配置文件（3）YARN配置文件（4）MapReduce配置文件（5）配置slaves拷贝配置文件到其他机器4.启动集群配置SSH启动集群1.Hadoop运行模式Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。Hadoop官方网站：http://hadoop.ap...

2019-04-10 20:25:42 206

原创 hadoop学习（二）编译源码

这里写自定义目录标题1.前期准备工作2.jar包安装3.编译源码1.前期准备工作CentOSCentOS能连外网，Linux虚拟机ping www.baidu.com 是畅通的注意：采用root角色编译，减少文件夹权限出现问题jar包准备(hadoop源码、JDK8、maven、ant 、protobuf)（1）hadoop-2.7.2-src.tar.gz（2）jdk-8u...

2019-04-08 18:53:08 251

原创 hadoop学习（一）入门

这里写自定义目录标题1.hadoop是什么？2.Hadoop的发展历史3.Hadoop三大发行版本4.Hadoop的优势5.Hadoop的组成6.大数据生态体系1.hadoop是什么？Hadoop的官网：http://hadoop.apache.org/Hadoop是一个由Apache基金会所开发的分布式系统基础架构。主要解决海量数据的存储和海量数据的分析计算问题。广义上来说，Hado...

2019-04-07 15:40:32 245

转载 redis集群高可用

Redis系列九：redis集群高可用 Redis集群的概念：　　RedisCluster是redis的分布式解决方案，在3.0版本后推出的方案，有效地解决了Redis分布式的需求，当一个服务挂了可以快速的切换到另外一个服务，当遇到单机内存、并发等瓶颈时，可使用此方案来解决这些问题一、分布式数据库概念1. 分布式数据库把整个数据按分区规...

2019-03-23 19:45:11 111

转载 Java中如何动态创建接口的实现

原博连接有很多应用场景，用到了接口动态实现，下面举几个典型的应用：1、mybatis / jpa 等orm框架，可以在接口上加注解进行开发，不需要编写实现类，运行时动态产生实现。2、dubbo等分布式服务框架，消费者只需要引入接口就可以调用远程的实现，分析源代码，其实在消费端产生了接口的代理实现，再由代理调用远程接口。3、spring aop 这是最典型的动态代理了。创建接口的动态实现，...

2019-02-11 16:28:26 677

转载 centos7安装 redis

 一、安装redis3、安装redis数据库yum install redis4、安装完毕后，使用下面的命令启动redis服务# 启动redisservice redis start# 停止redisservice redis stop# 查看redis运行状态service redis status# 查看redis进程ps -ef | grep redis...

2019-01-16 17:06:47 88

转载 Java中的阻塞队列

1. 什么是阻塞队列？阻塞队列（BlockingQueue）是一个支持两个附加操作的队列。这两个附加的操作是：在队列为空时，获取元素的线程会等待队列变为非空。当队列满时，存储元素的线程会等待队列可用。阻塞队列常用于生产者和消费者的场景，生产者是往队列里添加元素的线程，消费者是从队列里拿元素的线程。阻塞队列就是生产者存放元素的容器，而消费者也只从容器里拿元素。阻塞队列提供了四种处理方法:...

2019-01-15 15:48:40 101

转载 Centos7安装mysql步骤

从最新版本的linux系统开始，默认的是 Mariadb而不是mysql！这里依旧以mysql为例进行展示1、先检查系统是否装有mysqlrpm -qa | grep mysql这里返回空值，说明没有安装这里执行安装命令是无效的...

2018-12-18 20:59:05 108

转载 JDK核心JAVA源码解析 - Object

转载:https://blog.csdn.net/zhxdick/article/details/566736101. Object类（1）hashCode方法和equals方法public native int hashCode();public boolean equals(Object obj) { return (this == obj);}Java内规定，hashCo...

2018-12-13 14:07:20 201

qq_40282466的博客