1 沙滩上的漫步者

尚未进行身份认证

我见青山多妩媚,料青山见我当如是

等级
TA的排名 39w+

ActiveMQ的简单使用

1ActiveMQ介绍1.1什么是ActiveMQActiveMQ是Apache出品的一个消息中间件,常用的消息对列主要有ActiveMQ,RabbitMQ,Kafka等,队列的主要作用是消除高并发访问高峰,加快网站的响应速度。在实际应用中常用的使用场景。异步处理,应用解耦,流量削锋和消息通讯四个场景1.2JMS介绍JMS的全称是JavaMessageSer...

2019-06-27 21:47:51

HTTP请求报文和响应报文

HTTP请求报文和响应报文1.一次完整的HTTP请求所经历的7个步骤HTTP通信机制是在一次完整的HTTP通信过程中,Web浏览器与Web服务器之间将完成下列7个步骤:建立TCP连接在HTTP工作开始之前,Web浏览器首先要通过网络与Web服务器建立连接,该连接是通过TCP来完成的,该协议与IP协议共同构建Internet,即著名的TCP/IP协议族,因此Internet又被称作是T...

2019-04-24 10:19:05

mongodb02集群搭建

MongoDB集群副本集集群架构图副本集集群是一组Mongo服务,维护了相同的数据集,提供了高可用及数据冗余的能力。#模拟集群搭建#3个mongodb服务的副本集集群#一个服务器中通过端口号区分不同的mongodb实例#假设:node1:hadoop27001node2:hadoop27002node3:hadoop27003搭建步骤#创建mo...

2019-03-29 21:58:41

mongodb基本使用

mongoDB一、NoSql简介NoSQL(NoSQL=NotOnlySQL),意即“不仅仅是SQL”,泛指非关系型的数据库Nosql这个技术门类,早期就有人提出,发展至2009年趋势越发高涨。二、NoSQL数据库的四大分类l键值(Key-Value)存储数据库这一类数据库主要会使用到一个哈希表,这个表中有一个特定的键和一个指针指向特定的数据。Key/value模型对...

2019-03-29 21:57:18

基于Hadoop生态体系搭建数据分析平台

基于Hadoop生态体系的数据分析平台一、项目设计架构图设计目标分析系统每日访问量PV(PageView)分析系统各个模块访问量MV(ModelView)二、环境搭建安装Nginx并配置日志切割#安装gcc基本环境yuminstallgcc-c++perl-develpcre-developenssl-develzlib-develwget#解压...

2019-03-27 22:45:54

Flum基础实战

Flume架构实战Flume是什么Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。当前Flume有两个版本Flume0.9X版本的统称Flume-og,Flume1.X版本的统称Flume-ng。由于Fl...

2019-03-27 22:43:21

Hive基础使用

HiveHive介绍概述hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。Hive是建立在Hadoop上的数据仓库基础构...

2019-03-26 23:22:31

kafka基础篇使用01

Kafka一、官网https://kafka.apache.org/intro一、概述ApacheKafka是一个分布式流处理平台具备以下三种特性:发布和订阅流式记录。类似于消息队列或者企业消息系统存储流式数据,并且有较好的容错流式数据处理应用场景:构造实时流数据管道,可以在系统或应用之间可靠的获取数据。(相当于MQ)构建实时流式应用程序,对这些流数据进行转换或者影响...

2019-03-22 18:04:37

HBase基础使用03-HA集群搭建

HBase集群集群架构图HBase架构篇HBase架构组成HBase采用Master/Slave架构搭建集群,它隶属于Hadoop生态系统,由一下类型节点组成:HMaster节点、HRegionServer节点、ZooKeeper集群,而在底层,它将数据存储于HDFS中,因而涉及到HDFS的NameNode、DataNode等,总体结构如下:ZooKeeper集群用于:...

2019-03-22 16:26:43

HBase基础使用02和MapReduce集成

HBase02HBase和MapReduce集成Maven依赖<!--hadoop-hdhf所需依赖--><dependency><groupId>org.apache.hadoop</groupId><artifactId>hadoop-common</...

2019-03-22 16:22:17

HBase基础使用篇01

HBase高并发处理方案简图一、概述官网地址:http://hbase.apache.org/HBase是一种构建在HDFS之上的分布式、面向列的存储系统。在需要实时读写、随机访问超大规模数据集时,可以使用HBase。特点大:一个表可以有上亿行,上百万列面向列:面向列表(簇)的存储和权限控制,列(簇)独立检索。结构稀疏:对于为空(NULL)的列,并不占用存储空间,因...

2019-03-19 22:16:03

Hadoop-HA 高可用集群

HadoopHA高可用集群一、HA集群HDFSHA集群master\slaveYARNHA集群master\slaveHA(HighAvailable),高可用性群集,是保证业务连续性的有效解决方案,避免了因为单点故障带来的风险,一般有两个或两个以上的节点,且分为活动节点及备用节点。通常把正在执行业务的称为活动节点,而作为活动节点的一个备份的则称为备用节点,各节点之间会传...

2019-03-18 22:14:54

ZooKeeper使用教程

ZooKeeper使用教程一、概述官⽹网https://zookeeper.apache.org/介绍ZooKeeper是一个开源的分布式应⽤协调服务系统,主要⽤用来完成统一命名服务、状态同步服务、集群管理理、分布式应⽤用配置项的管理理等⼯工作。ZooKeeper(分布系统基础服务)介绍:分布式服务协调系统内部结构:树形层次空间(类似linux文件系统)a.层次结构b.节点...

2019-03-18 09:09:11

ELK-快速入门使用

一、ELK概述ELK是三个开源软件的缩写,分别表示:Elasticsearch,Logstash,Kibana。ELK通常用来构建日志分析平台、数据分析搜索平台等官方文档https://www.elastic.co/cn/products组件介绍Elasticsearch是个开源分布式全文检索和数据分析平台。它的特点有:分布式,零配置,自动发现,索引自动分片,索引...

2019-03-18 09:02:21

ElasticSearch

前言apachelucene全文检索的工具包索引:提供查询效率 数据库索引: 主键索引、唯一索引(unique)、复合索引(对数据库中的多个字段创建一个索引)、普通索引等 createindex索引名ontable(column1,column2)全文检索;类似于使用字典过程 对数据预先构建索引,在查找的时通过索引匹配数据的过程就称为全文检索 创建索引:...

2019-03-18 08:55:19

Memcached

一、概述传统关系型数据:Oracle、Mysql指标容量2000Wtps1500个响应时间:10MS缓存类型:1.本地缓存2.客户端缓存3.分布式缓存缓存的设计指标:容量key-valuetps12W成本(64G128G)响应时间常用缓存技术:ehcacheoscachememcachedredistair二、Me...

2019-03-17 21:33:34

FastDFS

FastDFS笔记一、简介FastDFS是高性能的分布式文件系统,主要功能包括文件的存储、同步、访问(上传和下载),特别适合用于以文件为主体的网络站点(图片分享和视频分享)FastDFS包含两个角色:Tracker(追踪器调度服务器):调度和文件访问的负载均衡Storage(存储器存储服务器):文件的管理(存储、同步、访问接口)和文件的元数据支持水平扩展,不会对在线服务器造...

2019-03-17 21:30:00

AWT组件

AWT组件1、组件是构成图形用户界面的基本成分和核心元素。组件具有以下特性的对象:运行时可见,具有坐标位置、尺寸、字体、颜色等属性,能拥有及管理其他组件,可获得输入焦点可被操作,可响应事件等。Component组件类是一个抽象类,它是AWT组件类层次结构的根类,实际使用的组件都是Component的子类。Component类提供对组件操作的通用方法,包括:获得或设置组件位置、大小、标题文本字体...

2019-03-17 21:22:23

Spring的两种依赖注入方式:setter方法注入与构造方法注入 以及两种方式的区别!

spring的两种依赖注入方式:setter注入与构造方法注入,这两种方法的不同主要就是在xml文件下对应使用property和constructor-arg属性,例如:property属性:(其中name的值为原类中的属性名)constructor-arg属性:(其中index的值为0~n-1,n代表构造函数中的输入参数的数量)1.setter方法注入setter方法注入即是创建一个普...

2019-03-17 21:21:58

Hadoop---MapReduce

MapReduce一、什么是MapReduce----并行计算框架模型HadoopMapReduce是一个软件框架,基于该框架能够容易易地编写应⽤用程序,这些应用程序能够运行在由上千个商⽤用机器器组成的⼤大集群上,并以一种可靠的,具有容错能⼒力力的⽅方式并⾏行行地处理理上TB级别的海量数据集。这个定义里面有着这些关键词:一是软件框架,二是并行处理,三是可靠且容错,四是大规模集群,五是海...

2019-03-17 21:20:44

查看更多

勋章 我的勋章
    暂无奖章