自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(118)
  • 收藏
  • 关注

原创 Bash Shell编程基础

转载请注明出处:http://blog.csdn.net/u012842205/article/details/79584275一、Shell是什么1)Shell是操作系统提供的,供用户调用的操作接口。分命令行调用接口(CLI)和图形用户接口(GUI)。2)在Unix历史中,Shell作为系统的命令行调用接口,以独立的程序实现。3)早期的Shell提供了一些基本特性,供用户使用。功能逐渐完善,发展...

2018-03-18 17:42:37 5827

原创 Linux文本处理(二)

转载请注明出处:http://blog.csdn.net/u012842205/article/details/79526050    本文接上一篇:Linux文本处理(一),主要讲解Linux下三个重要工具,并给予一些示例。find、grep和vim。三个工具都用于Linux下的文本处理。一、grep工具    工具是Globally search a Regular Expression an...

2018-03-12 18:16:14 503

原创 Linux文本处理(一)

转载请注明出处:http://blog.csdn.net/u012842205/article/details/79523990一、简单说明    我们平时在电脑上写文档时,总会对文档中的文本进行增删改查操作。比如:搜索,替换某个文件中的关键字;查找路径下所有存在关键字的文件;计算文件中的行数,单词数;查找含有某个关键字的文件名。编辑某个文件。    文本处理指对文本文件进行必要的增删查改操作。在...

2018-03-12 14:01:50 569

原创 OpenFalcon简介

转载请注明出处:http://blog.csdn.net/u012842205/article/details/79397658一、说明    OpenFalcon(官方网站)是一款企业级、高可用、可扩展的开源监控解决方案。此项目最初由小米公司发起,小米运维团队从互联网公司的需求出发,根据多年的运维经验,结合SRE、SA、DEVS的使用经验和反馈,开发的一套面向互联网的企业级开源监控产品,最新版本...

2018-02-28 14:55:21 6866

原创 Kafka安全认证SASL下附带工具的配置使用

描述Kafka配置安全认证策略SASL_PLAIN后如何正确配置并使用附带工具kafka-console-*.sh,kafka-consumer-groups.sh。

2017-06-24 11:38:37 6917 3

原创 Druid0.10.0分布式部署配置

Druid分布式部署及静态数据导入。

2017-06-20 14:37:12 1841 1

原创 Druid0.10伪分布式部署

Druid是一个高性能的面向列存储的分布式存储系统。支持亚秒级的点对点数据查询,包括数据分组,聚合,过滤等操作。其实现目标是支持面向应用的多用户交互查询。可以接入实时数据流(如Kafka)或载入静态数据文件,事先完成数据预计算,以提供更快的查询性能。Druid部署硬件要求较高,主要是内存上的要求,因大部分数据都会载入内存,同时Druid又是一个内存数据库。本文主要介绍Druid安装部署。

2017-06-15 17:51:12 702

原创 Apache Kafka0.10.0.0集群部署

Kafka集群部署需要依赖一个Zookeeper集群,用于Kafka broker之间的消息触发。不建议使用Kafka内嵌的Zookeeper。本文不对Zookeeper部署做描述。另外,Kafka是Java语言实现的,也必须有JDK,部署前确定环境变量,用户名称。一、环境1、操作系统Ubuntu 16.04.1 LTS x86_64Debian 8.7 x86_64

2017-06-14 18:34:59 645

原创 集群Kafka配置SASL用户名密码认证

本文中配置的kafka集群为三节点,Zookeeper有4节点。两个集群相互独立。Apache Kafka v2.11-0.10.0.0Apache Zookeeper v3.4.8Kafka配置SASL PLAIN用于完成基本的用户名密码身份认证。一、Zookeeper集群配置SASLzookeeper所有节点都是对等的,只是各个节点角色可

2017-06-13 17:37:05 21859 27

原创 单机节点Kafka配置SASL用户名密码认证

伪分布式Kafka,只用一个节点,zookeeper也用集成在Kafka里的。首先得配置zookeeper的SASL,再配置Kafka broker的SASL。先启动zookeeper节点,再启动Kafka broker。最后测试consumer和读写。Kafka版本2.11-0.10.0.0,集成的zookeeper为3.4.6。一、Zookeeper1、

2017-06-13 17:13:38 11439 1

原创 OpenTSDB2.3.0安装部署

一、简介        OpenTSDB是基于HBase存储时间序列数据的一个开源数据库,但只是一个HBase的应用而已。也即是在HBase之上加了一层外壳,用于更好的处理时序数据库,真实的数据存储还是在HBase。         时序数据是基于时间的一系列的数据。在有时间的坐标中将这些数据点连成线,往过去看可以做成多纬度报表,揭示其趋势性、规律性、异常性;往未来看可以做大数据分析,机器

2017-05-31 16:43:43 13154 3

原创 Apache Cassandra3.10集群安装部署

一、安装环境操作系统:CentOS Linux release 7.2.1511 (Core)Cassandra版本:Apache Cassandra3.10Oracle JDK:1.8.0_101集群节点:5;Intel(R) Xeon(R) CPU E5-2620 v3 @ 2.40GHz双核;内存30G;硬盘总共约3T。二、Apache Cassandra

2017-05-27 17:51:06 5141

原创 Hive表操作及管理

Hive表个人实践总结

2017-05-26 18:06:15 1836

原创 Apache Hive2.1.1安装部署

记录Hive2.1.1版本在CentOS7下的安装部署,及个人遇到的一些坑,一些解决办法。

2017-05-12 18:21:07 2993

原创 Presto0.167安装部署

描述Presto0.167安装、部署与配置过程。

2017-05-12 11:46:21 1434

原创 CentOS安装monitorix

本文记录个人安装Monitorix过程和一些注意事项。

2017-02-25 17:39:15 4207 1

原创 Kali 2.0 sana源

总结一些kali 2 sana(4.6.0-kali1-amd64)的软件源(source)。

2017-02-11 15:57:03 2282

原创 Sqoop1.4.6安装与使用(二)

本文主要介绍了Sqoop-import工具的基本使用和一些注意事项,并举例了Sqoop1.4.6从Oracle导入到HBase的作业事例。

2016-11-28 19:00:12 2918 2

原创 Sqoop1.4.6安装与使用(一)

本文主要叙述Sqoop1.4.6安装和一些注意事项,非常简单。

2016-11-28 15:17:55 7187 2

原创 简单Spark作业编写与提交执行

本文分析一个简单的spark作业,编写并使用spark-submit提交执行过程。

2016-11-14 17:41:12 6708

原创 vim操作记录(随时变动)

1、连续输入相同字符比如连续输入10个#号: + 10 + i + #2、交换连续两个字母位置比如交换rpintln中的第一个和第二个字母(改成println),则光标移动到第一个字符上,键入xp。3、光标所在行与当前行位置交换map { print $_; } @array;print 'Start printing!';光标在第一行,使用ddp可以把两

2016-11-03 10:18:36 485

原创 Linux crontab定时任务的使用

本文叙述系统cron定时作业调度程序及其crontab工具,简单使用。

2016-10-29 17:17:59 2033 1

翻译 Redis 简介

官方redis简介的翻译。因个人能力有限,仅翻译至此。

2016-10-14 18:21:34 562

原创 Hadoop 2.7分布式部署

本文为个人搭建Hadoop集群总结,其中也总结了个人所遇到的一些问题,一些个人见解。

2016-09-11 13:40:40 3416

原创 Sqoop1.99.7安装、配置和使用(二)

本文描述了sqoop1.99.7从mysql将数据导入hdfs的各项作业创建步骤,并叙述一些注意事项,最后作了总结。

2016-08-28 22:41:36 10561 61

原创 Sqoop1.99.7安装、配置和使用(一)

本文描述sqoop1.99.7安装、配置过程,并叙述了笔者在这过程中遇到的一些注意事项,一些坑,作总结。

2016-08-28 12:54:18 19207 36

原创 HBase使用总结

介绍基本的客户端命令行使用。

2016-08-21 14:54:10 628

原创 HBase概述

本文简单介绍HBase及HBase与Hadoop的关系。

2016-08-21 14:47:58 714

原创 Hadoop概述

简单介绍了Hadoop,本文不涉及HDFS、HBase和MapReduce更详细的说明,详细请点击文中链接。

2016-08-21 14:27:19 891

原创 Java SDK jar的使用

记录Java SDK中jar工具的简单使用,并描述如何创建jar文件,两种方式。

2016-08-12 17:23:48 3694

原创 Apache与Tomcat关系

对Apache服务器和Tomcat服务器作了简单的对比和区分,并对两者的工作原理做简单分析。

2016-08-01 16:43:07 1582

原创 FQDN 是什么

FQDN是完全合格域名/全程域名缩写,Fully Qualified Domain Name,即是域名,访问时将由DNS进行解析,得到IP。FQDN = Hostname + DomainName当我们申请了一个域名时,就可以使用这个域名来得到IP,但若这个域名下挂在很多主机如何?我是不是得申请很多很多域名给每个主机?不需要,域名即创建了一个域,就如命名空间,在这个命名空间下,其他主机都可

2016-07-17 10:28:42 55457 5

原创 linenoise 源码分析(二)

linenoise 命令行编辑库源码分析,linenoiseState结构体,history模块。

2016-04-01 12:59:37 1459

原创 linenoise 源码分析(一)

linenoise,一个命令行编辑库(line editing library)的源码分析

2016-03-31 09:58:07 3586

原创 C指针总结

C语言以其灵活性,从第一个标准直到现在,得到了广泛的应用。因为其贴近底层,能最大限度的将程序员从机器代码中解脱出来。但也因其语言的灵活性,使这成为一门较有难度的语言。而其完全相信程序员,将一切交与程序员处理的思想,也让很多不熟悉计算机原理的程序员大呼C语言的晦涩。       今天我总结了部分C指针的资料,为自己学习,记录于此,也希望对别人有帮助。一、指针简单介绍:       指针不

2016-03-22 19:36:39 1700

原创 C语言中整型的定义

使用C语言时,用sizeof运算int,long int,long long int时,得到的结果不尽相同。那么这些类型长度与什么有关?与机器?与编译器(语言实现)?还是操作系统?我查阅了一些资料,将之总结下来,希望能有一些参考价值。也欢迎指正纠错,共同学习!C语言的实现一般由编译器和标准库开发者提供,而这部分开发者有很多,常见的编译器有微软的vc,GNU的gcc,Borland的

2016-03-21 15:38:57 23845 1

原创 Redis 源码分析(zmalloc部分)

Redis 2.8.24Redis在这个版本使用三种选择作为allocator,a) tcmalloc:一种比glibc 2.3更快的malloc实现,由google用于优化C++多线程应用而开发。Redis 需要1.6以上的版本。b) jemalloc:第一次用在FreeBSD 的allocator,于2005年释出的版本。强调降低碎片化,可扩展的并行支持。Redis需要

2015-12-24 10:32:25 2205

原创 Windows 平台搭建Redis数据库

环境:OS:Windows7 sp1 x86_64redis-server:2.8.2104 64bit1、简介:由ANSI C 开发的一个开源NoSQL数据库系统,是一种可持久化亦可基于内存的Key-Value型数据库,支持多种语言的API接口。开发工作由VMware主持,Pivotal赞助。官网:http://redis.io目前Redis项目官方并不支

2015-12-03 13:48:09 1368

原创 Windows 平台安装配置Golang语言环境

环境介绍:OS: Windows 7 sp1Arch:x86_64Golang Ver:Go 1.4.2 amd641、下载Golang语言安装包:Go 由Google于2009年开发释出,一种开放源代码的语言。github: golang/go。可以直接在这上面找到释出的源代码(其实也只是供源代码下载,没有做成安装包),将源代码编译即可使用。也可以找到Go的中文论

2015-11-30 21:55:37 1506

转载 postgresql 存储过程简单使用

转载出处:http://blog.csdn.net/rachel_luo/article/一、存储过程结构:         Create or replace function 过程名(参数名 参数类型,…..) returns 返回值类型 as                   $body$                             //声明变量  

2015-11-25 10:58:17 3999

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除