BeautifulGrils-CSDN博客

原创 eclipse生成c/c++动态库so

eclipse cdt 生成c/c++动态库1、“file”-》“new”-》“C/C++ project”->"C++ managed Build" -> "shared LIbrary" ->"Empty Project" ->"linux gcc" ->“finish”...

2018-04-10 13:50:49 1938

原创 Java API 读写 hdfs分布式文件系统（创建目录、读文件、写文件）

Java API 读写 hdfs 操作一、概述操作hdfs分布式文件系统的类为FileSystem对象 1、创建文件夹（递归创建）：fs. mkdirs() 2、写文件： fs.create（new Path()），返回FSDataOutputStream对象 3、读文件： fs.open(new Path()) ...

2018-04-03 16:16:59 8676

原创物理cpu与逻辑cpu概述

物理cpu与逻辑cpu概述（本博客属于转载部分内容：主要学习目的用于大数据平台Hadoop之yarn资源调度的配置）一、yarn资源调度器中主要的资源分类 1、memory（内存） 2、cpu（逻辑cpu）配置属性： yarn.nodemanager.res...

2018-04-03 10:37:06 28976 8

原创 C++ 拼接String字符串

C++拼接String字符串#include <iostream>#include <string>#include <sstream>using namespace std;int main(){ testFirst(); testSecond(); testThr(); retur...

2018-03-30 15:22:55 5890

原创 Linux环境下开发C++项目-配置Eclipse CDT 中C++项目支持c++11特性

Linux环境下开发C++项目-配置Eclipse CDT 中C++项目支持c++11特性一、写本博客目的： 1、使用c++11中一些新特性进行编程，方便快捷 2、如使用to_string()方法对c++各种数据类型转换为string类型，方便快捷；省去了以前在开发中使用ostringstream流进行转换的麻烦，并且使用流转化会有损失精度问题（float类型的数据会截断小数...

2018-03-28 10:14:56 1069

原创 C++在linux环境下获取毫秒、微妙级别时间

C++在linux环境下获取毫秒、微妙级别时间一、时间单位简介： 1秒 = 1000毫秒 1秒 = 1000000微秒 1秒 = 1000000000纳秒二、简介： C++中需要获取当前的时间的秒数和微秒数，需要用到gettimeofday（）函数，该函数需要引入的头文件是 “sys/time.h ”。函数说明int gett...

2018-03-27 13:56:09 8954

原创 Linux之命令详解-获取文本指定位置内容

Linux之命令详解-获取文本指定位置内容1、查找ifconfig中的本地ip地址： ifconfig |tail -9 | awk 'NR==2 {split($2,arr,":");print arr[2]}'2、获取文本中获取倒数第三行、第一列数据的内容： cat data.txt |tail -3 | awk 'NR==1 {split($1,arr,":");pri...

2018-03-20 18:32:26 5393

原创深入解析Java垃圾回收机制过程

深入解析Java垃圾回收机制垃圾收集器通常会帮我们在后台自动进行垃圾回收，关于具体的回收过程只要有以下这些步骤Step 1: Marking 标记第一步就是标记，也就是垃圾收集器会找出那些需要回收的对象所在的内存和不需要回收的对象所在的内存，并把它们标记出来，简单的说，也就是先找出垃圾在哪所有堆中的对象都会被扫描一遍，以此来确定回收的对象，所以这通常会是一个相对比较耗时的过程Step 2:...

2018-03-20 16:42:09 341

原创 linux环境下安装protobuf详解

一、Protocol Buffers概述：Protocol Buffers 是一种轻便高效的结构化数据存储格式，可以用于结构化数据串行化，或者说序列化。它很适合做数据存储或 RPC 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Python 三种语言的 API。二、Protocol Buffers安装：...

2016-10-10 10:14:12 9315 1

Hbase的安装与配置 1、前提：要有装好的hdfs分布式文件系统和zookeeper集群 2、各台linux机器上传hbase安装包：hbase-0.98.12.1-hadoop2-bin.tar.gz 3、解压jar包：tar -zxvf hbase-0.98.12.1-hadoop2-bin.tar.gz 4、把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下： cd root/hadoop/etc/hadoop scp -r hdfs-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ scp -r core-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ 4、配置hbase集群，要修改3个文件（首先zk集群已经安装好了） 5、修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_xxx (1)、告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false 6、修改vim hbase-site.xml <property> <name>hbase.rootdir</name> <value>hdfs://namenade/hbase</value>//this is your real nodename. </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/opt/zookeeper</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>node11,node12,node13</value> </property> 7、修改vim regionservers （指定regionserver） Node11 node12 node13 8、指定 standby 的hbase的副节点，注意：该文件不存在，需要创建 vim backup-masters Node12 9、拷贝hbase到其他节点或机器 Cd /root/hbase-0.98.12.1-hadoop2 scp -r conf node12:/root/hbase-0.98.12.1-hadoop2/ scp -r conf node13:/root/hbase-0.98.12.1-hadoop2/ 10、设置私钥并同步时间。 11、启动所有的hbase （1）、分别启动zk /home/zookeeper-xxx/bin/./zkServer.sh start （2）、启动hdfs集群 /root/hadoop/sbin/./start-dfs.sh （3）、启动hbase，在主节点上运行： /root/hbase-0.98.12.1-hadoop2/bin/./start-hbase.sh 12、通过浏览器访问hbase管理页面 Node11:60010 Node12:60010 Node11:50070 Node12:50070 13、为保证集群的可靠性，要启动多个HMaster hbase-daemon.sh start master

2015-11-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

BeautifulGrils的博客