自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(61)
  • 资源 (1)
  • 收藏
  • 关注

原创 js Date toTimeString toLocalTimeString的区别

Date.parse(字符串时间,包含时区):可解析一个日期时间字符串,并返回 1970/1/1 午夜距离该日期时间的毫秒数new Date(utc时间的毫秒):Date对象new Date():根据本地时间获取utc时间,构建对象Date.toTimeString:把时间部分转化为字符串,显示本地时区相同,但格式不一定和本地一致Date.toLocalTimeString:和toTimeS

2017-10-20 17:47:35 12159 1

转载 剑指Offer(java版)

转载自:http://blog.csdn.net/houfeng30920/article/details/51337588面试题 2 :实现单例模式1. 饿汉式单例类public class SingletonClass {    private static final SingletonClass instance=new SingletonClass()

2017-04-13 21:28:42 1098

转载 atom markdown转换PDF 解决AssertionError: html-pdf: Failed to load PhantomJS module

atom编辑器markdown转换PDF解决AssertionError: html-pdf: Failed to load PhantomJS module. You have to set the path to the PhantomJS binary using ‘options.phantomPath’环境Windows10 atom 1. atom编辑器安装 2

2017-04-11 11:11:56 1718

原创 Centos6系统安装gpperfmon-cc-web监控

部分转载自:MangoCool  !!!商业版的Greenplum才能配合安装gpperfmon-cc-web,这次成功了!!!!推荐用gpadmin用户安装,遇到没有文件权限的问题,授予该用户相应权限。避免root安装,再逐文件授予权限给gpadmin。启用收集系统代理:1、首先用gpadmin用户登录:

2016-09-22 11:31:56 1073

转载 欢迎使用CSDN-markdown编辑器

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来,用它写博客,将会带来全新的体验哦:Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl

2016-09-12 19:04:31 362

转载 快捷使用netsh导出、导入windows网络配置

最简单使用:1 全部配置导出: netsh dump >c:\bak12.txt导入:netsh exec c:\bak12.txt2 只备份ip部分 netsh -c interface ip dump> c:\ipcfg.txt导入:netsh -f c:\ipcfg.txt

2016-09-12 19:03:35 3239

转载 IntelliJ 创建main函数快捷

今天偶然发现了IntelliJ中 创建main函数的快捷键,依次还有for循环,System.out.println();在编写代码的时候直接输入psv就会看到一个psvm的提示,此时点击tab键一个main方法就写好了。psvm 也就是public static void main的首字母。依次还有在方法体内键入for会有一个fori的提示,选中然后tab键,就会

2016-07-19 10:09:22 447

原创 Centos6系统安装gpperfmon-cc-web监控

部分转载自:MangoCool  之前集群安装的开源版的Greenplum,在安装gpperfmon-cc-web时候,遇到的问题始终解决不了,于是就暂时放弃了安装。后来从pivotal公司工程师那里得知,只有商业版的Greenplum才能配合安装gpperfmon-cc-web,这次成功了!启用收集系统代理:1、首先用gpadmin用户登录:?

2016-07-15 00:18:56 2249 2

原创 nohup 和 &

(nohup)命令他后台运行, 即使ssh中断也可以运行, (&)让你在输入完这行命令后, 继续出现 '>' 让你输入其他命令

2016-06-07 16:40:17 404

原创 oralce命令

登陆:    sqlplus /nolog;    connect / as sysdba;    #普通用户登陆:connect scott/123456启动数据库和实例:startup;查看数据库名SQL> select name from v$database;SQL> desc v$database;查

2016-06-01 10:14:57 363

转载 Centos下修改hostname

之前安装Centos时候,没有怎么注意,将自己的名字设置为hostname,总感觉好别扭,很不习惯,如是就想把hostname改一下,用到hostname命令。首先用hostname命令查看当前的主机名,核对一下当前的主机名。修改hostname过程:(1)修改/etc/hosts文件,将包含当前的hostname改为新的hostname。我将shiwei改为rabbit。补充

2016-05-30 16:41:36 762

原创 论文word编辑教训

1. 不要把序号编辑到样式里,那样有时没法设置编号值2. 文档从始至终使用同一类型的编号列表,可以提前自己定义好

2016-05-27 17:08:37 403

转载 随手记一下,怕忘了~Matlab画图坐标轴取消科学计数法,

作者 :  谢翔Matlab画图数值太大或者太小就变成科学计数法了,很久以来一直没找到办法,今天突然心血来潮,随便一点,就找到改的方法了,记之。原来的图是这样的选择“Show Plot Tools and Dock Figure”在图中空白处点一下,再选择More Properies在弹出的窗口内往下使劲的拖,直到“XTickLa

2016-05-27 11:52:28 17756

原创 Map output statuses were bytes which exceeds spark.akka.frameSize

spark.akka.frameSize 是worker和driver通信的每块数据大小,控制Spark中通信消息的最大容量 (如 task 的输出结果),默认为10M。当处理大数据时,task 的输出可能会大于这个值,需要根据实际数据设置一个更高的值。如果是这个值不够大而产生的错误,可以从 worker的日志 中进行排查。通常 worker 上的任务失败后,master 的运行日志上出现”L

2016-05-17 15:27:43 2156

转载 nohup linux 运行不了

1. 文件需要绝对路径,或者./等,不能直接写文件名2. 在windows系统中编辑的.sh文件可能有不可见字符,所以在Linux系统下执行会报以上异常信息。解决:1)在windows下转换: 利用一些编辑器如UltraEdit或EditPlus等工具先将脚本编码转换,再放到Linux中执行。转换方式如下(UltraEdit):File-->Conversions-->DO

2016-05-16 15:27:20 4342

原创 geohash 精度

geohash base32编码精度

2016-04-26 11:56:01 3561

转载 github秘籍

本秘籍收录了一些Git和Github非常酷同时又少有人知的功能。灵感来自于Zach Holman在2012年Aloha Ruby Conference和2013年WDCNZ上所做的演讲:Git and GitHub Secrets(slides)和More Git and GitHub Secrets(slides)。目录GitHub忽略空白字符变化调整Tab字符所代表

2016-04-26 11:49:52 411

转载 Hbase 查询过程详解(基于hbase0.98版本后分析的)

1、查询第一步是根据rowkey获取所在region信息hbase0.96版本后删除了root 表,因为觉的目的是根据rroot表获取meta地址,过程是通过zookeeper获取root表地址,在根据root表记录meta表地址进行访问,还不如和zookeeper通讯一次。新增了namespace,详细见patch设计(https://issues.apache.org/jira/b

2016-04-25 23:12:30 1022

原创 个人hbase编程遇到的问题

1. cdh 1.0.0中的hbase包和 Apache中的不一样,导致在集群中跑jar会出现错误。  解决:http://blog.csdn.net/u012302488/article/details/512411292. hbase.zookeeper.quorum 要设置为 zookeeper 的leader ip,否则报错cannot find location

2016-04-25 15:59:23 425

转载 HBase技术介绍

很好地hbase介绍文章:http://www.searchtb.com/2011/01/understanding-hbase.html

2016-04-25 15:25:00 537

转载 hbase开发环境搭建及运行hbase小实例

转载请注明:云帆大数据学院 » hbase开发环境搭建及运行hbase小实例我们采用的是添加包的方式。      首先需要下载安装包:1.安装包下载可以通过官网下载:http://mirror.bit.edu.cn/apache/hbase/hbase-0.98.3/2.添加包(1)我们解压包解压之后,得到如下包(2)添加包添加包的操作如上图

2016-04-25 15:21:40 2171

转载 java.lang.NoSuchMethodError: org.apache.hadoop.hbase.HTableDescriptor.addFamily(Lorg/apache/hadoop/h

链接:http://www.chinahadoop.cn/classroom/5/thread/136fish • 06-27Hi,kevy,还是像我之前说的,排查问题要尽可能简化问题,先不要弄协处理器。我已经找到原因。cdh的这个hbase1.0.0跟apache的hbase1.0.0,有不一致的实现,导致基于apache的hbase编译的包(在maven中声明的hbas

2016-04-25 11:46:15 5680

转载 用Matlab把散点拟合成曲面图

最近遇到如何把一些散点拟合成曲面的问题,用了各种软件都没成功,原因是我对使用的软件都不熟悉,只限于很低端的使用。如tecplot360,excell,originPro。自认为tecplot很强大,能够拟合出非常漂亮的曲面来,但是弄了半天最终还是失败。于是在网上找到一位仁兄写的用matlab拟合,很简单方便,于是就是了一下,成功了。但是后继处理我不太会,还需要更加努力的去学习一下,在这就先把拟合过

2016-04-20 15:32:25 28088 3

转载 r语言 画图 参数

高级图形函数的常用选项高级图形函数有一些共同的选项,作为函数的可选参数(自变量)。例如:> plot(x)> plot(x, main="Graph of x")其中的main就是一个可选参数,用来指定图形的标题。没有此选项时图形就没有标题。这样的选项还有:add=T使函数向低级图形函数那样不是开始一个新图形而是在原图基础上添加。

2016-04-20 11:46:39 6987

转载 在secureCRT中解决hbase spark shell退格不能删除问题

在secureCRT中,点击【选项】【会话选项】【终端】【仿真】,右边的终端选择linux,在hbase shell中如输入出错,按住Ctrl+删除键(backspace) 即可删除!在secureCRT中,点击【选项】【会话选项】【终端】【仿真】,右边的终端选择linux,在hbase shell中如输入出错,按住Ctrl+删除键(backspace) 即可删除!

2016-04-18 19:39:55 734

原创 python 编码类型

'张俊'.encode('utf-8') #将文本字符串编码,转换为已编码的字节字符串类型

2016-04-18 18:45:05 442

转载 python pip 安装lxml,报错Unable to find vcvarsall.bat,(windows)

作者:深海鱼链接:http://www.zhihu.com/question/26857761/answer/69754633来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。1. 安装wheel,命令行运行:pip install wheel2.在这里下载对应的.whl文件,注意别改文件名!http://www.lfd.u

2016-04-18 12:03:45 1557

原创 windows python pip

python -m pip install requests使用“pip”命令,安装request包

2016-04-18 11:49:37 270

转载 IntelliJ IDEA手工安装插件方法

以IntelliJ IDEA 11.0.1安装python为例: (1)下载python插件地址:http://plugins.intellij.net/plugin/?id=631 其它插件下载,进入setting > plugins > browse repositorits 搜索你要下载的插件名称,右侧可以找到下载地址。 (2)复制插件安装目录:把下载的插件复制到

2016-04-18 10:58:54 1592

原创 Hbase学习小记

如果MapReduce作业需要访问Hbase,请禁用。>疑问: 1. p74

2016-04-15 17:12:40 352

转载 批量在EXCEL中为字符串添加标点符号 双引号

关键在于理解EXCEL中(&) 运算符的用法。即:使用与号 (&) 运算符以将多个单元格中的文本(例如名字和姓氏)合并到一个单元格中。相当于函数CONCATENATE(),但要更加灵活。例:添加双引号在B1单元格中输入“=""""&A1&""""”, 其中EXCEL规定,一对双引号""为文本定界符,而两对双引号则相当于外面两个双引号为文本界定符,里面两个双引号相当于一个

2016-04-10 11:54:22 23159 1

原创 intellj配置spark源码 attach

1.选中spark函数,ctrl+左单击看源码,点右上角,attach source code 2.下载https://github.com/apache/spark,解压后,从attach source code 弹出框内选择该文件即可

2016-04-10 10:42:44 596

转载 Windows平台下sbt的安装设置

首先到http://www.scala-sbt.org/release/docs/Getting-Started/Setup.html下载windows的sbt包,zip,tar.gz都行。将下载的包解压到你指定的目录,我一般是解压到d:\dev\sbt目录,d:\dev下是日常工作中所用到的开发工具软件,比如eclipse、jdk、maven等等。Windows的sbt包解压后,

2016-04-09 23:34:59 787

转载 spark shell ,在Windows上build Spark

在本机(Windows 8)上安装spark玩一玩,Spark的Quick Start上没有指明具体步骤,自己Build好了之后把步骤记录一下。首先,到Spark的官网上下载Spark的压缩包,然后解压缩到本地文件夹。我下的是Spark 1.1.0,目前最新的release,链接spark-1.1.0.tgz。按照文档上运行bin/spark-shell,会提示找不到所

2016-04-09 23:32:56 1858

转载 Attaching sources in IntelliJ IDEA for scala project 源码

转发链接:http://stackoverflow.com/questions/13520532/attaching-sources-in-intellij-idea-for-scala-projectFirst download source code :1.) Click on this link : http://www.scala-lang.org/download/all

2016-04-06 09:24:45 726

转载 copytoarray scala

scala> val s = Array('a', 'b', 'c')s: Array[Char] = Array(a, b, c)scala> var xs : Array[Char] = new Array(10)xs: Array[Char] = Array(?, ?, ?, ?, ?, ?, ?, ?, ?, ?)scala> s.copyToArray(xs, 1, 2)

2016-03-30 10:44:51 1550

原创 跑spark作业,众多版本jar包管理

1.jar名命名为main class名,2.记录相关输入输出文件及格式,3.记录作业号4.用web页面中的kill,这样会保存跑作业的情况,命令行中ctrl+c则不会保存

2016-03-18 11:31:27 759

原创 hadoop的log日志查错

1.stderrhttp://datanode31:8042/node/containerlogs/container_1457675328277_0208_01_000002/***/stderr?start=0即可转到相应datanode上查错。2. kill3.warn

2016-03-16 20:58:03 2481

原创 spark编程遇到的问题

问题1:16/03/14 15:22:24 WARN yarn.YarnAllocator: Container killed by YARN for exceeding memory limits. 17.0 GB of 17 GB physical memory used. Consider boosting spark.yarn.executor.memoryOverhead.  解决:

2016-03-14 15:56:47 5069 1

转载 Vector与ArrayList、Hashtable和HashMap、ArrayList和LinkedList区别

在写java的时候,基本上都喜欢用arraylist,甚至我都不知道有个vector的存在。查了一下发现又是线程安全问题。。。咋个线程安全天天围着我转呢。。。多得阿里巴巴,让我开始认识java的所谓线程安全问题。the following is from:http://blessed24.javaeye.com/blog/7513361. Vector & ArrayList 

2016-03-08 10:55:58 358

主成分分析法的原理应用及计算步骤

主成分分析法的原理应用及计算步骤

2017-03-14

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除