自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(67)
  • 资源 (7)
  • 收藏
  • 关注

原创 Hadoop技巧(01):插件,终端权限

阅读目录序HDFS权限系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序     在hadoop开发或者使用中,可能会使用到一些插件或3方软件,比如:Eclipse的Hadoop插件,ETL的Kettle。那么就存在一个h

2016-02-29 13:55:06 312

原创 从零自学Hadoop(18):Hive的CLI和JDBC

阅读目录序Hive CLI(old CLI)Beeline CLI(new CLI)JDBCDemo下载系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序     上一篇,我们对hive的数据导出,以及集群Hi

2016-02-04 08:49:44 572

原创 [置顶]【源】从零自学Hadoop系列索引

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink【源】从零自学Hadoop(01):认识Hadoop【源】从零自学Hadoop(02):环境准备【源】从零自学Hadoop(03):Linux准备上【源】从零自学Hadoop(04):Linux准备下【源】从

2016-01-24 15:29:39 459

原创 【源】从零自学Hadoop(17):Hive数据导入导出,集群数据迁移下

阅读目录序将查询的结果写入文件系统集群数据迁移一集群数据迁移二系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序     上一篇,我们介绍了Hive的数据多种方式导入,这样我们的Hive就有了数据来源了,但有时候我

2016-01-24 15:29:34 351

原创 【源】从零自学Hadoop(16):Hive数据导入导出,集群数据迁移上

阅读目录序导入文件到Hive将其他表的查询结果导入表动态分区插入将SQL语句的值插入到表中模拟数据文件下载系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序     上一篇,我们介绍了Hive的表操作做了简

2016-01-24 15:29:29 412

原创 【源】从零自学Hadoop(15):Hive表操作

阅读目录序创建表查看表修改表删除表系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序     上一篇,我们介绍了Hive和对其进行了安装,下面我们就初步的使用hive进行讲解。   下面我们开始介绍hive

2016-01-24 15:29:25 231

原创 【源】从零自学Hadoop(14):Hive介绍及安装

阅读目录序介绍安装系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  本系列已经有一个多月没更新了,期间涉及到找相关对应的工作,所幸的事,得到了几个offer,后来综合考虑来到了目前这家工作。希望在接下来的时间里,能

2016-01-24 15:29:20 262

原创 【源】从零自学Hadoop(13):Hadoop命令下

阅读目录序MapReduce CommandsUser CommandsAdministration CommandsYARN CommandsUser CommandsAdministration Commands引用系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(

2016-01-24 15:29:16 216

原创 【源】从零自学Hadoop(12):Hadoop命令中

阅读目录序HDFS CommandsUser CommandsAdministration CommandsDebug Commands引用系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  上一篇,我们

2016-01-24 15:29:11 267

原创 【源】从零自学Hadoop(11):Hadoop命令上

阅读目录序概述Hadoop Common CommandsUser CommandsAdministration CommandsFile System Shell引用系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink

2016-01-24 15:29:06 224

原创 【源】从零自学Hadoop(10):Hadoop1.x与Hadoop2.x

阅读目录序里程碑Hadoop1.x与Hadoop2.x系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  上一篇,我们使用Maven构建了我的MapReduce程序,并且成功的运行了Job。那么大家可能会觉得为什么要

2016-01-24 15:29:01 218

原创 【源】从零自学Hadoop(09):使用Maven构建Hadoop工程

阅读目录序Maven安装构建示例下载系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  上一篇,我们编写了第一个MapReduce,并且成功的运行了Job,Hadoop1.x是通过ant来管理工程的,后来到了

2016-01-24 15:28:57 260

原创 【源】从零自学Hadoop(08):第一个MapReduce

阅读目录序数据准备wordcountYarn新建MapReduce示例下载系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  上一篇,我们的Eclipse插件搞定,那开始我们的MapReduce之旅。

2016-01-24 15:28:54 217

原创 【源】从零自学Hadoop(07):Eclipse插件

阅读目录序EclipseEclipse插件新建插件项目系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  上一篇,我们的第一个Cluster搞定了,按平常的搭建集群来说,应该是至少3个DataNode的,应为默认

2016-01-24 15:28:50 266

原创 【源】从零自学Hadoop(06):集群搭建

阅读目录序集群搭建监控系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  上一篇,我们把Ambari的环境基本搭建好了,那么我们趁热打铁,打造我们的第一个HDP集群,这样,离我们下一步就越来越近了,在安装中还是会碰到

2016-01-24 15:28:45 247

原创 【源】从零自学Hadoop(05):Ambari

阅读目录序引入背景Ambari介绍在线安装系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  这里我们选择Ambari作为HDP的生产管理工具,如果我们一个个去配置HDP,很浪费时间,也很没有效率,成功率。生产环

2016-01-24 15:28:40 231

原创 【源】从零自学Hadoop(04):Linux准备下

阅读目录序搭建环境系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  我们已经准备好了网络访问,防火墙,Hosts,SSH等设置,下面我们根据上篇中的检查列表处理下剩下的内容,包括yum,时间同步,本地仓库等。  我

2016-01-24 15:28:36 195

原创 【源】从零自学Hadoop(03):Linux准备上

阅读目录序检查列表常用Linux命令搭建环境系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 序  在上一步骤,我们已经准备了4台虚拟机,分别是H30,H31,H32,H33。其中H30为我们的Ambari服务器,H

2016-01-24 15:28:31 232

原创 【源】从零自学Hadoop(02):环境准备

阅读目录起因虚拟机Linux系统安装系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 起因  我们对Hadoop有了初步的认知,得有NameNode,DataNode,NameNode和DataNode可以在一个机器

2016-01-24 15:28:27 232

原创 【源】从零自学Hadoop(01):认识Hadoop

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录序Hadoop项目起源优点核心架构开源实现子项目HDFS流程图系列索引本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。

2016-01-24 15:28:23 386

原创 【源】Centos修改DNS重启或者重启network服务后丢失问题处理

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录介绍起因处理GitHub本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink

2016-01-24 15:28:18 397

原创 初次体验VS2015正式版,安装详细过程。

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录介绍安装其他本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink 

2016-01-24 15:28:14 755

原创 多年前写的文本框扩展控件(有ValueChanging事件等),已放github

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录介绍起因代码使用GitHub本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,Source

2016-01-24 15:28:09 402

原创 多年前写的DataTable与实体类的转换,已放github

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录介绍起因代码UnitTestGitHub本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,

2016-01-24 15:28:05 482

原创 我是怎么处理其他网站恶意爬虫博客园的,希望大家喜欢(第二弹)

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录介绍现象版权处理升级本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink

2016-01-24 15:28:00 285

原创 不同Framework下StringBuilder和String的性能对比,及不同Framework性能比(附Demo)

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto)写的,SourceLink阅读目录介绍环境搭建测试用例MSDN说明我的理解Demo下载本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。文章是哥(mephisto

2016-01-24 15:27:56 185

原创 我是怎么处理其他网站恶意爬虫博客园的,希望大家喜欢

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。阅读目录介绍现象版权处理本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。 介绍  今天才写了个随笔,然后不到一个小时就有个网站进行了爬虫,呵呵好速度,而已百度的搜索排名比博客园还高,不过我加了防伪处理,大家看

2016-01-24 15:27:51 414

原创 Windows服务调试小结(附Demo)

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。阅读目录介绍搭建环境调试方式Demo下载本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。 介绍  有时候不可避免的要建些Windows服务。既然写代码,就需要调试,由于这个东西搞的人不多,每个人调试的方法

2016-01-24 15:27:47 295

原创 WCF绑定和行为在普通应用和SilverLight应用一些对比

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。阅读目录介绍绑定普通应用和SilverLight应用区别本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。 介绍  WCF是构建和运行互联系统的一系列技术的总称,它是建立在Web Service架构上的一个全新

2016-01-24 15:27:42 271

原创 用批处理来自动化项目编译及部署(附Demo)

阅读目录本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。介绍详细处理结论Demo下载 介绍  一个项目从立项开始,可能就已经根据公司的配置模板将目录,文档结构定义出来。有动态库,也有静态库,在没有专门的CMO的时候,往往组长,若干开发人员承担版本发布的工作。次工作即枯燥,又容易出错,那么怎么样

2016-01-24 15:27:37 1996

原创 .NET序列化的一点技巧(附Demo)

阅读目录介绍详细处理结论Demo下载 介绍  序列化是将对象状态转换为可保持或传输的形式的过程。序列化的补集是反序列化,后者将流转换为对象。这两个过程一起保证数据易于存储和传输。.NET Framework 提供了两个序列化技术:二进制序列化保持类型保真,这对于多次调用应用程序时保持对象状态非常有用。例如,通过将对象序列化到剪贴板,可在不同的

2016-01-24 15:27:33 325

原创 XAML中的特殊符号几空白字符处理

阅读目录介绍详细处理Demo下载 介绍  XAML标记语言是基于xml的,所以很多xml中的特殊符号在XAML也是需要处理的。 详细(取自msdn)字符Entity注释&(“and”符)&必须既用于特性值,又用于元素的内容。>(大于号字符)

2016-01-24 15:27:28 588

原创 Managed DirectX中的DirectShow应用(简单Demo及源码)

阅读目录介绍准备工作环境搭建简单Demo显示效果其他Demo下载 介绍  DirectX是Microsoft开发的基于Windows平台的一组API,它是为高速的实时动画渲染、交互式音乐和环境音效等高要求应用开发服务的。   而Managed DirectX 实质上是对DirectX进行了一个轻量级的封装,Microsoft在2003年10月初发

2016-01-24 15:27:24 266

原创 含有SilverLight项目的代码重用

很多时候,我们工程中不只是有SilverLight项目,然而我们想把其他的项目中的工具类,或者实体类复用到SilverLight项目中时,会发现SilverLight项目无法使用。这是个很普遍的现象。  在看GalaSoft.MvvmLight 这个开源项目的时候,我们会发现他有很多共用的类,下面就上图来看下高人们怎么处理的。    处理        

2016-01-24 15:27:21 330

原创 Oracle Data Provider for .NET

官方地址:http://www.oracle.com/technetwork/topics/dotnet/index-085163.html  终于有正式版了。不用装客户端,又小,确实好。

2016-01-24 15:27:17 294

原创 IP地址(IPv4)/IPv6地址的正则表达式

原地址:http://pfeishao.blog.163.com/blog/static/18162337020112113130453/Pv4地址正则表达式:^((25[0-5]|2[0-4]\d|[01]?\d\d?)\.){3}(25[0-5]|2[0-4]\d|[01]?\d\d?)$测试环境:Javascript/.Net/C++/JAVA特点:匹配IPv4地址IPv6地址正则表达式

2016-01-24 15:27:12 1847 1

原创 Silverlight 调用自托管的wcf 报跨域异常的处理

Sileverlight很多时候需要通过wcf和后台,程序进行交互。如果 iis was托管还好,极端的遇到自托管的程序,console,windowsservice,winform,wpf等,就会出现跨域问题。网上很多解决方式。俺在以下博文基础上又总结了点。  以下博文可以先学习下:    http://blog.csdn.net/boyhxy/article/details/52241

2016-01-24 15:27:07 239

原创 关于程序中使用相对路径的小技巧

本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,并给出原文链接,谢谢合作。  很多程序里使用了相对路径,当然,有时候可能不起作用,找不到相对路径。这得从快捷方式说起。快捷方式里有个“起始位置”  这个“起始位置”就是程序运行里的相对路径。直接从程序启动,该程序当前路径就是相对路径。 本文版权归mephisto和博客园共有,欢迎转载,但须保留此段声明,

2016-01-24 15:27:03 612

原创 随机生成数

public string RandomNum(int n)    {        string strchar = "0,1,2,3,4,5,6,7,8,9,a,b,c,d,e,f,g,h,i,j,k,l,m,n,o,p,q,r,s,t,u,v,w,x,y,z";        string[] VcArray = strchar.Split(',');        stri

2016-01-24 15:26:58 250

原创 电话号码正则表达式

电话号码正则表达式在做项目时常常用到判断电话号码的正则表达式,写了一个,可验证如下27种格式:1108888888888888888888888-12388888888-234350871-8888888-123023-88888888-2343586-0871-8888888-1238888888_12388888888_234350871_8888888_123023_888888

2016-01-24 15:26:54 423

Hibernate4.1.1中文PDF版

Hibernate4.1.1中文PDF版,有入门指南,开发者指南,核心参考手册。

2017-11-05

Linux命令大全

Linux命令大全主要介绍linux命令,方便大家在工作中查找,提高效率。

2015-11-15

hadoop2.6手册

hadoop2.6手册,关于Hadoop 2.6版本的相关官方文档。

2015-11-07

《谁说菜鸟不会数据分析》

《谁说菜鸟不会数据分析(全彩)》内容简介:很多人看到数据分析就望而却步,担心门槛高,无法迈入数据分析的门槛。《谁说菜鸟不会数据分析(全彩)》在降低学习难度方面做了大量的尝试:基于通用的Excel工具,加上必知必会的数据分析概念,并且采用通俗易懂的讲解方式。《谁说菜鸟不会数据分析(全彩)》努力将数据分析写成像小说一样通俗易懂,使读者可以在无形之中学会数据分析。《谁说菜鸟不会数据分析(全彩)》按照数据分析工作的完整流程来讲解。全书共8章,分别讲解数据分析必知必会的知识、数据处理技巧、数据展现的技术、通过专业化的视角来提升图表之美、数据分析报告的撰写技能以及持续的修炼。 《谁说菜鸟不会数据分析(全彩)》形式活泼,内容丰富而且充实,让人有不断阅读下去的动力。读者完全可以把《谁说菜鸟不会数据分析(全彩)》当小说来阅读,跟随主人公小白,在Mr.林的指点下轻松掌握...

2015-11-07

领域驱动设计精简版

领域驱动设计是一种新的设计模式。 领域驱动设计是我们应该专注于用户所关心领域里的重要 问题的指导原则。我们的智慧应该用在理解这一领域上,和那个领 域的其他专家一起将它抽象成一个概念。这样,我们就可以应用这 个抽象出来的概念构造强大而灵活的软

2014-11-21

Dojo-1.9.chm

Dojo是个很成熟的重量级前端框架,但是在线的api看的速度太慢了,下一个离线的api可以提高生产率。

2014-11-21

批量执行Sql脚本工具(含代码)

批量执行多个sql脚本工具。 自己写的。 附有源码。

2011-11-15

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除