自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

龙神add-走向数据架构师的路

要想人前显贵,必定人后受罪

  • 博客(415)
  • 资源 (19)
  • 收藏
  • 关注

转载 hadoop中mapred.tasktracker.map.tasks.maximum的设置

目前,我们邮件的一部分log已经迁移到Hadoop集群上并由Hive来执行相关的查询hadoop中默认的mapred.tasktracker.map.tasks.maximum设置是2也即:每一个tasktracker同时运行的map任务数为2照此默认设置,查询80天某用户的操作日志,耗时5mins, 45sec经过测试,发现将mapred.tasktracker.map.ta...

2018-02-15 10:46:28 1718

转载 Hbase表数据的导入和导出

转载自:http://blog.csdn.net/javajxz008/article/details/61173213Hbase没有提供类似于hive根据已有表的建表建表语句,如在hive中创建一个和已有表表结构完全一样的表可执行SQL:create table tbl_test1 like tbl_test,在hbase只能采用笨办法,将其表结构拷贝出来建表。如:

2018-01-23 16:31:14 873

转载 python中的jieba分词使用手册

python jieba 中文分词

2018-01-02 14:28:31 1069

原创 rdd中赋值操作例子

rdd中赋值

2017-12-06 13:20:55 1829

原创 hbase版本对应的hadoop版本

hbase版本对应的hadoop版本

2017-11-08 17:37:26 1875

原创 龙哥,流泪,尊严

成龙,男人的眼泪和尊严有关

2017-11-02 11:57:46 568

原创 打印rdd

spark中,把rdd打印输出到终端

2017-10-13 11:15:30 650

原创 中文分词词性对照表

中文分词词性对照

2017-09-12 10:51:39 1220

原创 CentOS修改ulimit(最大进程数和最大文件打开数)

CentOS修改ulimit 打开最大文件数,最大进程数

2017-08-29 21:38:30 1984

转载 这些都是曾经被人瞧不起,现在却让人高攀不起的5位明星!!

这些都是曾经被人瞧不起,现在却让人高攀不起的5位明星!!

2017-08-19 22:58:20 788

原创 环境变量path与classpath区别

path与classpath,JAVA_HOME的区别

2017-08-19 15:31:25 616

转载 从“周星星”到“星仔”再到“星爷”做人如果没有梦想,和咸鱼又有什么分别?

没有梦想,和咸鱼有什么区别

2017-08-19 15:09:44 760

转载 Hadoop日志存放路径详解

hadoop日志存放路径

2017-08-18 21:30:38 2748

转载 spark常见问题汇总

spark常见问题汇总

2017-08-17 21:07:08 2472

原创 序列化与反序列化

序列化与反序列化

2017-08-17 15:44:33 240

转载 flume与kafka

flume和kafka的比较

2017-08-10 12:35:12 356

转载 周星驰,你别这么贬低自己好嘛,你已经很努力了!

周星驰努力做自己!

2017-08-02 16:09:54 1240

原创 倒排索引和正排索引

倒排索引和正排索引区别

2017-08-01 23:42:11 2952

转载 搜索引擎之正排索引

搜索引擎中正排索引介绍

2017-08-01 10:48:47 446

原创 storm框架跑wordcount

storm框架下跑wordcount

2017-07-31 19:00:34 305

原创 Python集合(set)类型的操作

python set操作

2017-07-24 18:05:13 436

原创 hdfs设置回收站

hdfs通过设置trash回收站来恢复误删文件

2017-07-14 11:58:58 534

原创 python函数之join

python 连接字符串函数:join

2017-07-11 09:23:43 447

原创 hadoop streaming 按字段排序与输出分割详解

hadoop streaming 按字段排序与输出分割详解

2017-07-07 10:58:01 708

转载 MapReduce实现两表的Join--原理及python和java代码实现

MapReduce实现两表的Join--原理及python和java代码实现

2017-07-07 10:52:50 1115

原创 hive join 数据倾斜 真实案例

hive join 数据倾斜 真实案例

2017-07-07 10:36:20 729

原创 Hadoop-Streaming实战经验及问题解决方法总结

Hadoop-Streaming实战经验及问题解决方法总结

2017-07-07 09:49:09 810

原创 HBase常用操作之namespace

HBase常用操作之namespace

2017-07-05 16:26:08 577

原创 查看python源码之jieba安装

jieba分词

2017-06-30 17:21:10 1835

原创 python 实现Hadoop的partitioner和二次排序

python 实现Hadoop的partitioner和二次排序

2017-06-30 11:15:25 1095

原创 python 运行 hadoop 2.0 mapreduce 程序

python 运行 hadoop 2.0 mapreduce 程序

2017-06-29 01:05:48 599

原创 设置linux下heartbeat服务开机启动

设置linux下heartbeat服务开机启动

2017-06-21 14:30:45 1063

原创 论述flume中batchSize,capacity,transactionCapacity参数之间的关系

论述flume中batchSize,capacity,transactionCapacity参数之间的关系

2017-06-20 22:46:01 12544

原创 eclipse新建web项目运行时出现The requested resource is not available异常

eclipse新建web项目运行时出现The requested resource is not available异常

2017-06-19 17:58:40 1639

原创 tomcat在eclipse中起动成功,主页却打不开

eclipse,tomcat配置,页面打不开

2017-06-19 17:20:47 1034 1

原创 周星驰成名前的故事

周星驰的成名路

2017-06-19 13:34:31 821

原创 虚拟机NAT模式设置连接外网

虚拟机nat模式连接外网

2017-06-12 17:01:29 1744

原创 克隆虚拟机

克隆虚拟机修改mac地址

2017-06-11 14:52:13 297

原创 我的编程竞赛之路 ——中国大学生计算机编程第一人楼天城访谈

我的编程竞赛之路 ——中国大学生计算机编程第一人楼天城访谈

2017-06-09 21:38:38 9191 1

原创 mysql执行外部sql文件的命令

mysql执行外部sql文件

2017-06-08 23:43:39 851

数据挖掘与商业技能完全解决方案sqlserver

数据挖掘与商业技能完全解决方案 sqlserver

2014-03-27

在线音乐网站

ssh整合框架开发,项目有三个,分别对应mysql数据库,sqlserver2000数据库与sqlserver2005数据库。

2013-06-05

mysql jar 驱动包

mysql驱动 jar包,直接在MyEclipse中就可以方便使用

2013-05-01

oracle-concepts10g 中英文对照 word格式

无论你是作为一个dba还是作为一个oralce的开发人员,oralce-concepts是你必须必备的一个概念手册。

2013-04-14

c#项目留言本

c#编写的留言板,还不错。适合初学者,分类清晰,详细,代码浅显易懂。

2013-03-29

rlwrap软件 linux下解决sqlplus不能后退的软件

rlwrap软件 内含安装txt 解决linux环境下sqlplus不能前进后退问题,方便在sqlplus环境下轻松解决输入问题。

2013-03-14

ocp上课文档

提供ocp考证必备的一套学习资料。题库必备,学习OCP,得到OCP证书不是梦想

2013-02-28

PL SQL Developer免安装版

下载后可以直接输入oracle用户和密码进行登录。

2013-02-23

在线考试系统

c#编写的在线考试系统,使用三层架构,DAO开发,对c#三层架构有兴趣的可以下载一下看一下,相信对你会有帮助!

2013-02-23

oracle学习手册

oracle 学习手册,综合了工作中的实例。会带给你真正的价值!

2013-01-24

JSP论坛系统

java web开发论坛系统,支持在线回复,管理员删除与管理帖子。

2013-01-24

问卷管理系统

Java web开发问卷管理系统,自己编写的。适合初学者

2013-01-24

java web开发简单留言板

简单易懂的java web应用的留言板小项目。

2013-01-23

操作系统第三版课件(汤晓丹版)

本课件包含整本书,很全。不需要买书的可以下载下来在电脑上看

2012-11-21

c#音乐播放器

自己做的音乐播放器,感觉功能不太齐全,但代码本人已经注释,浅显易懂。

2012-11-13

c++计算器系统

c++编写的计算器系统,代码简单易懂。适合初学者下载学习

2012-02-24

c#图书管理系统

c#编写的图书管理系统。。适合于初学者。。

2012-02-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除