12 anyoneking

尚未进行身份认证

2010年了,毕业6年了!围绕在我周围的只有生活,生活。为了生活,努力!

等级
TA的排名 4k+

Hadoop集群中引入新DataNode节点

例如新增的节点ip为192.168.1.xxx在所有nn和dn节点上增加192.168.1.xxxdatanode-xxx的hosts在xxx上新建用户useraddhadoop-s/bin/bash-m并将其他dn上的.ssh中的所有文件拷贝到xxx上的/home/hadoop/.ssh路径下安装jdkapt-getinstallsun-ja

2013-04-16 09:25:10

博客搬家了!

各位兄弟姐妹们,我自己新建了一个博客。http://www.anyoneking.com。以后更新的一些文章都会提交到新的博客上。希望大家多多光临。csdn的博客也会持续更新。谢谢!

2012-08-27 09:21:04

hadoop namenode 数据恢复

在一次hadoop的重启过程中,重启失效,只能杀掉hadoop的namenode进程。再重启的时候,出现如下问题:2012-05-1815:17:35,313ERRORorg.apache.hadoop.hdfs.server.namenode.NameNode:java.lang.NullPointerExceptionatorg.apache.hadoop.hdfs

2012-07-02 12:58:45

hadoop+hive多用户访问支持

在我们hadoop+hive的使用场景中,一般都是将hive部署在hadoop用户下。而如果多人需要访问的时候,只能通过hive启动server的方式来处理。而不能通过客户端的方式来处理。如果将hive程序部署到非hadoop用户下,会出现如下问题:/home/songwei/hive-0.7.0-bin/bin/hive-config.sh:line21:export:`=/

2012-06-25 17:51:31

hive external table partition 关联HDFS数据

EXTERNAL外部表在建表的时候制定一个指向实际数据的路径(LOCATION)hive创建内部表时,会将数据移动到数据仓库指向的路径;         创建外部表时,仅记录数据所在的路径,不对数据的位置做任何改变,在删除表的时候:   内部表的元数据和数据会被一起删除,   而外部表只删除元数据,不删除数据。HDFS中已经导入了城市日期数据文件。/u

2011-10-26 10:48:32

Hadoop+hive安装

以下IP为1.1.1.1请替换为自己机器的ip。所有ip的配置尽量使用域名。配置/etc/hosts来使用。下载hadoop安装包,解压缩进入conf目录:修改conf/core-site.xml          hadoop.tmp.dir           /home/songwei/hadoop/tmp             f

2011-10-26 09:03:10

八皇后算法-python

<br/>#encoding=utf8'''八皇后问题:每一行,每一列,每一个斜线列只能有一个皇后。'''size=8queuePosition={}allCount=0defgenerateQueuePosition(n):globalallCountifn>=size:returnFalseyList=getFreeGrid(n)#获取当前皇后可以放入的y轴坐标列表fory

2011-03-28 18:28:00

使用二叉树排序

<br/>#encoding=utf8'''B+树中的节点。其中value为当前节点值。lNode为左孩子节点,rNode为右孩子节点,count为重复数量'''classTNode(object):def__init__(self,value,lnode=None,rnode=None,count=1):self.value=valueself.lNode=lnodeself.rNode=rn

2011-03-24 10:33:00

项目管理修炼之道-----1-3章读书笔记

一、           启动项目<br/>必须要多做一点组织和规划的工作,才能为项目的成功夺保留一份希望。1.     定义项目和项目经理1.1项目<br/>一个独特的任务或是系统化的流程,其目的是创建新的产品或服务,产品和服务交付完成标志着项目的结束。项目都有风险,并且受制于有限的资源。<br/>项目的核心是什么?是产品。1.2产品<br/>项目产生的一系列可交付物。1.3项目经理<br/>负责向团队清晰说明完成的含义,并带领团队完成项目的人。<br/>完成是指产品符合组织对这个产品的要

2011-03-24 08:32:00

直接排序算法python实现

<br/>一直对算法不是很上心,今天跟同事聊天,了解到算法很吃香呀!<br/>刚开始学习python,就一个一个的算法来吧!希望有时间能坚持下去!<br/>大家别拍砖!我只是留个笔记在这里。<br/>直接排序法<br/>直接选择排序法的算法是这样的,首先选出前n个元素中的最小(大)者,如果这个最小(大)者不是第1个元素,<br/>则与第1个元素交换,然后以同样的方法对付后n-1个元素(分治),直到处理的元素只剩一个,即得到有序序列。<br/>它和冒泡排序法很类似,不同的是冒泡排序法进行了更多

2011-03-23 18:21:00

django in action

h1.安装tarxzvfDjango-*.tar.gzcdDjango-/*sudopythonsetup.pyinstall完成后,利用如下代码来查看安装版本。{code}pythonimportdjangodjango.VERSION{code}h1.框架介绍django提供了一套快速使用python开发web项目的技术框架。该框架是MVC模式。Model层是数据库层,负责对底层数据库的CRUD,支

2011-03-22 08:49:00

【每天算法4】编写一个截取字符串的函数,输入为一个字符串和字节数,输出为按字节截取的字符串。

题目:编写一个截取字符串的函数,输入为一个字符串和字节数,输出为按字节截取的字符串。 但是要保证汉字不被截半个,如“我ABC”4,应该截为“我AB”,输入“我ABC汉DEF”,6,应该输出为“我ABC”而不是“我ABC+汉的半个”。 packagecom.sw.suanfa.first.ten;/***编写一个截取字符串的函数,输入为一个字符串和字节数,输出为按字节

2010-03-26 10:46:00

【每天算法3】:用java语言实现,二维Vector的排序组合

题目:有一个二维Vector,每个元都是字符串(或者其他对象),如下面这个三行,每行元素不固定的二维Vector V。                     A、B、C、D                     H、I、J、K、M                     X、Y、Z     求出满足以下条件的所有VectorD(一定是所有可能的情况):

2010-03-25 14:02:00

【每天算法2】:用java语言实现,一个组数:122345这6个数,打印出它所有可能的组合;要求4不能在第3位,3和5不能相连。

一个组数:122345这6个数,打印出它所有可能的组合;要求4不能在第3位,3和5不能相连。我在实现这个算法的时候,按照len不固定的方式,利用递归方式进行处理。感觉我的算法复杂度还是挺高的。过程中,不断的创建新的数组列别。如果你有更好的算法,请发上来,可以好好学习下。  packagecom.sw.suanfa.first.ten;importjava.uti

2010-03-24 12:40:00

【每天算法1】:用java 语言实现,输入一个数,就相应地输出的几维数组

想要换工作了,但是感觉自己还没有准备好,毕竟笔试面试还是需要多积累经验的。多做做题总没有坏处。希望自己能坚持每天一个算法。题目也不一定难,主要是希望自己能对各个方面都有所了解,为了以后找个好的工作奠定些小小的基础。题目都是从baidu上随便找的,找到哪个算哪个,尽量自己去完成,如果是自己没有完成的,而是看别人的解答,我会标注出来的。毕竟是别人的劳动所得。废话不多说了,希望自己坚持吧。 

2010-03-23 11:32:00

遍历一次字符串,选择出在该字符串中出现次数最多的字符及其出现次数(Java)

上班的时候,听一个同事说起了百度的一个面试题。“遍历一次字符串,选择出在该字符串中出现次数最多的字符及其出现次数”比如说当前的字符串为"abc2d2e2fg2e1111bc11yh22fd2a2ai222eur张灯结彩",则我应得到的是字符2,出现次数11。特定需求,只通过一次遍历来获取。也就是说,只能循环字符串一次,大概看了一下,就开始入手了。于是写下了下面的代码: public

2010-01-19 15:26:00

Spring Bean Scope 有状态的Bean 无状态的Bean

 在Spring的Bean配置中,存在这样两种情况: 当然,scope的值不止这两种,还包括了request,session等。但用的最多的还是singleton单态,prototype多态。singleton表示该bean全局只有一个实例,Spring中bean的scope默认也是singleton.prototype表示该bean在每次被注入的时候,都要重新创

2010-01-12 16:54:00

HttpURLConnection简单用法

HttpURLConnection为javaAPI提供的一种Rest访问的方式。其支持对Post,Delete,Get,Put等方式的访问。以下为对于HttpURLConnection对Post等方式访问的一段代码。packagecom.sw.study.urlConnection;importjava.io.BufferedReader;importjava.io.In

2010-01-11 21:43:00

Ibaits返回结果集【转载】

object别名映射->实体类:resultClass   select     IDasid,     TYPEastype,     DESCRasdescr   fromAPP_LOG   whereID=#id#Listlist=sqlMapper.queryForList("

2009-10-13 14:06:00

HMTL中文件标签上传文件错误的问题(input type=file)

在普通的web项目中,经常会有文件上传功能,一般情况下都用的是标签,虽然比较丑,但是安全性不错。有的公司也会自己开发Applet来实现文件处理等。方法多的是,挑一种最简单的吧。 struts2+spring+ibatis的工程。在工程中引入后。显示的时候,为一个输入框,一个浏览按钮。在IE中,该输入框是允许输入字符的,如果输入字符,不通过其浏览按钮来选择文件,则在提交表单的时候,

2009-07-09 16:33:00

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!