自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(14)
  • 资源 (2)
  • 收藏
  • 关注

原创 大数据平台设计

大数据总介我们通常说的大数据,包括大数据本身和基于大数据的系统和技术。大数据的5V特点(IBM提出):Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)、Veracity(真实性)。而基于大数据技术的应用层级分商业智能,和平台解决方案两种。平台解决方案:偏技术层,基础层,解决数据处理,存储,清洗,收集,api提供,系统调度等操作商业智能:分析

2016-06-27 10:44:59 18332

原创 RobotFramework 接口自动化(一)

前言Robot Framework 是一款非常流行的自动化测试框架,今天,我们用它来进行接口自动化测试工作。在一个项目中,接口的稳定性大大优于gui,对接口自动化的投入是很值得的。1.RobotFramework 介绍官网 :http://robotframework.org/ 源码:https://github.com/robotframework/R

2015-07-26 17:48:52 3308 2

原创 架构相关

Java- 架构相关SOA    SOA架构的定义或特性面向服务层的架构, 松耦合,粗粒度,开放式架构SOA架构的组件分层  持久层,逻辑层,执行层,用户接口层  ,webservice 层(分布式架构)SOA架构的目的和现实意义保全或保护企业原来遗留下来的软件系统(数据),实现软件数据的无缝接轨,避免企业原有投资打水漂、数据需重复录入重复使用服务,

2013-10-07 08:54:15 559

原创 概要与详细设计

系统架构-概要设计:接口的设计环境的考虑,系统所在环境的特点,进行系统的设计参考 王三三 《概要设计》系统架构-详细设计:程序员完成,拿概要设计,先编码实现,然后写详细设计

2013-10-07 08:46:54 691

原创 设计数据库基本理念

Database-database数据库的一致性    (Hbase The Definitive Guide  P9)Consistency ModelStrict:The changes to the data are atomic and appear to take effect instantaneously. Thisis the highest form of c

2013-10-07 08:45:34 1282

原创 软件流程

提出需求初步需求挖掘,参照业界的技术实现,和本公司技术实力开会,风险评估通过,设计实现(解决)方案,带着方案,参加竞标竞标成功。现场需求挖掘,出详细需求规格说明书,需求确认,签字,需求变更需要控制,分级,级数根据时间在确定,级数过高则要收费。概要设计下达。项目经理制定计划编码开始

2013-10-07 08:43:11 598

原创 JAVA 框架

JAVA 框架》mina 框架通过nio 提供了抽象的,事件驱动的,异步的位于各种传输协议上的API(如TCP/IP 和 UDP/IP),包括nio , 客户和服务端 或者一个网络socket 库特点,非阻塞,事件驱动,支持批量数据传输,支持tcp ,udp;控制反转的设计模式(支持spring),自定义线程数量,回调方式完成http://blog.csdn.net/h

2013-10-07 08:36:01 474

原创 Hadoop 相关

》Hadoop 配置退出 安全模式bin/hadoop dfsadmin -safemode leave》HDFS 块式存储,里面取得

2013-10-07 08:35:59 478

原创 Linux相关

rpm -ivh xxx.rpm  安装rpmls -l  显示所有文件包括权限scp -r xxx root@tom2:xxxx  复制到某个节点中mv -f  xxx xxx  移动文件cp -rf xxx  xxx  复制文件夹  f 强制  r递归cat xxxx >> xxx  添加复制rm -f a.txt 删除文件rm -rf

2013-10-07 08:30:15 557

原创 linux 免密码 ssh 互相连接

假设现在我们有一个用户,叫tom,1.  启动ssh , chkconfig iptables offservice iptables stopservice sshd start 然后在 tom 用户下 ,ssh localhost 命令,点yes,输入用户名和密码2. 创建密钥     cd  ~ 进入grid 根目录

2013-08-19 00:04:03 774

原创 Centos 用户权限管理

一:新建用户   -----参照  http://blog.csdn.net/inte_sleeper/article/details/6570030useradd -d -m -g –G –p常用的就是上面几个参数,意思分别为:-d :指定用户主目录。如果此目录不存在,同时使用 -m 就会创建此目录。-m :创建用户主目录-g :用户所属组 ID-

2013-08-18 23:20:54 621

原创 sqoop之连接 Mysql

一。关于 sqoop ,一个有效与关系型数据库进行大数据交换的工具,Apache Sqoop(TM) is a tool designed for efficiently transferring bulk data between Apache Hadoop and structured datastores such as relational databases.二。我的

2013-08-18 16:29:01 1868 1

原创 hadoop 准备之linux相关

1,设置固定Ip   1)ubuntu     设置固定 ip        sudo gedit /etc/network/interface     模板参照如下:     iface eth0 inet static address 192.168.1.2 netmask 255.255.0.0 network 192.

2013-08-17 22:51:38 463

原创 hadoop 启动的各种问题解决

hadoop 为一个分布式系统基础架构,由Apache基金会开发。本人使用最新的hadoop-1.2.0,和0.20.2 ,两个版本 装在三个虚拟机上,系统为centos ,遇到启动的各种问题,总结如下一,hadoop 的配置问题1.namenode 无法启动   hadoop,tmp 文件夹的问题,有时默认format 之后,清空了tmp文件。需要 在core-sit

2013-07-01 15:54:18 890

小巧的端口扫描工具

小巧, 实用,防止网络攻击而准备,可用于查看潜在威胁

2013-08-26

常用Javascript特效代码

常用的JS特效,很好看,有源码,免费给大家看看!

2011-01-25

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除