nuaaqy-CSDN博客

原创在安装openstackGrizzly时的一些记录

http://wenku.baidu.com/view/79212cbe69dc5022aaea00ec.htmlhttp://blog.csdn.net/lilongherolilong/article/details/6704855 修改和新增源http://longgeek.com/2013/03/11/openstack-grizzly-g3-for-ubuntu-12-04-al

2013-08-09 17:18:39 1004

转载 nginx+tomcat集群负载均衡(实现session复制)

nginx+tomcat集群负载均衡(实现session复制) Nginx+tomcat 做负载均衡架构描述前端一台nginx服务器做负载均衡器，后端放N台tomcat组成集群处理服务，通过nginx转发到后面（注：没做动静分离，静态动态全部都转给tomcat）

2010-05-07 16:53:00 2492

转载 Comet：基于 HTTP 长连接的“服务器推”技术

Comet：基于 HTTP 长连接的“服务器推”技术文档选项打印本页将此页作为电子邮件发送级别：中级周婷 ([email protected])

2010-02-20 10:09:00 607

原创直接使用HADOOP-RPC的编码实例

1、创建接口，该接口类在服务端和客户端都必须有。public interface Serverif extends VersionedProtocol2、在服务端实现接口类public class ServerImpl implements Serverif3、服务端，使用实现的类启动服务，需要定义监听的IP地址和端口Server server = RPC.getServer(

2010-01-13 09:12:00 990

转载 [ZZ]网格与集群、CORBA、DCE和P2P的比较

网格与集群计算的区别　　集群计算实际上不能真正地被看作是一种分布式计算解决方案。不过对于理解网格计算与集群计算之间的关系是很有用的。通常，人们都会混淆网格计算与基于集群的计算这两个概念，但实际上这两个概念之间有一些重要的区别。　　网格是由异构资源组成的。集群计算主要关注的是计算资源;网格计算则对存储、网络和计算资源进行了集成。集群通常包含同种处理器和操作系统;网格则可以包含不同供应商提

2010-01-11 11:41:00 1327

原创 windows访问Hbase数据库的配置

1、hbase-site.xml hbase.master 10.42.103.27:9600 The host and port that the HBase master runs at. hbase.cluster.distributed true The mode the

2010-01-05 17:58:00 1289

原创采用HADOOP的MAPREDUCE使用其他文件系统或数据库系统的方式

1、Hadoop中实现了MapReduce和HDFS两大功能，是Hadoop可以独立部署为一个分布式的计算平台。2、MapReduce和HDFS可以相互独立启动。也就是说可以独立启动MapReduce实现分布式计算；独立启动HDFS提供分布式文件系统。3、实现MapReduce的服务器群组可以和提供分布式数据库服务和分布式文件服务的系统分开或合并，相互不影响。4、MapReduce使用

2010-01-05 17:50:00 969

原创使用ZooKeeper解决Hadoop单点故障（single point of failure）

1、目前Hadoop版本只支持一个主节点，存在单点故障的问题，即如果主节点异常，任务执行情况会丢失，数据可能会损坏。目前通常的建议是，客户端编码时进行异常判断和处理，比如多次请求执行任务。2、ZooKeeper是Hadoop的正式子项目，它是一个针对大型分布式系统的可靠协调系统，提供的功能包括：配置维护、名字服务、分布式同步、组（Group）服务等。3、ZooKeeper能够用来leade

2010-01-05 17:50:00 4977

原创 MapReduce技术的开源C语言实现

一、Stanford大学的Phoenix系统（单机多核的应用）1、Phoenix是在共享内存的体系结构上的MapReduce实现。它的目标是在多核平台上，使程序执行得更高效，而且使程序员不必关心并发的管理。事实上并发管理，尽管是经验丰富的程序员，也难免在这上面出错。2、Phoenix由一组对程序应用开发者开放的简单API和一个高效的运行时组成。运行时系统处理程序的并发、资源管理和错误修复，

2010-01-05 17:49:00 6711 3

原创 MapReduce实现流程分析

1、应用整体三层结构最上层为用户应用用户可以通过高级语言开发的程序或者命令行方式访问接口，进行分布式计算。用户直接和中间层的管理模块交互，不关心任务是怎么执行的。中间层为任务管理执行分为任务管理（JobTracker）和任务执行（TaskTracker）两大模块。任务管理模块根据用户请求，环境信息分解任务、下发任务、管理任务执行情

2010-01-05 17:47:00 1302