- 博客(151)
- 收藏
- 关注
RSS订阅原创 Cassandra 分布式数据库详解，第 1 部分：配置、启动与集群
原文 http://www.ibm.com/developerworks/cn/opensource/os-cn-cassandraxu1/ Cassandra 分布式数据库详解，第 1 部分：配置、启动与集群 许 令波, Java 工程师, 淘宝网 简介： 本文首先介绍了 Cassandra 服务器的配置文件各个配置项的意义，接着讨论了它的启动过...
2012-08-01 11:13:21
398
1
原创 Cassandra 分布式数据库详解，第 2 部分：数据结构与数据读写
原文 http://www.ibm.com/developerworks/cn/opensource/os-cn-cassandraxu2/ Cassandra 的数据存储结构Cassandra 中的数据主要分为三种：CommitLog：主要记录下客户端提交过来的数据以及操作。这个数据将被持久化到磁盘中，以便数据没有被持久化到磁盘时可以用来恢复。Memtable：...
2012-08-01 11:11:14
502
1
原创 让 WordPress 使用 Redis 缓存来进行加速
原文 http://www.oschina.net/question/12_60107 Redis 是一个高级的 key-value 存储系统，类似 memcached，所有内容都存在内存中，因此每秒钟可以超过 10 万次 GET 操作。我下面提出的解决方案是在 Redis 中缓存所有输出的 HTML 内容而无需再让 WordPress 重复执行页面脚本。这里使用 Redis 代替...
2012-08-01 11:00:38
514
原创 Linux 下 Redis 安装详解
原文 http://www.oschina.net/question/12_18065 redis作为NoSQL数据库的一种应用，响应速度和命中率上还是比较高效的。项目中需要用集中式可横向扩展的缓存框架，做了一点调研，即便redis、memcached存在效率上的差异（具体比较参考http://timyang.net/data/mcdb-tt-redis/），但其实都能满足目前...
2012-08-01 10:54:14
133
原创 Redis作者：深度剖析Redis持久化
原文 http://www.iteye.com/news/24675 Redis是一种面向“key-value”类型数据的分布式NoSQL数据库系统，具有高性能、持久存储、适应高并发应用场景等优势。它虽然起步较晚，但发展却十分迅速。 近日，Redis的作者在博客中写到，他看到的所有针对Redis的讨论中，对Redis持久化的误解是最大的，于是他写了一篇长文来对Redis的持久化进行了系...
2012-08-01 10:37:15
530
原创 Google在新的内容索引系统中放弃MapReduce
原文 http://www.hadoopor.com/thread-1880-1-1.html Google在新的内容索引系统中放弃MapReducemapreduce, google, 云计算 有消息表明，Google在新型网络内容索引系统——Caffeine中，将放弃以MapReduce为基础架构的分布式计算平台。据Google高级主管Eisar Lipk...
2012-07-31 10:30:18
206
原创 Yahoo!的分布式数据平台PNUTS简介及感悟
原文 http://timyang.net/architecture/yahoo-pnuts/Yahoo!的分布式数据平台PNUTS简介及感悟Sunday, Jun 21st, 2009 by Tim | Tags: CAP, PNUTS在分布式领域有个CAP理论(Brewer’s CAP Theorem) ，是说Consistency(一致性), Availabili...
2012-07-31 10:23:00
266
原创 微软展开“大数据”蓝图，推进Hadoop至Azure和Windows Server
原文 http://www.iteye.com/news/23045 微软已经展开了他们的“大数据”蓝图，其中担当主要角色的就是Apache Hadoop。 Hadoop是一个分布式系统基础架构，由Apache基金会开发。它是一个能够对大量数据进行分布式处理的软件框架。用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力高速运算和存储。在12日西雅图召开的微软...
2012-07-31 10:13:15
182
原创 淘宝数据魔方技术架构解析
原文 http://www.programmer.com.cn/7578/ 淘宝网拥有国内最具商业价值的海量数据。截至当前，每天有超过30亿的店铺、商品浏览记录，10亿在线商品数，上千万的成交、收藏和评价数据。如何从这些数据中挖掘出真正的商业价值，进而帮助淘宝、商家进行企业的数据化运营，帮助消费者进行理性的购物决策，是淘宝数据平台与产品部的使命。 为此，我们进行了一系列数据产...
2012-07-31 10:09:23
196
原创 Hadoop分布式文件系统：架构和设计要点
摘自 http://www.blogjava.net/killme2008/archive/2008/06/05/206043.html Hadoop分布式文件系统：架构和设计要点原文：http://hadoop.apache.org/core/docs/current/hdfs_design.html一、前提和设计目标1、硬件错误是常态，而非异常情况，HDFS可能是有成百上千的serve...
2012-07-31 10:07:56
81
原创 Apache Hadoop 2.0 Alpha 版发布
原文 http://www.iteye.com/news/25197 Apache Hadoop社区近日发布了最新的Apache Hadoop 2.0 Alpha版本，这标志着Apache Hadoop进入了一个新的分支。 Hadoop是Apache的顶级开源项目，由前雅虎开发者Doug Cutting（也是Nutch和Lucene的创始人）开发的分布式计算平台，是一个能够对大...
2012-07-30 16:10:00
121
原创 云计算成为现实
原文 http://www.jdon.com/34888 2008年下半年这些日子，虽然微软还在表示进军云计算，但是云计算在Java世界实际上已经从口号变成现实。这是一篇Web服务器Jetty集群文章的翻译，也就是说：Jetty已经可以嵌入下面这些云计算软件，而你只要将你的Web应用部署到Jetty，就能实现云计算，是不是很简单，现在就可以去做。将你的应用部署到Cloud compu...
2012-07-30 16:06:56
94
原创 安全第一！VMware云安全八项新举措
云与安全，就这种双重组合而言，它与饼干和牛奶，节奏和布鲁斯还不完全是一回事儿。这对于那种有志于花费大量经费来销售公共云服务或公共云基础设施的公司来说是个问题。云也许(或不)是“安全的”，但这并不是问题的关键。只要潜在的消费者不确定该怎么认为，那想要在这上面挣钱就绝非易事。因此，你该如何打消潜在客户心中关于云与安全方面的疑虑，并使他们把这两者自然地和鱼和薯条似的相提并论呢?V...
2012-07-30 16:03:58
187
原创 MongoDB Hadoop Connector 1.0 正式版发布
原文 http://www.iteye.com/news/24811 10gen（MongoDB数据库开发商）今天发布了MongoDB Hadoop Connector 1.0 正式版本。 MongoDB Hadoop Connector的核心功能是允许读取MongoDB数据到Hadoop MapReduce工作中，以及将MapReduce工作的结果写回到MongoDB。用户可以针对每个实...
2012-07-30 16:01:56
85
原创 VMware发布开源项目Serengeti，支持云中部署Apache Hadoop
原文 http://www.iteye.com/news/25341 全球虚拟化和云基础架构领导厂商VMware公司今天公布了最新开源项目——Serengeti，支持企业能够在虚拟和云环境中快速部署、管理和扩展Apache Hadoop。此外，VMware与Apache Hadoop社区共同合作研发扩展功能，让主要组件可以“感知虚拟化”以支持灵活扩展，并进一步提高Hadoop在虚拟化环境中...
2012-07-30 15:55:39
387
原创 EMC与VMware和Intel联手云安全
原文 http://security.zdnet.com.cn/security_zone/2010/0303/1648813.shtml 2010年3月2日，全球信息基础架构解决方案的领导者EMC公司今天公布了与Intel和VMware的共同愿景，即为核心业务的云服务建立一个更加安全、透明、负责的基础架构。这一愿景来自EMC信息安全事业部RSA、Intel和VMware的技术...
2012-07-28 14:05:34
172
原创 剖析开源云
原文 http://www.oschina.net/question/12_8191 简介： 现在的云计算已不再是一个新的尖端技术，它已成为彻底改变我们使用和开发应用程序方式的一种极有价值的重要技术。正如您所 知，Linux® 和开源技术为云（公共的和私有的基础设施）提供了基础。在本文中，我们将对云进行剖析，探究其架构以及用来构建这些可伸缩的动态计算和存储平台的各种开源 ...
2012-07-28 13:11:26
97
原创 国产虚拟化软件：把云计算从云端带进国内企业
原文 http://virtual.51cto.com/art/201207/346853.htm云计算cloud computing是当前非常炙手可热的概念，它最早由1971年图灵奖得主John McCarthy于1961年提出。John McCarthy认为计算能力可以像水，电，气这种公共资源那样被使用，该理念被Amazon于2006年推出的EC2系统所验证。云计算在传入我国之初，就引...
2012-07-28 12:56:43
205
原创 虚拟化技术未来四大趋势
近年来，随着VMware、Citrix等国际知名虚拟化软件厂商大力开拓中国市场，虚拟化及云计算的概念越来越热，虚拟化软件市场大幅升温。同时也带动了一批国内的虚拟化软件企业迅速的发展起来，比如提供全面的、自主知识产权虚拟化解决方案的北京方物软件公司等。虚拟化技术从早期的企业应用，逐步过渡到公有云应用，应用范围越来越广泛。虚拟化技术发展到今天，未来可能会有哪些变化呢?从整体的虚拟化技术应用...
2012-07-28 12:52:19
908
原创 虚拟化安全：创新何在？
原文 http://virtual.51cto.com/art/201207/345452.htm 虚拟化现在成了标准作业程序。它同时也打破了传统的防御机制，因为阻碍了可见性和控制性，带来了新的攻击途径，增加了复杂性，而且使网络团队与服务器团队之间的管理角色模糊起来。《信息周刊》杂志在2012年调查了数据中心的现状，结果显示，没有回头路可走，哪怕我们想走回头路：到明年年底之前，25...
2012-07-28 12:21:10
134
原创 弱一致性在现实世界中到处存在
原文 http://www.jdon.com/43246 DZone：弱一致性在现实世界中到处存在谈的是CAP定理和最终一致性(弱一致性：Eventual consistency)。又是一篇摆脱关系数据库阴影的檄文。大意如下：存储类语言给了我或其他成千上百万LAMP开发者一个误导，那就是偏向于即时性一致性(高一致性：immediate consistency)模型，每次Http请求都是一...
2012-07-26 15:46:53
105
原创 jdon: 如何打败CAP定理？
原文 http://www.jdon.com/42886 一篇谈使用读写分离方式实现如何打败CAP定理文章，可以认为是Event Sourcing的一个变种。CAP定理认为一致性 可用性和分区容错性同时不能获得，通常我们不能丧失分区容错性，那么你就只有在可用性和一致性之间选择，这就催生了NoSQL运行。一致性意味着你实现一个成功的写以后，将来的读到的总是写的最新结果；可用性意味着你总是能对...
2012-07-26 15:32:05
121
原创 深度剖析CloudFoundry的架构设计
原文 http://qing.weibo.com/2294942122/88ca09aa330004r8.html 2011-10-27 13:23 来源:博客 EMC中国研究院高级研究员 彭麟 我要评论(0) 摘要：本文会分为两个部份：第一部份主要介绍CloudFoundry的架构设计，从它所包含的模块介绍起，到各部份的消息流向，各模块如何协调合作；第二部份会在第一部份...
2012-07-26 15:17:44
135
原创 怎样部署基于Spring与数据库的应用到CloudFoundry
原文 http://www.oschina.net/question/82993_61264 将Spring应用部署到CloudFoundry.com很简单，就像SpringSource网站说的那样在注册申请到Cloud Foundry beta账号后，第一件事请就是在STS for Eclipse中安装CloudFoundry的支持。这里有一份博客详细的说明了如何安装，这里就不...
2012-07-26 15:16:57
150
原创 jdon:CAP原理和BASE思想
原文：http://www.jdon.com/37625 分布式领域CAP理论，Consistency(一致性), 数据一致更新，所有数据变动都是同步的Availability(可用性), 好的响应性能Partition tolerance(分区容错性) 可靠性定理：任何分布式系统只可同时满足二点，没法三者兼顾。忠告：架构师不要将精力浪费在如何设计能满足三者的完美分布式系统，而是应该进行取...
2012-07-26 15:16:11
166
原创 Cloud Foundry——Azure杀手?
原文 http://cloud.csdn.net/a/20110421/296336.html VMware最近推出了独具创新的Cloud Foundry。这款平台及服务无疑有着新派倾向：用户将可以注册并开发像MySQL和MongoDB这样的运行数据库服务，登录并直接为Spring或Rails环境编写代码，这点很像Engine Yard和Heroku。另外，用户可以自行运行平台作为...
2012-07-25 09:54:48
153
原创 业界首个开放式云服务平台Cloud Foundry
原文 http://sd.csdn.net/a/20111110/307322.html 继在上海成功举办两届Ruby技术交流大会后，第三届Ruby技术大会11月11日在上海光大会展中心国际大酒店盛大开幕。本次大会由CSDN主办，ITeye和Shanghaionrails协办，现场有超过500名来自于全国各地的Ruby技术开发者参会。VMware中国软件工程师王浩飞带来了主题为《Clo...
2012-07-25 09:52:43
218
原创 谈谈对程序员的培养
原文 http://raychase.iteye.com/blog/1450079 这篇文字是我好久以来的想法，有一些感悟，有一些激烈的言辞，我很自豪我就是一名程序员，我希望给程序员或者前程序员们带来一点启发。也许你认可我的言辞，也许你不屑我的观点，无论如何，欢迎谈谈你的看法。 让程序员做更多种类的事为什么有人说小公司锻炼人？在小公司，条件并不那么齐备，很多事情都需要程序员自己...
2012-07-25 09:42:17
283
原创 如果你不是程序员，你怎么雇佣程序员呢
原文 http://www.iteye.com/news/20524 如果你自己不是一位程序员，该如何雇用程序员呢？你需要注意一下几点： 1. 他们有多坚持己见（固执）呢？ 询问他们有趣的编程主题（如Ruby或Python？）。从他们回答的语调和推理中，可以得到很多信息。在我们最近一期节目中 ，杰夫说：“当人们对事情有强烈的见解，当他们可以大篇幅地谈论一些事情时，这就是一个很好的...
2012-07-25 09:41:56
278
原创 风雨20年：我所积累的20条编程经验
原文 http://www.iteye.com/news/18570 从11岁时，我就一直在编程，并且一直都很喜欢技术和编程。这些年来，我积累了一些艰难又容易的经验。作为一名程序员，你或许还没这些经验，但我会把它们献给那些想从中学到更多的朋友。 我会持续更新这些经验，我可能还会有更多的感想，但就我这20年来看，我想下面这个列表中基本不需要增添额外的东西了。下面就是我至今最难忘的经验...
2012-07-25 09:41:42
151
原创 程序员为什么不写单元测试
原文 http://www.iteye.com/topic/97693 程序员为什么不写单元测试 袁光东 笔记曾经做过一次“程序员在项目开发中编写单元测试的情况”的调查。调查结果：1. 严格的在项目中执行TDD 几乎没有2. 为大部份业务方法编写单元测试，并保证方法测试通过。 占16.6%...
2012-07-24 15:48:41
191
原创 Lucene / Solr 4.0 的新特性
原文 http://www.oschina.net/question/12_60240 Lucene 和 Solr 4.0 是一个非常重要的里程碑，包含大量的新特性以及性能的提升，本文主要介绍值得关注的一些改进。Lucene:ColumnStrideFields: DocValues 存储在每个文档中，每个文档的域可包含一个给定类型的值Facet search, ...
2012-07-24 15:48:21
74
原创 NOSQL数据库大比拼
原文 http://www.jdon.com/39718 Cassandra vs MongoDB vs CouchDB vs Redis vs Riak vs HBase comparison :: KKovacsCouchDBWritten in: Erlang关键点Main point: DB consistency一致性, ease of use易用License: ApacheP...
2012-07-24 14:46:15
107
原创 REST面向资源架构 RESTful架构
原文 http://www.jdon.com/rest.html 以状态为角度，提出将状态移植到客户端处理的新思路。 提出一个既适于客户端应用又适于服务端的应用的、统一的Web视图。适合B/S C/S S/S。 HTTP客户端与HTTP服务器之间的差别，对架构来说无所谓。一个软件应可以既充当Web客户端又充当Web服务器，而无须采用两套完全不同的APIs。 提供资源操作方法的统...
2012-07-24 14:40:42
135
原创 WHATWG 与 W3C 分裂，HTML5 将有两套标准
据 The Verge 报道，由于理念不合，HTML5 的标准制定组织 WHATWG（Web Hypertext Application Technology Working Group）与 W3C 分裂。这意味着今后 HTML5 将采用两个规范。 WHATWG 将为 HTML 制定一个“living”标准，由于摆脱了W3C的程序步骤，WHATWG 的“living”标准制定很可能会提速。...
2012-07-24 14:33:28
208
原创 Jdon关于云的文章
云计算 著名的云计算开源项目是Hadoop(Map/Reduce)及相关生态系统如Hive等。相关云存储NOSQL数据库。 云计算通俗概念意义很广，已经不只是计算，还有云存储，统称“云”，Google和Amazon提供云计算服务，是一种面向普通商户收费的B2B云，这是为了解决软件的可伸缩性Scalable ， 商户将自己的软件系统运行在他们的云平台上，可以一次性解决昂贵的高技巧的...
2012-07-23 11:48:00
94
原创 我理解的互联网应用和企业应用开发
主题：我理解的互联网应用和企业应用开发作者 zwchen 前段时间，我写过一篇该主题的博客，但写完了，我觉得还是没有谈到本质，这篇文章算是续篇。 互联网应用(网站或app)，和企业应用的本质区别，应该从用户谈起。 互联网是陌生用户，网站对于他们来说是自助系统(类似于ATM取款机)，不需要、也不可能对他们强制培训，比如用户注册。所以它们要做得绝对的弱智化，尽量降低学习成本。 企业应用是公...
2012-07-23 11:29:49
233
原创 hadoop的1TB排序
主题：hadoop的1TB排序作者 yunsamzhang 1、1TB（或1分钟）排序的冠军 作为分布式数据处理的框架，集群的数据处理能力究竟有多快？或许1TB排序可以作为衡量的标准之一。 1TB排序，就是对1TB（1024GB，大约100亿行数据）的数据进行排序。2008年，Hadoop赢得1TB排序基准评估第一名，排序1TB数据耗时209秒。后来，1TB排序被1分钟排序所取代，1分...
2012-07-23 11:18:47
120
原创 NoSQL数据库探讨之一 － 为什么要用非关系数据库？
NoSQL数据库探讨之一 － 为什么要用非关系数据库？ 作者 Robbinhttp://www.iteye.com/topic/524977 相关文章：MONGODB 与 ORACLE10g 的数据比较 http://www.iteye.com/topic/762544MongoDB 企业级应用 http://www.i...
2012-07-23 10:50:12
68
原创 mongodb 应用场景
24 Use Cases24.1 适合场景 Archiving and event logging 归档和日志记录 Document and Content Management Systems - as a document-oriented (JSON) database, MongoDB's flexible schemas are a good fit for this. 文档和内...
2012-07-23 10:29:55
79
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人