vcloud_163-CSDN博客

转载 Cassandra 故障探测原理--Accrual Failure Detector

背景　　众所周知，故障探测(failure detector)是分布式系统的基础模块,用于探测各种服务（数据库、缓存）、节点（主机、云主机、容器）、进程等服务的状态。在分布式环境下应用需要调整故障检测以适用于不同的QOS需求，而传统的故障探测算法只能提供bool结果对探测进行决断。传统的探测方法主要通过周期心跳Heartbeat和超时时间Timout来处理，当在固定timeout时间内没有

2016-09-02 16:28:20 665

原创 Cassandra 故障探测原理--Accrual Failure Detector

背景　　众所周知，故障探测(failure detector)是分布式系统的基础模块,用于探测各种服务（数据库、缓存）、节点（主机、云主机、容器）、进程等服务的状态。在分布式环境下应用需要调整故障检测以适用于不同的QOS需求，而传统的故障探测算法只能提供bool结果对探测进行决断。传统的探测方法主要通过周期心跳Heartbeat和超时时间Timout来处理，当在固定timeout时间内没有收到...

2016-09-02 16:23:29 956

转载网易视频云：InnoDB透明页压缩与稀疏文件

MySQL 5.7中包括了很多让人耳目一新的新特性，其中就包括了InnoDB Transparent Page Compression，姑且称之为InnoDB透明页压缩。其实透明页压缩这个东西，早就关注过，其用到了sparse file和hole punching技术，但一直没能将这两种技术跟InnoDB压缩联系起来。最近花了点时间了解了下。熟悉InnoDB的同学都知道，InnoDB从My

2016-08-26 10:30:10 630

转载网易视频云：探求BlockCache实现机制

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　LRUBlockCache　　LRUBlockCache是HBase目前默认的BlockCache机制，实现

2016-08-15 11:01:48 258

原创网易视频云：Kudu，支持快速分析的新型Hadoop存储系统

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　Kudu是Cloudera开源的新型列式存储系统，是Apache Hadoop生态圈的新成员之一（incubatin

2016-08-11 15:53:48 743 1

原创网易视频云：HBase最佳实践，CMS GC调优

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　HBase发展到当下，对其进行的各种优化从未停止，而GC优化更是其中的重中之重。从0.94版本提出MemStoreL

2016-08-11 15:51:22 1296

原创网易视频云：连麦互动直播将成直播体验深度优化的必然形式

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。现在，网易视频云与大家分享一下视频播放的基本原理。　　视频流媒体文件从电视专网广播到PC公网点播再到手机移动网络直播的转

2016-08-11 15:50:03 986

原创一款易用的视频云是如何迅速积累客户的?

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。现在，网易视频云与大家分享一下一款易用的视频云是如何迅速积累客户的？　　从数据来看，国内大大小小的网络直播平台已有200

2016-08-10 11:26:01 548

原创网易视频云：揭秘HBase GC的前世今生

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。现在，网易视频云与大家分享一下HBase GC的前生今世身世篇。　　在之前的HBase BlockCache系列文章

2016-08-09 14:30:10 795

原创网易视频云CEO余利华：云服务的核心仍是用户体验

如果说2016年互联网科技圈最热门的词汇,“直播”必定是最佳候选之一。来势汹汹的直播，正在与各式各样的行业联姻，形成“直播+”的经济模式，一度引发了全民直播的热潮。与此同时，网易也瞄准了这个行业，悄然上线了网易视频云，将扎实的音视频技术产品化，低调迈入云服务市场。　　承接了网易15年音视频技术积淀的网易视频云以PaaS服务模式，向开发者提供音视频编解码SDK和开放API，适用于在线教育、远

2016-08-09 14:28:32 1289

原创网易视频云：七夕送书 | 单身狗福利！你想看的，这里都有！

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　一年一度的七夕节快要到了，票圈又要热闹起来啦！秀恩爱、秀定位、秀礼物...单

2016-08-08 11:28:45 775

原创网易视频云：游戏开发性能优化经验总结

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。接下来为大家介绍游戏开发性能优化经验总结。　　优化概论　　说起游戏的优化，在游戏开发中经常分为这几步：　

2016-08-05 11:42:13 488

原创网易视频云筑建安全堡垒，为直播平台保驾护航

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　直播的蓬勃发展可以说是一场轰轰烈烈的圈地运动，无论是直播行业的创业平台，还是有着巨头背景的直播玩家，无不呈现出快速成

2016-08-05 11:40:36 430

原创网易视频云：构建一站式视频云点播平台的关键技术

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　背景概述　　近两年视频服务已经融入人们生活的方方面面，针对互

2016-08-04 10:28:56 1003

原创网易视频云：用代码讲一个程序猿的爱情故事

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。小编最近混迹于各大技术论坛，V2EX、DockOne、CSDN……发现一个惊天大秘密，代码居然可以用来写故

2016-08-03 11:52:48 405

原创开脑洞 | 走夜路之遇见僵尸，程序猿怎么办？

网易视频云网易视频云是网易倾力打造的一款云服务产品，提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PAAS服务，在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需简单的开发即可打造在线音视频平台。凌晨1点，拖着疲惫的身躯，带着熬夜的黑眼圈和修完Bug的小开心。程序猿走在回家的小路上。凉风袭来，朦胧间，看到前方也有一个略显佝偻的身影。这个

2016-08-02 11:01:31 525

原创网易视频云：ceph恢复优化

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术，为客户提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PaaS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在在线音视频平台。　　1.背景　　在对ceph块存储进行性能测试时发现，当有osd重启或者存储机重启时，I/O性能会急剧下降，尤其

2016-08-01 20:30:38 453

原创网易视频云：分布式存储复制技术-链式复制

分布式系统中，强一致性通常被认为和高可用、高吞吐不相容，为了实现系统的高可用、高吞吐必须要牺牲强一致性。比如在亚马逊的Dynamo提供最终一致性，但是这样其实给开发者带来很多问题[0]· 写入的数据在后续的读操作中不能被读取到· 写入的数据有可能在后续的读操作中获取到，但是读到后下一次又读不到Dynamo不保证一定能够读到写入的数据，将复杂的冲突合并工作留到

2016-06-14 13:25:40 473

原创网易视频云：也谈过载保护和隔离

什么是过载，会有什么危害?腾讯后台开发技术总监bison[1]给出了一个很好的定义：“对于时延敏感的服务，当外部请求超过系统处理能力，如果系统没有做相应保护，可能导致历史累计的超时请求达到一定规模，像雪球一样形成恶性循环。由于系统处理的每个请求都因为超时而无效，系统对外呈现的服务能力为0，且这种情况下不能自动恢复”。过载的这么危险，应该怎么处理？我认为应该从”过载保护“和”过载隔离“两个方

2016-06-14 13:24:43 361

原创网易视频云：浅谈视频通信技术的发展

随着现在网络带宽的增加，网络视频通信越来越普及，各行各业对于视频的需求越来越广泛，矿业勘察，紧急事故处理，商务会议，远程视频教育培训等等都有应用的领域。行业需求自然而然催生了服务提供商的大量涌入，BAT、网易、京东等互联网大巨头纷纷在音视频方面发力。　　当今，企业对视频服务的需求基本能得到满足的，那么，音视频通信技术又呈现怎样的发展趋势呢？　　视频通信即服务(VAAS,Video

2016-06-03 16:00:33 630

原创网易视频云分享：消息队列设计中如何保证同一用户的消息按序处理

消息队列是应用开发的常用工具,也是系统解耦的必备利器。保证同一用户的消息按照顺序处理是应用的常见需求，譬如在微博应用中，发表微博、删除微博这两个操作必须按序处理，乱序势必造成业务逻辑错误。如何保证消息处理顺序？以下是常见的几种做法。设计一：单线程处理。虽然单线程处理非常简单好用，但是单线程限制了系统吞吐率。设计二：每个用户一个队列。看起来很美，实际上基本不可行。首

2016-06-03 15:26:00 407

原创网易视频云分享：1.5亿活跃用户背后的Twitter架构

Twitter目前有1.5亿活跃用户（30天内登陆过）， Timeline查询是300K QPS,每天新产生4亿条tweet，折合每秒平均4600 TPS[1]，近期(8.2)高峰期的TPS甚至冲到14万[2]。在如此的规模下做出一个可靠、可扩展的系统实属不易，而做到实时分发和低延迟查询更困难，我们来看看twitter是怎么搞定的。 Twtter的核心业务是将Twe

2016-06-03 15:23:37 729

vcloud_163的博客