- 博客(13)
- 收藏
- 关注
RSS订阅原创 HBase数据库使用TTL清理过期数据
老是看别人的blog，但是发现大多数的质量不高，都是些简单的粘贴复制，把blog当作是笔记本了，有些是转载别人的，很多都是重复的些内容。原创的少。当然我也很懒，也很少原创，这次想原创下，分享下。 18年1月17日公司的HBase数据库上线了，这个项目做了很拖拉，17年8月份就开始调研做设计，9月份开始弄，后面又慢慢地将应用接入HBase数据库。大数据对我来说是个新东西，要学新的知识，这个年纪都...
2018-06-14 14:57:42
11010
转载 socket使用TCP协议时，send、recv函数解析以及TCP连接关闭的问题
Tcp协议本身是可靠的,并不等于应用程序用tcp发送数据就一定是可靠的.不管是否阻塞,send发送的大小,并不代表对端recv到多少的数据.在阻塞模式下, send函数的过程是将应用程序请求发送的数据拷贝到发送缓存中发送并得到确认后再返回.但由于发送缓存的存在,表现为:如果发送缓存大小比请求发送的大小要大,那么send函数立即返回,同时向网络中发送数据;否则,send向网络发送缓存中不能容纳的
2018-01-31 14:30:47
2863
转载 CLOSE_WAIT状态的产生原因及解决
最近测试环境server由于需要与大量的后台server交互，今天突然发现有大量的close_wait产生，于是仔细研究了一下： 如果我们的服务器程序处于CLOSE_WAIT状态的话，说明套接字是被动关闭的！ 因为如果是CLIENT端主动断掉当前连接的话，那么双方关闭这个TCP连接共需要四个packet： 1.Client -> FIN -> Server 2.Client 3.Client
2018-01-30 15:34:10
11749
转载 CLOSE_WAIT网络状态产生分析
CLOSE_WAIT状态 首先我们知道，如果我们的服务器程序APACHE,nginx,resin处于CLOSE_WAIT状态的话，说明套接字是被动关闭的！ 因为如果是CLIENT端主动断掉当前连接的话，那么双方关闭这个TCP连接共需要四个packet： Client —> FIN —> ServerClient 这时候Client端处于FIN_WAIT_2状态；而Server 程序处于CL
2018-01-30 13:57:21
1253
转载 HBase性能优化总结
本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，这里涉及的不多，这部分可以参考：淘宝Ken Wu同学的博客。1. 表的设计1.1 Pre-Creating Regions默认情况下，在创建HBase表的时候会自动创建一个region分区，当导入数据的时候，所有的HBase客户端都向这一个region写数据，直到这个reg
2018-01-05 16:53:33
5333
转载 HBase 强一致性详解
Hbase是一个强一致性数据库，不是“最终一致性”数据库，官网给出的介绍：“Strongly consistent reads/writes: HBase is not an “eventually consistent” DataStore. This makes it very suitable for tasks such as high-speed counter aggregation.
2018-01-03 15:30:29
3355
1
转载 LSM树
Log Structured Merge Trees It’s nearly a decade since Google released its ‘Big Table’ paper. One of the many cool aspects of that paper was the file organisation it uses. The approach is more g
2017-12-26 16:31:48
2189
转载 oracle 统计信息
一、什么是统计信息统计信息主要是描述数据库中表，索引的大小，规模，数据分布状况等的一类信息。例如，表的行数，块数，平均每行的大小，索引的leaf blocks，索引字段的行数，不同值的大小等，都属于统计信息。CBO正是根据这些统计信息数据，计算出不同访问路径下，不同join 方式下，各种计划的成本，最后选择出成本最小的计划。统计信息是存放在数据字典表中的，如tab$，一般可通过察看某些视图来获取统
2017-12-14 17:09:00
285
转载 HBase原理和设计
简介HBase —— Hadoop Database的简称，Google BigTable的另一种开源实现方式，从问世之初，就为了解决用大量廉价的机器高速存取海量数据、实现数据分布式存储提供可靠的方案。从功能上来讲，HBase不折不扣是一个数据库，与我们熟悉的Oracle、MySQL、MSSQL等一样，对外提供数据的存储和读取服务。而从应用的角度来说，HBase与一般的数据库又有所区别，HBase本
2017-12-14 14:54:34
307
转载 计算机编码问题python3
这两天写了个监测网页的爬虫，作用是跟踪一个网页的变化，但运行了一晚出现了一个问题。。。。希望大家不吝赐教！我用的是python3，错误在对html response的decode时抛出，代码原样为：?12response = urllib.urlopen(dsturl)content = response.read().decode('utf-8')抛出错误为?123File "./unxing
2017-12-11 16:13:32
255
转载 转载注意灰犀牛
（原标题：《人民日报》首次提到的“灰犀牛” 到底指什么？） 《人民日报》昨日在头版刊发了一篇评论员文章提到，“既防‘黑天鹅事件’，也防‘灰犀牛’，对各类风险苗头既不能掉以轻心，也不能置若罔闻。”“黑天鹅”已经世人皆知。然而，首次出现在官方媒体表述中的“灰犀牛”到底指什么?“灰犀牛”概念首先出现
2017-12-04 16:24:27
286
转载 第一次学习转载了CSDN的文章数据库分库分表实现策略
相关文章：1、 使用Spring AOP实现MySQL数据库读写分离案例分析2、MySQL5.6 数据库主从（Master/Slave）同步安装与配置详解3、MySQL主从复制的常见拓扑、原理分析以及如何提高主从复制的效率总结4、使用mysqlreplicate命令快速搭建 Mysql 主从复制5、大型网站应用之海量数据和高并发解决方案总结一二一、MySQL扩展具体的实现方式随着业务规模的不断扩大，
2017-12-02 10:50:41
288
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人