database520-CSDN博客

原创备份恢复概念

备份恢复主要目的是保护数据库以防止发生多种类型的故障,防止数据库出现故障时能立即恢复MTBF和MTTRMTBF平均故障间隔时间(MTBF) 英文全称是“Mean Time Between Failure”。我们该怎么样延长MTBF呢平均恢复时间(MTTR) “Mean time to repair”怎么样缩短这个时间？目标延长MTBF,缩短MTTR数据库管理员(DBA) 的主要职责之一就是确保数据库可用。DBA 可以采取预防措施来尽量减少系统故障。数据库出现故障后，D..

2021-08-02 12:56:28 167

原创 eclipse开发工具报错gc overhead limit exceeded的解决方案

在新建maven工程时会报错：gc overhead limit exceeded。原因是eclipse的内存不够，需要eclipse目录下的eclipse.ini文件。调大以下的参数值，Eclipse.ini默认文件如下：-Xms512m -Xmx1024m也可以调大XX:MaxPermSize=1024m这个意思是在编译文件时一直占有最大内存，重启Eclipse

2016-05-11 19:39:17 6113

原创如何处理SecureFX工具中的中文乱码

如何处理SecureFX中的中文乱码？今天在使用SecureFX连接服务器进行数据传输时，发现包含中文名称的文件在SecureFX中无法正常显示，出现的都是乱码。后来经过一些列修改，搞定中文名称乱码问题。那么，如何处理SecureFX中的中文乱码情况？1、打开SecureFX，找到含有中文名的路径，查看还有中文名的文件；2、在SecureFX菜单中选择“Option

2016-02-03 16:05:39 601

原创 Google File System(中文翻译) （Google三大论文之一）

摘自网络Google文件系统 GFS是一个可扩展的分布式文件系统，用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上，但可以提供容错功能。它可以给大量的用户提供总体性能较高的服务。 1、设计概览（1）设计想定 GFS与过去的分布式文件系统有很多相同的目标，但GFS的设计受到了当前及预期的应用方面的工作量及技术环境的驱动，这反映了它与早期的文件系统明显不同

2016-02-02 17:28:08 274

原创 Google's BigTable 原理（Google三大论文之一）

摘自网络题记：google 的成功除了一个个出色的创意外，还因为有 Jeff Dean 这样的软件架构天才。 ------ 编者官方的 Google Reader blog 中有对BigTable 的解释。这是Google 内部开发的一个用来处理大数据量的系统。这种系统适合处理半结构化的数据比如 RSS 数据源。以下发言是 Andrew Hitchcock 在 2005

2016-02-02 17:26:36 708

原创 MapReduce:超大机群上的简单数据处理（Google三大论文之一）

摘要网络MapReduce是一个编程模型,和处理,产生大数据集的相关实现.用户指定一个map函数处理一个key/value对,从而产生中间的key/value对集.然后再指定一个reduce函数合并所有的具有相同中间key的中间value.下面将列举许多可以用这个模型来表示的现实世界的工作.以这种方式写的程序能自动的在大规模的普通机器上实现并行化.这个运行时系统关心这些细节:分割输入数据,

2016-02-02 17:18:13 342

原创 Hadoop分布式集群安装

1、准备3台机器 192.168.80.111 cluster111 192.168.80.112 cluster112 192.168.80.113 cluster1132、在伪分布搭建的基础上，为另外2台机器设置主机名、IP映射关系、免密码登录3、执行ssh-copy-i xxx ，把公钥复制去另外一台机器，使得两台机器可以互相免密码

2016-01-01 10:24:59 195

原创 hadoop伪分布环境搭建

hadoop的伪分布（单节点） 1、设置ip地址,可以在centos系统桌面中有个电脑图标，右击edit connections进行IP设置使用命令ifconfig验证，如果验证不过使用命令service network restart网络重启（或者重启系统） 2、关闭防火墙chkconfig iptables off ，用chkconfig --list iptables验证

2015-12-30 23:24:04 229

原创 Linux基本知识

Linux基本功能（centos6.4系统）一、目录结构bin：存放系统二进制可执行文件（ls、cat、mkdir等）boot：存放系统引导时使用的各种文件dev：存放设备文件etc：存放系统配置文件home：存放所有用户（除了root）的所有根目录lib：存放跟系统文件的程序运行所需要的共享及内核模块proc：虚拟文件系统，存放当前内存的映射usr：存放系统运

2015-12-27 14:29:48 269

原创 redis基本命令及应用场景

在安装redis目录下，执行./bin/redis-server redis-conf来启动redis的服务，执行./bin/redis-cli来启动redis客户端，在客户端操作命令。一、String数据类型1、String是redis数据库中最基本的数据类型，可以接受图片、json格式数据，redis中的字符串的value最多可以容纳512m2、基本命令append key v

2015-12-17 00:05:28 406

原创 hadoop系统运维-linux quta配置

1. 客户端 quta 配额修改(1) 编辑账户/群组的阀值与宽限时间用edquota去设置用户myquota1的磁盘使用限制。七个栏位的意义分别是：(1)檔案系統 (filesystem)：說明該限制值是針對哪個檔案系統 (或 partition)；(2)磁碟容量 (blocks)：這個數值是 quota 自己算出來的，單位為 Kbytes，請不要更動他；

2014-04-09 23:35:46 480

数据之美