OmGZb-CSDN博客

原创 HDFS测试

HDFS基准测试其中 HDFS 基准测试包括：（ 1 ）dfsio基准测试 HDFS I/O 读写性能（ 2 ）slive基准测试NameNode内部操作的性能（ 3 ）scan 基准测试MapReduce作业访问 HDFS 的 I/O 性能（ 4 ）shuffle 基准测试 shuffle 阶段性能（ 5 ）compression 基准测试MapReduce作业中间结果和最终结

2017-08-11 09:47:02 2859 1

原创为什么使用ZeroMQ作为消息队列

1 基本优点1.1 简单仅仅提供24个API接口，风格类似于BSD Socket。处理了网络异常，包括连接异常中断、重连等。改变TCP基于字节流收发数据的方式，处理了粘包、半包等问题，以msg为单位收发数据，结合Protocol Buffers，可以对应用层彻底屏蔽网络通信层。对大数据通过SENDMORE/RECVMORE提供分包收发机制。通过线程间数据流动来保证同一时刻任何数据都只会被一

2017-08-11 09:30:55 2125

原创数据结构基础与常见算法

链表与数组数组，在内存上是连续的空间；链表，在内存上可以不连续，每个链表节点包括数据可其他节点的地址信息。数组优点：内存空间占有少，因为链表节点保存其他节点的信息。数组内的数据是随机访问的，数据查找速度快链表优点：数组需要连续内存空间，在数组过大时可能引起内存不足的问题，链表则不需要大块连续内存插入删除操作方便，不需要移动数据数组一旦创建便不能改变容量，而链表可以堆、栈（堆栈）、队

2017-07-16 15:17:01 2313

原创计算机网络理论基础

网络面试问题OSI与TCP/IP各层的结构、功能及协议OSI模型物理层机械、电子、定时接口通信信道上的原始比特流传输。链路层物理寻址，将原始比特流转变成逻辑传输路线。隧道协议ARP/RARP（地址解析协议（逆向））网络层控制子网的运行，如逻辑编址、分组传输、路由选择。路由协议安全协议 AH、ESPIP/IPV6协议ICMP互联网控制信息协议、IGMP互联网组管理协议传输层接收上层数据

2017-07-15 17:37:14 3075

原创操作系统理论基础

操作系统面试问题进程和线程进程进程：进程是系统资源调度的基本单位。进程的存在实体是进程控制块（PCB），创建进行就相当于创建了一个进程控制块，该数据结构用于表示进程的状态。包含的信息有：进程标识符（进程ID）处理机的信息（通用寄存器、指令计数器、用户栈指针）进程调度信息（进程状态、进程优先级、调度所需的其他信息）进程控制信息（程序的数据地址、资源清单、通信机制、连接指针）进程间同步的方

2017-07-14 18:03:13 838

JVM垃圾回收机制概述如何判断“垃圾”在JAVA中是通过引用来和对象进行关联的，必须通过引用来操作对象。一般的，如果一个对象没有任何引用与之关联，那么该对象基本不可能在其他地方被使用。 JAVA中常用的判断对象是否“垃圾”的方法有引用计数法和可达性分析法。引用计数法的特点是实现简单，而且效率较高。但这种方法无法解决循环引用的问题。因此这种方法很快就过时了。（python仍然采用这种方法）为了解决上

2017-07-14 10:51:18 553

原创 JVM运行时数据区概述

JVM运行时数据区JVM运行时数据区分为，方法区、JAVA堆、虚拟机栈、PC程序计数器、本地方法栈本地方法栈为JVM提供本地方法服务（native），JAVA之外语言的方法会存入此方法栈，供程序调用。用来存储每个native方法调用的状态。虚拟机栈虚拟机栈是线程私有的，其生命周期与线程相同。线程中方法的执行会在此创建“栈帧”，用来存放方法所需的局部变量表、操作栈、动态链接、方法返回地址等数据。

2017-07-13 17:46:29 286

原创 JVM类加载机制

总体流程JAVA 加载一个类的流程如下： JAVA源文件（.java）——>编译器——>字节码文件（.class）——>解释器（JVM的一部分）——>机器码字节码文件经过JVM进行兼容处理可以在不同系统中得到同样的操作结果，这是JAVA跨平台的基础。JVM虚拟机总是和程序对应的，程序启动则实例化虚拟机，程序结束则虚拟机消亡，不同的程序对应不同的虚拟机实例，且实例之间数据并不共享。Jvm的体系结构c

2017-07-13 12:46:10 223

原创 JAVA面试问题—基础篇（下）

1.Concurrent包这个包包含有一系列能够让 Java 的并发编程变得更加简单轻松的类。BlockingQueue：如果BlockingQueue是空的，获取操作将会被阻断进入等待状态，直到BlockingQueue有数据，同样，如果BlockingQueue是满的，添加操作会被阻断进入等待状态，直到BlockingQueue里有空间。 BlockingQueue有四个具体的实现类：Arr

2017-07-13 10:48:36 257

原创 JAVA面试问题—基础篇（上）

JAVA面试问题—基础篇（上）1.JAVA基本数据类型及其大小32位/64位编译器大小一致的数据类型： char(1)，short(2)，int(4)，float(4)，double(8)，unsigned int(4)，long long(8) 32位/64位编译器大小不同的数据类型： char*(4/8)，long(4/8)，unsigned long(4/8)2.equals()与“==

2017-07-12 12:28:17 303

原创 JAVA三大特性——继承

1. 概念继承，使用已存在的类的定义作为基础建立新类的技术，新类的定义可以增加新的数据或新的功能，也可以用父类的功能，但不能选择性的继承父类。继承所描述的关系是“IS-A”。实际上，继承者是被继承者的特殊化，除了拥有继承者的特性外，还拥有自己特有的属性。继承定义了类如何互相关联，共享特性。继承注意事项：子类拥有父类的非private的属性和方法。子类可以拥有自己属性和方法。子类可以用自己的方

2017-04-11 16:29:03 275

转载 JAVA虚拟机原理初探

一、JAVA虚拟机的生命周期运行中的JAVA虚拟机有着清晰而明确的任务，执行JAVA程序。JVM从程序开始时运行，程序结束时停止。每一个JAVA程序都有一个JVM为其服务。JVM总是开始于 public void main（String[] args）这个方法。在程序执行时，必须为JVM指明包含main()方法的类名。main()方法是程序的起点，它被执行的线程初始化为程序的初始线程，程序中的其他线

2017-04-11 11:09:01 344

原创 JAVA三大特性——封装

一、概念JAVA封装，是指利用抽象数据类型将数据和对数据的操作封装成为一个独立实体。内部隐藏，使用对外接口。一个对象所封装的是自己的属性和方法，不需要依赖其他对象。二、优点使用封装的好处：减少耦合类的内部结构可以自由修改对类中成员进行更精确的控制隐藏信息，实现细节三、代码实例使用以下两个类来举例，Teacher.java,Student.javapublic class Teacher {

2017-04-01 14:14:52 546

转载 JAVA三大框架入门

写在前面：最近接到某公司的电话面试，其中问到了JAVA框架的相关知识，发现自己对于这个方面了解实在太少，故整理出该篇文章，从基本入门开始对JAVA框架再认识。一、基本概念了解框架的定位可以帮助我们更好的找到学习的切入点1.Spring：依赖注入（DI）又称为控制反转（IOC），通常来说，当某个角色需要另一个角色才能正常运行时，通常是由调用者来创建被调用者的实例。但是在Spring框架中，创建被调用

2017-04-01 10:37:13 48909 1

原创 HADOOP 2.6.5 高可用部署(YUM 安装)

题外话初次部署Hadoop HA的时候，踩过很多坑。现在将部署流程记录下来，希望可以帮助到更多的初学者。

2017-03-31 09:33:15 5303 1

原创 HDFS基本介绍

HDFS基本介绍初次接触HADOOP HDFS，从它得定位与优缺点角度开始，是一个好方法。本文为个人翻译的官方文档，水平极其有限。总体介绍HDFS是Hadoop的分布式文件系统，该组件被设计为高度容错且部署在低成本硬件上，提供给了应用程序数据一个高吞吐量的连接。HDFS放宽一些POSIX的要求，以使流访问到文件系统的数据。HDFS最初建基础设施的阿帕奇Nutch的网络搜索引擎项目。目标与期望1.硬件

2017-03-31 09:11:02 1498

原创一个菜鸟程序员的进阶之路

一个菜鸟程序员的逆袭之路从2011年上大学到现在上研究生，一直都在学习如何写代码。但是近些日子静心反思，发现并没有什么特别值得骄傲的事情。所以，我想借用此博客来整理之前所学所得，完成自己得菜鸟进阶之路。

2017-03-31 09:01:51 878

biao的博客