3 oifengo

尚未进行身份认证

爬梯之路

等级
TA的排名 1w+

CHD6.3.1部署文档

MySQL离线部署CHD分为两块CM 不开源 主从架构 server + 多个agent 离线部署Parcel 包裹文件 将Hadoop / Hive等压缩包完善之后压缩后 重命名parcel结尾 用 tar -xzvf xxx.parcel 也可以解压机器准备安装包准备MySql离线部署mysql-5.7.11-linux-glibc2.5-x86_64.tat.gz...

2020-02-15 16:49:37

Hadoop常用组件

文章目录基础组件HadoopHDFSYARNMapReduceZooKeeper其他常用组件HiveHBaseStormImpalaImpala与Hive的对比OozieKafkaSqoopFlumeSpark基础组件HadoopHDFSYARNMapReduceZooKeeper其他常用组件HiveHBaseStormImpalaImpala与Hive的对比Oozie...

2020-01-12 18:42:56

sql server新建mysql链接服务器

文章目录安装MYSQL ODBC驱动创建ODBC源打开ODBC Data Sources(64-bit)选择系统DSN添加DSNSSMS新建连接服务器常规安全性安装MYSQL ODBC驱动mysql odbc驱动下载安装过程略创建ODBC源打开ODBC Data Sources(64-bit)控制面板 ----> 系统和安全 ----> 管理工具 ---->...

2019-12-19 20:42:17

MyCat之旅

分布式数据库入门分布式系统的定义分布式系统是指组件分布在网络上,组件之间通过消息进行通信和动作协调的系统。核心理念:多台服务器协同工作,完成单台无法完成的任务 尤其是高并发或者大数据量的任务特点透明性分布式系统对用户来说是透明的,一个分布式系统再用户面前就像一个传统的单机一样用户可以不用了解内部结构就可以使用拓展性最大特点可拓展,能够根据需求的增加而拓展,横...

2019-11-12 11:29:45

Mapreduce 原理分析

MapReduce是一个基于 java 的并行分布式计算框架,使用它来编写的数据处理应用可以运行在大型的商用硬件集群上来处理大型数据集中的可并行化问题,数据处理可以发生在存储在文件系统(非结构化)或数据库(结构化)中的数据上。MapReduce 可以利用数据的位置,在存储的位置附近处理数据,以最大限度地减少通信开销。MapReduce 框架通过编组分布式服务器,并行运行各种任务,管理系统各部分...

2019-10-24 20:33:24

JVM开荒-2

上回说到 .java —> .class接着讲解.class字节码文件是如何在JVM中存放的JVM在为类实例或成员变量分配内存是如何分配的先来了解一下JVM内存结构JVM的内存结构Java虚拟机的内存结构并不是官方说法《Java虚拟机使用规范》中 [运行时数据区]才是术语,但是大家通常使用JVM内存结构根据 《Java虚拟机使用规范》中的说法,Java虚拟机的内存结构可以分为公...

2019-10-05 20:41:32

Java实现剑指offer

文章目录03_01_DuplicationInArray找出数组中重复的数字题目描述解法解法一解法二解法三测试用例03_02_DuplicationInArrayNoEdit不修改数组找出重复的数字题目描述解法解法一解法二测试用例04_FindInPartiallySortedMatrix二维数组中的查找题目描述解法测试用例05_ReplaceSpaces替换空格题目描述解法解法一解法二【推荐】测...

2019-08-26 14:46:44

JVM开荒

文章目录JVM简介Java版本历史JDK 与 JREJRE(Java Runtime Environment)JDK(Java Development Kit)区别与联系J2EE J2SE J2MEJ2SEJ2EEJ2MEJava SE Java EE Java MEJDK 1.7 与 JDK 7版本历史JVM版本历史JVM简介Java虚拟机维基百科,自由的百科全书Java虚拟机...

2019-08-20 12:28:49

ReaHat用户挖掘有价值用户

文章目录项目实施读取数据设置图表格式合并数据拆分数据查看类型和数量拆封数据项目实施读取数据#sep=' ' sep : str, default ‘,’ 指定分隔符号 默认为 “,"#header 指定行数来作为列名字 默认为0 还可以为多行列名#keep_default_na 指定参数为na 那么默认的NaN将被覆盖 否则添加#parse_dates=["date"]解析索引...

2019-08-01 14:46:50

数据从csv到Qlik可视化

文章目录项目简介实施方案实施过程pandas对csv文件进行读取并写入到sql注意事项生成新的字段对每一个KPI进行计算对所有的KPI进行一个整合Qlik端的导入操作Qlik数据加载编辑器效果展示项目简介数百万的数据进行各种KPI的计算最后用Qlik对KPI进行可视化操作实施方案csv-----------pandas---------------->sql server-----...

2019-07-31 20:29:40

PQ特征工程开荒

文章目录特征工程简介特征工程的重要性特征工程是什么呢?特征使用方案要实现目标需要哪些数据?基于业务理解 尽可能找出对因变量影响的自变量可用性评估获取速度覆盖率准确率特征获取方案如何获取如何存储特征处理特征清洗清洗异常样本采样数据不均衡样本权重预处理单个特征归一化离散化Dummy Coding缺失值多个特征衍生变量特征监控特征工程简介========================特征工程的重...

2019-07-06 14:48:46

Hive开荒

Hive起源Apache Hive维基百科,自由的百科全书Apache Hive是一个建立在Hadoop架构之上的数据仓库。它能够提供数据的精炼,查询和分析。Apache Hive起初由Facebook开发,目前也有其他公司使用和开发Apache Hive,例如Netflix等。亚马逊公司也开发了一个定制版本的Apache Hive,亚马逊网络服务包中的Amazon Elastic MapR...

2019-06-22 11:27:16

LeetCode Daily

771.宝石和石头给定字符串J 代表石头中宝石的类型,和字符串 S代表你拥有的石头。 S 中每个字符代表了一种你拥有的石头的类型,你想知道你拥有的石头中有多少是宝石。J 中的字母不重复,J 和 S中的所有字符都是字母。字母区分大小写,因此"a"和"A"是不同类型的石头。示例 1:输入: J = “aA”, S = “aAAbbbb”输出: 3示例 2:输入: J = “z”, S =...

2019-06-18 13:34:34

Spring架构开荒

IOC 控制反转Inversion of Control控制反转 依赖注入1 控制什么?控制对象的创建以及销毁2 反转什么?将对象的控制权交给IOC容器举例说明:张三要回家对象:小明 人车 奔驰 宝马Audi.javapublic class Audi{ public void start(){ System.out.println("Audi.sta...

2019-06-07 19:24:02

Java当中的多线程

线程 Thread程序:保存在物理介质(磁盘、光盘、软盘)中的代码片段进程:一旦程序运行起来 就变成操作系统当中的一个进程进程 = 进行当中的程序线程:程序当中一条独立的执行线索为什么要使用多线程:并不是单纯的为了效率 而是为了让程序学会同时处理多个需求让程序学会同一时间做多件事宏观并行 而 微观串行线程的五大状态(七大): 新生 就绪 运行 消亡 Born R...

2019-06-02 16:04:52

Java封装继承多态

封装:封装:Encaplation用private将不期望被外界访问的方法和属性隐藏起来 **封装对于类的开发者和使用者都有好处:**对于类开发者:能够让数据得倒保密 得到隐藏 从而更加安全对于类的使用者:能够让使用者将经理 全部集中在核心业务逻辑上类的开发应当高内聚 低耦合------------ 内聚:独立完成功能的能力 - 自强不息 自己的事情自己做-----...

2019-06-02 10:00:15

JCF---java核心集合框架

Java Collections Framework集合:存放数据的容器 批量的存放数据since JDk1.2 集合体系大规模的提供在JDk1.0提供了:Vector HashtableJDK内置的接口 Collection Map [单值对象] [键值对]List Set Queue Deq...

2019-05-28 13:50:33

Unicode 编码

遇见一篇讲编码问题特别清楚的文章,特此转发过来ASCII码在学校学 C 语言的时候,了解到一些计算机内部的机制,知道所有的信息最终都表示为一个二进制的字符串,每一个二进制位有 0 和 1 两种状态,通过不同的排列组合,使用 0 和 1 就可以表示世界上所有的东西,感觉有点中国“太极”的感觉——“太极生两仪,两仪生四象,四象生八卦”。在计算机种中,1 字节对应 8 位二进制数,而每位二进制数有...

2019-05-25 13:15:13

Java核心基础

数据类型基本数据类型(简单数据类型 - 语言内置的类型)布尔型 :boolean true flase 纯粹的java中 数值不能给boolean赋值 boolean is /has/can字符型:char16 位在ANSI编码当中 : 中文占据2个字节 英文占据1个字节在Unicode编码当中: 空文件会有两个字节 整数类: byt...

2019-05-25 13:07:14

Java中的数据类型

Java是一个强类型的编程语言 所有的变量在第一次出现的时候 必须有数据类型Java当中数据类型有多少种?2种 [基本数据类型+引用数据类型]或者无数种[8种基本数据类型+无数种引用类型]基本数据类型 简单数据类型 [语言内置的数据类型]4类8种布尔类型:boolean==========================*:只能使用true/false进行赋值 很纯粹~ 不能用...

2019-05-16 14:23:42

查看更多

勋章 我的勋章
  • 领英
    领英
    绑定领英第三方账户获取
  • GitHub
    GitHub
    绑定GitHub第三方账户获取
  • 专栏达人
    专栏达人
    授予成功创建个人博客专栏的用户。专栏中添加五篇以上博文即可点亮!撰写博客专栏浓缩技术精华,专栏达人就是你!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 1024勋章
    1024勋章
    #1024程序员节#活动勋章,当日发布原创博客即可获得
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。