2 小范今天学Java了嘛?

学生身份

我要认证

念念不忘必有回响

等级
TA的排名 12w+

[hadoop那些事]高可用Hbase安装

此博客的环境条件: zookeeper hadoop高可用此博客版本号为: hbase-2.3.0 Hadoop 3.1.2此博客规划:需要了解:habse与hadoop各版本的相互适用安装步骤1、在master中解压habse安装包2、配置环境变量(主hbase和备用hbase即可)#hbaseexport HBASE_HOME=/usr/hbase/hbase-2.3.0export PATH=$PATH:$HBASE_HOME/bin3、修改配置文件 hba

2020-09-22 09:16:55

[hadoop那些事] 高可用完全分布式集群安装

愉快的假期就要结束了一、规划二、准备四台机器三、配置HA-hadoophadoop-env.sh:core-site.xmlhdfs-site.xmlyarn-site.xmlmapred-site.xml四、启动顺序1. 确保zookeeper启动成功2. 启动journalnode3. 格式化namenode(第一次就行)4. master同步信息slave15. 在namenode节点(其中任意一个即可)格式化zkfc6. 启动hdfs相关服务7. 启动yarn相关服务8. 启动master历史任务服

2020-08-31 16:27:30

[hadoop那些事] 快速运行一个hadoop入门例题——wordcount

这里写目录标题背景:高可用hadoop安装完毕之后为了确认平台的可用性,所以需要快速运行一个案例,不如就拿官网的例子来吧! 特此做个笔记~hadoop笔记及教程一、新建一个文件并写入一些单词二、创建input路径三、将test.txt传入hdfs四、运行案例一五、运行案例二背景:高可用hadoop安装完毕之后为了确认平台的可用性,所以需要快速运行一个案例,不如就拿官网的例子来吧! 特此做个笔记~hadoop笔记及教程一、新建一个文件并写入一些单词mkdir fzyvi test.txt内容

2020-08-31 15:29:10

[hadoop那些事] 全文目录——索引页

hadoop学习路线理论实践完全分布式高可用报错积累理论1.Hadoop组件介绍实践1.hadoop相关安装包 (115云盘平台)2.sqoop的安装及配置并且简单的从mysql传入hdfs中3.centos7环境下载并配置mysql,简单存储一些信息4.Flume的安装、配置 及其依赖Flume实时监控特定文件夹上传到HDFS5.创建虚拟机6.编译hadoop源码7.zookeeper安装完全分布式8.hadoop完全分布安装高可用9.hadoop高可用(HA)完全分布式安装

2020-08-31 15:15:36

飞桨PaddlePaddle——百度架构师手把手带你零基础实践深度学习

人工智能是大势所趋,但是总感觉门槛很高,非常有幸参加本次课程,能够初识深度学习并为自己以后的学习打下一个基础。课程整体由浅入深,层层递进,感觉确实是经过精心设计的,对于小白来讲是一个很好的入门课程,能够结合代码实践理解知识点,了解到问题解决思路和思考方式。每天课程的内容其实些微有点多,尤其对于白天要上班的同学,经常觉得晚上和周末时间不够用。课程难度也是有的,要想充分理解掌握是需要一定努力的。总之作为免费课程感觉已经非常良心了,感谢主讲大佬、班主任、助教的付出。k-means算法代码:import num

2020-08-29 23:26:21

【入门案例】Hello world 波士顿房价预测——代码(批注待加)

波士顿房价预测(Hello world)

2020-08-13 14:32:07

【AI Studio】百度架构师手把手带你零基础实践深度学习——第一天

@小范今天学习了吗 —CSDN@little_paike —AI StudioAI Studio人工智能、机器学习、深度学习1. 关系2. 人工智能3. 关键区别机器学习过程就是归纳和演绎过程1.机器学习2.机器学习实现3.模型三个部分深度学习历史与今天神经网络核心人工智能、机器学习、深度学习1. 关系人工智能、机器学习和深度学习覆盖技术范畴是逐层递减的~人工智能是最宽泛的概念~机器学习是当前比较有效的一种实现人工智能的方式~深度学习是机器学习算法中最热门的一个分支,替代了大多数传

2020-08-12 14:31:39

[人工智能那些事] windows安装python虚拟环境

为什么需要python的虚拟环境?首先你的电脑默认的虚拟环境库太多了不好管理其次如果脱离了学习阶段,开始了进阶做项目(人工智能、django),你需要一个很简洁的环境去做项目,一个虚拟环境能解决很多报错问题。安装全程在cmd中操作先下载所需的库pip install virtualenv选好创建虚拟环境的位置创建虚拟环境virtualenv paddle_test本条命令是创建虚拟环境,paddle_test是我这个虚拟环境的名称找到对应scripts到/paddle

2020-08-05 20:18:00

【大数据笔记】hadoop基础——各组件介绍

目录故事背景Hadoop 与大数据之间到底是什么关系?1、数据存储:HDFS,一个分布式文件系统2. 数据分析:MapReduce 计算引擎HDFS(Hadoop 分布式文件系统)MapReduce(分布式计算模型)离线计算Yarn(分布式资源管理器)Spark(内存计算)HBase(分布式列存储数据库)Hive(数据仓库)Oozie(工作流调度器)Sqoop 与 PigFlume(日志收集工具)Kafka(分布式消息队列)ZooKeeper(分布式协作服务)Ambari(大数据运维工具)摘自 高俊峰(

2020-07-31 12:26:47

varchar与varchar2区别

在比赛数据中看到某两列数据类型为varchar2类型,查阅资料做下记录。varcharvarchar为标准sql:VARCHAR(M)是一种比CHAR更加灵活的数据类型,同样用于表示字符数据,但是VARCHAR可以保存可变长度的字符串。其中M代表该数据类型所允许保存的字符串的最大长度,只要长度小于该最大值的字符串都可以被保存在该数据类型中。varchar存放固定长度的字符串,最大长度是2000varchar对空串不处理varchar对于汉字占两个字节,对于数字,英文字符是一个字节,占的内存小

2020-06-24 10:17:29

[hadoop那些事]hadoop及其组件资源 115云盘平台

https://115.com/s/sw3vs2x33md#bigdata访问码:j024

2020-05-15 11:14:46

[hadoop那些事] 错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

hadoop classpathLinux返回类似这样的代码/usr/hadoop/hadoop-3.1.2/etc/hadoop:/usr/hadoop/hadoop-3.1.2/share/hadoop/common/lib/:/usr/hadoop/hadoop-3.1.2/share/hadoop/common/:/usr/hadoop/hadoop-3.1.2/share/hadoop/hdfs:/usr/hadoop/hadoop-3.1.2/share/hadoop/hdfs/lib/

2020-05-15 11:01:25

[hadoop那些事]sqoop的安装及配置,简单的从mysql传入hdfs中

基于Linux安装mysql 的传送门在这里了(注意文章结尾的权限设置):https://editor.csdn.net/md/?articleId=106111959本文主要为学习笔记,主题为sqoop的安装和配置,顺便做一个从mysql传入hdfs的实例。本文默认安装并有一个可用mysql库表,默认mysql权限已设置,默认hadoop集群已启动(目前本人实验不是从高可用上,等有空实验好了再完善本篇文章)music:http://music.163.com/song?id=1446768955

2020-05-15 02:14:11

[hadoop那些事] centos7环境下载并配置mysql,简单存储一些信息

本篇文章主要是为sqoop测试写的笔记,所以不太涉及理论方面的问题一、下载weget二、下载yum repo配置文件安装repo三、安装mysql四、启动使用mysql获取暂时密码重设密码创建新库新表新数据一、下载wegetyum -y install wget二、下载yum repo配置文件wget https://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm安装reporpm -ivh mysql57-commu

2020-05-14 09:30:17

[每日推荐] notepad++ 连接上你的服务器,修改配置文件更加方便!!!高效(懒人 必备

避风港安装notepad++安装插件使用插件安装notepad++传送门:https://notepad-plus-plus.org/downloads/v7.8.1/安装插件插件下载传送门:(在notepad++上在线下载好久没有动所以手动安装)https://github.com/ashkulz/NppFTP/releases/tag/v0.29.6下载好的安装包放入这个路径(下图重启notepad++即可使用插件无非就是懒得从命令行的系统里面一个子一个子敲(复制粘贴极其不方便)下面

2020-05-13 08:04:28

[hadoop]Flume的安装、配置 及其依赖Flume实时监控特定文件夹上传到HDFS

代码驿站一、简单理解作用基本构成二、Flume的安装及使用安装及配置写properties文件启动flume三、启动之后一、简单理解作用Flume提供一种分布式的,可靠地,对大量数据的日志进行高效处理,聚集,移动的服务。flume只能在Unix的环境下运行。Flume基于流式框架,容错性强,也灵活简单。Flume,Kafka用来进行数据收集的,Spart,Storm用来实时处理数据,impala用来实时查询。基本构成Source 用于采集数据,Source是产生数据流的地方,同时Sour

2020-05-11 07:47:01

[hadoop 基础] 安装虚拟机VMware15和Linux centOS (Linux 基础) 搭建你可靠的学习平台!

VMware15、Linux centOS的简单安装(学习笔记)VMware15各版本区别个人计算机的基础设置centos安装的截图说明下载地址VMware15链接:https://www.vmware.com/cn/products/workstation-pro/workstation-pro-evaluation.html各版本区别CentOS-7-DVD版本:DVD是标准安装盘...

2020-04-28 22:30:45

[Python 知识点]类的学习 做个儿时的小游戏

小时候和小伙伴总是玩些现在想玩又没人陪的游戏作为一个程序员来说,没有小伙伴可以new一个正巧最近在学python的类,(弟弟阶段),所以我打算用类写一个小游戏以便加深对类基础的理解游戏概述:分三组 第一组写姓名(name) 第二组写地址(where) 第三组写做什么(dowhat) 最后由一个人随机从每组抽取一个,组成语句,达到娱乐效果。直接上效果:上代码:impo...

2020-04-08 19:48:37

[Python语言程序设计-第11期]测验3: 基本数据类型 (第3周)

小目录1.选择1.11.21.31.41.51.61.71.81.91.102.编程2.12.21.选择1.1pow(x, 0.5)能够计算x的平方根,计算负数的平方根将产生:复数解析:>>> pow(-1, 0.5) (6.123233995736766e-17+1j)1.2关于.strip()方法功能说明正确的是:去掉字符串两侧指定字符解析:"去掉字符串...

2020-04-06 22:32:41

[hadoop 那些事] Hadoop源码的编译

文章目录1.首先新建一个干净的虚拟机2.查看编译所需配件3.进入(配件)安装步骤3.1JDK安装3.2 ant安装3.3maven 安装3.4 findbugs3.5 cmake安装3.6 protobuf安装4 编译hadoop源码千辛万苦踩了居多坑之后把hadoop安装好了,进行文件put ls 等一系列操作的时候竟然给我警告,就很烦。如下图接下来较为详细的说明一下编译hadoop源码...

2020-03-16 10:22:55

查看更多

勋章 我的勋章
  • 签到达人
    签到达人
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 技术圈认证
    技术圈认证
    用户完成年度认证,即可获得
  • 新人勋章
    新人勋章
    用户发布第一条blink获赞超过3个即可获得
  • 阅读者勋章Lv2
    阅读者勋章Lv2
    授予在CSDN APP累计阅读博文达到7天的你,是你的坚持与努力,使你超越了昨天的自己。
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv2
    勤写标兵Lv2
    授予每个自然周发布4篇到6篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。
  • 学习力
    学习力
    《原力计划【第二季】》第一期主题勋章 ,第一期活动已经结束啦,小伙伴们可以去参加第二期打卡挑战活动获取更多勋章哦。
  • 原力新人
    原力新人
    在《原力计划【第二季】》打卡挑战活动中,成功参与本活动并发布一篇原创文章的博主,即可获得此勋章。
  • 分享小兵
    分享小兵
    成功上传3个资源即可获取