3 蔡军帅

尚未进行身份认证

好好学习,天天向上!

等级
TA的排名 4w+

大数据Hadoop第十一周——四台电脑的集群配置

大数据第十一周1.物理集群的验证开启本组所有电脑(4台),拷贝虚拟机映像,打开。在开启虚拟机之前,设置虚拟机内存是4G,处理器是4,网络连接是桥接模式。​也可以在图形界面配​把桥接网卡绑定到具体的物理网卡,不要使用自动绑定。设置完成后,启动寻虚拟机。​2.设置网络连接编辑网络配置文件:/etc/sysconfig/network-scripts/ifcf...

2020-05-12 12:39:00

PAT 2020五一线上测试赛 7-3 垃圾分类 (20分)

7-3垃圾分类(20分)据香港《南华早报》2019年7月15日文章,上海严格的垃圾分类新规令不少居民抓狂。这催生出大量帮助找出正确分类答案的App和小程序。目前仅微信上就至少有280种与垃圾处理有关的App,在苹果应用商店也达130种。支付宝表示,已有60多家独立App开发商申请为该平台提供类似服务。本题就请你现场实现一个简单的垃圾分类小助手。输入格式:输...

2020-05-01 20:52:00

PAT 2020五一线上测试赛 7-2 三阶幸福数 (20分)

7-2三阶幸福数(20分)对一个十进制数的各位数字做一次立方和,称作一次迭代。如果一个十进制数能通过h次迭代得到 1,就称该数为三阶幸福数,迭代的次数h称为幸福度。例如 1579 经过 1 次迭代得到 1198,2 次迭代后得到 1243,3 次迭代后得到 100,最后得到 1。则 1579 是幸福数,其幸福度为 4。另一方面,如果一个大于1的数字经过数...

2020-05-01 20:40:00

PAT 2020五一线上测试赛 7-1 Knuth洗牌法 (20分)

7-1Knuth洗牌法(20分)Knuth 洗牌法是生成 { 1, 2, ..., n } 的一个随机重排列的算法。与每次反复随机生成一个数字,直到获得一个不重复的新数字的算法不同,Knuth 洗牌法从原始序列 { 1, 2, ..., n } 开始,逐次洗牌。洗牌的方法是从左到右,每轮从没确定的数字中随机抽取一个数,把它放到确定的位置上。例如令 n 等于 4。...

2020-05-01 20:38:00

大数据Hadoop第九周——Scala开发环境搭建+Scala语言值变量类型表达式

大数据第9周1.Scala开发环境搭建目前具备全部功能的集成开发环境只有Idea。下载解压idea:tar -zxvf ideaIE-2019.3.3.tar.gz。进入bin目录,执行:./idea.sh。选择新建一个project。​接着按如下界面选择。​进入如下界面。输入Project name。​JDK选择我们hadoop系统使用的同一个软件包...

2020-04-26 14:24:00

大数据Hadoop第八周——Wordcount程序的运行+Spark下载解压+Scala语言环境和简介

大数据第8周1.Wordcount程序的运行1.1准备数据上传到hdfs一个英文的文本文件,尽量不要在根目录下。文件内容也不要太多,可以自己数清楚有几个词,方便检查是否正确。1.2写入运行参数当前界面显示出要运行的程序,然后点击主菜单的“run”。并选择“Run Configurations”​双击右侧“Java Appliction”,会自动显示“WordCount”,...

2020-04-21 13:50:00

大数据Hadoop第七周——Eclipse环境下java语言mapreduce程序开发环境配置+WordCount.java详解...

大数据第七周1 Eclipse环境下java语言mapreduce程序开发环境配置1.1 拷贝eclipse软件先拷贝到根目录下,然后解压tar -zxvf eclipse-java-2020-03-R-linux-gtk-x86_64.tar.gz 打开eclipse:进入eclipse 文件夹,输入:./eclipse 1.2 下载hadoop-eclipse插件...

2020-04-14 17:01:00

大数据Hadoop第六周——启动集群并验证

大数据第6周1.启动集群并验证启动集群:start-all.sh启动后先用jps验证线程数是否正确,按照我的配置,master节点线程:​连个slave节点:​为了验证集群mapreduce工作是否正常,可以运行例子程序,例如:进入相应目录hadoop-2.7/share/hadoop/mapreduce,执行:hadoop jar hadoop-mapreduce-e...

2020-04-07 22:50:00

大数据Hadoop第五周——Hadoop系统配置、启动Hadoop集群

大数据第5周 1.Hadoop系统配置 1.1 环境配置 需要配置两个文件:hadoop-env.sh和yarn-env.sh,配置JAVA_HOME变量。 vi hadoop-env.sh,修改成了如下内容: vi yarn-env.sh,增加了一句:export JAVA_HOME=/home/user1/jdk1.8。 1.2 配置core-site.xml...

2020-03-31 12:53:00

大数据Hadoop第四周——免密钥登录设置、配置java和hadoop环境

大数据第4周0.检查联网每次打开虚拟机都无法联网,都忘了打开服务这一步​1.用户名相同要求三个虚拟机的用户名相同,否者相互访问时需要使用用户名,这样集群会有问题。如要新增用户,先转换为root用户su root,然后执行以下操作:添加新用户:useradd 用户名设置用户密码:passwd 用户名添加新用户到wheel用户组(获得sudo权限):usermo...

2020-03-24 14:30:00

(转载)VM虚拟机 自定义(高级)安装win 7系统史上超详细图文教程(附win7 iso镜像资源)...

本文转载自:https://blog.csdn.net/weixin_43288322/article/details/84640995最近开始用wireshark抓包玩,觉得用个虚拟机比较方便,反正要重头装一遍,顺便写给需要的朋友看,这篇主要是自定义安装,毕竟C盘是市中心地价老贵了,首先是做好如下准备:1.已经装好的vM12(网上有很多教程就不重复了)2.win7(32位)镜像资源(...

2020-03-22 16:48:00

ubuntu18.04和centos/.7.1908镜像下载地址

阿里云官方镜像站:https://developer.aliyun.com/mirror/ubuntu18.04:http://mirrors.aliyun.com/ubuntu-releases/18.04/centos/.7.1908:http://mirrors.aliyun.com/centos/7.7.1908/isos/x86_64/...

2020-03-19 12:39:00

大数据Hadoop第三周——Hadoop集群安装

大数据第三周:1.完善CentOS7最小安装版检查是否能上网,进行系统更新,更新命令:sudo yum update​2.远程使用服务器方法没有安装GUI,是server系统常用的,但是本机操作并不是很方便,一般server都是远程使用的。如果在linux或mac系统上远程使用,直接使用ssh远程登陆就可以;如果是windows,没有相应的模块,需要第三方软件,例如:pu...

2020-03-17 10:44:00

大数据Hadoop第二周——配置新的节点DataNode及ip地址

大数据第二周:安装CentOS7最小安装版​磁盘空间不小于30G,将虚拟磁盘存储为单个文件。​自定义硬件界面上,注意要勾选“虚拟化Intel VT-x或AMD-V/RVI(V)”。​在此界面上,“SOFTWARE SELECTION”保持默认,因为默认就是最小安装。最小安装完成后,要配置网络,使其可以上网。打开NameNode虚拟机,在GUI中右键打开一个终端窗口,...

2020-03-17 09:29:00

vm虚拟机中NAT模式怎么连接网络

确认一下你电脑的VMwareDHCPService 和VMwareNATService 这两个服务是否已经启用,有的优化软件会将其停用。

2020-03-16 19:29:00

(转载)带置信区间的拟合线几种绘制方式-在pythonR中的实现

转载自:https://www.jianshu.com/p/4d7d7e4ff4f8基于python的拟合线置信区间首先看下本文作者用自己数据基于python出来的图image.pngimage.png注:第二张图例的slope和p值是后期p上去,第一张图是基于python,第二张是基于R本文引入python的第三...

2020-03-06 00:09:00

Python 元胞自动机模拟——生命游戏

简介元胞自动机(cellular automata) 是离散而抽象的计算系统。元胞自动机在时间和空间上是离散的,最小单位是简单元胞(单元格)。每个元胞会产生有限数量的状态集,后续元胞由其邻域元胞的状态确定。这里所说的领域元胞,是指当前元胞的前一个元胞(记作元胞A)以及元胞A左右两个元胞。也就是说,邻域元胞总共包含三个元胞。给定初始层的状态,基于一定规则,我们可以不断更新下一层元胞的状态。...

2020-03-05 17:05:00

(转载)python画动态图——plt.ion动图使用,训练过程展示

import matplotlib.pyplot as pltx = list(range(1, 100)) # epoch arrayloss = [10 / (i**2) for i in x] # loss values arrayplt.ion()for i in range(1, len(x)): ix = x[:i] iy = loss...

2020-03-05 17:00:00

Python——因子分析(KMO检验和Bartlett's球形检验)

因子分析用Python做的一个典型例子一、实验目的采用合适的数据分析方法对下面的题进行解答二、实验要求采用因子分析方法,根据48位应聘者的15项指标得分,选出6名最优秀的应聘者。三、代码import pandas as pdimport numpy as npimport math as mathimport numpy as npfrom numpy impor...

2020-03-05 16:38:00

机器人编程01——虚拟机VM安装Ubuntu并配置python开发环境

170104100101蔡怡帅机器人第一周1 Ubuntu系统安装右键以管理员身份打开Vmware,点击创建新的虚拟机​在创建向导中选择“典型”​把安装源通过浏览装进来.​把虚拟机名字,用户名、密码输入,用户名和密码都要记住以后要用.​​最大磁盘大小,建议30G以上,勾选“就将此虚拟磁盘存储为单个文件”,这样可以提高虚拟机运行速度。​点击“自定义硬件”,选择...

2020-03-05 13:58:00

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv4
    勤写标兵Lv4
    授予每个自然周发布9篇以上(包括9篇)原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。