- 博客(51)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Sublime Text安装及使用
Sublime Text安装及使用一、Sublime Text安装谷歌浏览器>>搜索baidu.com>>搜索sublime 进入中文网页单机DOWNLOAD FOR (WINDOWS)进行下载 （自动绑定操作系统）找到下载的安装包点击出现安装界面，Next即可 打开文件所在位置，创建桌面快捷方式二、创建文件1.桌面创建 .txt文件，拖拽到Sublime Text中2.打开Sublime Text创建3.untit..
2020-05-17 22:52:24
635
原创 前端 介绍
一、Web前端开发Web：即web系统，指以网站形式呈现出来，用户通过浏览器访问（电商网站、综合门户网站、管理系统等） 前端：即网页上为用户呈现的部分，用户可以接触到 后端：与数据库交互的部分，完成数据存取（后端查找数据，返回给前端） 网站架构 → 网页美工 → 前端开发 开发：编写代码二、前端视觉和交互领域前端技术支持范围：网页、网站、移动端H5小游戏、特效、大数据可视化、VR虚拟现实等 2. 前端工程师工作领域：金融理财、居家生活、聊天社交...
2020-05-17 22:40:21
431
原创 jieba,nltk,wordcloud安装流程
Python中安装jieba、nltk、Wordcloud流程（win10系统）安装jieba —— 中文文本挖掘下载安装包，并解压复制解压包位置打开运行窗口，输入cmd； 快捷键Windows + R（win10系统）切换到安装包所在目录：cd C:\Python jupter\package\jieba-0.39查看目录内容 （可知与包中内容一致）：dir...
2020-02-09 21:21:22
315
原创 Python介绍（18）
3.16 Python爬虫 （四）全部信息：In [10]:house_url = 'https://bj.lianjia.com/zufang/101102627382.html'soup = get_page(house_url)price = soup.find('span',class_='total').textunit = soup.find('span',class_='unit')...
2018-07-01 00:17:24
306
原创 Python介绍（17）
3.15 Python爬虫 （三）上述获取了列表，下面用函数表示: 封装成函数，作用是获得列表页下面的所有租房页面的链接，返回一个链接列表In [151]:import requestsfrom bs4 import BeautifulSoup封装成函数：作用是，获取列表页(get_links)下面的所以租房页面的链接，返回一个链接列表。In [180]:def get_links(url):...
2018-06-30 01:05:26
815
原创 Python介绍（16）
3.11 Python操作数据库 （三）插入操作：#去掉id,因为它是字增长的In [ ]:sql = "insert into 'class'('name') values('高一四班')cursor = db.cursor()cursor.excute(sql)cursor.excute(sql) #可以执行两次db.commit()删除操作：In [ ]:sql = "delete fro...
2018-06-28 18:07:02
332
原创 Python介绍（15）
3.4 Mysql数据库与Excel的不同拆表操作Excel：1.储存有限2.呈现的是全部数据Mysql:1.去除重复信息2.编号关联起来3.分开4.增加信息可以分别在每个表中增加3.5 命令行操作数据库 （一）使用命令行操作数据库视频中：使用 sequel pro 进行操作（和在终端执行效果是一样的）#创建数据库In [ ]:create database Examination_cop...
2018-06-27 18:11:17
173
原创 Python介绍（14）
2.13 类 （二）继承(前面的 person)In [204]:class student(person):pass # pass 什么都不做，只是占个位置而已In [208]:s = student('liu',24)s.get_nameOut[208]:'liu'In [206]:class student(person):def set_score(self,score):se...
2018-06-26 18:39:06
167
原创 Python介绍（13）
2.12 类 （一）In [184]:s = 'hello world' # s ：就是字符串类的一个对象s.center(12) # center : （翻译：中央）调用的self，s本身Out[184]:'hello world 'In [185]:class person:def __init__(self,name,age):self._name = nameself....
2018-06-25 21:12:24
249
原创 Python介绍（12）
2.11 函数 （四）装饰器In [130]:a = 10b = [12,12]def test():print('test')c = testIn [131]:cOut[131]:<function __main__.test>In [132]:c.__name__# c 实际是 testOut[132]:'test'可以把函数赋值给一个变量写函数时往往是有返回值的，函数可以返回...
2018-06-24 17:42:33
172
原创 Python介绍（11）
2.9 函数 （二）函数定义：函数是组织好的，可重复使用的，能够完成特定功能的代码块，它是代码块的抽象。In [108]:get_keys({'a':40},40)Out[108]:['a']位置参数是不可以交换位置的In [109]:def get_keys(dict_varibal,value):return[k for k,v in dict_varibal.items() if v ...
2018-06-22 23:27:18
223
原创 Python介绍（10）
2.7 循环 （四）for循环可以构建推导式——从一个数据序列构建另数据序列的方法In [90]:random_numbers = list(range(10))random_numbersOut[90]:[0, 1, 2, 3, 4, 5, 6, 7, 8, 9]#运用for循环在上个列表的基础上定义一个新列表，较麻烦，下面是简单方法In [91]:new_numbers = []for nu...
2018-06-21 21:08:15
208
原创 Python介绍（9）
2.6 循环 （三）#常遇到变异的问题，列出前面的random_numbersIn [68]:random_numbersOut[68]:[4, 2, 2, 1, 3, 3, 1, 10, 10, 3, 6, 4, 4, 4, 3, 6, 1, 6, 10, 10]#用for只对里面的偶数进行处理In [69]:for number in random_numbers: #翻译：对于ra...
2018-06-20 21:19:17
143
原创 Python介绍（8）
2.3 循环 （一）循环分两类：for循环 —— 遍历循环while循环 —— 条件循环for 循环In [37]:costs = [3,4,12,23,43,100]for cost in costs: # 翻译：以成本为代价print('消费{}元'.format(cost))消费3元消费4元消费12元消费23元消费43元消费100元In [61]:costs = [3,4,12,23,4...
2018-06-19 17:22:34
300
原创 Python介绍（7）
2.2条件判断 （二）布尔型变量做运算#布尔型做and or运算时返回的依然是bool类型的In [28]:a = Trueb = Falseprint('a and b is {}'.format(a and b))print('a or b is {}'.format(a or b))a and b is Falsea or b is True非布尔型变量做and or not运算#非布尔，...
2018-06-18 17:19:47
242
原创 Python介绍（6）
1.15变量类型—字典类型（二）需要生成一个字典：有5个学生，初始默认给每个学生发10元钱，用字典表示In [159]:students = ['wang','li','sun','zhao','qian']#生成字典非常便捷的函数 fromkeys ,给定序列的对象（students），给定一个初始化的值10In [160]:dict.fromkeys(students,10)Out[16...
2018-06-16 07:46:47
226
原创 Python介绍（5）
1.13变量类型—列表类型（三）#a和b两个列表相加，并返回一个新的列表In [107]:a = [1,2]b = [3,4]a+bOut[107]:[1, 2, 3, 4]#b拼接在a的后面，a的列表变了In [109]:a.extend(b)aOut[109]:[1, 2, 3, 4]In [110]:aOut[110]:[1, 2, 3, 4]#在0的位置插入100In [111]:...
2018-06-14 21:13:28
342
原创 Python介绍（4）
1.10变量类型—字符串类型（三）#计数函数In [64]:line.count('A')Out[64]:1#判断是否以给予的（'TJHF'）字符串结尾In [65]:line.endswith('IJHF')Out[65]:False#是否以给予的字符串开始In [68]:line.startswith('ASDF')Out[68]:True#寻找A字符，返回第一个为A字符的下...
2018-06-13 21:34:52
216
原创 Python介绍（3）
bool型的运算：与运算、或运算、非运算#与运算，同为真则为真In [26]:Ture and TureOut[26]:1#或运算，只有一个为真则为真In [28]:Ture or FalseOut[28]:1#非运算，取反操作In [29]:not FalseOut[29]:True不建议使用bool型，但后面会有一个特例用以下操作符都会返回bool类型，即Ture或Fa...
2018-06-11 21:14:30
178
原创 Python介绍（2）
1.3变量—命名规范变量：代表某个值的名称语法糖 交换a和b的值In [46]:a=10b=20a,b=b,aIn [47]:print("a is {},b is{}".format(a,b))a is 20,b is 10命名规范：1、标识符的第一个字符必须是字母表中的（26个）字母（大写或小写）或者是一个下划线。%aaschui，9sjabadous都是错误的，首字符不可是符号或数字2、标识...
2018-06-10 17:01:23
233
原创 Python介绍（1）
1.Python介绍1.1Python介绍（一） 1.2Python介绍（二）打印#print 打印一行字符串In [1]: print("hello,world")Out[1]: hello,worldprint:是打印函数；（）内可以是任意的参数，任意的对象；引号单、双均可，默认是引号开始，引号结束，如想输出单引号或双引号要用到转义字符\,如下：In [2]: print("hello,\"w...
2018-06-09 08:34:38
670
原创 Hadoop搭建笔记（30）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。53、Yarn的ha配置和测试：官网：http://hadoop.apache.org/docs/current/YARN模块，ResourceManager HA （HA一般都是老大的HA）网址...
2018-06-03 14:15:19
210
原创 Hadoop搭建笔记（29）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。52、Hdfs的ha测试：解压后：配置环境变量：[root@hadoop01 zookeeper-3.4.12]# cd ../hadoop-2.7.1[root@hadoop01 hadoop-2...
2018-06-03 08:17:26
245
原创 Hadoop搭建笔记（28）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。50、Hdfs的ha介绍：Hadoop集群1.X 单节点故障问题ha是Hadoop集群的高可用看图片可知，集群，一个NameNode管理3台DataNode；这样的集群存在着问题，一旦Name...
2018-06-02 17:16:31
533
原创 Hadoop搭建笔记（27）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。49、Zookeeper的shell命令：[root@hadoop01 zookeeper-3.4.12]# zkCli.sh[zk: localhost:2181(CONNECTED) 0]zk...
2018-06-01 11:52:13
193
原创 Hadoop搭建笔记（26）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。48、Zookeeper集群的搭建:Zookeeper保证分布式服务更加高可靠，一般是3台、5台、7台；单机版，集群下载：[root@hadoop01~]# cd /home/[root@hadoo...
2018-05-31 21:04:48
365
原创 Hadoop搭建笔记（25）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。46、Rpc协议案例：47、Zookeeper的基本概念：1、Zookeeper是什么：Apache ZooKeeper网址：http://zookeeper.apache.org/Apac...
2018-05-31 15:47:55
139
原创 Hadoop搭建笔记（24）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。42、Maven的安装：maven：本地仓库1.在Windows中安装maven（写代码用maven管理）apache-maven-3.3.9-bin安装包位置在：D盘的VM中①解压到当前目录 ...
2018-05-29 21:14:26
188
原创 Hadoop搭建笔记（23）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。40、Ssh免登陆配置：上面集群搭建好，也已经测试成功，但是在启停集群服务时需要输入密码，如果是几十台的就要一直输入密码，密码多次输入会导致服务不能正常启动或停止借助ssh的免登陆：ssh：安全的一...
2018-05-29 16:56:48
859
原创 Hadoop搭建笔记（22）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。38、Hadoop的集群配置02：[root@hadoop01 hadoop-2.7.1]# ll ./etc/hadoop/mapred-site.xml.template -rw-r--r--....
2018-05-28 21:21:12
425
原创 Hadoop搭建笔记（21）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。36、克隆服务器：克隆hadoop1,克隆成hadoop3修改网卡信息 vi /etc/udev/rules.d/70-persistent-net.rules删掉：PCI device0x...
2018-05-28 16:24:34
163
原创 Hadoop搭建笔记（20）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。34、Yarn的流程介绍：HadoopMapReduce1简单的运行流程：两个Client，每个颜色的Client代表一个单个的作业 Job Submission ：作业提交，提交给Job Tra...
2018-05-27 17:59:14
208
原创 Hadoop搭建笔记（19）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。32、Hdfs的文件读写流程：写数据流程：HDFS Clicnt：能操作文件的地方open调用了一个类，这个类叫DistributedFilesystem（分布式文件系统）打开Distribut...
2018-05-26 15:07:04
184
原创 Hadoop搭建笔记（18）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。31、Hdfs 的相关内容介绍：官网：http://hadoop.apache.org/index.htmlHadoop三大核心、四大模块：HDFS的介绍：HDFS设计目标：注解上面的3.4....
2018-05-24 21:24:38
284
原创 Hadoop搭建笔记（17）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。30、Hadoop 单机版安装及应用：三种安装模式：Local (Standalone) Mode单机版Pseudo-Distributed Mode伪分布式Fully-Distribu...
2018-05-24 15:44:26
432
原创 Hadoop搭建笔记（16）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。29、Hadoop的简单介绍：Apache Hadoop官网地址：http://hadoop.apache.org1.Hadoop是什么？Apache Hadoop平台是一个可靠的、可扩展的、可...
2018-05-23 21:17:29
195
原创 Hadoop搭建笔记（15）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。27、shell中的文件引入：（在一个文件里引入另一个文件的代码）和其他语言一样，shell也可以包含外部脚本，这样可以很方便封装一些公用的代码作为一个独立的文件。shell文件包含的语法格式如下：...
2018-05-23 16:30:13
220
原创 Hadoop搭建笔记（14）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。25、shell中的循环、casein、continue、break：循环：for、while、untilfor循环：for var in item1 item2…itemN 【item1 i...
2018-05-22 16:46:38
166
原创 Hadoop搭建笔记（13）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。23、shell中的运算符：shell和其他编程语言一样，支持多种运算符，包括：数学运算符（加，减，乘，除，模）、关系运算符（大，小，比较）、布尔运算符（是，非，and）字符串运算符（判断字符串是否...
2018-05-21 21:16:12
205
原创 Hadoop搭建笔记（12）
本文是我学习Hadoop搭建过程中的各种笔记，内容来自于各种公开的教程，起点非常低，从Linux基础开始，直至在PC上搭建Hadoop成功，是真正的从零开始。感谢过程中帮助我的各位认识的和不认识的老师。22、shell中的数组和注释：shell数组：bash（shell的一种解释器）支持一维数组（不支持多维数组），并且没有限定数组大小。类似与C语言，数组元素的下标由0开始编号。获取数组中的元素要利...
2018-05-21 15:55:41
133
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人