- 博客(50)
- 资源 (6)
- 收藏
- 关注
RSS订阅
原创 爬虫百战（三）：爬取B站视频弹幕绘制词云图
今天跟大家分享的爬取B站视频的弹幕并绘制出词云图本次爬虫所有代码在本文结尾贴出爬取B站视频弹幕绘制词云图准备工作撸代码完整代码准备工作昨天是五四青年节，我在B站看了一个名为《哔哩哔哩献给新一代的演讲——后浪》，给我看的热血澎湃????。所以我决定就以它作为试验对象爬取弹幕，绘制词云图。爬虫爬取前的分析是必不可少的，我们首先要找到弹幕在什么地方，要“有的放矢”。在我一番查找之后，我把目标定在了一...
2020-05-05 10:15:30
2065
5
原创 数据分析——关于数据的加载、存储和文件的格式
关于数据的加载、存储和文件的格式文本格式数据的读写主要使用pandas文本格式数据的读写将表格性数据读取为pandas中的DataFrame对象。其中的read_csv和read_table用的最多。pandas常见的解析函数：这些函数将文本数据转换为pandas便于pandas处理的DataFrame对象，这些函数的可选参数主要有以下几种：索引：可以将一个或多个列作为返回的DataFrame，从文件或用户获取列名，也可以没有列名类型推断和数据转换：包括用户自定义的值转换和自
2020-10-24 17:36:36
405
原创 数据结构——深入探析查找问题
查找前言查找关于查找的概念对查找表的操作查找表的分类查找表中的关键字前言今天我们学习的是数据结构数据运算中的查找运算查找关于查找的概念查找表是由同一类型的数据元素（或记录）构成的集合由于集合中的数据元素之间存在着松散的关系，所以查找表是一种应用灵便的结构对查找表的操作查询某个特定的数据元素是否在查找表中检索某个特定的的数据元素的各种属性在查找表中插入一个数据元素在按查找表中删除一个数据元素查找表的分类查找表可以分为以下两种：静态查找表仅仅只是作为查询和检索动
2020-06-23 17:21:46
709
原创 数据结构——C语言可变参数详解
有时，我们会碰到这样的情况，我们希望函数带有可变数量的参数，而不是预定义数量的参数。C语言为这种情况提供了一个解决方案，它允许我们定义一个函数，能根据具体的需求接受可变数量的参数。例如：int func(innt ,...) { . . .}int main() { func(2,2,3); func(3,2,3,4);}函数func()最后一个参数写成省略号即三个点号（…），省略号之前的那个参数int代表了要传递的可变参数的总数。要实现可变参数这个功能需要导入头文件<.
2020-06-16 11:23:18
417
原创 数据结构与算法——图
图图的定义和术语一、图的定义和术语有向图无向图有向完全图和无向完全图稀疏图和稠密图二、基本操作图的存储结构图的遍历(连通网的)最小生成树拓扑排序关键路径两点之间的最短路径问题图的定义和术语一、图的定义和术语图（Graph）——图G是由两个集合V（G）和E（G）组成的。记为G=（V,E）其中：V(G)是顶点的非空有限集E(G)是边的有限集合，边是顶点的无序对或有序对权——...
2020-06-14 23:14:26
693
原创 python从零到一之基础篇 终章 面向对象基础
python 基础篇前言面向对象基础面向对象和面向过程区别对象的进化类的定义__init__构造方法和__new__方法实例属性和实例方法类对象类属性类方法静态方法内存分析实例对象和类对象创建过程（重要）__ del __ 方法(析构函数)和垃圾回收机制__ call__方法和可调用对象方法没有重载方法的动态性私有属性和私有方法（实现封装）@property装饰器属性和方法命名总结类编码风格实操作业第 六 章 面向对象进阶（二）面向对象三大特征介绍继承语法格式类成员的继承和重写查看类的继承和重写obje
2020-06-11 16:13:52
297
原创 实现算法过程中的小经验——关于fflush(stdin)的使用
关于fflush(stdin)的使用#include <stdio.h>#include <stdlib.h>int main() { int i; for(;;) { fputs("Please input an integer: ", stdout); scanf("%d", &i); printf("%d\n", i); } return 0;} 这个程序首先会提示用户输入一个整数，然后等待用户输入，如果用户
2020-06-10 11:01:40
624
原创 数据结构——树与二叉树
树和二叉树树和二叉树树的定义和基本术语定义基本术语森林的简单定义线性结构和树型结构树的基本操作（下面会具体存储结构进行实现）二叉树定义二叉树的五种基本形态二叉树的性质两种特殊的二叉树二叉树的存储结构二叉树的顺序存储表示二叉树的链式存储表示二叉链表三叉链表遍历二叉树和线索二叉树遍历二叉树线索二叉树树是一类重要的非线性数据结构树和二叉树树的定义和基本术语定义树是n个结点的有限集T其中：有且仅有一个特点的结点称为树的根当n>1时，其余的结点可分为m个互不相交的有限集T1，T2……T
2020-06-09 14:26:11
405
原创 谈谈爬虫过程中遇到的unicode编码和utf-8编码
爬虫过程中我们总是会遇到字符串编码问题，由于互联网发展至今，涌现了各式各样的编码，所以处理这种问题起来让人头疼。为了理清楚它们之间的关系，我写了这篇博客。因为计算机只能处理数字，如果要处理文本，就必须先把文本转换为数字才能处理。最早的计算机在设计时采用8个比特（bit）作为一个字节（byte），所以，一个字节能表示的最大的整数就是255（二进制11111111=十进制255），如果要表示更大的整数，就必须用更多的字节。比如两个字节可以表示的最大整数是65535，4个字节可以表示的最大整数是429496.
2020-06-02 17:14:07
1083
原创 计算机网络实验——虚拟局域网（VLAN）实验
虚拟局域网实验实验拓扑图实战需完成的工作使用两种方法划分VLAN按要求将端口静态地划分到VLAN中删除VLAN信息开始实验1、SWA的基本配置2、SWB的基本配置3、划分VLAN和静态地将端口划分到VLAN中4、查看配置5、实测VLAN6、删除VLAN信息实验拓扑图实战需完成的工作分别将交换机命名为SWA、SWB划分虚拟局域网VLAN，并静态地把端口划分到VLAN中使用两种方法划分VLAN在全局模式下划分VLAN，使用这种方法在SWA交换机上创建三个VLAN，分别为VLAN2，VLAN
2020-05-25 08:49:18
8323
1
原创 数据结构——栈
栈和队列栈和队列介绍特点栈、队列与一般线性表的区别栈——stack栈的基本运算栈的存储结构顺序栈栈和队列介绍栈和队列是在软件设计中常用的两种数据结构，它们的逻辑结构和线性表相同特点栈和队列在运算上受到了限制：栈是按照“后进先出”的规则进行操作，队列按照“先进先出”的规则进行操作，它们也被称作运算受限的线性表。栈和队列是限定插入和删除只能在表的端点进行的线性表栈、队列与一般线性表的区别栈和队列是一种特殊的（操作受限）线性表区别：仅在于运算规则不同一般线性表：逻辑结构：一对一存储结
2020-05-24 18:03:57
1236
原创 python从零到一之基础篇 第 五 章 函数
python基础篇第 五 章 讲解函数前言函数是什么？python函数种类有哪些？怎么定义和调用函数？定义函数什么是形参？什么是实参？函数的注释返回值对函数深层次分析变量的作用域（全局变量和局部变量）局部变量和全局变量效率测试参数的传递传递可变对象的引用传递不可变对象的引用浅拷贝和深拷贝传递不可变对象包含的子对象是可变的情况参数的几种类型位置参数默认值参数命名参数可变参数强制命名参数lambda表...
2020-05-21 18:04:50
345
原创 数据结构——线性表
线性表线性结构线性结构的特点线性表线性表的类型定义线性表上的基本操作线性表的顺序表示和实现线性表顺序表示线性表实现顺序存储结构的优缺点线性表的链式表示和实现线性链表的定义（单链表）单链表的操作动态建立单链表算法单链表特点重新定义带头结点的单链表类型循环链表双向链表双向循环链表线性表的应用——一元多项式的表示及相加单链表的结点定义一元多项式相加线性表——顺序表的定义及其上的操作线性表——链表的定义及其上的操作线性结构线性结构是一个数据元素的有序集线性结构的特点在数据元素的非空有限集中：集合
2020-05-19 15:21:48
479
原创 计算机网络实验——划分子网
子网掩码和划分子网子网掩码和划分子网的实验拓扑图子网掩码的算法什么是网关子网掩码和划分子网的实验拓扑图子网掩码的算法假如我们有三个不同的子网，每个网络的host数量分别为20（甲网）,25（乙网）,50（丙网），但是只申请了一个网络标识符（Network ID）——192.168.10.0.首先我们将甲网和乙网的子网掩码（Subnet Masks)改为255.255.255.224,224的二进制是11100000，即子网掩码为：11111111.11111111.11111111.11100000
2020-05-18 09:41:30
4966
原创 大数据生态组件——Spark学习（搭建spark完全分布式环境）
学习sparkSpark下载安装spark下载spark安装spark熟悉spark的目录结构配置环境变量配置spark完全分布式集群配置spark的环境变量文件`spark-env.sh`配置spark的slaves文件同步文件测试spark完全分布式集群本次带来的是spark的学习使用教程Spark下载安装spark下载sparkhadoop搭建及其他一些生态圈组件安装可查看我的另一篇博客一文搞定hadoop及其生态圈组件的安装，赶紧收藏起来吧！去开源社区下载spark，注意版本和你ha
2020-05-16 22:20:44
673
原创 机器学习——关联规则实战训练
关联规则实战训练关联规则关联规则实战索引由k个项构成的集合X==>Y含义：事物仅包含其涉及到的项目，而不包含项目的具体信息支持度（support）：一个项集或者规则在所有事务中出现的频率，σ(X):表示项集X的支持度计数置信度（confidence）：确定Y在包含X的事务中出现的频繁程度。c(X → Y) = σ(X∪Y)/σ(X)(X , Y)==>Z :设最小支持度为50%, 最小可信度为 50%, 则可得到 :提升度（lift）：物品集A的出现对物品集B的出现概率发生了多大的变化Lever
2020-05-16 17:07:10
1497
原创 数据分析——使用pandas进行数据处理
使用pandas进行数据处理概念介绍pandas模块介绍Series和DataFrameSeries简介DataFrame简介DataFrame的常用属性方法创建DataFrame概念介绍pandas模块介绍pandas是python的一个数据分析包。。pandas最初被作为金融数据分析工具而开发出来，因此，pandas为时间序列分析提供了很好的支持。pandas的名称来自于面板数据（panel data）和Python数据分析（data analysis）。panel data是经济学中关于多维数据
2020-05-16 13:34:47
5136
原创 数据挖掘——聚类分析之相似系数
本文介绍的是数据挖掘技术中的聚类分析聚类分析（重点是相似系数）聚类的概念和应用什么是聚类聚类的应用数据类型分类型数值型数值型和分类型的相互转化数据的标准化（正规化）相似度量相似度量方法分类距离度量方法相似系数度量匹配系数——ExampleJaccard 系数和简单匹配系数的差别聚类方法的分类聚类的概念和应用什么是聚类聚类分析依据对象自身的相似性把一组对象划分成一系列有意义的子集的过程最大的组内相似性:同一聚类中的对象尽可能地相似最小的组间相似性:不同聚类中的对象尽可能地不同聚类: 对象.
2020-05-15 11:15:34
5866
原创 centos6.X版本离线安装MySQL
准备工作下载好安装文件：上传到centos操作系统的~/downloads，没有该目录可以创建以下，以后把安装文件的安装包统一放到这里便于管理。观察系统中是否安装过MySQL文件[hadoop@s1 ~]$ rpm -qa | grep -i mysql # i指的是不区分大小写mysql-libs-5.1.73-3.el6_5.x86_64可以观察到系统自带了一个MySQL文件卸载该文件否则后续工作无法进行：sudo rpm -e mysql-libs-5.1.73-3.el6
2020-05-14 13:27:23
328
1
原创 centos6及centos7平台上搭建人工智能深度学习框架tensorflow
centos6及centos7平台上搭建人工智能深度学习框架tensorflow安装前说明centos6（以centos6.6演示）源码安装python3和tensorflow观看centos自带的python版本安装必要的依赖包解压python3并编译安装建立软链接升级pip3使用pip3安装tensorflow升级GLIBC_2.12 到GLIBC_2.17升级CLIBCXX（可选）测试tensorflow安装完成centos7（以centos7.2演示）源码安装python3和tensorflow安装
2020-05-14 13:06:50
480
原创 手把手教你掌握网站建设、APP设计以及Logo和图标生成
一文带你掌握网站建设、APP设计以及Logo和图标生成网站建设服务器USBwebserver简介USBwebserver使用方法程序WordPress简介域名APP设计APP开发APP原型设计了解MockPlus使用Mockplus进行APP原型设计LOGO和图标ｐｈｏｔｏｓｈｏｐ使用纯文字的LOGO设计纯图形的ＬＯＧＯ设计将文字和形状混合前言：本文所需所有软件均已打包上传至我的资源，也可以去官网下载。网站建设网站 = 服务器 + 程序 +域名服务器有条件可以到阿里云官网租赁服务器，本次实验我
2020-05-13 04:27:09
828
原创 计算机网络实验——认识PacketTracer软件
PacketTracer介绍PacketTracer介绍安装PackerTracer认识PackerTracer简单的使用IP地址的配置保存一个做好的项目文件PacketTracer介绍Packet Tracer是Cisco公司针对CCNA认证开发的一个用来设计、配置和故障排除网络的模拟软件。Packer Tracer模拟器软件比Boson功能强大，比Dynamips操作简单，非常适合网络设备初学者使用。安装PackerTracer下载PackerTracer一步一步安装即可安装完成后进入登
2020-05-11 09:19:43
1747
原创 一文搞定hadoop及其生态圈组件的安装，赶紧收藏起来吧！
大数据项目综合能力练习前言虚拟机的安装hadoop环境搭建前言本篇博客主要内容是：本次练习所需的安装包均已上传至我的资源，当然这些都是开源软件，建议在去官网下载，但务必注意软件版本之间的联系。虚拟机的安装hadoop环境搭建我使用的linux发行版是这个版本的hadoop有啥区别...
2020-05-10 14:19:54
658
原创 centos7 使用yum命令出错的问题
在执行yum命令时，如 yum install XXX时，并没有执行安装操作，而是出现以下报错：Loaded plugins: fastestmirrorError: invalid clean argument: 'yum' Mini usage: clean [headers|packages|metadata|dbcache|plugins|expire-cache|all] Remove cached data[root@localhost ~]# yum install g
2020-05-10 07:22:35
1533
原创 爬虫百战（5）——使用自动化工具selenium爬取淘宝数据
在此声明：本次爬虫数据仅作为学术探讨，不用于商业。如有侵权，联系立删！！！使用自动化工具selenium爬取淘宝数据准备工作爬虫所需的库和浏览器驱动网页分析工作网页分析代码实操效果展示准备工作爬虫所需的库和浏览器驱动本次爬虫所需要的库selenium#可使用pip命令安装pip install seleniumcsvretime安装浏览器驱动以谷歌浏览器为例，在浏览器地址栏中输入chrome://version/查看浏览器版本谷歌的驱动：chromedrive.
2020-05-09 22:51:38
564
原创 不会正则表达式你睡得着觉？——python第三方库re库的介绍
re库的介绍什么是正则表达式正则表达式的匹配规则python中的re库re库的使用complie函数在爬取网站所有的内容后，我们不会一股脑的将数据都保存下来，通常我们要过滤，拿到我们想要的就好，其它就丢一旁。那么，我们就需要学会怎么使用正则表达式，通过它我们才能过滤出我们想要的内容。什么是正则表达式正则表达式，又称规则表达式，通常被用来检索、替换那些符合某个模式(规则)的文本。正则表达式...
2020-05-09 15:35:13
510
原创 python爬虫零基础学习（四）配置python爬虫环境
python爬虫环境的准备概要python爬虫相关库的介绍及配置配置MySQL数据库windows系统上linux操作系统上配置MongoDb数据库windows系统上安装linux系统上安装概要了解python中常用的爬虫库了解MySQL数据库的配置方法了解MongoDb数据库的配置方法python爬虫相关库的介绍及配置python整合了许许多多用于爬虫开发的库，使用python开发爬虫需要了解python中常用的爬虫库的特点、功能及配置方法。urllib库在安装python时就已经给
2020-05-08 18:49:56
870
原创 爬虫百战（四）——爬取yy短视频
今天跟大家分享的是爬取YY网站短视频本次爬取所有代码在本文结尾贴出爬取YY短视频准备工作撸代码准备工作首先，我们本次爬取的网站URL为https://www.yy.com/sv。点击链接进入网站后，我们要开始分析网页啦????接下来就是“经验”环节啦（也就是把刷新页面后Network下出现的数据包一个一个点击去看看），在我“不懈努力”之下，我发现了视频存储的位置：我们可以发现该数据...
2020-05-08 13:56:41
1290
原创 python爬虫零基础学习（三）说说什么是爬虫
本篇介绍的是网络爬虫的相关概念概要1.什么是爬虫2.细分爬虫的种类3.爬虫有关的协议4.网站的反爬机制及对应的反反爬策略爬虫爬虫是什么爬虫就是编写程序来模拟浏览器上网并让程序去互联网上获取数据的过程。爬虫为什么以python语言实现较多爬虫可以由很多语言来实现，比如：Java：Java可以非常好的处理和实现爬虫，是唯一可以同python抗衡的语言，但是使用Java实现起来...
2020-05-05 18:05:15
315
转载 python从零到一之基础篇 第 四 章 流程控制语句
python基础篇第 四 章 控制语句前言pycharm开发环境的使用pycharm下载和安装激活和选择不同UI风格创建项目和初始配置选择结构单分支选择结构条件表达式详解双分支选择结构三元条件运算符多分支选择结构选择结构嵌套循环结构while循环for循环和可迭代 对象遍历可迭代对象range对象break语句continue语句else语句循环代码优化其他优化手段使用zip（）并行迭代推导式创建...
2020-05-05 11:09:08
301
原创 python从零基础直达神经网络之基础篇 第 三 章 序 列
python基础篇第 三 章 序 列前言列表简介列表的创建基本语法[]创建list()创建range()创建整数列表推导式生成列表（重点在于for循环）列表元素的增加与删除append()方法+运算符操作extend()方法insert()插入元素乘法扩展列表元素的删除del删除pop()方法remove()方法列表元素访问和计数通过索引直接访问元素index()获得指定元素在列表中首次出现的索引...
2020-05-03 19:19:09
524
原创 Matplotlib数据可视化——综合练习一（基础图表、饼图、直方图、柱状图、极坐标图、散点图的绘制）
基础图表、饼图、直方图、柱状图、极坐标图、散点图的绘制前言题一：利用matplotlib库文件，画图函数y=x^2的图形。结合图中的颜色标出横纵坐标。题二： 利用matplotlib库文件，画图函数y=x^2的图形。结合图中的颜色标出横纵坐标。题三： 利用matplotlib库文件，画图函数y=cos(2πx)的图形。结合图中的颜色标出横纵坐标。前言在练习之前，需要掌握的知识：numpy...
2020-05-03 00:42:48
3324
原创 数据结构与算法——leetcode篇（一）
leetcode练习（一）题一：求给定二叉树的最小深度题二：计算逆波兰式（后缀表达式）的值题三：对于给定的n个位于同一二维平面上的点，求最多能有多少个点位于同一条直线上题四：在O(n logn)的时间内使用常数级空间复杂度对链表进行排序题五：使用插入排序对链表进行排序题一：求给定二叉树的最小深度题目描述：求给定二叉树的最小深度。最小深度是指树的根节点到最近叶子节点的最短路径上的结点的数量。...
2020-05-01 14:20:51
329
原创 Echarts数据可视化学习——入门篇
Echarts入门篇Echarts简介下载安装Echarts下载Hbuilder创建项目绘制图形补充Echarts简介Echarts是一个使用 JavaScript实现的开源可视化库，提供大量常用的数据可视化图表，创建了坐标系、图例、提示、工具箱等基础组件，并在此上绘制折线图、柱状图、饼图、散点图、地理坐标/地图、K线图、雷达图、盒须图、热力图等，且同时支持任意维度的堆积和多图表混合展现。...
2020-04-30 20:32:07
1675
1
原创 前端学习第一弹——HTML和CSS篇
HTML和CSS前端必备知识1. B/S软件的结构2.前端开发流程3.网页的组成部分HTML学习HTML简介创建HTML文件HTML文件的书写规范HTML标签介绍前端必备知识1. B/S软件的结构JavaSE c/s client ServerB/S Browser server2.前端开发流程3.网页的组成部分...
2020-04-30 16:45:40
173
原创 python从零基础直达神经网络之基础篇 第二章 编程基础概念（二）
python基础篇第 二 章 编程基础概念（二）字符串的基本特点字符串的编码引号创建字符串空字符串和len()函数转义字符字符串拼接字符串复制不换行打印从控制台读取字符串str()实现数字转型字符串使用[] 提取字符replace() 实现字符串替换字符串切片slice操作split()分割和join()合并字符串驻留机制和字符串比较字符串比较和同一性成员操作符字符串常用方法汇总字符串格式化可变字...
2020-04-30 13:19:08
380
原创 python难点解析——lambda匿名函数
python难点解析之lambda匿名函数lambda简介lambda与def不同之处lambda的使用方法有参无参lambda简介先来看个代码：第一行是lambda声明，x,y相当于传入的参数，整个函数会返回x+y的值。lambda作为一个表达式，定义了一个匿名寒素。上述的代码x,y为入口参数，x+y为函数体。在这里lambda简化了函数定义的书写形式python使用关键字lambda...
2020-04-29 20:08:37
231
原创 python从零基础直达神经网络之基础篇 第二章 编程基础概念（一）
python基础篇第 二 章 编程基础概念（一）Python 程序的构成Python文件的创建和执行代码的组织和缩进使用注释#使用\行连接符对象引用标识符python 标识符命名规则变量和简单赋值语句变量的声明和赋值删除变量和垃圾回收机制链式赋值系列解包赋值常量最基本内置数据类型和运算符数字和基本运算符整数浮点数类型转换和四舍五入增强型赋值运算符时间的表示布尔值比较运算符逻辑运算符同一运算符整数缓...
2020-04-29 14:08:47
280
Mockplus_Setup_v3.6.1.4.exe
2020-05-13
USBWebServer.zip
2020-05-12
PacketTracer-7.2.2-win32-setup.exe
2020-05-11
mongdb安装.zip
2020-05-03
Navicat for MySQL(1).rar
2020-05-03
FiddlerSetup.exe
2020-04-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人