- 博客(10)
- 收藏
- 关注
RSS订阅原创 爬虫学习（四）
爬虫学习（四）1.任务2.实现3.结果1.任务模拟登录丁香园，并抓取论坛页面所有的人员基本信息与回复帖子内容http://www.dxy.cn/bbs/thread/626626#6266262.实现思路：1.selenium模拟浏览器登陆2.xpath匹配获取内容存储数据代码：import timefrom selenium import webdriverfrom se...
2019-04-13 18:50:14
144
原创 爬虫学习（三）
爬虫学习（三）1.任务2.selenium2.1 Selenium安装与学习2.2 Selenium模拟登陆3. IP和代理池3.1 IP和封IP3.2 代理池构建4.参考资料1.任务安装selenium并学习；使用selenium模拟登陆163邮箱；学习什么是IP，为什么会出现IP被封，如何应对IP被封的问题。抓取西刺代理，并构建自己的代理池2.selenium2.1 Sele...
2019-04-11 19:18:56
151
原创 爬虫学习（二）
爬虫学习（二）1. beautifulsoup2. xpath任务：提取丁香园论坛的回复内容1. beautifulsoup基础语法：参考文档代码：import urllib.requestfrom bs4 import BeautifulSoup as bsdef main():headers = {‘User-Agent’: ‘Mozilla/5.0 (Windows; ...
2019-04-09 11:18:47
134
原创 爬虫学习（一）
爬虫学习（一）1.1 学习get与post请求1.2 尝试用requests发送get请求1.3 申请返回的状态码1.4 请求头2.1 正则表达式2.2 豆瓣top250爬取实战3 遇到的问题参考资料1.1 学习get与post请求get 和 post是HTTP中请求数据的方法：GET 请求指定的页面信息，并返回实体主体；POST 向指定资源提交数据进行处理请求（例如提交表单或者上传文件）...
2019-04-07 12:31:27
259
原创 MySQL 实战(二）
MySQL 实战 - 复杂项目1.行程和用户2.各部门前3高工资的员工3.分数排名1.行程和用户Trips 表中存所有出租车的行程信息。每段行程有唯一键 Id，Client_Id 和 Driver_Id 是 Users 表中 Users_Id 的外键。Status 是枚举类型，枚举成员为 (‘completed’, ‘cancelled_by_driver’, ‘cancelled_by_cl...
2019-03-04 18:20:13
307
原创 MySQL 实战（一）
MySQL实战（一）1.数据导入导出1.1 Navicat导入，导出向导1.2 MySQL导入导出语句1.3 mysqlimport2.实战2.1 Excel数据导入导出2.2 各部门工资最高的员工2.3 换座位2.4 分数排名1.数据导入导出1.1 Navicat导入，导出向导利用Navicat的导入向导和导出向导，可以方便地执行数据的导入导出：导入向导导入向导分为八个步骤：选择...
2019-03-03 13:31:18
1110
原创 MySQL 基础 （三）- 表联结
MySQL 基础 （三）- 表联结1.MySQL别名2.表联结2.1 INNER JOIN2.2 LEFT JOIN和RIGHT JOIN2.3 CROSS JOIN2.4 SELF JOIN2.5 UNION3.联结方式的区别和联系4.实例4.1 组合两张表4.2 删除重复的邮箱1.MySQL别名别名（alias）是一个字段或值的替换名，别名用AS关键字赋予，MySQL支持列别名，计算字段别...
2019-03-02 20:24:39
230
原创 MySQL 基础 （二）- 表操作
MySQL 基础 （二）- 表操作0.引言1.MySQL表数据类型1.1 数值类型1.2 日期和时间类型1.3 字符类型2. 用SQL语句创建表3. 用SQL语句向表中添加数据4. 用SQL语句删除表5. 用SQL语句修改表5.1 UPDATE和DELETE5.2 ALTER TABLE6.实例6.1 超过5名学生的课6.2 交换工资0.引言本文介绍MySQL中有关表操作的基础知识。1.My...
2019-03-01 17:12:24
196
原创 MySQL 基础 （一）- 查询语句
MySQL 基础 （一）- 查询语句0.引言1.导入数据库2.查询语句2.1 选择语句2.2 筛选语句2.3 分组语句2.4 排序语句3.函数3.1 时间函数3.2 数值函数3.3 字符串函数4.MySQL注释5.MySQL代码规范6.实例6.1.查找重复的电子邮箱6.2 查找大国0.引言上一篇文章中介绍了mysql的安装和数据库的基础知识，描述了SQL语言和MySQL语言的基本背景，而本文介...
2019-02-28 18:00:29
307
原创 MySQL 软件安装及数据库基础
MySQL 软件安装及数据库基础0x00 前言0x01 数据库基础0x02 SQL语言0x03 MySQL0x04 软件安装0x00 前言本文首先介绍数据库（database)的基本概念，然后说明结构化查询语言（Structured Query Language）即SQL语言与数据库的关系，最后描述MySQL这一数据库管理系统（DBMS）的相关概念和软件安装.0x01 数据库基础数据库: ...
2019-02-26 10:59:51
219
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人