- 博客(3)
- 收藏
- 关注
RSS订阅原创 谈谈你对爬虫和反爬虫的理解?
谈谈对爬虫和反爬的理解 A.爬虫 爬虫的定义： 网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。从功能上来讲，爬虫一般分为数据采集，处理，储存三个部分。传统爬虫从一个或若干初始网页的URL开始，获得初始网页上的URL，在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。 爬虫有什么用： a. 市场分析：电商分析、商圈分析、一二级市场分析等 b. 市场监控：电商、新闻、房
2021-02-25 23:29:05
1465
原创 学习笔记(02):Python 面试100讲（基于Python3.x）-进程之间的通信
本课程搜集了各大互联网公司的Python面试题以及类似的题目。课程体系包括Python语言本身的知识、Python SDK、Web、Python爬虫以及算法等内容。所以的源代码都使用Python3.x编写。Python相关知识包括基本语法、正则表达式、字符串、数据库、网络、Web等。算法包括了一些出镜率高的内容、如与链表、树、数组相关的算法。...
2020-04-01 00:34:02
175
原创 学习笔记(01):Python 面试100讲（基于Python3.x）-将XML文档保存在MongoDB数据库中
本课程搜集了各大互联网公司的Python面试题以及类似的题目。课程体系包括Python语言本身的知识、Python SDK、Web、Python爬虫以及算法等内容。所以的源代码都使用Python3.x编写。Python相关知识包括基本语法、正则表达式、字符串、数据库、网络、Web等。算法包括了一些出镜率高的内容、如与链表、树、数组相关的算法。...
2020-02-24 16:59:23
88
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人