- 博客(6)
- 收藏
- 关注
RSS订阅原创 Python --------------------》 Scrapy框架中选择器的用法
Scrapy提取数据有自己的一套机制，被称作选择器（selectors）,通过特定的Xpath或者CSS表达式来选择HTML文件的某个部分Xpath是专门在XML文件中选择节点的语言，也可以用在HTML上。CSS是一门将HTML文档样式化语言，选择器由它定义，并与特定的HTML元素的样式相关联。XPath选择器常用的路径表达式，这里列举了一些常用的，XPath的功能非常强大，内含超过10...
2018-10-23 14:58:22
122
原创 Python ---------》 Python3.7配置Scrapy运行环境
最近学习了 Python 的第一个框架 Scrapy 。对于一个框架来说环境配置是很重要的。所以本文特意来记录我自己在配置环境是出现的错误和解决办法。参考至：https://blog.csdn.net/c406495762/article/details/601562051.直接使用指令pip3 install scrapy，发现有诸多错误。Failed building wheel fo...
2018-10-23 14:06:01
998
原创 Python 笔记----------------》爬虫利器--- Beautifulsoup的使用。（带小福利哦~~~）
Beautifulsoup 由于本人有一定的HTML 基础，所以学起这个来简直不要太简单。上一篇文章的正则，其实对很多人来说用起来是不方便的，加上需要记很多规则，所以用起来不是特别熟练，而这节我们提到的beautifulsoup就是一个非常强大的工具，爬虫利器。beautifulSoup “美味的汤，绿色的浓汤”一个灵活又方便的网页解析库，处理高效，支持多种解析器。利用它就不用编写正则表达...
2018-10-18 15:12:46
212
原创 Python 正则表达式
爬虫的意义就在于在网页上爬取自己需要的数据，这时候就要用到正则表达式进行选择了有时一些特定的内容需要特定的正则表达式去爬取。所以个人感觉学爬虫一定一定一定要把正则表达式学好。正则表达式是一个特殊的字符序列，它能帮助你方便的检查一个字符串是否与某种模式匹配。Python 自1.5版本起增加了re 模块，它提供 Perl 风格的正则表达式模式。re 模块使 Python 语言拥有全部的正则表达...
2018-10-15 15:13:19
314
原创 Python自学之使用爬虫下载慕课网首页图片（简单爬虫入门）
首先觉得自己学的东西还不是很多，所以就开始自己的自学之路了。本文是参照了CSDN 该博主的文章然后我自己去尝试了一下，中间碰到了一点问题最后还是解决了。所以决定写一篇博客来记录一下！网络爬虫同义词 爬虫（自动获取网页内容的程序）一般指网络爬虫本词条由“科普中国”百科科学词条编写与应用工作项目 审核 。网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是...
2018-10-14 12:24:03
348
1
原创 编程小白的自学之路——————》Python笔记
最近自学了Python 语言，感觉和JAVA语言有点区别，但是还是比较好学的。就用这个来做个笔记吧！Python创建listPython内置的一种数据类型是列表：list。list是一种有序的集合，可以随时添加和删除其中的元素。比如，列出班里所有同学的名字，就可以用一个list表示：[‘Michael’, ‘Bob’, ‘Tracy’][‘Michael’, ‘Bob’, ‘Tra...
2018-10-13 20:04:30
713
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人