- 博客(5)
- 收藏
- 关注
RSS订阅
2原创 python爬虫遇到的坑3——关于scrapy中的URL
第一个坑 我们在使用scrapy的时候都要先创建项目是吧这个就不多说的。 基本的目录结构就是这样，懂的都懂，也不多做解释了： 我就是在这里遇到的坑。 这里面有个pipelines的py文件：
2021-02-27 14:57:17
809
原创 小米（红米）AC2100 硬路由配置的坑
一、刷入固件时选用哪种配适方式更好 本人在不断踩坑中大体用过两种方式： + breed（不死后台）辅助刷入 + 用各种奇妙的方式硬刷 踩来踩去发现还是breed方式最简洁，也最省心，所以本文只介绍breed的刷入方法，如果有同学愿意折腾，可以在网上找找相关资料，不论YouTube还是BILIBILI都有很多资料可以学习。二、如何刷入breed后台 本人找到一个非常完备的教程，在B站“https://www.bilibili.com/video/BV1Zf4y1v74o?t=.
2021-01-17 13:13:36
2358
原创 python爬虫遇到的坑2——关与data参数与url
今天的文章可能有点短首先我们在写爬虫的时候需要写URL对吧，比如# 百度贴吧urlurl = 'https://tieba.baidu.com/f?'问号后面是什么呢？是我们需要添加的参数，比如这里’pn=0’代表第一页，'pn=50’代表第二页,依次类推。那咱们就要拼接url对吧，就像这样：data = { 'offset': '50' } data = urllib.parse.urlencode(data)url = url + date但这里
2021-01-10 11:17:31
963
原创 python爬虫遇到的坑1——关于urllib.request.Request中的data参数
今天在写爬虫的时候死活运行不了import urllib.requestimport urllib.parsepage = int(input('请输入页码：'))if page < 1: print('页码输入错误，请输入大于等于1的数字')url = 'https://maoyan.com/films?showType=3&'headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64
2021-01-09 16:22:55
1728
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人