Z_Vixerunt-CSDN博客

原创堆糖网爬取图片

爬取堆糖网图片

2017-11-01 10:59:01 2357

原创使用Python爬虫查询12306列车信息

Python爬虫爬取12306车次信息

2017-10-30 23:22:01 2899 2

原创 scrapy爬虫出现‘Forbidden by robots.txt’错误

使用scrapy爬取知乎信息的时候，运行爬虫出错，错误信息是‘Forbidden by robots.txt’。然后在settings里面加入了cookie和headers信息还是不行。但是直接用urllib.request请求发现页面都能直接请求成功。于是上网查了一下robot.txt是什么才知道有这么回事，看一下scrapy抓包时的输出可以发现，在请求设定的url之前，它会先向服务器根

2017-10-30 22:20:14 2500

原创利用代理IP爬取网页的小心得

利用爬虫爬取网页时，有时候会因为请求次数过多而被封IP，这时候就需要多个代理IP不断更换以保持爬虫继续工作。昨天遇到这个问题于是去查代理IP使用的问题，找到了这个：https://github.com/Germey/ProxyPool网上大佬推荐的，但是我完全看不懂而且我电脑也不知道为什么运行报错，于是自己写了一个无比无比简陋的。。萌新可以有需要看一看。import requests from

2017-10-16 21:01:26 2069

原创 python3.x导入pyquery报错问题

本人Python萌新，属于什么都不懂的那种。今天使用pip install pyquery安装完pyquery三方库之后发现无论是用命令行还是用pycharm运行from pyquery import PyQuery / import pyquery都会报错，如下： ImportError: DLL load failed: 找不到指定的程序。上网查了捣鼓了俩小时，但是很多大佬们的答

2017-10-01 20:54:22 2578

C++人脸检测与识别

基于C++的人脸检测与识别代码如果是进行人脸识别，需要先打开一幅位图依次进行“人脸检测与定位”操作和“人脸特征标注”操作，然后再打开需要比较的第二幅位图，也是依次进行所有操作，最后进行识别以区分先后两个人脸。

2018-02-14

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

原创 堆糖网 爬取图片

原创 使用Python爬虫查询12306列车信息