5 Xiaoyeforever

尚未进行身份认证

暂无相关简介

等级
TA的排名 34w+

Anaconda更改为国内更新源

conda更改为国内更新源conda安装好之后,默认的镜像是官方的。由于官网的镜像在境外,访问太慢或者不能访问,为了能够加快访问的速度,更改为国内镜像源。终端中运行命令:(1)清华源(TUNA)conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/conda config -...

2020-02-15 15:41:18

(七)Python爬虫------有道翻译JS(JavaScript)参数分析,实现在线实时翻译(2020年1月16日)

最近工作有点忙,也就没有太多时间去学习Python爬虫,感觉身体好累,可能是想偷懒了吧!不说那么多了,回归本源,学习,搞起!!今天爬取有道翻译词典数据,实现一个小小的在线实时翻译功能,那就开始干!有道翻译官方网站:http://fanyi.youdao.com/一、抓包分析,有道翻译是否是通过JS文件加载的数据1.在有道中不输入任何关键字时,打开谷歌浏览器的开发者工具(按F12),...

2020-01-16 06:38:14

(六)Python爬虫------使用Scrapy库简单爬取天气网城市天气预报信息,并使用MySQL数据库保存数据

一、使用Scrapy库做爬虫项目,前提是已经安装好了Scrapy库,没有没有安装,请查看我前几天的Scrapy库pip离线安装方法。1.在使用Scrapy开发爬虫时,通常需要创建一个Scrapy项目。通过如下命令即可创建 Scrapy 项目:scrapy startproject PythonScrapyWeather (PythonScrapyWea...

2020-01-13 04:22:45

windows下使用pip离线安装Scrapy库(只能这样做)

Scrapy库不能直接使用 pip install 库名 安装,我们只能选择离线方式安装Scrapy一、先windows环境下永久修改pip镜像源,加速下载安装速度,因为下载的依赖库数量较多,需要网速保障,但是国外的网站响应速度实在不敢恭维。已经修改pip镜像源的,可忽略(1):在windows文件管理器中,输入%APPDATA%(2):会定位到一个新的目录下,在该目录下新建pi...

2020-01-13 03:02:41

20个正则表达式,能让你少写1,000行代码

正则表达式,一个十分古老而又强大的文本处理工具,仅仅用一段非常简短的表达式语句,便能够快速实现一个非常复杂的业务逻辑。熟练地掌握正则表达式的话,能够使你的开发效率得到极大的提升。正则表达式经常被用于字段或任意字符串的校验,如下面这段校验基本日期格式的JavaScript代码:var reg = /^(\\d{1,4})(-|\\/)(\\d{1,2})\\2(\\d{1,2})$/; ...

2020-01-12 12:13:42

(五)基于Python面向对象使用自动化工具Selenium+Xpath爬取京东商品(手机)列表

一、准备工作1.安装selenium类库:2种方法可供选择(1)提前条件是已经安装好了Python,直接进入cmd命令行,输入python -m pip install selenium指令,就可以自动安装selenium(2)或者已经安装好了pip,直接进入cmd命令行,输入pip install selenium,就可以自动安装selenium2.检查Selenium是否安装成...

2020-01-07 03:25:30

(四)基于Python面向对象简单爬虫Ajax数据爬取---今日头条图片数据

一、Ajax简介Ajax = 异步JavaScript和 XML 或者是 HTML(标准通用标记语言的子集)。Ajax 是一种用于创建快速动态网页的技术。Ajax 是一种在无需重新加载整个网页的情况下,能够更新部分网页的技术。Ajax 可以使网页实现异步更新。这意味着可以在不重新加载整个网页的情况下,对网页的某部分进行更新。二,基本库import requests#构...

2020-01-05 08:55:04

(三)python(基于面向对象)使用Requests+Xpath提取HTML内容(妹子网MM图片)

xpath获取标签对本身含内容, 获取html内容 之前一直使用BeautifulSoup(bs4)HTML标签内容,但是后面通过使用对比,当我们使用 html.parser 作为解析器时,BeautifulSoup 解析的耗时平均是 Xpath 的 1.8 倍+;当我们使用 lxml 作为解析器时,BeautifulSoup 解析的耗时虽有减少,但平均仍是 Xpath 的 1.5...

2019-12-28 03:09:58

windows环境下永久修改pip镜像源的方法

(1):在windows文件管理器中,输入%APPDATA%(2):会定位到一个新的目录下,在该目录下新建pip文件夹,然后到pip文件夹里面去新建个pip.ini文件(3):在新建的pip.ini文件中输入以下内容:(http://pypi.douban.com/simple为pip豆瓣镜像更新源)[global]timeout = 6000index-url = http...

2019-12-25 05:34:13

Windows下Mysql 8.0.17忘记root密码(重置密码)方法

Windows下Mysql 8.0.17忘记root密码(重置密码)方法1.打开第一个命令窗口cmd,输入命令 net stop mysql,停止MySQL服务,再输入命令mysqld --console --skip-grant-tables --shared-memory,开启跳过密码验证登录的MySQL服务 2.再打开另一个命令窗口cmd,输入登录命令 mys...

2019-12-24 01:58:28

(二)python基于面向对象爬取开车吧的秀人模块MM图片

爬取图片网站:http://www.kckckc.net/秀人网需要用到的库有:import requestsfrom bs4 import BeautifulSoupimport reimport stringfrom urllib.parse import quoteimport sys编写python代码实现爬取import requestsfrom...

2019-12-23 08:01:52

(一)简单基于python面向对象编程爬虫(爬取妹子图)

目标网站:妹子图网http://www.mzitu.com/all妹子图环境:Python3.8相关第三方模块:requests、beautifulsoup4内建模块:os编程软件:pyCharm1.项目中倒入第三方模块import requestsfrom bs4 import BeautifulSoupimport os#在各种浏览器中...

2019-12-22 02:26:43

Pycharm配置环境及安装第三方库

对于学习Python的新手小白来说,Pycharm的基本配置还是有点难度的,特别是配置Python环境和安装第三方库。这里给出一些我个人的配置习惯和心得,对Pycharm不熟悉的小白同学可以作为参考,快速完成自己的配置,早点撸代码。需要说明的是,我这里使用的Pycharm没有进行汉化,建议大家也不要进行汉化,让自己慢慢熟悉英文环境,也不是一件坏事。一、配置Python环境配置Py...

2019-12-09 02:19:21

windows下pip的安装

前提是得先安装了python噢一、首先安装setuptool:https://pypi.org/project/setuptools/#files 从该网址下载zip,并解压;打开cmd,cd到解压目录,运行命令:python setup.py install二、接下来安装pip:https://pypi.org/project/pip/#files该网址下载tar文...

2019-12-09 02:16:09
勋章 我的勋章
  • GitHub
    GitHub
    绑定GitHub第三方账户获取
  • 签到新秀
    签到新秀
    累计签到获取,不积跬步,无以至千里,继续坚持!
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv2
    勤写标兵Lv2
    授予每个自然周发布4篇到6篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。