2 it_is_arlon

尚未进行身份认证

我要认证

就是懒,什么都不想写

等级
TA的排名 27w+

win安装mongodb 并且远程连接

本人所用版本:mongodb-win32-x86_64-enterprise-windows-64-4.2.8-signed.msi链接: https://www.mongodb.com/try/download/enterprise电脑:win10安装步骤: https://blog.csdn.net/huantai3334/article/details/106945109注意 此处安装成功后 就已经自动创建好的文件夹如下(本人安装的是D盘)D:\mongo\log\mongod.logD:

2020-07-22 19:12:29

python 数据字典表导出markdown csv等格式

python 数据字典表导出markdown csv等格式import pymysqlimport importlibimport csvdef remove_newline(text): """ 去除文本中的换行符号 """ return text.replace("\r", "").replace("\n", "")def generate_table(database_name, table_name): """ 生成数据库字典表

2020-06-30 18:10:05

python 轮询cookie调用 爬虫

cookie轮询调用最近写爬虫时,遇到一个响应接口响应速度太慢,检查发现主要慢在了cookie的生成方面,于是就仿照IP池的轮询操作,编写了一个cookies池的轮询。COOKIE_EXIST_MAX_TIME = 120 # 默认cookie存在时间 根据请求量设置大小COOKIE_EXIST_COUNT = 30 # 设置列表中cookie存在的数量def get_co...

2019-11-14 11:42:40

爬虫利器 python中 session自动携带响应的cookie功能

标题 session作用1. 会话保持网上描述一大堆,此处不在赘述;2. 自动携带响应的cookie在下次请求时,能够自动携带 前几次请求响应的cookie;大家知道有些链接在请求时,需要携带cookie字段,而这些cookie字段部分需要从某些响应头里获取(另一部分通过抓包或者js获取),下面通过代码对比分析:var foo = 'bar';...

2019-10-28 10:53:43

SSLError之 SysCallError(-1, 'Unexpected EOF')错误

SSLError python请求错误的解决首先描述详细的错误, 贴段代码:import requests# import warnings# warnings.filterwarnings("ignore")headers = { 'Accept': "text/html,application/xhtml+xml,application/xml;q=0.9,image/web...

2019-08-07 12:06:36

爬虫---js逆向解析中的eval包裹函数的处理

js破解中的eval包裹函数的处理首先描述问题现象第一种方式第二种方式想练手的还可以尝试这个网站首先描述问题现象解析网站 http://eip.chanfine.com/login.jsp 的 j_password 生成方式很显现加密的函数就是 desEncrypt(),我们再搜索desEncrypt, 就发现加密的secunity.js,这个js是由eval()函数包裹着的,我们发现根...

2019-07-30 16:41:15

python爬虫多次请求超时的几种重试方式

python爬虫多次请求超时的几种重试方式在python爬虫中,请求超时报错很是常见,下面总结了几种requests的方式:第一种headers = Dict()url = 'https://www.baidu.com'try: proxies = None response = requests.get(url, headers=headers, verify=Fals...

2019-04-26 00:15:42

python线程获取返回值

python线程获取返回值实现功能前的准备代码改写threading.Thread类获取返回值使用局部变量获取返回值实现功能前的准备代码def say_hello(i): return {"hello": i}def threading_get_return(): vendorCode = [] for i in range(1000): resul...

2019-01-22 14:44:35

charles电脑手机抓包上不了网的细节设置

charles电脑手机抓包上不了网的细节设置》》》每次用charles抓包时,都会出现电脑或者手机上不了网的问题。设置好后一换电脑又得一番麻烦的设置。今天就分两方面总结下细节方面的设置,不足之处欢迎补充。首先参考一位大神的详细设置。连接如下(ps: 第六步本人未操作成功):https://blog.csdn.net/tianshats/article/details/51026657在安装...

2018-11-03 23:22:47

安装TA-lib过程问题

安装TA-lib过程问题的解决 描述:版本ubuntu16 没有装conda 建立个虚拟环境 专门放量化操作的包 建议:结合readme一起看第一步: pip install TA-Lib第二步:正常情况第一步都不会装好这里选择一个版本下载:https://pypi.org/project/TA-Lib/0.4.16/#history 。下载好之后解压, ta...

2018-09-03 21:08:45
勋章 我的勋章
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。