11 重复的生活

尚未进行身份认证

30天完成新事情 http://30daydo.com

等级
TA的排名 1w+

python连接mongodb集群 cluster

网上资料比较少,自己测试了下。连接方法如下:import pymongodb = pymongo.MongoClient('mongodb://10.18.6.46,10.18.6.26,10.18.6.102')上面默认的端口do都是27017,如果是其他端口,需要这样修改:db = pymongo.MongoClient('mongodb://10.18.6.46:8888...

2019-06-03 15:58:16

ElasticSearch查看已经存在的文档保存在哪个分片

比如我有以下的文档:{"took":11,"timed_out":false,"_shards":{"total":5,"successful":5,"skipped":0,"failed":0},"hits":{"total":5,"max_score":1.0...

2019-05-26 12:55:34

how to use proxy in scrapy_splash

按照这个方法 http://30daydo.com/article/347终于可行了,写中间件的方法不能用。

2018-09-02 22:22:22

python sqlalchemy ORM 添加注释

需要更新sqlalchemy到最新版本,旧版本会不支持。 在定义ORM对象的时候,classCreditRecord(Base):__tablename__='tb_PersonPunishment'id=Column(Integer,primary_key=True,autoincrement=True)name=Column(Stri...

2018-09-02 22:11:30

python 调用execjs 运行本地js脚本出现 JSON 未定义的错误

python调用execjs运行本地js脚本出现JSON未定义的错误。原因是你本地的JScript引擎只有一个默认的JScript,所以会造成json未定义的错误。解决办法:安装一个nodejs的V8引擎就可以了安装换成后记得把IDE关闭重新打开,比如pycharm,不然IDE不会监测到jscript引擎的变化。...

2018-07-03 23:15:10

斐讯 天天牛绑定教程

天天牛邀请码 8vozbf 可以领取4代牛 最近斐讯推出了天天牛养成计划。 不过官方没有任何的指示教程,所以个人分享一个教程给大家。 1. 先把把旧的钱包备份一下 ,切记!! 而且一定要记得自己设的密码,官方的说法是,如果钱包文件不见了(重装系统),那么里面的币就找不到了,或者你忘记了自己设的密码,那么里面的币也同样没了。备份很简单,点击 赢呗钱包菜单的 账户-》备份-》账户, 这是会看到一个 k...

2018-06-12 13:40:46

天天牛邀请码8vozbf 可以领取0代牛

天天牛邀请码8vozbf 可以领取0代牛天天牛邀请码8vozbf 可以领取0代牛自从区块链宠物以太猫飙出了77万元的天价后,区块链宠物受到了大量公司的追捧,一时间百度的莱茨狗、360的区块猫、小米的加密兔纷纷出炉,似乎引发了一场游戏行业的新变革。  大量区块链宠物游戏 玩法单一  虽然伴随加密货币、区块链技术的热炒,让区块链宠物游戏也被推到了风口浪尖,但其弊端也不容小觑。首先就是,同质化现象严重,...

2018-06-12 12:51:20

sklearn中SGDClassifier分类器

sklearn中SGDClassifier分类器每次得到的结果都不一样?如下代码:sgdc=SGDClassifier()sgdc.fit(X_train,y_train)sgdc_predict_y=sgdc.predict(X_test)print'AccuaryofSGDclassifier',sgdc.score(X_test,y_test)printclas...

2018-06-07 17:21:15

getpass.getuser() python库

官方的文档解释的很清楚:getpass.getuser()Returnthe“loginname”oftheuser.Thisfunctioncheckstheenvironmentvariables LOGNAME, USER, LNAME and USERNAME,inorder,andreturnsthevalueofthefirstonewhic...

2018-02-17 17:52:28

NOV98 骗子平台,大家别去

虚构的交易平台,投钱进去就会被坑!这个平台的了前身就是vexx.pro 看名字就知道山寨了。

2018-01-23 18:33:41

爬虫模拟登录山寨币网站vexx.pro

因为每次登录vexx.pro,第一次输入正常的验证码都会说你是错误的,搞得每次都要输入2次验证码,所以为了节省点时间,就写了个模拟登录来自动获取自己的账户信息的python程序。# -*-coding=utf-8-*-import requestssession = requests.Session()user = ''password = ''def getCode()

2018-01-11 11:39:17

outlook经常收不到邮件

用的是免费的,难道是这个原因?巨硬的服务没几个好用的。除了一个操作系统,没几个可以用的。微软的基因决定的,一切看盈利,看KPI。亏的项目砍起来毫不手软。WP的系统,现在连微信,支付宝都停用了。可惜了洛基亚。原来是设计问题:点开收件箱,显示的是重要的,隔壁有个其他的按钮。kao,哪有这样子设计的呀。

2018-01-09 16:07:04

scrapy修改user-agent的几种方法

[scrapy]修改爬虫默认user agent的多种方法很有启发的。

2017-12-14 17:43:50

MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Com

换了台式机,在windows下运行redis,结果出现这个错误:MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Commands that may modify the data set are disabled. Please check

2017-11-15 15:27:35

python 连接 mongodb pymongo.Connection 不能用

因为新版的pymongodb使用pymongoMongoClinet(ip,port) 来连接mongodb数据库,所以那些旧版的教程统统的用的pymongo.Connection.DEMOimport pymongo,datetimeclient=pymongo.MongoClient('127.0.0.1',27017)db=client.py_create_dbcollecti

2017-08-26 17:17:05

First character in field must be [A-Za-z$_]

这是在Robo 3T中进行mongoDB操作时,插入数据时遇到的。在插入数据弹出框里填入一些字典,保存的时候就出错了。First character in field must be [A-Za-z$_]这是因为你的从其他地方复制粘贴了其他格式的编码进来,而且这些编码被解释成一些乱码字符,在文本上你看不出来,但保存的时候Robo 3T检测为非法字符。

2017-08-26 16:07:20

lxml.etree._ElementUnicodeResult 转为字符

原文链接:http://30daydo.com/article/222在爬虫过程中,使用的是lxml的xpath查找对应的字段。 address=each.xpath('.//address/text()')[0].strip() 结果用address与一般的字符进行拼接时,总是出现UnicodeDecodeError:'ascii'codecca

2017-08-14 15:58:44

安居客app端抓取数据包 分析数据包的签名 编写爬虫脚本

为什么要这么蛋疼,要从app入手来爬虫?网页的数据不是也可以爬吗? 对于少量数据的抓取,网页爬取是完全没问题的。至少爬一个城市的房价信息是可以的。但是,对于要抓取百万级数据量的爬虫,安居客做了多重反爬策略,如果你没遇到,说明你的数据量不大。安居客的反爬策略有验证码,封IP。而IP被封后,尝试过使用代理IP去绕过,不过不知道为什么一直返回404,不知到安居客用的什么

2017-08-13 18:17:03

python 多进程实例 进程间的通信

import httplib2from multiprocessing import Lock, Process, Queue, current_processdef worker(work_queue, done_queue): try: for url in iter(work_queue.get, 'STOP'): status_code

2017-07-17 22:39:10

'module' object has no attribute 'fork'

廖雪峰的python中多进程的例子:importosprint'Process(%s)start...'%os.getpid()pid=os.fork()ifpid==0:print'Iamchildprocess(%s)andmyparentis%s.'%(os.getpid(),os.getppid())else:

2017-07-13 17:24:43

查看更多

勋章 我的勋章
  • 持之以恒
    持之以恒
    授予每个自然月内发布4篇或4篇以上原创或翻译IT博文的用户。不积跬步无以至千里,不积小流无以成江海,程序人生的精彩需要坚持不懈地积累!
  • 勤写标兵Lv1
    勤写标兵Lv1
    授予每个自然周发布1篇到3篇原创IT博文的用户。本勋章将于次周周三上午根据用户上周的博文发布情况由系统自动颁发。