• 等级
  • 664613 访问
  • 97 原创
  • 43 转发
  • 5067 排名
  • 45 评论
  • 21 获赞

django-suit时间不准

在settings.py里面USE_TZ=False将USE_TZ改成Flase即可。如果settings.py里面没有改配置,则加上。

2019-02-19 11:42:43

限制django admin后台系统的表格文字显示长度

由于我这里是使用的django-suit插件,所以我需要先将suit包下的admin拷贝到项目的templates路径下,然后在base.html的头部加入以下图片中所示的css样式即可。最终运行项目,效果如图所示:...

2019-02-19 11:25:50

lyl-回首往事

 回首往事,我发现自己失去了很多宝贵的东西。但我并不难过,因为我知道,以后会失去的更多

2019-01-29 15:58:06

centos7下安装ElasticHD实现对ES进行可视化监控管理

ElasticHD支持ES监控、实时搜索,Indextemplate快捷替换修改,索引列表信息查看,SQLconvertstoDSL工具等,体验下来感觉还是比较强大的!**项目地址:**https://github.com/360EntSecGroup-Skylar/ElasticHD直接安装方式:首先打开https://github.com/360EntSecGroup-...

2019-01-17 11:13:37

python3从ES中以分词方式查询数据并实现分页的demo

实现效果:前提是已经配置好了ESIK分词扩展的和创建好了索引并导入了数据的情况下,实现分页查询。demo代码如下:fromelasticsearchimportElasticsearch'''@:parampage_szie:每页显示条数@:parampage_index:当前第几页@:paramwhere_list:查询条件,格式如:[{"article_conten...

2019-01-16 11:49:46

Python3使用ES常见问题记录

1.使用Elasticsearch6.x版本以上进行查询字段排序的时候,遇到报类似如下错误:elasticsearch.exceptions.RequestError:RequestError(400,'search_phase_execution_exception','Fielddataisdisabledontextfieldsbydefault.Setfiel...

2019-01-16 10:54:57

ES创建索引映射指定分词策略

本文参考自:https://blog.csdn.net/diyiday/article/details/82153780在es中使用我们自定义的IK分词插件的时候,创建索引时指定分词,如{ "settings":{  "index.analysis.analyzer.default.type":"ik_max_word"  //对应IK的ik_max_word和i...

2019-01-11 16:27:08

ES IK自定义分词词库配置

参考地址:https://blog.csdn.net/whb3299065/article/details/80104323一、业务场景    在利用ik分词的过程中,当ik的分词规则不满足我们的需求了,这个时候就可以利用ik的自定义词库进行筛选,举个例子:当我要将“我是中国人,我想测试一下”这句话通过分词,将“我想测试一下”分为一个词的时候,就需要利用ik的自定义词库进行灌入指定的词。...

2019-01-10 16:25:50

Elasticsearch 安装IK Analysis分词插件

原文参考地址:https://blog.csdn.net/u011499747/article/details/78917718到此地址:https://github.com/medcl/elasticsearch-analysis-ik/releases/ 找到与自己安装Elasticsearch对应的版本,例如我这里我下载的是v6.5.4的版本,如图所示:下载好之后,拖到es服务器...

2019-01-10 10:34:34

centos7下开启Elasticsearch远程访问常见问题

此文只是个人随手转载收藏的笔记。原文地址:https://blog.csdn.net/hbtj_1216/article/details/84728582

2019-01-09 15:30:13

CentOS7安装并运行Elasticsearch_6.5.4

原文参考地址:https://blog.csdn.net/hbtj_1216/article/details/847285821准备工作新装 CentOS764位系统 安装jdk1.8,这个是最低要求 从官网上下载 elasticsearch-6.5.4.tar.gz 压缩包2安装和运行(1)解压压缩包。tar-zxvfelasticsearch-6.5.4....

2019-01-09 11:53:27

在centos7上部署selenium(基于chrome驱动)的爬虫项目

 相信大家在写爬虫的时候,经常会遇到爬取的网站是动态渲染的,而且各自反爬加密参数,难以破解,所以不得已采用使用了python+selenium进行模拟人为操作爬取。免去了一些繁琐步骤。但是我们大多数都是在windows或者Mac下进行开发和测试。开发完了之后。最终要部署到服务器上去。那么服务器常用的就有liunx。至于liunx服务器我们都知道,它并没有一个像windows上的桌面,而是一个纯...

2018-12-25 12:25:24

使用python+selenium爬取同城旅游网机票信息

 最近使用python+selenium爬取了同城旅游网机票信息相关主要代码如下,通过模拟人为操作,拿下了这个机票列表的html代码,然后就可以使用xpath或者re等方式从中提取需要的字段信息了。fromseleniumimportwebdriverfromselenium.webdriver.support.waitimportWebDriverWaitfro...

2018-12-19 13:28:22

flume向hdfs中写入会生成很多小文件

问题:flume监控的目录写入大文件的时候不能同步记录在hdfs中flume监控的目录写入大文件的时候,同步记录到hdfs中后变成多个小文件flume从kafka中读取数据下沉到hdfs中会生成很多小文件解决办法:更改flume的配置信息(主要更改滚动方式),滚动的意思是当flume监控的目录达到了配置信息中的某一条滚动方式的时候,会触发flume提交一个文件到hdfs中(即在hdfs...

2018-12-17 14:24:01

arbari中创建新flume配置文件

我们都知道,在使用flume的时候,会针对不同的项目创建多个不同的配置文件运行。那么在使用arbari管理flume的时候,怎么在页面上动态创建配置文件并启动了。可按以下的步骤创建。选择到默认配置文件这个地方,右边有个小加号,点击如图然后选择CreateanewFlumeConfigurationGroup输入名称,点击ok就可以完成创建啦。创建完成之后就可以在如下图划...

2018-12-17 10:58:23

解决Flume采集数据时在HDFS上产生大量小文件的问题

原文地址:https://blog.csdn.net/whdxjbw/article/details/80606917问题:flume指定HDFS类型的Sink时,采集数据至HDFS指定目录,会产生大量小文件。如下图所示:问题重现:1、创建flume配置文件flume-env.sh,:flume配置文件如下(根据自身需要修改):    因为flume可以配置多种采集方式,每...

2018-12-14 11:54:13

python3实现socket客户端通信demo

1.创建server.py文件作为服务端,代码如下:#服务端importsocketserverclient_list=[]classTCPHandler(socketserver.BaseRequestHandler):#所有请求的交互都是在handle里执行的,defhandle(self):whileTrue:...

2018-12-04 16:51:23

python3实现多进程并发任务

在python开发中,有时候会有这样的需求,比如说我后很多个任务,需要并行执行,也就是说有一个任务队列,大家都知道,在python中的多线程,它其实从严格意义上来讲,并不是真正的多线程。所以用多线程我们还不如使用多进程。使用多进程的有什么好处了,它可以实现分布式多机并行。多个客户端共享一个任务队列。可以大大提高任务执行效率,下面我我将使用python中的multiprocessing库实现一个多...

2018-11-26 17:30:19

pg数据库日期字段索引查询优化

有时候我们在使用sql查询的时候,会涉及到根据日期查询内容,通常做法都是通过日期字段>=来判断日期范围的,当数据量大了,你会发现查询速度就会很慢,这时候我们可以做些优化,给日期字段建立索引,更改查询语句,如下例子:      select*fromfcz_momentwheredep_airport_code='CTU'andair_date~'2018-02|2...

2018-11-23 17:32:01

Python3实现获取指定日期范围内的月份列表

importdatetimefromdateutilimportrruleclassTimeHelper():defgetMonthRangList(self,start_month,end_month):"""从开始日期到结束日期查询存在的月份列表,除去本月的数据:paramstart_month:...

2018-11-23 17:16:29

Liu-YanLin

也曾鲜衣怒马少年时,一夜忘尽长安路!
关注
  • 计算机软件/python工程师
  • 中国 四川省 成都市
奖章
  • 专栏达人
  • 持之以恒