- 博客(15)
- 收藏
- 关注
RSS订阅原创 Mysql数据迁移
最近需要将本机Mysql数据库迁移到其他电脑上，主要流程如下：1. mysqldump -u[user] -p [db_name] > [target file]将指定数据库数据dump到sql文件上2. 将[target file]发送到目标机器上3. 进入目标电脑mysql（不作赘述）4. 创建[db_name]数据库5. use [db_name]6. 使用...
2019-05-27 09:47:28
178
原创 splash + scrapy爬取动态网页
上次使用Selenium+scrapy爬取京东，但是效率真的很低，而且很慢，容易报错这次使用splash作为js引擎，加载动态网页1. 安装spalsh——我是ubbuntu系统，使用apt进行安装，并启动splashsudo apt install docker.io sudo docker pull scrapinghub/splashsudo docker run -it ...
2019-05-16 08:37:12
398
原创 fcitx中文输入法安装heishi
起因：最近ubuntu内置ibus中文突然哑火，无法输入中文，无奈之下只能另找替代品安装：1. 由于我的已经配置了镜像源，直接运行命令：sudo apt install fcitx-pinyin即可 若没有找到资源，则：sudo add-apt-repository ppa:fcitx-team/stablesudo apt-get update 更新一下镜...
2019-04-27 13:04:26
587
原创 算法集锦(3)
查询顺序查询过程：从头到为遍历数组，直到查询到所要查询的值未止时间复杂度：O(n)实现：for each循环遍历即可折半查询目的：顺序查询效率慢，对顺序查询进行优化前提：序列S已有序；存储采用数组过程：取数组中间值a，中间索引half，开始索引start，结尾索引end 若end = start + 1，跳出3循环，返回-1——未找到 若a满足要求，返回a的索引...
2019-04-20 01:53:19
174
原创 算法集锦(2)
算法集锦2. 排序1. 冒泡排序——稳定思想：相邻两个数两两比较，可以得到最大值（最小）的位置时间复杂度：O(n3)空间复杂度：O(n)实现：未排序数组a[n] K = n 数组前k个数据两两比较，交换 K = k-1 若k > 1，回到C操作优化：若一轮比较下来，无交换情况，则有充足理由认为数组已有序，无需继续操作。可以设置标志变量，若出现交换，改...
2019-04-12 16:28:33
169
原创 elasticsearch5.6.14的数据搬到elasticsearch5.6.16
目的：ES5.6.14 数据迁移至ES5.6.16原理：保存在快照（snapshot）中的信息没有绑定任何版本的ES，因此可以通过拍snapshot实现不同版本之间的数据传输注：通过snapshot最多跨越一个大版本（即4.x==>5.x）步骤：ES5.6.14操作配置文件elasticsearch.yml添加快照的仓库repo路径path.repo: ……/指定位置...
2019-04-06 19:38:46
547
转载 ubuntu 18.0.4换上mac主题
起因：最近突然想给ubuntu换个观感更好的主题，所以把默认主题换成mac操作：参照网址：https://www.cnblogs.com/feipeng8848/p/8970556.html 文章在修改图标操作及其之前可以跟着操作，基本完成mac主题 修改图标完成后，修改grub theme 完成效果与理想存在偏差，后续...
2019-04-03 23:19:56
927
原创 Mysql指令收集
缘由：经常忘记命令，浪费时间查找Mysql命令：Create_database:#创建数据库并指定数据库编码格式CREATE DATABASE {db_name}DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci;TABLE # 修改表结构 ALTER TABLE {table_name} {...
2019-04-03 10:56:48
114
原创 本地——云服务器文件传输
本地（win）——服务器（Linux）：服务器端下载lrzsz： 使用xshell或者其他软件远程登陆服务器，使用rz和sz命令传输文件 a. rz 上传到云服务器； b. sz 云服务器下载到本地本地（Linux）——服务器（Linux）：scp...
2019-04-03 09:17:21
2208
原创 scrapy+selenium爬去京东动态网页
使用scrapy爬取京东图书出现问题：京东中部分数据采用JS加载生成。造成后果：scrapy爬下来的网页缺乏一些信息（需要加载JS才能生成）如图1图1京东商品的价格不在网页源代码中。解决方法：1. 使用scrapy-splash。scrapy-splash可以帮助scrapy加载动态网页，下载地址 github提供来下载的方法与安装指导 由于感觉麻烦，没有使用...
2019-03-07 14:35:42
552
原创 使用elasticsearch-head连接elasticsearch
前言：初次安装elasticsearch后，我需要elasticsearch-head来连接elasticsearch（类似navicat连接mysql）安装过程：1. 进入github，搜索elasticsearch-head，下载链接2. 将其下载并解压到本地，进入elasticsearch-head目录中，执行如下命令安装并启动：cd elasticsearch-hea...
2019-03-03 14:41:12
2923
原创 安装elasticsearch异常
第一次安装elasticsearch（github下载被人安装中文插件后到elasticsearch-rtf）：1. 登录github下载2. 安装jdk（elasticsearch是基于Lucene搜索引擎，而Lucene是由java实现的，因此运行elastisearch需要配置好相对应到jdk） 注：JDK1.8版本以上3. 进入已经下载好到压缩包，进入bin目录，运...
2019-03-03 09:27:28
212
原创 python3中url含有中文字符出现的问题及其解决方法解决方法
最近学习python3爬虫的过程中，遇到一个问题：当url中含有中文的时候，就会出现以下错误： self._send_request(method, url, body, headers, encode_chunked) File "/usr/lib/python3.6/http/client.py", line 1250, in _send_request self.p...
2018-06-29 17:26:21
2806
1
原创 vs2013环境下使用.net连接MySQL数据库
1. 到官方网站http://dev.mysql.com/downloads/file/?id=463758，下载mysql驱动（安装包msi，Windows环境下双击运行即可）2. 打开vs，新建项目，打开扩展。（解决方案资源管理器下右键-->添加引用-->扩展）3. 确定。在工程中连接MySql数据库的操作与连接SQLServer一样，添加命名空间MySQL.Dat...
2018-05-22 15:37:02
4061
原创 Mysql5.7.16压缩包 的安装
1. 下载Mysql5.7.16的zip文件2. 将zip解压到制定路径D:\...\...3. 添加环境变量Path = %Path%;D:\..\..\bin;4. 管理员模式打开cmd控制台5. 进入D:\..\..(mySQL解压路径)\bin， 运行命令：mysqld --install 注：可能曾经安装过mysql，造成服务中还残留旧mysql服务，造...
2018-04-29 22:58:05
410
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人