- 博客(69)
- 资源 (9)
- 收藏
- 关注
RSS订阅原创 一键安装OpenStack及问题处理
前言配置：8C16G系统：CentOS 7.4安装教程这里使用 Packstack 工具安装，Packstack是一个实用程序，它使用Puppet 模块在多个预安装的服务器上自动部署 OpenStack 的各个部分SSH。备注：Packstack 仅适用于 CentOS参考：https://wiki.openstack.org/wiki/Packstack1.1 关闭防火墙等网络服务# 关闭服务systemctl stop firewalldsystemctl stop NetworkM
2021-06-23 14:22:08
4788
2
原创 Hive sql：列名为关键字如何 select
背景group 是数据库关键字，直接 select group 报错如下：line 2:8: mismatched input 'group'. Expecting: '*', 'ALL', 'DISTINCT', <expression>翻译：第2:8行:不匹配的输入’group’。期望:’*’，‘ALL’， ‘DISTINCT’，查询网上，说使用反引号可以。select `group`结果还是报错，如下：line 2:8: backquoted identifiers ar
2020-08-22 16:34:06
6719
原创 云计算 “拍了拍” Serverless
云计算和数字化迄今为止，云计算已经不是一个新鲜的概念，云厂商的攻城略地，已经将这股春风吹向了互联网的边边角角。而国家看在云计算降低用户创业门槛和增加社会资源利用率的份上，也实打实的给到了政策支持。云计算到底什么，用专业术语来说，那就是云计算不仅实现了 IT 池化、提升性能、降低成本和简化管理，更重要的是为企业的数字化转型提供了丰富服务和资源协同。(图片来源国务院发展研究中心：中国云计算产业发展白皮书)而数字化为什么有这么大的魔力？这几年企业都在纷纷在提倡和改进。这是因为大家都看到了数据的力量，寄
2020-06-21 03:28:43
438
原创 Python3爬虫项目集：爬取知乎十几万张小姐姐美图
文章目录前言注意点代码实例前言github：https://github.com/pasca520/Python3SpiderSet知乎上有很多钓鱼贴，也成功的钓上了很多鱼，你懂的~~~这里通过 python 爬了一些图片，总共大概有十几万张，仅供练习使用：示例python 库爬取模块request解析模块re存储类型存储图片到本地&七牛云存...
2019-11-06 23:29:57
7496
原创 python 生成器yield全解，小白都能懂
文章目录yield释义yield from使用 yield from使用 yieldyield释义写一个爬虫，获取HTML（IO很耗时），然后再对HTML对行解析取得我们感兴趣的数据。利用 for 循环翻页时我们希望将每个页面的HTML先送去解析内存下载或者保存。关键字示例yield返回一个生成器对象，创建一个容器，例如<generator object par...
2019-11-06 14:09:40
164
原创 爬取知乎图片出现json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)
问题Traceback (most recent call last): File "/Users/pasca/Desktop/github/test_spider/zhihu_img_spider.py", line 55, in <module> data = get_page(url) File "/Users/pasca/Desktop/github/test...
2019-11-05 16:46:45
1065
2
原创 Python3爬虫项目集：猫眼电影排行榜top100
文章目录一、概要二、解析三、代码示例Github 地址：https://github.com/pasca520/Python3SpiderSet一、概要示例python 库爬取模块request解析模块xpath存储类型文件（txt）二、解析根据图示复制 xpath（这也是我为何说 xpath 简单的原因）三、代码示例import requ...
2019-11-01 23:52:05
335
原创 Python3爬虫项目集：豆瓣电影排行榜top250
文章目录前言爬虫概要解析代码示例数据存储Github地址：https://github.com/pasca520/Python3SpiderSet前言关于整理日常练习的一些爬虫小练习，可用作学习使用。爬取项目以学习为主，尽可能使用更多的模块进行练习，而不是最优解。爬虫概要示例python 库爬取模块request解析模块BeautifulSoup存储...
2019-11-01 23:44:50
823
原创 Python 之Beautiful Soup入门文档
官方文档：https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/一、安装pip install beautifulsoup4二、基本使用导入并将 html 转成 unicodefrom bs4 import BeautifulSoupsoup = BeautifulSoup(open("index.html"))soup = Beaut...
2019-11-01 16:45:04
317
原创 Github修改的用户名和邮箱
原因上传时发现自己的 github 用户名不对，为‘xxxxxx’，不能很好的标识。查看果然，查看自己的本地的 git 用户名和邮箱都没设置好，这个也是对 github 不熟留下的坑。 git config user.name # 查看用户名xxxxxxgit config user.email # 查看邮箱[email protected]修改修改本地的用户名和邮箱，然后验证是否修改成功...
2019-10-31 15:51:55
2181
原创 Mac os 上最简便的企业微信和微信双开方法
微信open -n /Applications/WeChat.app/Contents/MacOS/WeChat企业微信open -n /Applications/企业微信.app/Contents/MacOS/企业微信
2019-10-21 09:09:51
10746
14
原创 Python 笔记：全网最详细最小白的Class类和实例详解
文章目录一、基本概念1.1 概念1.2 代码实例二、面向对象三大特性解析2.1 封装2.2 继承2.3 多态三、进阶3.1 基础重载方法3.2 下划线说明面向对象最重要的概念就是类（class）和实例（instance），类是抽象，而实例（Instance）则是一个个具体的对象面向对象三大特点：封装、继承和多态class Animal(object): def __init__(se...
2019-10-17 16:54:42
607
原创 计算机基础&校招计算机面经指南（一）
申明：内容来源于网络，由笔者整理公众号：大兵闲记文章目录一、前端基础1、前端- 前端优化2、前端- ajax返回的状态3、前端- dom是什么，你的理解？4、前端-浏览器在生成页面的时候，会生成那两颗树？5、前端-描述一下XSS和CRSF攻击？防御方法？6、前端-如何实现跨域7、前端-实现一个Ajax8、前端-说一下浏览器缓存9、前端-说一下http2.010、前端-在地址栏里输入一个UR...
2019-10-11 15:51:01
1401
原创 linux网络：mac os 使用mtr命令出现“mtr: Failure to start mtr-packet: Invalid argument”
简介mtr（My traceroute）几乎是所有Linux发行版本预装的网络测试工具。其将ping和traceroute的功能合并，所以功能更强大。基本使用：mtr [hostname]问题mac os 基于 unix ，所以也是预装了 mtr。然而，直接输入 mtr 却有如下报错：mtrmtr-packet: Failure to open IPv4 socketsmtr-...
2019-10-11 15:43:24
3422
原创 python笔记：数字换算且去除folat中的无效0
文章目录问题解决方案问题在爬取IT桔子网时，遇到了投融资返回最新估值金额为万元级别且不直观的问题最新估值（万元）30000500015000300001500018800050005000500027625最终想实现和IT桔子网显示一致。解决方案首先增加个判断，位数大于即为亿元。则利用位数换算 /10000。之后利用{0:g}’.format(num)格式化无效...
2019-05-14 18:38:28
1642
1
原创 centos7 安装python3，亲手实践版本，并保持多版本兼容
文章目录前置下载解压安装配置前置这里是因为我部署爬虫到centos7上，所以需要重新布置python和anaconda环境。首先安装python所需的一些包yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make libffi-de...
2019-04-28 14:04:56
242
原创 linux下安装Anaconda3，配置python3。完美解决所有坑点！！！
1、安装到anaconda的官网获取下载链接 https://www.anaconda.com/distribution/#linux下载安装wget https://repo.anaconda.com/archive/Anaconda3-2019.03-Linux-x86_64.shbash Anaconda3-2019.03-Linux-x86_64.sh然后一直输入yes，以及...
2019-04-26 18:11:09
12350
1
原创 Linux关机和重启命令总结
关机命令：shutdown -h now（立刻进行关机） halt（立刻进行关机） poweroff（立刻进行关机）重启命令：shutdown -r now（现在重新启动计算机）reboot（现在重新启动计算机）区别：shutdown -h now和shutdown -r now必须是root用户或者具有root权限的用户才能使用，而halt和reboot是Linux系统中的任...
2019-04-26 17:41:14
124
原创 爬虫笔记：如何遍历json导出到列表中
文章目录前言实现效果前言最近在做一个自动化爬取IT桔子投融资到mongodb，然后自动导出我想要的字段到CSV发送邮件到指定邮箱。其中，如果做到遍历json这点确实难倒了我，找了很多方法，最终实现遍历效果。原始数据如下{ '_id': ObjectId('5cbd1a8513405c7b215db28f'), 'agg_time': '2019-04-21', '...
2019-04-25 22:25:34
369
原创 爬虫笔记-Session和Cookies
1、静态网页和动态网页静态网页：网页的内容是 HTML 代码编写的，文字、图片等内容均是通过写好的 HTML 代码来指定的，这种页面叫做静态网页。优点是访问速度快，缺点点可维护性差动态网页：动态解析 URL 中参数的变化，关联数据库并动态通过xml、ajax等呈现不同的页面内容。2、无状态HTTPHTTP 的无状态是指 HTTP 协议对事务处理是没有记忆能力的，也就是说服务器不知道客户端是...
2019-04-19 13:04:29
253
原创 git笔记：git push时出现remote: Permission to。。。The requested URL returned error: 403错误
问题出现的原因猜测是这个项目提交时，配置了错误的网址，即，你本来往自己github里面仓库写入资源，结果.git/config 配置确实其他人的仓库。所以出现不允许~解决方法解决方法也很简单。vim .git/config带github的仓库，直接替换即可然后再git push即可成功。done！...
2019-04-15 22:50:17
1535
原创 Python笔记：zsh 下Anaconda3的安装
问题Mac下安装好Anaconda3后，并且能够打开图形化的界面，但是发现终端无法显示Anaconda3，提示没有发现。断定为环境变量的问题。经查阅资料，发现终端中zsh的可访问的程序都放在/bin, /usr/bin, /usr/local/bin。而Anaconda3是安装在/Users/pasca下的，其中pacsa是电脑用户名。解决增加zsh的环境变量，执行以下命令。e...
2019-04-15 09:43:12
1729
原创 爬虫笔记：unicode编码转中文
问题抓取IT桔子网时，返回的内容都是unicode编码格式。如下：随便截取一点翻译后。所以，如果想要正确的爬虫内容，还需要将unicode编码的内容转为中文。方法将爬虫到的response先编码urf-8后解码。print(response.text.encode('utf-8').decode('unicode_escape'))这个unicode_escape是什么？本...
2019-04-13 15:14:19
2057
原创 爬虫笔记：Python 读取ini配置文件
在日常中经常遇到*.ini的文件，wiki中解释名字出自Initial，总之，一般遇到这种东西寓意就是初始化配置文件。刚拿到的时候，有点懵逼。其实很简单，就是一个文本信息，一般用来不方便放置密码时或者需要重复利用的信息，从而简便的读取这个信息。ini配置文件[userInfo]userName = xxxxxpassWord = 12313[spiderAPI]companyS...
2019-04-12 17:37:27
353
原创 强推！2019年最火的容器、K8S和DevOps入门都在这了
作者： Pasca来源：蛋蛋团（公众号ID：dandan_tuan）文章目录前言1、容器是什么？2、K8S是什么？3、DevOps是什么？参考资料前言我们回顾企业IT架构演进的整个历史，不难看出企业主流形态都是依据冯诺依曼架构形态从计算机高度集中化，再到多用户多任务的大型机和小型机，简单概括这个时期的特征就是复杂且缺乏统一的标准。直到80年代X86服务器的诞生，企业IT形态走向水平分层...
2019-03-27 18:34:57
2080
原创 mac笔记：安装ffmpeg出现 Referenced from: /usr/local/lib/libass.9.dylib错误
状况从mac air换机到mbp。把item2重新弄了下，结果ffmpeg有点出现，输入ffmpeg出现以下错误。 Referenced from: /usr/local/lib/libass.9.dylib Reason: image not found[1] 4701 abort ffmpeg输入ffplay同理dyld: Library not loaded:...
2019-03-24 15:09:06
1247
1
原创 异构型实例科普---我眼中的异构计算
author：pascatime：2018/01/27文章目录摘要一、传统计算的困境二、异构计算的崛起三、”厨房论“异构计算GPU：手脚麻利但是比较笨的帮厨FPGA: 功能多变的万能料理机ASIC：最强订制料理机四、总结摘要本文旨在梳理及加深自身对于异构计算的理解，同时希望能为科普异构计算实例，让读者了解异构计算的基本概念和其中不同异构计算方案的侧重点。一、传统计算的困境广为流传的摩尔...
2019-02-24 14:34:36
3562
原创 云计算时代，数据中心架构三层到大二层的演变
云计算时代，数据中心架构三层到大二层的演变author：pascatime：2018/1/16文章目录一、数据中心是什么二、传统数据中心网络架构三、云计算的发展对数据中心的影响四、数据中心流量丰富化带来的挑战五、总结一、数据中心是什么数据中心，指用于安置计算机系统及相关部件的设施，例如电信和储存系统。为了满足自身的业务需求，保证数据的稳定和可靠。无论是互联网还是传统行业，都会有自己或大或...
2019-02-24 14:23:28
5701
2
原创 axure笔记：超高还原携程轮播图广告仿真效果
一、效果图实现效果分析加载页面时自动循环，轮播广告和轮播小圆圈同步点击轮播小圆圈，该轮播广告呈现选中移除鼠标时，又开始自动轮播二、实现1、 加载页面时自动循环，轮播广告和轮播小圆圈同步2、点击轮播小圆圈，该轮播广告呈现选中每个轮播小圆圈都使用3、移除鼠标时，又开始自动轮播done！...
2019-01-19 21:04:37
269
原创 axure笔记：携程广告固定悬浮效果实现
效果图步骤1、素材准备素材1：广告-显示素材2：广告-隐藏2、导入素材导入素材，按照以下方式摆放，同时隐藏素材2（广告-隐藏）。3、增加热区，设置为动态面板创建动态面板设置动态面板，是为了固定浏览器。热区交互素材2隐藏元件交互固定浏览器设置大功告成...
2019-01-18 01:02:44
860
原创 axure8.0笔记：利用两个动态面板实现图片跑马灯效果
效果图步骤1、创建动态面板2、进入动态面板再创建一个动态面板3、输入内容4、交互动作设置实现1、创建动态面板自己拉一个动态面板2、进入动态面板再创建一个动态面板3、输入内容内容是携程酒店的更多酒店推荐4、交互动作设置设置载入时动作，实现图片线性移动。over...
2019-01-17 23:16:47
2563
1
原创 一篇读懂计算机网络
author：pascatime：2019/01/05前言：部分来源于网络，仅供学习使用。[TOC]一、计算机网络体系结构大道尚有三千，而为了多种维度描述网络，到现在也有多种网络体系结构。分别是TCP/IP四层网络模型，TCP/IP五层网络模型以及我们广为人知的ISO七层网络模型。当然，无论哪种模型，其目的都是为了建立 一个标准而让更多的人可以使用它，就如同我们的语言：普通话和英语。...
2019-01-09 09:44:38
424
3
原创 QVM问题纪要：Warning：The remote SSH server rejected X11 forwarding request.
背景连接七牛云主机时初夏Warning：The remote SSH server rejected X11 forwarding request.报错。解决方法方法1：修改配置文件 vim /etc/ssh/sshd_config将文件中的X11Forwarding的注释去掉并将参数由no改为yes然后再将UseLogin no的注释也去掉。保存之后重启sshd服务。方法2：如...
2019-01-03 10:48:26
3350
原创 使用宝塔面板快速配置QVM的Linux环境
文章目录前言环境要求Linux面板环境要求windows面板环境要求一、开始SSH远程登录安装宝塔面板二、使用开启8888端口登录进入后初始界面选择安装合适Web环境高级项author：pascatime：2018/12/19前言宝塔面板是一款服务器管理软件，支持windows和linux系统，可以通过Web端轻松管理服务器，提升运维效率。也可以可一键配置服务器环境（LAMP/LNMP/T...
2018-12-19 11:40:35
644
原创 Axure笔记：使用Axure PR 8.0的全局变量实现倒计时效果及跳转
文章目录结果展示使用元件步骤结果展示是个动态的效果，但是图片就不能展示了！使用元件文本标签全局变量动态面板步骤1、打开Axure，放两个文本标签。第一个命名为time，第二个不用管。2、创建个动态面板。两个state是两种颜色，自定义。3、设置参数单击动态面板，设置参数如下。这里主要是实现动态倒计时效果。继续，设置页面载入时效果这里主要是颜色切换可以...
2018-12-19 00:21:33
1677
原创 聚焦传统网络，学习SDN基础和案例
文章目录一、网络基础1、网络组成三要素2、网络通信三要素3、中继器4、集线器5、网桥6、交换机7、路由器8、无线AC/AP9、防火墙10、家庭网络拓扑11、中小型企业网络架构11、运营商网络脉络12、名词解释二、SDN介绍1、传统网络存在的问题1.1 硬件升级难题1.2 网管系统的不足1.3 流量分配不均衡1.4 网络设备本身问题2、SDN定义3、SDN vs 传统网络4、SDN案例----谷歌B...
2018-12-11 11:47:22
1683
1
原创 漫谈直播，从0认识直播并快速搭建专属直播平台
文章目录一、直播科普1、直播是什么2、视频编码压缩3、视频直播的准确定义二、常见直播技术梳理1、直播业务逻辑2、直播技术栈1、数据采集（主播端）2、数据预处理3、数据编码4、数据传输5、解码数据6、数据播放（播放端）三、直播协议的区别以及应用场景1、推流2、拉流3、开源推拉流软件推荐1、推流工具2、播放工具四、使用七牛云从0到1打造直播平台1、简要流程2、产品框架一、直播科普1、直播是什么在...
2018-12-06 11:17:09
1931
原创 mac工具：微信双开，一步到位
文章目录准备工作启动准备工作Xcode软件安装首先，现在 Terminal （mac上面叫终端）中拉取最新的源码：git clone https://github.com/Sunnyyoung/WeChatTweak-macOS.git然后在源码目录中进行编译：cd WeChatTweak-macOSsudo make install编译完成后重启微信即可启用插件。如果微信升...
2018-12-03 10:24:06
3119
2
原创 七牛：一篇玩转七牛CDN时间戳防盗链———python版
文章目录前言一、七牛portal配置二、使用python生成时间戳防盗链url三、完成前言七牛文档配置时间戳防盗链较为复杂，这里专门写一份简单版却五脏俱全的小白文档，旨在交流，同时学习。Github地址：https://github.com/Haley123/qiniu/blob/master/time_chain.py一、七牛portal配置直接使用系统生成的主key和备key。...
2018-11-30 11:34:15
1578
4
C7-CID-Chinamobile-Bring SCSI support into QEMU block layer.pdf
2021-12-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人