- 博客(45)
- 收藏
- 关注
RSS订阅翻译 MongoDB数据模型
MongoDB数据模型设计Embedded Data - 内嵌数据模型文档大小限制规范化数据模型MongoDB特性与数据模型原子性分片索引大量的集合与SQL数据库在插入数据之前必须确定并声明表的模式不同，MongoDB的集合不要求其文档具有相同的模式：单个集合中的文档不需要具有相同的字段集，并且字段的数据类型可以在集合中的文档之间不同。要更改集合中文档的结构（例如添加新字段，删除现有字段或...
2018-12-08 11:01:42
1674
原创 MongoDB-存储
数据的存储存储引擎是MongoDB中负责管理数据的的主要组件，负责管理数据在内存和磁盘上的存储方式。MongoDB支持多个存储引擎，因为不同的引擎可以更好地执行特定工作负载，允许用户选择最合适的存储引擎。journal是一个日志，可以在硬件关机时帮助数据库恢复。 有几个可配置选项允许日志在性能和可靠性之间取得平衡，适用于特定用例。GridFS是一种多功能存储系统，适用于处理大型文件，例如超过...
2018-12-06 11:44:42
659
原创 Redis-Python交互：流Stream
Redis增删改查：独立消费创建消费组消费控制消息的长度redis5.0 新特性，官方介绍：https://redis.io/topics/streams-intro参考：https://blog.csdn.net/shellquery/article/details/80562422增删改查：xadd(self, name, fields, id=’*’, maxlen=None, ...
2018-12-05 11:45:25
3415
原创 Redis-Python交互：编码、连接、基本命令
Redis编码连接池连接方式操作key操作服务器操作在redis-py 3.0之后就不在支持使用传统的‘Redis’客户端类了。StrictRedis现在只是Redis的一个别名，现在这个连接更加python化。例如，使用redis的字符串操作setbit和getbit来统计用户活跃天数：'''用Redis统计用户上线次数理解：A用户 100010001000001 //活跃了4天B...
2018-12-05 11:43:07
657
原创 Redis-Python交互：数据类型操作
RedisString操作Hash操作列表操作集合有序集合sorted set*SCAN操作String操作redis中的String在在内存中按照name：value来存储的。set(self, name, value, ex=None, px=None, nx=False, xx=False):get(self, name):获取key的值getset(self, name, va...
2018-12-05 11:42:37
326
原创 Redis-持久化
Redis持久化RDB快照RDB快照运作AOF (append-only file)AOF重写AOF耐久从RDB切换到AOF备份Redis数据持久化Redis 提供了多种不同级别的持久化方式：RDB 持久化可以在指定的时间间隔内生成数据集的时间点快照（point-in-time snapshot）。AOF 持久化记录服务器执行的所有写操作命令，并在服务器启动时，通过重新执行这些命令来还原...
2018-12-05 11:35:09
100
原创 Redis-安装设置
RedisRedis安装和设置redis-py的安装RedisRedis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。它通常被称为数据结构服务器，因为值（value）可以是 字符串(String), 哈希(Map), 列表(list), 集合(sets) ， 有序集合(sorted sets)和...
2018-12-05 11:32:52
162
原创 MongoDB-复制、分片
MongoDBMongoDB的安装与设置安装与设置PyMonoMongoDB的安装与设置MongoDB 是由 C++语言编写的非关系型数据库, 是一个基于分布式文件存储的开源数据库系统 ，其内容存储形式类似 JSON 对象,它的字段值可以包含其他文档、数组及文档数组，非常灵活。MongoDB 是非关系数据库当中功能最丰富，最像关系数据库的，它与关系型数据库的对应：SQL术语/概念M...
2018-12-05 11:30:46
367
原创 MongoDB-排序、索引、聚合
MongoDB排序索引聚合聚合管道Map-Reduce单一用途的聚合函数排序使用sort()方法对数据进行排序，可以通过参数指定排序的字段，并可以指定排序方式（默认升序）db = client['first_demo']col = db['sites']for doc in col.find({"alexa": {"$gt": '100'}}).sort('name', pymongo....
2018-12-04 09:29:52
752
原创 MongoDB-CURD增、删、改、查
MongoDBMongoDB操作创建数据库添加数据插入多条自定义_id插入查询查询指定字段指定条件查询type类型查询正则表达式查询指定查询返回数修改文档删除数据MongoDB操作在 Python 中, 如果想要和 MongoDB 进行交互 ,就需要借助于 PyMongo 库:pip install pymongo使用python 进行简单的插入和查询。# -*- coding: utf-...
2018-12-04 09:26:54
521
原创 MongoDB-安装与设置
MongoDBMongoDB的安装与设置NoSQLMongoDB的特点安装与设置MongoDB的安装与设置MongoDB 是由 C++语言编写的非关系型数据库, 是一个基于分布式文件存储的开源数据库系统 ，其内容存储形式类似 JSON 对象,它的字段值可以包含其他文档、数组及文档数组，非常灵活。MongoDB 是非关系数据库当中功能最丰富，最像关系数据库的，它与关系型数据库的对应：S...
2018-12-04 09:25:16
1258
原创 Redis-Python交互：HyperLogLog、管道、事务、发布和订阅
RedisRedis安装和设置redis-py的安装Python和Redis交互编码连接池连接方式操作String操作管道事务发布和订阅订阅/取消订阅发布消息消息处理关闭链接pubsub子命令RedisRedis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。它通常被称为数据结构服务器，因为值（v...
2018-11-30 09:55:35
343
原创 Django学习25-重定向
Django附带一个可选的重定向应用程序。 它允许您在数据库中存储简单的重定向并为您处理重定向。 它默认使用HTTP响应状态代码301 Moved Permanently。安装了 django.contrib.sites 框架；在INSALLED_APPS中添加'django.contrib.redirects',添加django.contrib.redirects.middleware....
2018-11-24 17:40:50
120
原创 Django学习24-logging
Django的日志记录logging快速入门Loggers记录器Handler处理程序Filters过滤器Formatter日志格式使用日志记录命名记录器调用日志记录设置日志Django 日志扩展Django的内置logger记录器处理程序过滤器Django默认的logging设置logging快速入门Django使用了Python内置模块logging作为系统日志记录。其设置包括4个部分：L...
2018-11-23 22:52:12
245
原创 Django学习23-测试
测试编写和运行测试test命令测试工具The test client对于现代Web开发人员来说，自动化测试是一种非常有用的消除bug的方法。您可以使用一组测试 - 测试套件 - 来解决或避免许多问题：在编写新代码时，可以使用测试来验证代码是否按预期工作。当您重构或修改旧代码时，可以使用测试来确保您的更改不会意外地影响应用程序的运行。测试Web应用程序是一项复杂的任务，因为Web应用程序...
2018-11-21 22:14:12
509
原创 Django学习22-基于类的视图2
class-based views使用基于类的通用视图处理表单处理模型表单Model formsModel和request.user使用基于类的通用视图处理表单表单处理程序大致上分为3种：初始化的GET请求，显示空值或预设值；使用了无效的数据进行POST提交，重新显示表单并报错；正确地进行POST提交，会重定向到其他网页；可以观察一个简单的联系表：from django impo...
2018-11-20 19:15:00
192
原创 Django学习21-基于类的视图1
class-based views基于类的视图使用基于类的视图使用多重继承（mixins）基于类的视图 视图是可调用的，它接收请求并返回响应。这可能不仅仅是一个函数，Django提供了一些可用作视图的类的示例。这些允许您通过利用继承和mixin来构建视图并重用代码。 基于类（class-based）的视图提供了另一种方法，将视图实现为Python对象而不是函数。 它们不会替换基于函数（f...
2018-11-19 23:17:30
857
原创 爬虫学习笔记3
基本库的使用urllib发送请求urlopen()参数urllib urllib是Python内置的HTTP请求模块，它包含request：它是最基本的 HTTP 请求模块,可以用来模拟发送请求 。 就像在浏览器里输入网址然后回车一样，只需要给库方法传入 URL 以及额外的参数，就可以模拟实现这个过程了。error：异常处理模块，如果出现请求错误 ，我们可以捕获这些异常，然后进行重试...
2018-11-15 20:23:30
222
原创 爬虫学习2-相关原理
原理HTTP基本原理网页基础网页的基本组成HTMLCSSJavaScriptHTML DOM爬虫的基本原理爬虫抓取的数据JavaScript渲染的页面会话和Cookies静态网页和动态网页HTTP是不保存状态的协议会话会话何时结束Cookiescookie的内容会话Cookie和持久Cookie代理代理的基本原理代理的作用HTTP基本原理 HTTP的全称是Hyper Text Transfe...
2018-11-14 16:32:35
251
原创 Python爬虫1：环境配置
开发环境配置请求库的安装无界面的浏览器解析库的安装开发环境：Ubuntu18.04+python3.6请求库的安装爬虫可以简单分为几步:抓取页面、分析页面和存储数据 。在抓取页面的过程中 ,我们需要模 拟浏览器向服务器发出请求,所以需要用到一些 Python 库来实现 HTTP 请求操作。requests： pip install requests;selenium: Selenium...
2018-11-13 20:06:33
605
原创 Django学习18-Session会话
Django会话启用session配置session使用数据库存储会话使用Cache存储会话Warning使用文件存储会话使用cookie存储会话在视图函数中启用session测试cookie在视图函数外使用session会话何时进行存储会话保持时间清除保存的会话会话相关的设置会话安全Django完全支持也匿名会话，简单说就是使用跨网页之间可以进行通讯，比如显示用户名，用户是否已经发表评论。se...
2018-11-11 21:03:43
173
翻译 Djang学习17-安全
Security in DjangoXSS保护CSRF保护SQL注入保护Clickjacking保护SSL/HTTPSHost header validationSession securityUser-uploaded content其它翻译自Djangov2.1的安全相关：https://docs.djangoproject.com/en/2.1/topics/security/XSS保护...
2018-11-10 17:13:06
153
原创 Django学习16-静态网页、国际化与本地化
Django静态网页国际化和本地化在Python代码中指出要翻译的文本`Translators`注释关键字在模板中标示待翻译文本在URL模式中标示语言本地化添加语言切换功能静态网页Django应用是动态网站，如果网站的流量过大，每次访问时都会进行动态生成，执行各种SQL语句，就会消耗大量服务器资源，可以考虑生成静态网页。def index(request): # cache = ca...
2018-11-09 20:56:52
421
原创 Django学习15-缓存：Memcache
缓存CacheDjango 缓存系统CACHES使用缓存缓存整个网站页面缓存在模板中使用缓存Cache API设置Vary header控制缓存Memcached安装Memcached 运行使用Memcached作为Django缓存Memcached的缺点Django 缓存系统Django是动态网站，每次用户请求页面时，Web服务器都会进行各种计算：从数据库查询到模板呈现再到业务逻辑 ，使得访...
2018-11-08 22:25:40
341
原创 Django学习14-数据库相关1
Django 数据库数据导入使用迁移文件提供数据用fixture导入数据数据库的迁移数据导入Django在进行数据库操作时，要有相对应的数据表。创建数据表的过程：models中创建模型–>使用makemigrations命令生成迁移文件–>migrate修改数据库表结构。使用迁移文件提供数据有时候在对数据库进行处理之前
2018-11-07 23:23:39
2092
原创 数据库MySQL
MySQL安装和设置MySQL是一个关系型数据库管理系统，由瑞典MySQL AB 公司开发，目前属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一，在 WEB 应用方面，MySQL是最好的 RDBMS (Relational Database Management System，关系数据库管理系统) 应用软件。安装和设置可以直接使用apt命令安装sudo apt-g...
2018-11-06 15:48:58
411
原创 数据库PostgreSQL
数据库PostgreSQL安装与设置数据库管理可视化管理工具pgAdmin数据库操作数据库连接Pycharm连接数据库python连接PostgreSQL数据库远程连接数据库PostgreSQLPostgreSQL是一个功能强大的开源对象关系数据库管理系统(ORDBMS)。 用于安全地存储数据; 支持最佳做法，并允许在处理请求时检索它们。特点：PostgreSQL可在所有主要操作系统(即...
2018-11-05 20:32:59
1252
原创 Django学习13-部署（nginx）
Nginx+uwgsi部署Nignxnginx和相关安装uWSGI使用uWSGI部署NignxNginx（engine-x） 是一个高性能的 Web 和反向代理服务器。 作为web服务器相比 Apache，Nginx 使用更少的资源，支持更多的并发连接，体现更高的效率，这点使 Nginx 尤其受到虚拟主机提供商的欢迎。能够支持高达 50,000 个并发连接数的响应。它还可以作为负载均衡服务器和...
2018-11-04 11:34:18
214
原创 Django学习12-部署（apache2）
Django部署1. 如何使用WSGI部署Django1.1 安装 apache2 和 mod_wsgi1. 如何使用WSGI部署DjangoDjango的主要部署平台是WSGI，它是Web服务器和应用程序的Python标准。Django的startproject管理命令设置一个简单的默认WSGI配置，可以根据需要调整项目，并指示任何符合WSGI的应用程序服务器。Django提供如何使用WS...
2018-11-02 22:08:24
261
原创 Django学习11-ImageField添加头像、Markdown富文本
添加用户头像在用户信息UserProfile中添加ImageField字段，用于头像上传和显示，而要使用ImageField(或是FileField)必须先进行一些设置：在setting.py中设置一个MEDIA_ROOT作为Django保存文件的完整路径（这些文件并不会保存在数据库中），定义MEDIA_URL为该目录的基本公共URL。 确保Web服务器的用户帐户可以写入此目录；# Bu...
2018-11-01 22:13:31
859
原创 Django学习9-itsdangerous加密
Django使用加密验证itsdangerous加密令牌验证用的视图函数和URL验证邮件使用加密验证注册后在发送给用户的邮件中添加验证链接，最简单链接就是http://www.xxxx.com/users/comfirm/<id>这种形式的URL，其中id为数据库给注册的用户分配的id。用户点击访问这个链接后，对应的视图函数会确认收到用户的id，然后用户的状态更新为已验证。但这
2018-10-30 20:49:41
417
原创 Celery学习
Celery异步任务处理框架CeleryCelery的构成Celery安装RabbitMQRabbitMQ的安装RabbitMQ Server设置RabbitMQ 服务开启关闭Redis安装设置Redis简单使用Celery使用创建应用运行Celery 执行单元调用任务异步任务处理框架CeleryCelery是一个简单，灵活，可靠的分布式系统，用于处理大量消息，同时为操作提供维护此类系统所需的...
2018-10-28 21:46:53
186
原创 Django学习7-Bootstrap样式：分页
使用Bootstrap样式使用Bootstrap设置项目样式topics页面分页设置使用bootstrap样式设置分页使用Bootstrap设置项目样式topics页面分页设置当前topics页面下显示全部的topic，没有分页设置，下面使用django.core.paginator.Paginator进行分页设置。class Paginator(object_list, per_page...
2018-10-27 14:44:44
524
1
原创 Django学习6-Bootstrap样式：导航栏、表单、card
Bootstrap的安装pip install django-bootstrap4安装完成。可以在venv下的lib看到bootstrap4：然后在setting.py中添加bootstrap应用：INSTALLED_APPS = [ 'django.contrib.admin', 'django.contrib.auth', 'django.contrib.con...
2018-10-26 23:05:15
10131
2
原创 Django学习5-用户账户：注册
用户账户创建用户账户注册注册URL模式注册视图函数register注册模板注册时添加邮箱字段用户与数据限制访问数据与用户关联用户访问自己的数据创建用户账户注册Django没有注册用户的视图函数和URL模式，自定义URL模式，编写视图函数和模板。注册URL模式在users/urls.py中导入注册函数registerfrom django.urls import path, includ...
2018-10-25 20:04:34
460
原创 Django学习4-用户User模型、进行登录
创建用户账户建立一个用户注册和身份验证系统，让用户能够注册账户，进而登录和注销。创建一个新的应用程序，其中包含与处理用户账户信息相关的所有功能。对topic模型做出修改，让每个Topic和post都归属于特定的用户。应用程序users使用startapp创建应用程序users：将users应用添加到 settings.py 中。# Application definitionINS...
2018-10-24 23:12:59
2888
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人