- 博客(62)
- 资源 (3)
- 收藏
- 关注
RSS订阅
原创 循环神经网络LSTM实现电影情感分类
为了对word embedding这种常用的文本向量化的方法进行巩固，这里我们会完成一个文本情感分类的案例现在我们有一个经典的数据集IMDB，这是一份包含了5万条流行电影的评论数据，其中训练集25000条，测试集25000条。数据格式如下：下图左边为名称，其中名称包含两部分，分别是序号和情感评分，（1-4为neg，5-10为pos），右边为评论内容但本次实验从简设计只实现二分类，即实现积极和消极的预测。
2022-05-02 17:28:13
2954
3
原创 YOLOv5 + VGG16 + FastAPI实现验证码检测识别（汉字点选型和数字运算类）输出坐标和类别
技术与实现通过目标检测直接进行检测与识别（通常分类类别量小如数字验证码，数字运算类验证码）通过目标检测加分类任务（分类类别居多，如汉字点选类）目标检测基于YOLOv5 目标检测框架，通过图像打标训练模型识别任务实现方法数字运算类： 直接通过YOLOv5目标打标分类实现识别任务点选汉字型： 先基于目标检测,将检测物沿检测框切割，将检测物用分类任务实现汉字分类任务： 使用VGG16提取全连接层第一层特征用做监督分类任务开发成FastAPI接口汉字点选型基于上面任务算法实现开发成fast
2022-03-23 10:26:54
3594
2
原创 图像特征提取（VGG和Resnet特征提取卷积过程详解）
图像特征提取（VGG和Resnet卷积过程详解）第一章 图像特征提取认知1.1常见算法原理和性能众所周知，计算机不认识图像,只认识数字。为了使计算机能够“理解”图像，从而具有真正意义上的“视觉”，本章我们将研究如何从图像中提取有用的数据或信息，得到图像的“非图像” 的表示或描述，如数值、向量和符号等。这一过程就是特征提取，而提取出来的这些“非图像”的表示或描述就是特征。有了这些数值或向量形式的特征我们就可以通过训练过程教会计算机如何懂得这些特征， 从而使计算机具有识别图像的本领。1.2 什么是图
2021-12-25 16:28:40
67360
11
原创 数据分析必备利器-pandas使用锦集
pandas常用操作关键缩写和包导入import pandas as pd # 最新为 1.0.4 版本 (2020-05-29)import numpy as npimport matplotlib.pyplot as pltimport seaborn as sns%matplotlib inline导入数据# 从 CSV 文件导入数据pd.read_csv('file.csv', name=['列名','列名2'])# 从限定分隔符的文本文件导入数据pd.read_table
2021-12-18 11:39:26
227
原创 Scrapy设置下载延时和自动限速
Scrapy设置下载延时和自动限速DOWNLOAD_DELAY 在settings.py文件中设置#延时2秒，不能动态改变，时间间隔固定，容易被发现，导致ip被封DOWNLOAD_DELAY=2 RANDOMIZE_DOWNLOAD_DELAY 在settings.py文件中设置# 启用后，当从相同的网站获取数据时，Scrapy将会等待一个随机的值，延迟时间为0.5到1.5之间的一个随机值乘以DOWNLOAD_DELAYRANDOMIZE_DOWNLOAD_DELAY=Tru
2021-09-09 10:21:49
4460
原创 RASA2.0 搭建中文聊天机器人（附gitee源码）
RASA2.0搭建中文聊天机器人环境搭建# 优先安装这几个python包，后面缺什么补充什么rasa==2.0.0rasa-sdk==2.4.1tensorflow==2.3.2Flask==1.1.2开始搭建初始化项目# 命令创建rasa项目所需的所有文件，并根据一些示例数据训练一个简单的机器人rasa init初始化后会创建以下文件，介绍几个重要的文件，当然这些文件结构你也可以自己调整文件名作用config.yml配置NLU和Core的文件
2021-09-05 12:31:47
4831
7
原创 手把手教你使用YOLOv5实现化妆品目标检测
YOLOv5目标检测框架搭建源码下载# 在github下载源码$ git clone https://github.com/ultralytics/yolov5环境搭建（GPU）# 创建一个虚拟环境python 3.8pip install -r requirementsUbuntu清理磁盘空间（磁盘空间不够）# 查找100M以上的文件sudo find / -size +100M |xargs ls -lh # 然后删除缓存中不需要的文件环境搭建（CPU）# 先安装torc
2021-08-26 21:23:36
1066
1
原创 YOLOV3目标检测框架搭建和训练自己模型的流程
YOLOV3目标检测框架搭建和训练自己模型的步骤（超详细）Ubuntu18.04安装labelImg标注工具—pyqt5 安装步骤# 不需要进入到虚拟环境中sudo apt-get install pyqt5-dev-tools sudo pip3 install lxml git clone https://github.com/tzutalin/labelImg.git cd labelImg make qt5py3 # 用make all 会导致先识别pyqt4.python
2021-06-26 17:21:04
3211
2
原创 手把手教你用pycharts绘制各种图（常做报表可视化的同学请进）
使用pycharts各种图绘制安装pycharts使用 pip install pycharts==1.9.0建议使用jupyter notebook本图代码参考自官网，仅供学习使用柱状图1#数据可视化库,需要使用pip install pyecharts#官网： http://pyecharts.org/#/import pandas as pdfrom pyecharts.charts import Barbar = Bar()#pyechars需要的数据只能是Python中内置
2021-06-20 17:06:02
9337
2
原创 Django的ORM一些常用的小知识点
get_or_create【获取数据, 有就查询返回， 没有则创建返回item】update_or_create【有就更新， 没有则创建新的item】Django的ORM一些常用的小知识点。
2023-02-03 11:40:15
120
原创 flask 接口参数校验器（支持多层嵌套参数校验）
1.Flask在参数校验过程中，为避免写重复校验逻辑，这里实现了参数校验器的开发，减少不必要的逻辑代码重复开发，提高代码质量。2.参数校验，支持多层嵌套类型参数校验校验，有很友好的校验提示，定位也更准确.........
2022-06-05 08:38:57
853
原创 selenium被识别怎么办
selenium被识别怎么办加上以下内容，webdriver配置from selenium import webdriveroption = webdriver.ChromeOptions()option.add_experimental_option('excludeSwitches', ['enable-automation'])option.add_argument("--disable-blink-features=AutomationControlled")# option.add_a
2022-05-01 09:42:43
1056
1
原创 一文知道什么是python 装饰器
python 装饰器闭包1.理解装饰器前先理解什么叫闭包条件:1. 外部函数中定义了内部函数2. 外部函数是有返回值3. 返回的值是:内部函数名4. 内部函数引用了外部函数的变量格式:def 外部函数(): ...... def 内部函数(): .......... return 内部函数2.来看看闭包的几个例子例子1# 闭包# 在函数中提出的概念，def func(): a = 100 def inner_func()
2022-04-28 22:09:16
968
原创 Pandas使用小技巧，让你快速实现数据处理
Pandas使用指南pandas修改数据>>> df.loc[1,'name'] = 'aa' #修改index为‘1’，column为‘name’的那一个值为aa。>>> df.loc[1] = ['bb','ff',11] #修改index为‘1’的那一行的所有值。>>> df.loc[1,['name','age']] = ['bb',11] #修改index为‘1’，column为‘name’的那一个值为bb，age列的值为11
2022-04-27 09:03:07
249
原创 手写数字识别使用MNIST数据集（通俗易懂的代码）
标题用torch实现手写数字识别import osimport torchimport torchvisionfrom torchvision.transforms import Compose,ToTensor,Normalizefrom torch.utils.data import DataLoaderfrom torch import nn, optimimport torch.nn.functional as Fimport numpy as npTRAIN_BATCH_SIZ
2022-04-02 21:28:46
487
原创 1.2 pytorch的入门使用
Pytorch的入门使用目标知道张量和Pytorch中的张量知道pytorch中如何创建张量知道pytorch中tensor的常见方法知道pytorch中tensor的数据类型知道pytorch中如何实现tensor在cpu和cuda中转化1. 张量Tensor张量是一个统称，其中包含很多类型：0阶张量：标量、常数，0-D Tensor1阶张量：向量，1-D Tensor2阶张量：矩阵，2-D Tensor3阶张量…N阶张量2. Pytorch中创建张量使用pyt
2022-04-01 19:44:28
203
原创 python后端面试锦集
python锦集计算机网络一.OSI与TCP/IP各层的结构与功能,都有哪些协议?1.1 应用层 应用层(application-layer）的任务是通过应用进程间的交互来完成特定网络应用。应用层协议定义的是应用进程（进程：主机中正在运行的程序）间的通信和交互的规则。对于不同的网络应用需要不同的应用层协议。在互联网中应用层协议很多，如域名系统DNS，支持万维网应用的 HTTP协议，支持电子邮件的 SMTP协议等等。我们把应用层交互的数据单元称为报文。域名系统域名系统(Domain Name
2022-03-29 22:04:25
4685
原创 Django外键约束
ORM外键约束from django.db import models # 出版社class Publisher(models.Model): id = models.AutoField(primary_key=True) name = models.CharField(max_length=64, null=False, unique=True) def __str__(self): return "<Publisher object: {}&
2022-03-24 13:00:59
873
原创 2.rasa架构
rasa架构消息处理此图显示了使用Rasa构建的助手如何响应消息的基本步骤：这些步骤分别是： 1. 收到消息并将其传递给解释器(Interpreter)，解释器将其转换为包含原始文本，意图和找到的任何实体的字典。这部分由NLU处理。 2. 跟踪器(Tracker)是跟踪对话状态的对象。它接收新消息进入的信息。 1. 策略(Policy)接收跟踪器的当前状态。 3. 该策略选择接下来采取的操作(action)。 4. 选择的操作由跟踪器记录。 5. 响应被发送给用户。被发送给用
2022-01-08 10:39:05
1275
原创 1.认识rasa
认识rasaRasa是一套开源机器学习框架，用于构建基于对话上下文的AI小助手和聊天机器人。Rasa有两个主要模块：Rasa NLU 用于对用户消息内容的语义理解；Rasa Core 用于对话管理。配置文件Rasa主要的的配置文件有NLU配置、Stories、Domain等NLU配置作为实现自然语言的识别，Stories作为会话的剧本、Domain作为处理Action的模本。NLU训练数据NLU 是英文 Natural Language Understanding 的简称，
2022-01-08 10:34:25
3205
原创 解决打不开磁盘“ubuntuvirtual_workUbuntu 64 位.vmdk”或它所依赖的某个快照磁盘。模块“Disk”启动失败。未能启动虚拟机。
解决打不开磁盘“H:\纯净版ubuntu\virtual_work\Ubuntu 64 位.vmdk”或它所依赖的某个快照磁盘。模块“Disk”启动失败。未能启动虚拟机。直接将虚拟机安装目录下的所有.lck文件（文件夹）直接删除，再次就能正常运行了...
2022-01-06 21:26:54
2796
1
原创 17.FastAPI的OAuth2的密码模式
17.FastAPI的OAuth2的密码模式用户请求验证原理说明用户携带用户名和密码去客户端请求应用，过程中会有用户认证服务，验证通过会返回用户一个token,用户拿着这个token就可以取去使用他想请求的东西了初识OAuth2的请求原理from fastapi.security import OAuth2PasswordBearer, OAuth2PasswordRequestFormapp06 = APIRouter()"""OAuth2 密码模式和 FastAPI
2022-01-03 20:25:16
3805
原创 16.FastAPI依赖
16.FastAPI依赖函数依赖from fastapi import Depends, HTTPException, Header"""Dependencies 创建、导入和声明依赖"""async def common_parameters(q: Optional[str] = None, page: int = 1, limit: int = 100): return {"q": q, "page": page, "limit": limit}@app05.get("/d
2022-01-03 20:19:41
508
原创 15.FastAPI 框架错误处理
15.FastAPI 框架错误处理fastapi 默认的错误处理方式，返回格式是json形式from fastapi import APIRouter, status, Form, File, UploadFile, HTTPExceptionfrom pydantic import BaseModel, EmailStr"""Handling Errors 错误处理"""@app04.get("/http_exception")async def http_exception(city
2022-01-03 20:08:03
499
原创 YOLOv5 输出目标检测物的坐标信息和类别（可结合flask或者fastapi开发成目标检测接口）
YOLOv5 输出目标检测物的坐标信息和类别（可结合flask或者fastapi开发成目标检测接口）直接上代码import ioimport numpy as npimport cv2import torchfrom PIL import Imagefrom numpy import random'''代码：由YOLOv5自带的detect.py 改编实现：输入图片进行检测，输出图片的类别和坐标和对应的分数autor:小帆芽芽date:2021/12/21'''from YOL
2022-01-03 17:38:14
16536
19
原创 pymongo操作
pymongo操作删除数据（多条）#!/usr/bin/python3import pymongofrom pymongo import MongoClientconn = MongoClient('42.194.138.112', 27017)# db = conn['Publish']db = conn['WenShu']db.authenticate(name='mongodb', password='ipalpha807')mycol = db['ChinaWenShu6']#
2021-12-19 09:19:35
275
原创 Pyppeteer常用技巧
Pyppeteer常用技巧绕过检测步骤第一步# 在from pyppeteer import launch 导入前，执行下面代码from pyppeteer import launcherlauncher.DEFAULT_ARGS.remove("--enable-automation")from pyppeteer_stealth import stealth # 先安装pyppeteer_stealth########################################
2021-12-18 21:59:49
1157
原创 14.FastAPI常见应用配置
14.FastAPI常见应用配置可在主应用下添加说明，描述等等# 在主运行文件下(FastAPI创建时)添加app = FastAPI( title='FastAPI学习DEMO', # 标题 description='项目描述xxxxx', version='1.0.0', docs_url='/docs', redoc_url='/redocs',)...
2021-11-28 16:01:37
244
原创 13.FastAPI路径操作配置
13.路径操作配置直接上代码"""Path Operation Configuration 路径操作配置"""@app04.post( "/path_operation_configuration", response_model=UserOut, # tags=["Path", "Operation", "Configuration"], # 标签 tags=['路径操作标签'], # 标签 summary="This is summary", #
2021-11-28 15:59:25
436
原创 12.FastAPI静态文件配置
12.静态文件配置在主运行文件下配置（run.py）# 导包from fastapi.staticfiles import StaticFiles# mount表示将某个目录下一个完全独立的应用挂载过来，这个不会在API交互文档中显示， path = '/static'表示静态文件url路径app.mount(path='/static', app=StaticFiles(directory='./coronavirus/static'), name='static') # .moun
2021-11-28 15:57:19
1351
原创 11.FastAPI上传文件
上传文件上传小文件（File）"""Request Files 单文件、多文件上传及参数详解"""from fastapi import APIRouter, status, Form, File, UploadFile, [email protected]("/file")async def file_(file: bytes = File(...)): # 如果要上传多个文件 files: List[bytes] = File(...) """使用File类 文件
2021-11-20 20:13:38
2534
5
原创 10.FastAPI 的form表单数据处理
form表单数据处理form表单数据用Form类需要pip install python-multipart代码示例""Form Data 表单数据处理"""@app02.post("/login/")async def login(username: str = Form(...), password: str = Form(...)): # 定义表单参数 """用Form类需要pip install python-multipart; Form类的元数据和校验方法类
2021-11-20 20:09:44
1722
1
原创 9.FastAPI响应状态码
响应状态码响应状态码和快捷属性"""Response Status Code 响应状态码"""@app02.post("/status_code", status_code=200)async def status_code(): return {"status_code": 200}@app02.post("/status_attribute", status_code=status.HTTP_200_OK)async def status_attribute():
2021-11-20 19:52:36
255
Flask接口参数校验，支持多层嵌套参数校验，精准定位，友好校验提示
2022-06-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人