- 博客(64)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 OpenCV中图像的HSV色彩空间
原本输出的HSV 的取值范围分别是0-360, 0-1, 0-1;但是为了匹配目标数据类型OpenCV 将每个通道的取值范围都做了修改,于是就变成了0-180, 0-255, 0-255。在HSV 色彩空间中H, S, V 这三个通道分别代表着色相(Hue)，饱和度(Saturation)和明度(Value)，
2024-02-19 19:14:08
345
原创 ClickHouse数据库常用算术函数
博主已开设个人weixin公众号【数据肥皂泡】：专注于数据分析、数据建模等领域，博主也会不定期分享个人生活和工作感悟。欢迎各位志同道合的朋友，一起学习，一起进步，一起成长。微信搜索【数据肥皂泡】或搜索weixin号【sq23166】，关注博主，回复【加微信】即可加博主个人微信，看博主朋友圈分享。ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。对于max2函数和min2函数存在一些问题，后续看看是什么原因。常用于时间序列数据的列数据压缩存储。下面是他的一些常用算术函数。
2023-04-24 11:11:05
668
1
原创 python描述分析常用统计量（最大值、最小值、平均值、众数、中位数、四分位数、异众比率、极差、离散系数、偏态系数、峰态系数）
描述分析常用统计量
2023-04-10 17:39:39
1665
原创 Windows下MySQL数据库更改数据存储位置
Windows下MySQL数据库更改数据存储位置1、创建一个新的存储数据文件比如，我创建了一个文件 E:\MySQL_Service，用来放mysql数据。2、找到配置文件my.ini和mysql原本数据存放位置之前用的是默认安装位置，我的电脑数据存放的默认路径为：C:\ProgramData\MySQL\MySQL Server 8.0该目录下的文件有：我们平时操作的数据文件都在Data文件夹中，配置文件my.ini也在这里3、关闭数据库服务cmd使用管理员打开，...
2021-05-12 16:32:17
5579
4
原创 Python基础：获取迭代器下一项目的常见操作
目录获取迭代器下一项目通常有三种方法python3中最常见的一种错误使用获取迭代器下一项目通常有三种方法next()函数 iterator.__next__()属性 for循环next()函数iterator = iter([1,2,3,4,5,6])a = next(iterator)print(a)b = next(iterator)print(b)输出...
2019-12-18 19:04:44
637
原创 问题：AttributeError: 'Tensor' object has no attribute 'creator'
AttributeError: 'Tensor' object has no attribute 'creator'根据pytorch官方文档的说法，变量具有如上的三个属性，在获取y操作的creator属性时，却出现没有该属性的错误。import torchfrom torch.autograd import Variablex = Variable(torch.ones(1,...
2019-12-17 21:15:03
14663
3
原创 Matlab读取json文件
Matlab读取json文件 在matlab中，可以将数据写入json文件，却没发现读取json的函数，网上查了一下，大部分是个人写的函数，再可执行性上可能会有一些问题。最终，还是发现了一个matlab解析json文件的工具包，jsonlab, 可以尝试一下。工具包下载地址：http://iso2mesh.sourceforge.net/cgi-bin/index.cgi?js...
2019-11-30 00:21:34
13666
3
原创 linux系统下codeblocks控制台打印中文乱码
linux系统下codeblocks控制台打印中文乱码在linux下安装codeblocks后，打印中文出现如下问题：#include <stdio.h>#include <stdlib.h>int main(){ printf("你好，世界！\n"); return 0;}解决办法1、将Settings -&...
2019-10-02 00:26:37
748
3
原创 解决问题：Couldn't open file: data/coco.names
错误：Couldn’t open file: data/coco.namesdarknet GitHub：https://github.com/pjreddie/darknetYOLO官网：https://pjreddie.com/darknet/yolo/在进行yolo效果测试时，出现了该错误。通过如下命令下载darknet：git clone https://github.c...
2019-08-15 21:00:52
6712
4
原创 GitHub如何上传超过100MB的文件
GitHub如何上传超过100MB的文件平时在GitHub上上传项目文件时，遇到比较大的文件，就会出现无法上传的情况：this exceeds GitHub's file size limit of 100.00 MB解决方法如下：在所要上传文件的目录下打开Git首先，导入lfsgit lfs install其次，逐条运行如下命令：git lfs ...
2019-08-11 20:22:22
3481
原创 验证码随机生成
验证码随机生成这里主要使用到的库是captcha库，下载的命令如下：pip install captcha验证码随机生成代码，(python 版本：3.6 captcha 版本：0.3)from captcha.image import ImageCaptchaimport numpy as npimport matplotlib.pyplot as pltfro...
2019-08-07 20:14:45
448
原创 二隐层的神经网络实现MNIST数据集分类
二隐层的神经网络实现MNIST数据集分类传统的人工神经网络包含三部分，输入层、隐藏层和输出层。对于一个神经网络模型的确定需要考虑以下几个方面：隐藏层的层数以及各层的神经元数量 各层激活函数的选择 输入层输入数据的shape 输出层神经元的数量以上神经网络的骨架确定之后，则相应的权重和偏置所对应的shape也随之确定，即网络结构的确定。下面的代码是通过二隐层的神经网络实现M...
2019-07-27 16:46:46
1387
原创 逻辑回归实现多分类任务（python+TensorFlow+mnist）
逻辑回归实现多分类任务（python+TensorFlow+mnist） 逻辑回归是统计学中的一种经典方法，虽然叫回归，但在机器学习领域，逻辑回归通常情况下当成一个分类任务，softmax就是由其演变而来，逻辑回归一般用于二分类任务，但通过softmax可以轻易的扩展至多分类任务。下面的程序，通过逻辑回归实现对手写数字的分类：环境：python3.6、TensorF...
2019-07-27 16:45:53
2243
原创 python+OpenCV检测条形码
今天看到一篇关于条形码检测的文章，还是存在一些问题的，昨天我陪朋友去取快递的时候，看到了关于条形码检测在现实场景中的应用，于是，便想着实现一波，并且对程序中的一些问题做了一些修改。首先要确定调用的包/库的版本，这是在我电脑上程序的运行环境（在今后的文章中，我会特别注意版本问题，这个非常重要）：python3.6 + win 10 numpy 1.16.2 imutils...
2019-07-27 16:42:41
4411
4
原创 利用卷积神经网络实现人脸识别（python+TensorFlow）
利用CNN卷积神经网络实现人脸识别（python+TensorFlow）使用的人脸数据是耶鲁大学的一个人脸数据集Yale_64x64.mat，数据集已经上传Yale 64x64.mat程序：'''''''''使用Yale_64x64.mat人脸数据，利用CNN卷积神经网络实现人脸识别Yale_64x64.mat数据构成： 分为fea(人脸数据165x4096) gnd(...
2019-07-01 12:06:33
11680
5
原创 mAP与IOU的简单介绍
mAP 在评价一个检测算法的时候，主要看两个标准，即是否正确预测了框内的物体类别；预测的框和人工标注框的重合程度。这两个的量化指标分别是mAP（mean Average Precision）和IOU（Intersection Over Union）。 mAP中文翻译过来叫做平均精度均值，其中AP为平均精度（Average Precision），mAP是把每个类别...
2019-06-19 23:08:05
6573
原创 tensorboard可视化经常出现的两个问题
tensorboard经常出现的两个问题TensorFlow经常使用tf.summary.FileWriter("路径", sess.graph)函数将训练的图信息保存到日志中使用TensorBoard读取读取并展示日志，使用如下语句：tensorboard --logdir=日志所在路径一、OSError: [Errno 22] Invalid argument但是，有时...
2019-06-11 18:34:07
1465
原创 ffmpy3与ffmpeg的简单使用
安装python ffmpy3与ffmpeg的安装https://blog.csdn.net/qq_40962368/article/details/90748852ffmpy3的介绍：https://ffmpy3.readthedocs.io/en/latest/ ffmpy3是一个用于FFmpeg的Python包装器，最初是从ffmpy项目派生出来的。它根据提...
2019-06-09 18:13:37
17834
6
原创 python ffmpy3与FFmpeg的安装
python ffmpy3与FFmpeg的安装安装命令：pip install ffmpy3去官网下载FFmpeg，根据自身电脑版本下载相应安装包http://ffmpeg.org/download.htmlfrom ffmpy3 import FFmpegff = FFmpeg(inputs={'test.mp4': None}, o...
2019-06-03 11:40:12
14888
3
原创 图像识别：利用KNN实现手写数字识别（mnist数据集）
图像识别：利用KNN实现手写数字识别（mnist数据集）步骤：1、数据的加载（trainSize和testSize不要设置的太大）2、k值的设定（不宜过大）3、KNN的核心：距离的计算4、k个最近的图片-->根据下标寻找对应的标签5、根据标签转化成相应的数字6、检测概率统计在我看来，KNN算法最大的优点是简单，准确率较高；最大的缺点是：当数据量...
2019-05-10 12:36:40
6973
7
原创 图像处理：图像特效之油画效果
利用OpenCV+python对图片进行处理产生油画的效果算法可以分为五步：1、获取图像的灰度(gray)图片 2、设计一个小方框（4x4 or 8x8 or 10x10等），统计每个小方框的像素值 3、将0-255的灰度值划分成几个等级，并把第二步处理的结果映射到所设置的各个等级中，并计数 4、找到每个方框中灰度等级最多的所有的像素，并且求取这些像素的均值 5、用统计出来的平均值...
2019-05-02 14:33:21
5196
3
原创 MATLAB（六）数据处理
一、Matlab中的默认数据文件mat文件例1、把Matlab工作空间中的数据矩阵a、b、c保存到数据文件data1.mat中。>> a = [1, 2, 3]a = 1 2 3>> b = [4, 5, 6]b = 4 5 6>> c = [7, 8, 9]c = 7 8...
2019-04-23 15:35:09
4972
1
原创 图像处理：给验证码图片做降噪处理及数据清洗
上一篇博文：https://blog.csdn.net/qq_40962368/article/details/89312429图像处理：给验证码图片做降噪处理及数据清洗在上一篇博文中，tesseract对验证码识别的准确率还是非常低的，改进措施的话，可以从三个方面来考虑：1、数据的来源 数据的质量还是非常影响识别的精确度的，验证码图片中含有很多的噪声，会影响tess...
2019-04-16 14:19:14
4999
12
原创 爬虫：验证码识别准确率（Tesseract-OCR）
爬虫：验证码识别准确率（Tesseract-OCR）现在的网站为了防止人们轻易的获取登陆后的页面信息，在登陆上设置了很多的障碍，验证码就是其中的一种，所谓道高一尺，魔高一丈，人们总能想出办法来予以应对，但是，应对的成本可能在不断加大，这在一定程度上提升了反反爬虫的门槛。本文的目的在于验证Tesseract对普通验证码图片的识别准确率，以便为后续的工作做准备。Tesseract是一个开源...
2019-04-16 13:27:42
7914
3
原创 爬虫：获取豆瓣电影爱情片榜单封面图片
电影中单纯而美好的爱情总是让人陷入美好无瑕的幻想。代码已上传至个人GitHub，可供查看：获取豆瓣电影爱情片榜单封面图片爬虫：获取豆瓣电影爱情片榜单封面图片目的：获取豆瓣电影爱情片榜单封面图片，并保存到本地。思路：1、分析网页URL，查看规律2、敲代码（图片名设置为该电影名称）一、打开豆瓣电影分类排行榜-爱情片，F12审查元素在向下滑动的过程中，发现如下...
2019-04-11 17:07:23
6283
原创 爬虫：突破有道翻译js加密（最新）
爬虫：突破有道翻译js加密代码已上传至个人GitHub，可供下载：突破有道翻译js加密思路：（python版本3.6）1、分析post上传form信息，发现存在加密行为2、查看网页js文件，分析加密函数3、根据加密函数原理进行解密，突破有道的翻译接口一、打开有道翻译网页，按F12键，并输入内容进行翻译，可以看到服务器对网页请求作出的回应，最需要关注的是上传的信息和上...
2019-04-08 22:53:39
974
6
原创 爬虫：利用cookie获取人人网登录后网页信息
爬虫：利用cookie获取人人网登录后网页信息思路：1、首先创建一个自动获取登录cookie的实例，创建请求管理器opener2、分析网页源码，获取登录的form信息，并写入data，访问登录界面url，获取cookie信息3、分析登录后页面url，利用得到的cookie信息获取网页一、创建cookie实例及请求管理器openerfrom urllib import ...
2019-04-08 00:19:11
1004
原创 利用URL拼接爬取获取有道翻译内容
利用URL拼接爬取获取有道翻译内容代码：import requestsimport chardetimport jsonif __name__ == '__main__': i = input('请输入要翻译的内容：') url = 'http://fanyi.youdao.com/translate?i=%s&smartresult=dict&am...
2019-04-06 23:51:55
1187
原创 有道翻译接口问题（续）
原博文地址：https://blog.csdn.net/qq_40962368/article/details/80620817自从写了上面的博文之后，很多人询问我关于有道翻译接口的问题，为什么不是F12中的http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule当时，我在面对这个问题时，也是一...
2019-04-06 11:35:52
1385
2
原创 OpenCV中文路径问题、matplotlib可视化中文乱码问题的解决办法
OpenCV中文路径问题、matplotlib可视化中文乱码问题的解决办法OpenCV中文路径问题读取图片 其中img_path为读取图片路径，可以包含中文img = cv2.imdecode(np.fromfile(img_path, dtype=np.uint8), 1)保存图片保存图像，其中img为所要保存的图像原始数据，save_path为保存图片路径，可以包...
2019-03-12 15:53:52
463
原创 can't request region for resource [mem 0xfed40080-0xfed40fff]问题的解决办法
can’t request region for resource [mem 0xfed40080-0xfed40fff]问题的解决办法在去年的时候，我就给自己的电脑安装了双系统，Win10和Ubuntu16.04，Secure Boot也一直设置为disabled，但是一直困在了一个问题上，如下图所示：最近又把这个问题拿出来看了看，终于给解决了-_-!第一步，启动系统（也可以通过电脑...
2019-03-04 13:39:44
5796
3
原创 BAT文件命名中含有英文括号运行出错
BAT文件命名中含有英文括号运行出错近期在写一些批处理程序，但在命名时发现了一些问题，BAT文件名中含有英文圆括号时，批处理程序就会执行错误，去除英文圆括号后，程序就能正常执行。测试一下：1、先生成两个BAT空文件，一个命名为中文状态下的圆括号，另一个命名为英文状态下的圆括号2、 在BAT文件输入相同的批处理程序3、在cmd命令框中运行英文状态的圆括号文件一闪而...
2019-02-15 10:04:03
2150
1
原创 wget for windows 下载与安装
wget for windows 下载与安装wget for windows 下载链接：https://eternallybored.org/misc/wget/ 下载之后将压缩包内的wget.exe文件解压到下面的路径（注意所下载文件与个人电脑匹配（32bit或64bit））C:\Windows\System32在cmd命令中可以查看 ...
2019-02-07 18:28:11
44430
13
原创 KALI Linux中GURB安装失败如何处理
KALI Linux中GURB安装失败如何处理# GRUB安装失败# 无法将grub-pc软件包安装到/target/中，如果没有GRUB启动引导器，所安装的系统将无法启动。解决办法：点击返回点击配置软件包管理将之前设置的网络镜像“是”改为“否”，点击继续，安装成功后，再去kali Linux操作系统下，安装“更新源”也是可以的。点击是，选择继续...
2018-11-30 16:41:30
14095
7
原创 python assert 与 slice
assert：assert 断言的作用：assert是断言的意思，python assert 断言语句格式及用法很简单。assert断言是声明其布尔值必须为真的判定，如果发生异常就说明表达式为假，用来测试表达式，如果表达式的返回值为假，就会触发异常。assert 12 == 12assert 2+2 == 2*2assert 12 < 13assert 12 > 1...
2018-10-31 23:15:00
295
原创 python 中 yield 的使用
python中yield在函数中的使用正是因为函数含有这个yield，所以，该函数不再是普通的函数，而是生成器函数（generator function）。下面通过小例子来说明一下这个内置函数的特性：1、直接运行函数并不会执行。a = 0def add_(initial, k): for i in range(k): initial = initial + ...
2018-10-31 23:00:59
478
原创 python from __future__ import division
python from __future__ import division之前一直很困惑，为什么这个模块叫future呢，难道有什么特殊功能能够让人们想到未来吗，最近才恍然大悟。 python的更新和前进是由社区进行推动的，而且是免费开源的，不受大型商业公司的控制，所以比较激进的想法能够很快的用到python新版本的更新和优化中，这就导致不兼容的情况时有发生，pyt...
2018-10-27 21:16:04
1279
原创 UserWarning: The default mode, 'constant', will be changed to 'reflect'
问题：UserWarning: The default mode, 'constant', will be changed to 'reflect' in skimage 0.15. warn("The default mode, 'constant', will be changed to 'reflect' in "skimage.transform.resize(image, ou...
2018-10-23 22:19:11
3970
1
原创 CNN中的卷积操作与权值共享
CNN中非常有特点的地方就在于它的局部连接和权值共享，通过卷积操作实现局部连接，这个局部区域的大小就是滤波器filter，避免了全连接中参数过多造成无法计算的情况，再通过参数共享来缩减实际参数的数量，为实现多层网络提供了可能。卷积操作 在CNN中是利用卷积层进行特征提取的，图像的三个通道R(red)、G(green)、B(blue)，分别用不同的卷积核来进...
2018-09-27 17:52:02
14623
7
Yale_64X64人脸数据集.zip
2019-07-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人