qq_43614355-CSDN博客

系统：win10 64位python版本：3.7.5superset版本：1.0.0可能是markupsafe吧版本过高引起，执行如下命令2.2 ImportError: cannot import name ‘_ColumnEntity‘ from ‘sqlalchemy.orm.query‘sqlalchemy版本不兼容，执行如下命令2.3 ‘export’ 不是内部或外部命令，也不是可运行的程序或批处理文件。export是Linux和mac中的命令，Windows中应使用...

2022-07-08 17:53:19 826

原创使用pyinstaller打包flask项目

使用pyinstaller打包flask项目1. 打包命令2. 生成app.spec文件2.1 Invalid async_mode specified2.2 AttributeError: 'NoneType' object has no attribute 'isatty'1. 打包命令pyinstaller app.py -D -w #app.py指项目启动文件-F：仅仅生成一个文件，不暴露其他信息，启动较慢。-D：生成一个文件夹，里面是多文件模式，启动快。-w：窗口模式打包，

2022-04-11 13:34:30 3403 7

原创 win10中安装cuda和TensorFlow-gpu的坑

1.首先查看电脑GPU上cuda的版本nvcc-V如果此处提示 :nvcc 不是内部或外部命令，也不是可运行的程序或批处理文件。说明电脑没有装cuda，需要到nvidia官网去下载cuda，下载时需要注意cuda和TensorFlow-gpu的版本一定要匹配具体请参开TensorFlow官网文件https://www.tensorflow.org/install/source_windows本人用的是下面的配置2. 安装CUDA去英伟达官网下载对应版本的cuda，下载完成后先查看电脑

2021-11-24 17:33:10 7494 11

原创 python win10 安装ta-lib报错

使用 conda install -c conda-forge ta-lib 命令进行安装

2021-11-09 09:48:29 134

原创 matplotlib常用操作

plt.rcParams['font.sans-serif'] = 'SimSun' # 用来正常显示中文plt.rcParams['axes.unicode_minus'] = False # 用来正常显示负号

2021-11-05 11:15:55 99

原创使用pandas自动替换数据的列名

使用pandas自动替换数据的列名import pandas as pdfrom setting import cols1def auto_replace_feat_name(file_path): """ 自动替换特征名称 :param file_path: :return: """ df = pd.read_csv(file_path) try: df = df.drop('Unnamed: 0', axis=1)

2021-10-19 10:30:56 500

原创 pandas相关性分析的三种方法

使用pandas中的皮尔逊，肯德尔和斯皮尔曼做特征相关性分析三种系数的具体试用范围可参考： https://blog.csdn.net/qrdsy_lrf/article/details/79227969import pandas as pdfrom settings import colssdef corr_matrix(df): """ 返回与标签列有关的相关性矩阵 :param dataset_name: :param label: :return

2021-09-14 10:36:48 1902

原创 pandas删除异常值

pandas初步删除明显错误的值，对数据做初步清洗 def del_error_data(self, data): data = data[data.IAS.between(0, 70, inclusive=True)] data = data[data.Throttle.between(0, 115, inclusive=True)] data = data[data.Rev.between(1, 6200, inclusive=True)]

2021-08-30 16:16:36 2477 1

原创 pandas样本均衡策略

训练模型时通常会遇到样本数据分布不均匀导致模型效果不理想，有些算法可以通过配置class_weight参数保证样本均衡，当算法不存在这些参数时我们需要手动处理样本数据保证样本得均衡。今天主要介绍样本不均衡中欠采样的处理方法：# !/usr/bin/python# -*- coding:utf-8 -*-# file: sample_balanced.py# author: Lawrence# datetime: 2021/8/26 16:23import pandas as pdfrom i

2021-08-30 14:39:41 676

原创 LSTM时序预测loss值为nan

当loss 显示为 nan时，首先检查训练集中是否存在nan值，可以用np.isnan()方法进行查看，如果数据集没问题再检查下损失函数会否适合当前模型，def trainModel(train_X, train_Y): """ trainX，trainY: 训练LSTM模型所需要的数据 """ model = Sequential() model.add(LSTM(units=50, activation='relu', i.

2020-12-16 15:20:56 5841 2

原创 Python图像处理 PIL中convert(‘L‘)函数原理

img.convert(mode=None, matrix=None, dither=None, palette=0, colors=256)　　　PIL有九种不同模式: 1，L，P，RGB，RGBA，CMYK，YCbCr，I，F。参数解释：param mode：请求的模式。参见：概念模式。 matrix：可选的转换矩阵。如果给定，则应为包含浮点值的4元组或12元组。 dither：抖动方法，在从模式“RGB”转换为“ P”或从“ RGB”或“ L”转换为“1”时使用。可用的方法.

2020-11-19 10:06:53 13496

原创关联分析算法Apriori Python

本文参考： zzzzMing在美国有这样一家奇怪的超市，它将啤酒与尿布这样两个奇怪的东西放在一起进行销售，并且最终让啤酒与尿布这两个看起来没有关联的东西的销量双双增加。这家超市的名字叫做沃尔玛。你会不会觉得有些不可思议？虽然事后证明这个案例确实有根据，美国的太太们常叮嘱她们的丈夫下班后为小孩买尿布，而丈夫们在买尿布后又随手带回了他们喜欢的啤酒。但这毕竟是事后分析，我们更应该关注的，是在这样的场景下，如何找出物品之间的关联规则。接下来就来介绍下如何使用Apriori算法，来找到物品之间的关联规则吧。一.

2020-08-19 15:42:31 385

原创利用python对数据分流

本文转自https://blog.csdn.net/u014770372/article/details/72819914仅个人学习使用，侵删业务需求：hive表中包含了顺丰的所有的运单流向（北京到深圳为一个流向，全国大约十万个流向），现将数据分流，将每一个流向写入一个文件中report_dt 报表时间src_area_code 始发地区代码src_dept_name 始发地区名称dest_area_

2020-06-20 10:06:04 248

原创 Python配置镜像源

由于Python库的服务器都在国外，国内下载是速度普遍会很慢，所以需要配置一个镜像源来加快下载速度，国内现在主要的镜像源有如下几个：清华：https://pypi.tuna.tsinghua.edu.cn/simple阿里云：http://mirrors.aliyun.com/pypi/simple/中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/华中理工大学：http://pypi.hustunique.com/山东理工大学：http://pypi.

2020-06-06 11:10:40 1853

原创 Python-web 生成csv文件并下载(前段，后端)

本文转自 [https://blog.csdn.net/xiaoming0018/article/details/88788227]前端生成csv文件并下载 function dowlondCSV(){ let str = "header1,header2,header3\n" + "row1td1,row1td2,row1td3\n"; let uri = 'data:text/csv;charset=utf-8,' + encodeURICom.

2020-05-15 22:38:51 568

转载【python实战】使用第三方库imblearn实现不平衡样本的样本均衡问题

本文转自图不灵的博客，仅个人学习使用，若有侵权可随时删除链接：https://blog.csdn.net/qj8380078/article/details/81675442摘自数据常青藤样本分布不均衡将导致样本量少的分类所包含的特征过少，并很难从中提取规律；即使得到分类模型，也容易产生过度依赖于有限的数据样本而导致过拟合的问题，当模型应用到新的数据上时，模型的准确性和鲁棒性将很差。样本...

2020-04-14 10:49:44 1504

原创 python3.6.6上安装fbprophet

如果环境干净的且有需求的话请最先安装fbprophet，这样会省去很多麻烦！！！先安装pystanpip install pystan然后安装通过conda安装fbprophetconda install fbprophet -c conda-forge我使用的是python3.6.6，由于使用conda安装会额外安装很多依赖，这是好处但同时也是坏处，因为我之前已经安装过的一些库由被...

2020-04-08 22:52:13 721

转载 centos7.2挂载数据盘

1.根据自己需要添加大小合适的硬盘2.开机，查看待挂载数据盘通过命令fdisk –l进行查看3、创建挂载点：命令mkdir /mnt1创建，mnt1为挂载点的名称。创建挂载点前可通过df查看已存在的挂载点，避免重复。4、格式化数据盘：通过命令lsblk –f查看数据盘是否已格式化，如下图命令sudo mkfs.ext4 /dev/vdc进行格式化（ext4为文件系统格式）...

2019-12-16 14:50:40 230

原创 win10+Python3.6.6+impyla 连接hive

首先安装impyla安装impyla之前需要先安装几个依赖pip install thriftpip install sasl(如果thrift-sasl==0.2.1安装失败时需要安装此包，直接安装失败时可上pypi中下载wheel文件手动安装)pip install thrift-sasl==0.2.1最后安装impyla，如果安装impyla报Setup script exite...

2019-10-30 17:16:08 885

原创 Windows下安装impyla（impala）连接Hive

博主的python版本为3.6.6安装impyla之前需要先安装pip install thriftpip install thrift-sasl==0.2.1pip install impyla这里面安装thrift-sasl比较容易出错，如不指定版本的话应该是默认安装0.3.0，然后可能会报一个AttributeError: ‘TSocket’ object has no attr...

2019-10-24 14:22:59 1395

原创启动Ambari Metrics Monitor 时报ImportError: cannot import name _common

报错信息Traceback (most recent call last): File "/var/lib/ambari-agent/cache/common-services/AMBARI_METRICS/0.1.0/package/scripts/metrics_monitor.py", line 68, in <module> AmsMonitor().execut...

2019-09-06 15:50:24 2339 1

原创安装Anaconda后启动JupyterLab需要输入密码

http://www.mamicode.com/info-detail-2389297.html

2019-08-27 17:53:34 2718

原创 centos7中桥接模式IP地址的配置问题

转自https://www.cnblogs.com/jasmine-Jobs/p/5928218.html

2019-08-07 13:16:55 1100

原创 cenos7下搭建LAMP环境

文章转自 https://www.jianshu.com/p/ca0667f1fe9d

2019-08-05 19:13:14 81

原创 linux下centos7中mysql5.7安装教程

转自https://www.cnblogs.com/luohanguo/p/9045391.html

2019-08-01 18:50:06 143

原创 Could not fetch URL https://pypi.org/simple/ssl/: There was a problem confirming the ssl

今天在安装aiohttp包的时候一直报ssl证书问题，找了好久也没发现有效的解决方案，最后自己尝试了好多次安装成功，一下仅供参考错误类型：Could not fetch URL https://pypi.org/simple/ssl/: There was a problem confirming the ssl certificate: HTTPSConnectionPool(host=‘p...

2019-06-19 17:24:14 1099 1

转载滑块验证代码

本文转自网络，如有侵权可随时删除导入模块from selenium import webdriverfrom selenium.webdriver import ActionChainsfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.common.keys import Keysfrom seleni...

2019-05-20 12:04:14 992

原创 Django Reverse for 'new_topic' not found . 'new_topic' is not a valid view function or pattern nam

最近在学习Django，跟着做一个Django论坛从搭建到部署，教程链接也贴上：【第一部分-django论坛从搭建到部署】一个完整Django入门指南-苍云横渡，做到第三部分时候遇到一个问题，困扰了我很久。经查阅后仍是无果，官方文档也看了依然没有解决问题，后来突然发现了问题，再看看报错的情况，确实就是自己写的时候写错了。先把错误情况贴上：Internal Server Error: /board...

2019-04-25 22:09:31 531

原创 python中安装完virtualenv，创建虚拟环境时报错'virtualenv' 不是内部或外部命令，也不是可运行的程序

创建虚拟环境包时会报“”‘virtualenv’ 不是内部或外部命令，也不是可运行的程序“错误在网上查了好久都没有自己出现的那种情况，可以成功安装，通过pip list 查询时显示安装成功，但会有两行黄色字，大致意思是没有路径，需要配置环境变量。解决方法：出现这种原因是因为权限不够在运行cmd命令时，右键选择以管理员身份运行然后在进行安装操作即可解决此问题。...

2019-04-18 19:00:57 9010 6

原创用HTML制作一个注册界面

1.制作如下图的注册界面要求如下：体大小均为14px，灰色文字#999，验证码灰色背景#eee，注册按钮为红色背景#e3393c，注册按钮圆角6px思路分析，根据图片的信息，本题的格式可以看做是一个3X5的表格形式，因此可以用表格的形式进行解答；另外还可以用页面流里的float现将第一行信息转换出来，然后在利用clear让元素主动向下移动，从而达到换行的目的（需要在div标签中选择合适的选择...

2019-04-01 21:06:31 21772 1

原创 Python reduce（）函数

reduce（）函数应用from functools import reducedef fn2(m,n): return m*n #return m+nc = reduce(fn2, range(1,5)) #求函数的任意范围内的阶乘/累加print(c)

2019-03-30 23:13:23 163

原创 Python filter（）函数运用

Python filter（）函数的使用def fn(n): # 定义一个函数，里面需要写入形参 return n%2 == 0 # 写入函数判断条件'''此处不需要写调用函数的借口fn().'''l1 = list(filter(fn, range(23))) # interable中为真的元素形成的一个filter对象，可迭代对象；可以通过list、tuple等的将其转...

2019-03-30 22:37:04 89

空空如也

空空如也