- 博客(120)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Python中merge，join，concat区别和用法介绍
首先创建示例数据：merge使用merge合并时，两个数据集的合并条件是类型须一致。默认是内连接，也可以按照需求选择outer，left，right等外连接方式，示例如下：concat合并两个数据集，可在行或者列上合并（用axis调节，默认axis=0)，示例如下：join索引上的合并,是增加列而不是增加行，当合并的数据表列名字相同，通过lsuffix='', ...
2018-12-03 11:15:40
9589
原创 数值预测和分类预测模型中的评价指标
数值预测模型中，评价模型质量的常用指标有： 平均误差率、判定系数R2；分类预测模型中，评估模型质量的常用指标有： 正确率、查全率、查准率、ROC曲线和AUC值。...
2018-11-20 17:51:17
5188
原创 linux系统下修改hosts文件的权限
通常hosts文件时只读的，需要修改文件时，可以到文件所在目录下运行终端，然后通过下面命令加入写的权限：sudo chmod a+w filename
2018-11-06 14:38:54
8039
1
原创 虚拟环境Linux下Python2与Python3切换问题
默认情况下是Python2版本，当需要切换到Python3版本时输入：sudo update-alternatives --install /usr/bin/python python /usr/bin/python2 100sudo update-alternatives --install /usr/bin/python python /usr/bin/python3 150当需要...
2018-11-06 14:35:14
673
原创 Python中安装MySQL驱动
由于MySQL服务器以独立的进程运行，并通过网络对外服务，所以，需要支持Python的MySQL驱动来连接到MySQL服务器。MySQL官方提供了mysql-connector-python驱动，但是安装的时候需要给pip命令加上参数--allow-external：$ pip install mysql-connector-python --allow-external mysql-connec...
2018-06-27 10:17:21
2776
原创 主成分分析和因子分析的主要区别
（1）原理不同主成分分析基本原理：利用降维（线性变换)的思想，在损失很少信息的前提下把多个指标转化为几个不相关的综合指标（主成分),即每个主成分都是原始变量的线性组合,且各个主成分之间互不相关,使得主成分比原始变量具有某些更优越的性能（主成分必须保留原始变量90%以上的信息），从而达到简化系统结构，抓住问题实质的目的。因子分析基本原理：利用降维的思想，由研究原始变量相关矩阵内部的依赖关系出发，把一...
2018-05-17 11:40:00
35741
原创 一维表和交叉表的转化
一维表转化为交叉表通过制作数据透视表，合理分布行和列的内容，生成交叉表。（1）原始表（2）生成透视表，设置字段显示形式（3）透视表结果如下：（4）交叉表结果为：交叉表转化为一维表（1）原始表（2）制作数据透视表按照alt+D+P快捷键打开数据透视表向导，选择多重合并计算区域，创建单页字段，选择数据区域：（3）设置透视表字段（3）透视表结果（4）数据结果...
2018-05-17 10:15:09
2767
原创 MySQL复制表
1、CREATE TABLE table_copy SELECT...FROM table形式如果我们需要完全的复制MySQL的数据表，包括表的结构，索引，默认值等，但如果仅仅使用CREATE TABLE ... SELECT 命令，是无法实现的，这里可以可以复制表的内容。CREATE TABLE students_score_copy_1 SELECT *FROM students_scor...
2018-05-11 14:49:35
657
原创 MySQL 面试题统计
1、一张表，里面有 ID 自增主键，当 insert 了 17 条记录之后，删除了第 15,16,17 条记录，再把 Mysql 重启，再 insert 一条记录，这条记录的 ID 是 18 还是 15 ?答案：如果表的类型是MyISAM，则结果为18。因为MyISAM表会把自增主键的最大ID记录到数据文件里，重启MySQL，自增主键的最大ID也不会丢失；如果表的类型是InnoDB，则结果为15。...
2018-05-10 16:39:29
653
原创 在excel单元格设置格式后，为什么必须双击才会生效
原因1：Excel设置过单元格格式后，并不能立即生效，必须挨个双击单元格，才能生效。数据行较多时，效率太低。 原因2：主要是一些从网上拷贝过来的日期或数字excel默认为文本格式或特殊-中文数字格式大小写。手动设置单元格，将格式改成日期格式，但仍不能参与计算。只有挨个单元格双击，才能生效，才可以计算。 解决方法：选中整列，“数据”--->“分列”--->“分隔符号”--->“下一...
2018-05-07 12:43:38
57726
2
原创 随机抽样、分层抽样、整群抽样、系统抽样的区别
抽样方法主要包括：随机抽样、分层抽样、整体抽样、系统抽样。(1) 随机抽样就是按等概率原则直接从含有N个元素的总体中抽取n个元素组成样本（N>n）。这种方法简便易学，常用的办法就是抽签了。不过，这适合总体单位较少时使用。(2) 分层抽样是指在抽样时，将总体分成互不相交的层，然后按照一定的比例，从各层独立地抽取一定数量的个体，将各层取出的个体合在一起作为样本的方法。(3) 整群抽样又称聚类抽样...
2018-05-02 13:48:40
92116
原创 drop、delete与truncate的区别
drop、delete与truncate的区别drop直接删掉表；truncate删除表中数据，再插入时自增长id又从1开始；delete删除表中数据，可以加where字句。(1) DELETE语句执行删除的过程是每次从表中删除一行，并且同时将该行的删除操作作为事务记录在日志中保存以便进行进行回滚操作。TRUNCATE TABLE 则一次性地从表中删除所有的数据并不把单独的删除操作记录记入日志保存...
2018-04-17 13:46:12
633
原创 主键、超键、候选键、外键的概念
主键、超键、候选键、外键的概念主 键：数据库表中对储存数据对象予以唯一和完整标识的数据列或属性的组合。一个数据列只能有一个主键，且主键的取值不能缺失，即不能为空值（Null）。超 键：在关系中能唯一标识元组的属性集称为关系模式的超键。一个属性可以为作为一个超键，多个属性组合在一起也可以作为一个超键。超键包含候选键和主键。候选键：是最小超键，即没有冗余元素的超键。外 键：在一个表中存在的另一个表的主...
2018-04-17 13:38:51
2603
原创 DQL、DDL、DML、DCL的区别与理解
SQL语言共分为四大类：数据查询语言DQL，数据操纵语言DML，数据定义语言DDL，数据控制语言DCL。1.数据查询语言DQL数据查询语言DQL基本结构是由SELECT子句，FROM子句，WHERE子句组成的查询块：SELECT <字段名表>FROM <表或视图名>WHERE <查询条件>2.数据操纵语言DML数据操纵语言DML主要有三种形式：1) 插入：INS...
2018-04-17 13:33:51
734
原创 excel使用技巧
1. 如何使用照相机你可以在菜单栏上单击右键，选择自定义，然后在命令－工具－照相机，将照相机拖动到工具栏，可以用他来拍你所想要拍的东西。2. 将以“元”为单位的数变为以“万元”为单位 只需在一单元格中输入10000，复制，再选定转换范围，右击“选择性粘贴”-数值（复选 “除”）即可！3. 多个单元格输入同一数据想要在多个单元格输入同一数据，先选中所需填写的单元格，然后用键盘输入，最后用C...
2018-04-02 15:44:15
238
原创 Excel处理技巧
1、隔行填充Ctrl+g定位条件空值 - 在编辑栏中输入=第一个值，按Ctrl+enter完成填充。2、生成111222333序列 输入3个1，然后在第4个单元格输入=第一个值+1，然后向下复制。...
2018-03-29 16:18:49
309
原创 R代码规范笔记
1、文件命名以.r结束的文件，尽可能的增加信息在文件名里面。比如 Good: predict_ad_revenue.R、Bad: foo.R 2、变量名和函数命名规则 在R环境下，大小写是敏感的。比如：变量： Good: avg.clicks Bad: avg_Clicks, avgClicks 函数名: Good: CalculateAvgClicks Bad: calculate_avg_cl...
2018-03-29 15:26:50
307
原创 把多个txt文件合成一个txt文件
用MS-DOS命令行批处理合并多个txt文件1.点开始—程序—附件—记事本，复制下面一行命令（假设有1.txt、2.txt、3.txt、...）：copy /b "1.txt"+"2.txt"+"3.txt"+... "a.txt"2.点文件—保存，找到txt文件的位置，输入文件名为a.bat，保存类型设为所有文件，点保存。3.双击a.bat文件，生成的a.txt就是合并好的文件了。copy /b...
2018-03-09 17:40:14
5300
原创 SQLServer中提示错误:15405 无法使用特殊主体'sa'
选中附加进来的数据库，右键单击属性，依次选择：文件--〉所有者，然后选择用户sa，然后系统可以通过sa用户登录数据库
2018-03-01 14:22:50
5695
原创 数据挖掘知识总结
1. 数据、信息和知识是广义数据表现的不同形式。2. 主要知识模式类型有：广义知识，关联知识，类知识，预测型知识，特异型知识3. web挖掘研究的主要流派有：Web结构挖掘、Web使用挖掘、Web内容挖掘4. 一般地说，KDD是一个多步骤的处理过程，一般分为问题定义、数据抽取、数据预处理、.数据挖掘以及模式评估等基本阶段。5. 数据库中的知识发现处理过程模型有：阶梯处理过程模型，螺旋处理...
2018-01-25 17:51:05
1409
原创 Excel中range和cells的详解
1. 单元格Bi 可以使用以下3中表示方法Range("B" & i )Cells( i , 2 ) Cells( i , "B") （当列号较大、不易计算时，如“H"、”AD"，我们可以直接用双引号加列标作为第二参数）使用Range、Cells是比较常用的写法，方便，易记，规律性较好！对单元格访问，速度最快的的是 Cells(1,1) ,其次是 Range("A1"), 最慢是 [A1]...
2017-12-11 16:00:22
52708
4
原创 Excel 中宏设置禁用和启用
Excel文件中应用了宏设置，保存文件时会提示不可保存，此时需要通过别的方法来保存宏文件。依次点击：文件→另存为，保存为“启用宏的工作簿”。但是再次打开文件以后宏文件并不能运行，此时设置如下：依次点击：文件→选项→信任中心→信任中心设置→宏设置，进入。设置完成后，需要重新启动文件，此时宏文件顺利运行。...
2017-12-07 17:40:34
5016
原创 MySQL数据库索引的学习
索引的基本概念索引是在存储引擎中实现的，因此每种存储引擎的索引都不一定完全相同，并且每种存储引擎也不一定支持所有索引类型。根据存储引擎定义每个表的最大索引数和最大索引长度。所有存储引擎支持每个表至少16个索引，总索引长度至少为256字节。大多数存储引擎有更高的限制。MYSQL中索引的存储类型有两种：BTREE和HASH，具体和表的存储引擎相关；YISAM和InnoDB存储引擎只支持BTREE索引；...
2017-12-06 15:57:13
342
原创 MATLAB中的长度函数
在MATLAB中：（1）size：获取数组的行数和列数s=size(A),当只有一个输出参数时，返回一个行向量，该行向量的第一个元素时数组的行数，第二个元素是数组的列数。[r,c]=size(A),当有两个输出参数时，size函数将数组的行数返回到第一个输出变量，将数组的列数返回到第二个输出变量。如果在size函数的输入参数中再添加一项，并用1或2为该项赋值，则size将返回数组的行数或列数。 其...
2017-12-06 15:23:40
5771
原创 MATLAB中的bsxfun函数
bsxfun()函数的功能：两个数组间元素逐个计算的二值操作。函数使用方法：z=bsxfun(fun,x,y)两个数组x合y间元素逐个计算的二值操作，fun是函数句柄或者m文件，也可以如下内置函数。常见的内置函数如下：@plus 加@minus 减@times 数组乘@rdivide 左除@ldivide 右除@power 数组幂乘@max 二值最大值@min 二值最小值@rem 余数@mod 求...
2017-12-06 13:40:00
7151
原创 MATLAB中的四种取整函数
Matlab取整函数有: fix, floor, ceil, round.具体应用方法如下：（1）fix朝零方向取整，如fix(-1.3)=-1; fix(1.3)=1;（2）floor，顾名思义，就是地板，所以是取比它小的整数，即朝负无穷方向取整，如floor(-1.3)=-2; floor(1.3)=1;floor(-1.8)=-2，floor(1.8)=1；（3）ceil，与floor相反，...
2017-12-06 13:34:02
7893
原创 PyCharm中import matplotlib包时报错“Backend Qt5Agg is interactive backend”
在PyCharm的Python Console中 import matplotlib.pyplot as plt 时，会出现Backend Qt5Agg is interactive backend. Turning interactive mode on. 或者其他跟Qt5Agg相关的错误，导致程序中断。虽然现在还不得而知Qt5Agg的问题如何解决，但是一种可以绕过这种问题（我的环境是：PyCh...
2017-11-13 18:00:21
4094
原创 Python模块和包的概念
模块模块是Python组织代码的基本方式。一个Python脚本可以单独运行，也可以导入到另一个脚本中运行，当脚本被导入运行时，我们将其称为模块（module）。所有的.py文件都可以作为一个模块导入。模块名与脚本的文件名相同。模块是一个可以导入的Python脚本文件。例如我们编写了一个名为hello.py的脚本，则可以在另一个脚本中用import hello语句来导入它。模块名不能以数字命名，比...
2017-11-10 08:51:00
471
原创 powershell和cmd区别
1.shell可以说是cmd的升级版、补充版,shell在原来cmd基础上做了很多修改、调整的，且增加了很多命令及命令别名。2.CMD和powershell都可以通过运行命令打开.3.在powerShell中可以通过alias、gal或者get-alias命令查看原长命令及别名。Windows常用工具类:运行程序 运行命令记事本 ...
2017-11-09 09:44:05
19237
原创 MySQL存储过程和函数详细定义
1.创建存储过程语法：CREATE PROCEDURE sp_name ([ proc_parameter ]) [ characteristics..] routine_body proc_parameter指定存储过程的参数列表，列表形式如下：[IN|OUT|INOUT] param_name type其中in表示输入参数，out表示输出参数，inout表示既可以输入也可以输出；param_...
2017-11-08 16:44:23
601
原创 MySQL视图
1.创建视图创建视图的语法：CREATE [OR REPLACE] [ALGORITHM = {UNDEFINED | MERGE | TEMPTABLE}] VIEW view_name [(column_list)] AS select_statement [WITH [CASCADED | LOCAL] CHECK OPTION]其中，CREATE：表示新建视图；REPLA...
2017-11-08 14:36:53
401
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人