- 博客(20)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 关于UE使用帖子补充说明
由于CSDN新出规定不让发表关于软件破解一类的文章，导致那篇文章现在大家看不到，但是这篇文章还是帮助到了很大的一部分人的，所以我把链接补充在这篇文章中：https://blog.csdn.net/weixin_42382211/article/details/80981983#comments...
2020-02-09 17:14:15
278
原创 在win10环境下运行spark streaming中的NetworkWordCount
NetworkWordCount测试spark streaming wordcount，在学习streaming时候官方教程中有个NetworkWordCount栗子，通过TCP套接字连接，从流数据中创建一个DStream，然后进行处理，时间窗口自己定义，但是一般都是在linux中测试。因为我的spark环境搭建在win中，所以接下来将在win10系统中对其进行实现首先通过scala在idea...
2019-09-03 21:52:26
634
原创 Win 10环境中JDK12.0.1的环境配置问题
初学java过程中，首先第一个问题就是JDK的配置问题。这里主要是记录下我在JDK配置过程中所遇到的问题，给后续同样踩坑的童鞋们提供查询和解惑的作用。第一步：下载JDK12.0.1（当前最新版本）官方网址：https://www.oracle.com/technetwork/java/index.html，按下面图中标记步骤点击下载即可（如果嫌弃下载过程太慢，可以在评论区留下你们的邮箱，我...
2019-07-05 19:55:14
3379
23
转载 Python时间序列中ADF检验详解
转自：https://pengfoo.com/post/machine-learning/2017-01-24Abstract在ARMA/ARIMA这样的自回归模型中，模型对时间序列数据的平稳是有要求的，因此，需要对数据或者数据的n阶差分进行平稳检验，而一种常见的方法就是ADF检验，即单位根检验。平稳随机过程在数学中，平稳随机过程（Stationary random process...
2018-08-01 16:02:35
79423
19
转载 Hive函数总结
显示当前会话有多少函数可用 SHOW FUNCTIONS;如：hive> show functions ;OK!!=% 显示函数的描述信息 DESC FUNCTION concat;如：hive> DESC FUNCTION concat;OKconcat(str1, str2, ... strN) - returns the concatenati...
2018-07-24 16:58:11
558
原创 召回率和准确率的理解
今天看书再一次看到这两个概念，在我印象中原来很努力记忆过一次，效果嘛→显而易见。这一次学聪明点，看懂了就记录下来。首先来讲下二者概念：召回率（recall）：是针对我们原来样本而言，表示有多少样本中的正例（一种是把正类预测为正类即TP，一种是把正类预测为负类即FN）被预测正确了。，提取出的正确信息条数 / 样本中的信息条数。精确率（precision）：是针对我们的预测结果而言，表示的...
2018-07-23 17:10:59
20745
1
转载 AR模型中的自相关系数和偏自相关系数
转：https://blog.csdn.net/WMN7Q/article/details/70174300自相关系数其实自相关系数可以这么理解：把一列数据按照滞后数拆成两列数据，在对这两列数据做类似相关系数的操作。看一个例子：这组数据是求滞后数为2的自相关系数，则变成求{x1,x2,...,x8}和{x3,x4,...,x10}两者的“相关系数”，相关系数打引号是因为这个相关系数的公...
2018-07-20 18:08:44
49775
转载 时间序列中的平稳性检验之单位根检验
对序列的平稳性的检验中最常用的方法是单位根的检验。单位根检验是指检查序列中是否存在单位根，如果存在单位根就是非平稳时间序列了。下面是找的解释为什么单位根存在就是非平稳时间序列的原因。作者：五雷链接：https://www.zhihu.com/question/22385598/answer/21221607来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 ...
2018-07-20 15:55:53
73703
2
转载 AR回归模型详解
转：http://geodesy.blog.sohu.com/273714573.html1. 自回归模型的定义 自回归模型（Autoregressive Model）是用自身做回归变量的过程，即利用前期若干时刻的随机变量的线性组合来描述以后某时刻随机变量的线性回归模型[1]，它是时间序列中的一种常见形式[2]。2. AR模型的状态空间形式（AR-Process i...
2018-07-20 09:46:14
31568
转载 count(1)和count(*)详解
如果null参与聚集运算，则除count(*)之外其它聚集函数都忽略null。如： ID DD 1 e 2 null select count(*) from table --结果是2 select count(DD) from table ---结果是1效率问题：当表的数据量大些时，对表作分析之后，使...
2018-07-19 14:41:55
764
原创 Apriori算法
今天看《python数据分析与挖掘实战》一书中讲到关联规则这块算法，第一次看很懵，自己也花了点时间百度找实例理解。下面记录自己的理解，为了自己复习用。下面写的不是很详细，不懂的概念可以查看我最底下的参考链接。关联规则简单的理解就是从一个数据集中找出满足我们最初给定的最小支持度和最小置信度的所有关联规则。（大于最小的支持度和置信度）。具体实现分为两步：a、生成频繁项集：找出所有满足最小支持度的项...
2018-07-18 18:07:47
3582
原创 Anacoda3中的安装其他三方包
学习数据挖掘过程中大部分都是推荐anaconda软件，主要是它集成了各种python包，尤其是数据挖掘和数据分析这一块的常用包。在这主要是因为在用这之前电脑上就安装了其他版本的python，有arcgis中自带的python2.7和自己先前写爬虫使用的python3.4，主要的是python3.4安装不了jupyter notebook。下面就是安装包的问题了。我前面让python2.7和pyth...
2018-07-03 11:22:04
869
原创 sql中利用两点的经纬度求距离
今天的做的一个是求取用户工作地到所属于集团的距离，已知道的是用户工作点和集团点的经纬度。先贴经纬度求距离公式。a(JA,WA)和b(JB,WB)点距离公式。 下面是sql语句：6378137*2*ASIN(SQRT(POWER(SIN((a.work_lat-b.lac_lat1)*ACOS(-1)/360),2) +COS(a.work_lat*ACOS(-1...
2018-06-29 10:32:17
6001
3
原创 sql中的创建表
今天在建模过程中，看到负责的人的sql中建表语句，作下笔记。平时我们的建表语句：后面发现sql中建表：后续中先进行的所要建的表进行了判断，字段后面是字段所属类型，insert overwrite上一行中，row format delimited fields terminated by '|'，这句是用来设置创建的表在加载数据的时候，支持的列分隔符。stored as 用来设置加载数据的数据类型，...
2018-06-26 17:04:35
2778
原创 sql中查重和去重
在这记录一个实习期间遇到的一个查重和去重的sql语句。查重语句：(group by 查重)SELECT user_id, count(*) as numFROM 表名WHERE 条件 GROUP BY user_id HAVING count(*)>1;sql语句关键词为大写，基本思路就是以user_id字段来进行分组排序，count(*)函数是计数，这语句结果图如下...
2018-06-22 15:40:34
28553
1
原创 case when 函数的使用实例
先简单说点case函数的概念，case()函数有两种形式，第一种： case when 条件1 then 结果1 when 条件2 then 结果2 ...
2018-06-22 15:00:39
14469
原创 translate(char, char1,char2)实例
case when upper(hao_name) regexp '[0-9A-Z]+' then translate(hao_name,concat('!',translate(hao_name,'a...
2018-06-20 11:50:02
338
转载 【转】sql中translate与replace 的区别
转自：https://blog.csdn.net/u013361361/article/details/211262791.translate 语法：TRANSLATE(char, from, to) 用法：返回将出现在from中的每个字符替换为to中的相应字符以后的字符串。 若from比to字符串长，那么在from中比to中多出的字符将会被删除。 ...
2018-06-20 11:16:11
7274
转载 [转]SQL 函数 instr的用法
转自：http://blog.sina.com.cn/s/blog_6094cbf30100frz0.html INSTR(C1,C2,I,J) 在一个字符串中搜索指定的字符,返回发现指定的字符的位置;C1 被搜索的字符串C2 希望搜索的字符串I 搜索的开始位置,默认为1J 出现的位置,默认为1SQL> select instr("abcde",'b');结果是2...
2018-06-20 11:14:21
2233
完整卸载Microsoft Visual以及在线重新安装Microsoft Visual C++ 14.0
2022-04-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人