断桥残雪D-CSDN博客

原创网址收藏

机器学习算法：20、用学习曲线 learning curve 来判别过拟合问题19、结构之法算法之道（七月在线的机器学习文章） 18、支持向量机中的SMO算法剖析 17、纯白板手推SVM 16、支持向量机通俗导论（理解SVM的三层境界） 14、轻松看懂机器学习十大常用算法面试：16、github-面试复习资料大全15、BAT机器学习面试1000题系列（第...

2018-03-04 10:11:09 337

56ZS5PQ1RF-eyJsaWNlbnNlSWQiOiI1NlpTNVBRMVJGIiwibGljZW5zZWVOYW1lIjoi5q2j54mI5o6I5p2DIC4iLCJhc3NpZ25lZU5hbWUiOiIiLCJhc3NpZ25lZUVtYWlsIjoiIiwibGljZW5zZVJlc3RyaWN0aW9uIjoiRm9yIGVkdWNhdGlvbmFsIHVzZSBvbmx5I...

2019-10-14 09:36:25 401

转载【spark】pyspark学习笔记2——标准库函数

1、2、3、

2019-01-29 21:16:33 287

原创【spark】pyspark错误记录

参考：https://segmentfault.com/q/1010000017001524出错的Log：Traceback (most recent call last): File "/Users/dingguangwei03/Documents/kuaishou-python/spark-test/test5.py", line 16, in <module> ...

2019-01-29 20:01:34 4348

原创【spark】pyspark学习笔记

参考书：《Spark快速大数据分析》链接: https://pan.baidu.com/s/1-zb8J4nUbJ2fDQLuWrN46Q 提取码: 5eab 复制这段内容后打开百度网盘手机App，操作更方便哦1、基本操作exp1:数据：student.txt1 2 3 4 56 7 8 9 103 5 8代码：# encoding = utf-8import...

2019-01-29 11:44:35 572

转载【论文】各种距离总结

原文：https://wenku.baidu.com/view/8c9fe0355e0e7cd184254b35eefdc8d376ee14e1.html 墙裂推荐该篇文章：https://blog.csdn.net/Kevin_cc98/article/details/73742037 二、余弦距离余弦相似度用向量空间中两个向量夹角的余弦值作...

2018-09-17 22:15:14 1155

原创【linux】命令

1、open+文件夹路径：终端打开文件夹2、ls：显示文件（不显示隐藏文件）ls -a：显示所有文件（包括隐藏文件）ls -l：显示文件及其权限3、rm +目录名：删除空目录rm +文件名：删除文件rm -rf +目录名：删除目录及其内部文件（慎用！不可恢复）4、touch +文件名：创建文件5、cp 文件名1 文件名2：拷贝文件1至文件2...

2018-08-13 11:44:52 143

转载【机器学习】过拟合与欠拟合的判断标准

用学习曲线 learning curve 来判别过拟合问题https://blog.csdn.net/aliceyangxi1987/article/details/73598857

2018-07-30 09:57:10 4774

原创【java】单元测试Mockito中的Mock和Spy

项目中，有些函数需要处理某个服务的返回结果，而在对函数单元测试的时候，又不能启动那些服务，这里就可以利用Mockito工具。Mockito中的Mock和Spy都可用于拦截那些尚未实现或不期望被真实调用的对象和方法，并为其设置自定义行为。二者的区别在于：1、Mock声明的对象，对函数的调用均执行mock（即虚假函数），不执行真正部分。2、Spy声明的对象，对函数的调用均执行真正部分。例：...

2018-07-29 19:50:00 26689

原创【java】单元测试中修改系统时间

参考文章：1、在Java 8的java.time API中模拟时间2、java8中时间的各种转换(LocalDateTime)3、 java8新的时间日期库 LocalDateTime转化为毫秒数 Java8的DateTimeFormatter是线程安全的，而SimpleDateFormat并不是线程安全 import java.time.Clock;import ...

2018-07-25 17:22:29 3454

转载【linux】常用命令

原文地址： https://blog.csdn.net/biggercoffee/article/details/50752910无意间发现笔者的有道云笔记在曾几何时有一篇关于terminal命令的总结笔记。由于笔记记录内容实在太多，所以在这里简单整理了一些Mac下终端里常用且实用的命令方便日后查阅。查看在终端里输入ls就可以查看文件和文件夹，但隐藏的文件就无法查看，使用ls -a即可。创建目录命...

2018-07-06 09:16:57 197

原创【机器学习】决策树(Decision Tree)原理

参考文章：https://blog.csdn.net/luanpeng825485697/article/details/78965390sklearn使用DecisionTreeClassifier构建决策树，这个函数，一共有12个参数：参数说明如下：criterion：特征选择标准，可选参数，默认是gini，可以设置为entropy。gini是基尼不纯度，是将来自集合的某种结果随机应用于某一数...

2018-06-21 15:06:11 2381 1

转载【机器学习】sklearn学习目录

python机器学习库sklearn教程python机器学习库sklearn——生成样本数据python机器学习库sklearn——数据预处理python机器学习库sklearn——特征提取python机器学习库sklearn——特征选择python机器学习库sklearn——K最近邻、K最近邻分类、K最近邻回归python机器学习库sklearn——决策树python机器学习库sklearn——...

2018-06-21 14:52:06 6282 3

转载【python】数据处理pandas

原文地址：https://blog.csdn.net/luanpeng825485697/article/details/80533003起步Pandas最初被作为金融数据分析工具而开发出来，因此 pandas 为时间序列分析提供了很好的支持。 Pandas 的名称来自于面板数据（panel data）和python数据分析（data analysis）。panel data是经济学中关于多维...

2018-06-15 15:26:34 469

转载【JavaScript】好看的表单样式大全

1、只有下划线的文本框：<input style="border:0;border-bottom:1 solid black;background:;">2、软件序列号式的输入框：<script for="T" event="onkeyup">if(value.length==3)document.all[event.srcElement.sourceIndex+1].se...

2018-05-22 21:01:47 3515

转载【JavaScript】CSS文件未加载

原文地址 https://blog.csdn.net/lamanchas/article/details/77647521报错-Resource interpreted as Stylesheet but transferred with MIME type text/plain网站链接 http://139.199.169.122/在本地加载正常，上传到服务器之后，网页没有样式。10.最终正确方...

2018-05-21 20:08:34 1739

转载【java】抽象类和接口的对比

参数抽象类接口默认的方法实现它可以有默认的方法实现接口完全是抽象的。它根本不存在方法的实现实现子类使用extends关键字来继承抽象类。如果子类不是抽象类的话，它需要提供抽象类中所有声明的方法的实现。子类使用关键字implements来实现接口。它需要提供接口中所有声明的方法的实现构造器抽象类可以有构造器接口不能有构造器与正常Java类的区别除了你不能实例化抽象类之外，它和普通Java类没有任何区...

2018-05-21 10:41:38 133

原创【ELK】ES插件开发问题（四）—— 添加本地jar包依赖（重构的weka.jar包）

在es源码开发中，如果想使用外部jar包，可以在pom.xml中添加依赖。http://mvnrepository.com/但是如果想使用maven仓库添加本地jar包，那就要手动配置了。背景：在es源码程序中，我安装进去的插件需要调用我修改后的weka包中的算法。（其中weka源码是一个maven项目）一、weka进行maven打包首先将修改后的weka源程序进行打包，打包方法：右键-runAs...

2018-05-06 22:35:15 871

原创【Java】log日志输出

一、如果是maven项目 1、pom.xml中加入依赖<dependency> <groupId>log4j</groupId> <artifactId>log4j</artifactId> <version>1.2.17</version> </dependenc

2018-04-25 11:31:38 2174

转载【Java】进程和线程

作者：zhonyong链接：https://www.zhihu.com/question/25532384/answer/81152571来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。首先来一句概括的总论：进程和线程都是一个时间段的描述，是CPU工作时间段的描述。下面细说背景：CPU+RAM+各种资源（比如显卡，光驱，键盘，GPS, 等等外设）构成我们的电脑，但是电...

2018-04-24 21:45:43 127

转载【java】读写磁盘文件

一、读txt文件public static String readFile(File file, String charset){ //设置默认编码 if(charset == null){ charset = "UTF-8"; } if(file.isFile() && f...

2018-04-23 13:08:32 3793

转载【java】Eclipse错误: 找不到或无法加载主类或项目无法编译10种解决大法！

原文地址：Eclipse错误: 找不到或无法加载主类或项目无法编译10种解决大法！今天启动项目，又遇到找不到或无法加载主类的情况，清除项目后无法编译,class文件下没有.class文件，至少遇到3次这个问题了，隔一段时间就出现这个问题，而且每次解决的方法都还不相同，这个问题的标识就是项目上有红色差号或者叹号，原因诸多也说不清楚，有的时候是jar包缺或者引入了无用的jar包，有时候开发软件编译停顿...

2018-04-18 11:34:26 4100

原创【bat批处理】使用批处理，解决将es插件安装到源码中

首先在使用bat批处理之前，修改注册表，因为有些命令在批处理结束后，直接关闭命令行，看不到运行结果。组合键windows+R，然后输入regedit，找到下面的变量并修改：HKEY_CLASSES_ROOT\batfile\shell\open\command 的值为 cmd /k "%1" %* – PS：原值为 "%1" %*一、打包安装es插件在es插件开发过程中，需要重复使用命令行...

2018-04-14 15:51:19 463

原创【JavaScript】js遍历json

下面介绍js遍历json数据的几种方法方法一：jQuery例一：json数据如下，需要获得每对key和value{"a":4.3,"classify":"Iris-setosa","b":3.0,"c":1.1,"d":0.1}可以使用jQuery中的$.each方法，使用jQuery之前，需要在html中使用如下标签引入jQuery<script src="ht

2018-04-13 21:31:41 632

转载【bat批处理】bat脚本操作

操作系统：win71、bat运行完，不让cmd关闭本文参考自：http://stackoverflow.com/questions/886848/how-to-make-windows-batch-file-pause-when-double-clicked/12036163#12036163参考：https://blog.csdn.net/zhoulenihao/article/details/...

2018-04-13 13:16:31 517

转载【Java】Java中将String转json对象

原文地址：https://blog.csdn.net/qq_17586821/article/details/53856606maven项目中，需要在pom.xml文件的<dependencies>标签下加上对JSONsimple的依赖，如下 <!-- https://mvnrepository.com/artifact/com.googlecode.json-simple/j...

2018-04-10 12:54:48 20389

转载【Java】全栈工程师

作者：顾鹏链接：https://www.zhihu.com/question/22420900/answer/21770992来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。做这样一个简单的 app:一个天气应用，干净清爽的界面，天气信息一目了然。它不仅可以精确预测未来 10 天的天气，还可以显示某地的历史天气信息。它具有自定义提醒功能，支持 web 版本， iOS ...

2018-04-09 09:23:12 2319

原创【Java】编程小技巧——格式化输出

1、格式化输出下面代码输出，会出现20个空格为一列的表格形式，效果见下图的consoleSystem.out.print(String.format("\t%20s", Header[i]));

2018-04-03 21:58:38 183

原创【ELK】ES插件开发问题（三）—— pom.xml文件导致的错误

首先给出错误截图该错误可能是因为pom.xml中注入了一个与当前jdk版本不匹配的依赖，删掉那个依赖即可比如这个依赖一填进去，pom.xml就会出现叉号，我感觉问题一出现的错误就是因为weka版本和当前jdk版本不匹配造成的。除了手动添加jar包，暂时没想到更好的办法。<!-- https://mvnrepository.com/artifact/nz.ac.waikato.cms.weka...

2018-04-02 21:39:04 422

原创【ELK】ES插件开发问题（二）—— java.security.AccessControlException:access denied

参考：1、自定义java.policy配置(如何让你的类禁止读写文件？禁止创建Socket对象？) - CSDN博客一、java.security错误样例完整的log如下Problem instantiating package manager. Using DefaultPackageManager.mars 28, 2018 5:45:29 AM com.carrotsearch.rando...

2018-04-02 21:19:06 10616

原创【ELK】ES插件开发问题（一）—— weka的包找不到

由于项目中要使用weka，所以在pom.xml中注入weka的依赖，而moa中有weka的包，所以直接添加了moa的依赖。但是在软件版ES中，该插件一直报错，说找不到weka中的classifier包，所以暂时只能在软件版es中生成插件，然后复制到源码版的plugin目录下，在源码项目中手动导入weka包，可以解决此问题。后续安装到软件版中即将出现的问题先搁置吧！完整的pom.xml文件在我的上一...

2018-04-02 21:03:01 261

原创【ELK】ElasticSearch插件demo

环境：操作系统：win7elasticsearch版本：5.4.4java：1.8参考文章：1、Elasticsearch权威指南（中文版）2、Elasticsearch笔记五之java操作es3、java操作ElasticSearch（es）进行增删查改操作4、ElasticSearch入门-增删改查(CRUD)5、elasticsearch——Java API的使用6、elasticsearc...

2018-03-30 22:34:13 822 4

转载【ELK】自定义ES-5.4.1插件步骤2——带action-&amp;gt;transportaction分层结构并包含详细的集成测试步骤

以一个自定义的maven project为例，该项目主要实现一个简单的查询功能，通过curl -XGET http://127.0.0.1:9200/logstash-713/_taste/event命令，可以查询logstash-713索引的内容，在这里，_taste/event为一个自定义的查询命令。项目结构如下：com.taste.elasticsearch_tasteaction...

2018-03-22 16:01:18 522

转载【ElasticSearch】Elasticsearch 5.0下Java API使用指南

原文地址 http://blog.csdn.net/napoay/article/details/53581027一.2.X到5.XElasticsearch 2.x使用java api把elasticsearch安装包下的lib文件夹下的jar文件全部加入到工程类路径即可,换到5.x就不适用了.创建Clien的代码:Settings settings = Settings.builder().p...

2018-03-21 17:18:21 337

原创【面试】阿里

阿里面试：按面经复习1、SVM http://blog.csdn.net/qq_30141957/article/details/79618415 http://blog.csdn.net/qq_30141957/article/details/79454911LRhttp://blog.csdn.net/qq_30141957/article/details/79587046随机森林2、正则化3...

2018-03-20 23:48:42 185

原创【面试】刷题

https://www.nowcoder.com/practice/ac18db43a404459da9c72e8aa1816f80?tpId=85&tqId=29874&tPage=1&rp=1&ru=/ta/2017test&qru=/ta/2017test/question-rankingimport java.util.*;public class ...

2018-03-20 22:27:22 184

原创【机器学习】支持向量机（Suport Vector Machine）数学推导

参考：http://blog.csdn.net/v_july_v/article/details/7624837 推导是边学边写的，后面还学到了处理噪声的情况，引入outlier与松弛变量，以后有时间再补充

2018-03-19 22:07:12 225

原创【机器学习】对数几率回归（Logistic Regression、逻辑回归）数学证明

参考地址：http://blog.csdn.net/zouxy09/article/details/20319673（注：因为转换成了梯度下降问题，所以第2页第5行，迭代公式中是减号）

2018-03-19 21:50:59 398

原创【机器学习】线性回归（Linear Regression）数学证明+python实现

参考文章： https://www.cnblogs.com/douzujun/p/8370657.htmlhttps://blog.csdn.net/sxf1061926959/article/details/66976356?locationNum=9&fps=11、线性回归代码（使用矩阵运算求解系数）# -*- coding: utf-8 -*-"""Created on Thu ...

2018-03-16 21:25:52 620

转载【论文】机器学习、计算机视觉和人工智能的顶级期刊会议

原文地址：http://muchong.com/html/201012/2659795.html可以从以下几点说明：（1）因为机器学习、计算机视觉和人工智能领域发展非常迅速，新的工作层出不穷，如果把论文投到期刊上，一两年后刊出时就有点out了。因此大部分最新的工作都首先发表在顶级会议上，这些顶级会议完全能反映“热门研究方向”、“最新方法”。（2）很多经典工作大家可能引的是某顶级期刊上的论文，这是因...

2018-03-13 10:05:52 702

空空如也

空空如也