wild_jeek-CSDN博客

转载 python 2.7安装xgboost

I think it works for normal python, too.If you use python 3.5:1: download the package here, the version depends on your python version, python3.5 or python 3.6, 32bit or 64bit.2: use the

2017-09-13 13:59:45 1704 1

转载 Idea 快捷键

Alt+回车导入包,自动修正Ctrl+N 查找类Ctrl+Shift+N 查找文件Ctrl+Alt+L 格式化代码Ctrl+Alt+O 优化导入的类和包Alt+Insert 生成代码(如get,set方法,构造函数等)Ctrl+E或者Alt+Shift+C 最近更改的代码Ctrl+R 替换文本Ctrl+F 查找文本Ctrl+Shift+Space 自动

2017-09-04 18:32:38 283

原创 anaconda 离线安装openCv

官网直接下载opencv，Browse Files at SourceForge.net，下载合适的版本选择 3.2.0版本网盘http://pan.baidu.com/s/1pLfYzhD，直接执行exe文件，安装完成后，到E:\soft-home\opencv\build\python\2.7\x64选中cv2.pyd(64还是86根据自己版本)，复制到Anaconda2\Lib

2017-08-31 17:42:37 3294

转载 Java集合总结

本文首先针对 Java 集合接口进行了一些介绍，并对这些接口的实现类进行详细描述，包括 LinkedList、ArrayList、Vector、Stack、Hashtable、HashMap、WeakHashMap 等，然后对一些实现类的实现方式和使用经验进行讲解，同时重点介绍 WeakHashMap。希望通过本文介绍，可以让读者对集合的操作方式、注意事项等有一些了解。在实际的项目开发

2017-07-17 17:23:59 277

转载 graphx中Pregel函数详解

1、PregelAPI图本质上是一种递归的数据结构，其顶点的属性值依赖于其邻接顶点，而其邻接顶点属性又依赖于其邻接顶点，许多重要的图算法通过迭代计算每个顶点的属性直到到达定点条件，这些迭代的图算法被抽象成一系列图并行操作。 2、Pregel的计算模型主要分为三个函数：1、vertexProgram函数2、sendMessage函数3、messag

2017-05-19 16:02:34 2160 1

转载 Spark上PageRank的简单应用

在《Spark快速大数据分析》里有一段不明觉厉的Scala代码，只用了区区几行即实现了Google的PageRank算法，于是照猫画虎做了个小实验验证了一下。一、实验环境spark 1.5.0二、PageRank算法简介（摘自《Spark快速大数据分析》） PageRank是执行多次连接的一个迭代算法，因此它是RDD分区操作的一个很好的用例。算法会维护两个数据

2017-05-11 12:36:19 1387

转载深度学习Deeplearning4j 入门实战（6）：基于LSTM的文本情感识别及其Spark实现

在做机器学习的各种应用中，文本分类是比较典型的一种。比如，微博的分类，电商中商品评价的好坏分类，新闻的分类等等。同时，文本作为一种重要的特征，也在CTR预估，推荐等应用中起着作用。就文本分类这个应用而言，通常的做法是基于词袋模型和词向量模型来进行。基于词袋（Bag of Words）的模型的话，一般走一步TF-IDF再结合朴素贝叶斯就可以做个模型了，当然如果词很多，存在高维的问题，就用SVD/

2017-05-08 14:04:42 7622 2

原创深度学习Deeplearning4j 入门实战（5）：基于多层感知机的Mnist压缩以及在Spark实现

在上一篇博客中，我们用基于RBM的的Deep AutoEncoder对Mnist数据集进行压缩，应该说取得了不错的效果。这里，我们将神经网络这块替换成传统的全连接的前馈神经网络对Mnist数据集进行压缩，看看两者的效果有什么异同。整个代码依然是利用Deeplearning4j进行实现，并且为了方便以后的扩展，我们将其与Spark平台结合。下面，就具体来说一下模型的结构、训练过程以及最终的压缩效果。

2017-05-08 14:02:27 1795

转载深度学习Deeplearning4j 入门实战（4）：Deep AutoEncoder进行Mnist压缩的Spark实现

图像压缩，在图像的检索、图像传输等领域都有着广泛的应用。事实上，图像的压缩，我觉得也可以算是一种图像特征的提取方法。如果从这个角度来看的话，那么在理论上利用这些压缩后的数据去做图像的分类，图像的检索也是可以的。图像压缩的算法有很多种，这里面只说基于神经网络结构进行的图像压缩。但即使把范围限定在神经网络这个领域，其实还是有很多网络结构进行选择。比如：1.传统的DNN，也就是加深全连接结构网络的隐

2017-05-08 14:01:35 2366

转载深度学习Deeplearning4j 入门实战（3）：简介Nd4j中JavaCPP技术的应用

Deeplearning4j中张量的计算是由一个叫Nd4j的库来完成的。它类似于Python中的numpy，对高维向量的计算有比较好的支持。并且，为了提高运算的性能，很多计算任务是通过调用C++来完成的。具体来说，底层C++运行张量计算可以选择的backend有：BLAS，OpenBLAS， Intel MKL等，上层Java逻辑是通过JavaCPP技术来调用这些库。JavaCPP是也是一个开

2017-05-08 13:59:41 1780

转载深度学习Deeplearning4j 入门实战（2）：Deeplearning4j 手写体数字识别Spark实现

在前两天的博客中，我们用Deeplearning4j做了Mnist数据集的分类。算是第一个深度学习的应用。像Mnist数据集这样图片尺寸不大，而且是黑白的开源图片集在本地完成训练是可以的，毕竟我们用了Lenet这样相对简单的网络结构，而且本地的机器配置也有8G左右的内存。但实际生产中，图片的数量要多得多，尺寸也大得多，用的网络也会是AlexNet、GoogLenet这样更多层数的网络，所以往往我们

2017-05-08 13:58:27 2581

转载深度学习Deeplearning4j入门实战（1）：Deeplearning4j 手写体数字识别

转载：http://blog.csdn.net/wangongxi/article/details/54576594最近这几年，深度学习很火，包括自己在内的很多对机器学习还是一知半解的小白也开始用深度学习做些应用。由于小白的等级不高，算法自己写不出来，所以就用了开源库。Deep Learning的开源库有多，如果以语言来划分的话，就有Python系列的tensowflow，theano

2017-05-08 13:55:31 12281

原创深度学习Deeplearning4j eclipse 开发环境搭建教程

深度学习Deeplearning4j eclipse 开发环境搭建eclipse设置deeplearning4j开发环境：手动添加jar包https://deeplearning4j.org/cn/eclipse eclipse maven设置deeplearning4j开发环境https://depiesml.wordpress.com/2015/08/26/dl4j-

2017-05-05 16:02:22 8258

转载机器学习基本总结

找工作时（IT行业），除了常见的软件开发以外，机器学习岗位也可以当作是一个选择，不少计算机方向的研究生都会接触这个，如果你的研究方向是机器学习/数据挖掘之类，且又对其非常感兴趣的话，可以考虑考虑该岗位，毕竟在机器智能没达到人类水平之前，机器学习可以作为一种重要手段，而随着科技的不断发展，相信这方面的人才需求也会越来越大。纵观IT行业的招聘岗位，机器学习之类的岗位还是挺少的，国内大点的公司里

2017-05-04 17:49:56 635

原创设计模式总结之行为型

设计模式总结之行为型本文代码为scala代码参考：http://blog.csdn.net/jason0539设计模式和原则强烈推荐 http://blog.csdn.net/zhengzhb/article/category/926691总共有24中设计模式，分为3类：创建型模式，共六种：单例模式、简单工厂、抽象工厂模式、工厂方法模式、建造者模

2017-05-04 15:37:08 331

原创 WEB资源

mybatis实战教程(mybatis in action),mybatis入门到精通http://blog.csdn.net/techbirds_bao/article/details/9233599/

2017-05-03 16:47:52 336

转载 Java IO流

1、按字节读取文件内容2、按字符读取文件内容3、按行读取文件内容4、随机读取文件内容 public class ReadFromFile { /** * 以字节为单位读取文件，常用于读二进制文件，如图片、声音、影像等文件。 */ public static void readFileByBytes(String fileNam

2017-05-03 15:12:55 230

原创机器学习H2O AI框架简介

机器学习H2O AI框架简介1. H2O框架 a.底层数据层底层数据读取Hdfs数据 s3数据 SQL 数据 noSQL数据 s3Amazon Simple Storage Service 亚马逊的云存储结构 Hive其实就是读取HDFS noSQL：HBase HQL是一种类SQL语言，这种语

2017-05-03 11:18:05 5081

转载 Java Log4j 简单介绍

Java Log4j 简介： Log4j是Apache的一个开放源代码项目，通过使用Log4j，我们可以控制日志信息输送的目的地是控制台、文件、GUI组件、甚至是套接口服务器、NT的事件记录器、UNIX Syslog守护进程等；我们也可以控制每一条日志的输出格式；通过定义每一条日志信息的级别，我们

2017-05-03 11:05:23 363

原创设计模式总结之结构型

设计模式总结之结构型参考：http://blog.csdn.net/jason0539设计模式和原则强烈推荐 http://blog.csdn.net/zhengzhb/article/category/926691总共有24中设计模式，分为3类：创建型模式，共六种：单例模式、简单工厂、抽象工厂模式、工厂方法模式、建造者模式、原型模式。结构型模式，共七种：适

2017-05-02 16:17:56 315

原创设计模式总结之创建型

设计模式概述总结之创建型参考：http://blog.csdn.net/jason0539总共有24中设计模式，分为3类：创建型模式，共六种：单例模式、简单工厂、抽象工厂模式、工厂方法模式、建造者模式、原型模式。结构型模式，共七种：适配器模式、装饰器模式、代理模式、外观模式、桥接模式、组合模式、享元模式。行为型模式，共十一种：策略模式、模板方法模式、观察

2017-04-27 09:41:26 376 1

转载 Deeplearning 博客和论文资源

一。博客先是机器学习领域大牛的微博：@余凯_西二旗民工；@老师木；@梁斌penny；@张栋_机器学习；@邓侃；@大数据皮东；@djvu9……二 .论文http://deeplearning.net/reading-list/三网站（1）Deep Learninghttp://deeplearning.net/（2）Deep Lear

2017-04-18 18:05:50 467 1

原创 1.begin

开始2016年1月份拿到硕士毕业证,然后开始了工作.当年Alphgo 打败了李世石,让注入大数据血液的AI再次成为人们热议的话题,新的风口.当时不觉明历便投身到大数据的热潮中.熟悉了hadoop .hive .hbase .storm.kafka. flume . zookeeper 等一系列大数据相关框架后,准备转入到数据挖掘机器学习深度学习的道路中 (面试中很尴尬的事发

2016-10-08 22:20:25 200

wild_jeek的博客