- 博客(22)
- 资源 (3)
- 收藏
- 关注
转载 不看任何数学公式的情况下理解傅里叶分析
要让读者在不看任何数学公式的情况下理解傅里叶分析一什么是频域你眼中看似落叶纷飞变化无常的世界实际只是躺在上帝怀中一份早已谱好的乐章二傅里叶级数Fourier Series的频谱三傅里叶级数Fourier Series的相位谱
2017-08-04 22:31:56 606
原创 Java实现Spark词配对Wordcount计数
需求实现过程开启hadoop和sparkjar包处理HDFS文件设置spark-submit程序查询结果附加代码需求 使用Spark实现对一个文档中的每一行的单词进行词配对计数,要求去标点符号,将大写符号统一转化成为小写单词。
2017-05-24 17:41:57 817
原创 Java实现Hadoop下词配对Wordcount计数
需求实现过程开启hadoopjar包处理HDFS文件设置mapreduce程序查询结果附加代码需求 使用Hadop实现 Mapper/Reducer,对一个文档中的每一行的单词进行词配对计数,要求去标点符号,将大写符号统一转化成为小写单词。
2017-05-24 17:07:52 915
原创 Ubuntu虚拟机实现两结点SSH免密码通信
实现功能准备工作设置主机名hostname设置IP主机映射SSH配置设置SSH keygen拷贝SSH KEY使用SSH登录到对方服务器Tomcat配置jdk配置Tomcat配置war包运行实现功能:创建两台Ubuntu VM 16.04 虚拟机,并更改hostname做结点的hostname到IP的映射并实现SSH通信在虚拟机上部署服务,查看应用效果
2017-05-24 15:55:01 979
原创 阿里云Ubuntu服务器实现两结点SSH免密码通信
实现功能准备工作设置主机名hostname设置IP主机映射SSH配置设置SSH keygen拷贝SSH KEY使用SSH登录到对方服务器Tomcat配置jdk配置Tomcat配置war包运行实现功能:阿里云上创建两个结点,更改hostname做结点的hostname到IP的映射并实现SSH通信在虚拟机上部署服务,查看应用效果
2017-05-24 14:08:23 662
原创 Mac下使用Spark-shell实现WorldCount
记录一下用spark自带的例子跑Worldcount项目(注:mac下运行会省略hdfs读取文件的步骤,若在linux下运行请先用hdfs读取本地文件再进行操作)开启hadoop#进入hadoop所在文件夹下sbin/start-all.sh使用jps查看情况,确认namenode和datanode都开启成功jps开启spark-shell#进入spark文件夹下bin/spark-shell读
2017-04-29 14:28:30 1050
原创 使用Eclipse+scala计算Pi
这里主要介绍用Eclipse IDEA计算Pi值的具体操作过程前提环境条件创建项目创建Maven项目修改pomxml解决java报错修改scala配置创建scala程序创建scala对象计算Pi的源程序运行scala对象前提环境条件安装Eclipse Scala IDEA下载并配置JAVA 1.8创建项目创建Maven项目用Eclipse创建Maven项目 选择默认地址
2017-04-25 19:14:17 742
原创 Mahout建基于用户的推荐模型
这里我们用mahout建简单的基于用户的推荐。工程环境数据集创建基于用户的推荐评估前提条件 1. 已经安装好Eclipse环境 2. 下载完成mahout配置包工程环境打开eclipse,新建一个maven项目 使用默认工作环境 选择快速开始 设置基本信息: Group ID:com.recommenderExample Artifact ID:MahoutRecommende
2017-04-25 00:09:15 2231
原创 Oracle建数据挖掘模型
场景:寻找可能购买保险的潜在客户。前提条件数据挖掘账号创建与连接创建数据挖掘用户账号为数据挖掘账户创建连接下载数据挖掘知识库创建数据挖掘项目构建数据挖掘工作流创建工作流并添加数据源检验元数据创建分类模型构建模型training a model比较模型选择和测试具体模型应用模型将预测结果保存在数据库表中可选前提条件下载并安装完成Oracle 11g (R2)企业版下载
2017-04-24 15:23:35 1905 1
原创 SqlServer2012建数据挖掘模型
Microsoft SQL Server提供了集成的数据挖掘建模分析环境,这里我们用SQL Server官网提供的数据创建模型并用于分析顾客购车行为,从而预测潜在购车客户。前提条件准备分析服务数据库创建分析服务项目Analysis Services Project创建数据源Data Source创建数据源视图Data Source View创建目标邮件结构创建目标邮件挖掘模型结构Tar
2017-04-23 11:22:50 2895 1
原创 人脸识别(4)--Python3.6+dlib19.4识别实例
生成方形框识别人脸关键线识别人脸前提条件: 确保python+dlib环境已经搭建成功。搭建步骤可以参考上一篇博客:http://blog.csdn.net/u012842255/article/details/70194609生成方形框识别人脸官网代码:#!/usr/bin/python# The contents of this file are in the public domain.
2017-04-21 23:06:15 4816 1
原创 人脸识别(3)--Python3.6+dlib19.4在Mac下环境搭建
前面讲到用OpenCV实现简单的人脸识别,这里用dlib实现人脸的关键点检测。前提条件dlib之前的准备安装dlib依赖安装dlib实例检测前提条件系统环境:这里是在mac系统下进行开发的,其他系统仅供参考。 Python:安装python3.6环境。具体操作见之前的博客:http://blog.csdn.net/u012842255/article/details/70171617dl
2017-04-18 16:00:50 6837 2
原创 人脸识别(2)--Python3.6+OpenCV3.2识别实例
这里提供两个简单实例:调用摄像头获取图片进行实时检测本地获取图片进行人脸检测并保存图片前提条件: 确保python+opencv环境已经搭建成功。搭建步骤可以参考上一篇博客:http://blog.csdn.net/u012842255/article/details/70171617调用摄像头获取图片进行实时检测调用摄像头,可以看到头像用方框框起来,并实时根据情况调整位置。 impor
2017-04-16 11:59:43 14846 5
原创 人脸识别(1)--Python3.6+OpenCV3.2在Mac下环境搭建
前面讲到用OpenCV实现简单的人脸识别,这里用dlib实现人脸的关键点检测。python安装从官网上下载最新版本的python,这里我选择了dmg文件,直接双击进行安装。 python官网;https://www.python.org/downloads/mac-osx/之后需要更新一下PATH路径: 打开cmd,在~/.bash_profile中添加(如果不存在进行添加)
2017-04-14 13:57:44 7413 3
转载 微博爬虫防止被墙的技巧总结[Java]
这一阵子在做微博爬虫的练习,经常遇到封IP的情况,上网查找资料,发现DianaCody的博客总结非常到位,因而这里转载留着记录。 转载地址:http://blog.csdn.net/dianacody/article/details/39717825技巧一设置下载等待时间下载频率技巧二设置cookies技巧三修改User-Agent技巧四修改IP技巧五分布式爬取
2017-04-10 09:48:35 5116
原创 Repo的理解及用法小结(2)
之前已经讲了Repo的基本理解,这里总结一下Repo的常用命令。repo initrepo syncrepo startrepo checkoutrepo branchesrepo diffrepo stagerepo prunerepo abandonrepo statusrepo remoterepo pushrepo forallrepo greprepo manifest
2017-04-06 13:44:20 14069 1
原创 Repo的理解及用法小结(1)
对Repo的理解及用法小结对Repo的理解及用法小结Repo介绍Repo用法安装RepoRepo初始化 initRepo同步 syncRepo介绍随之移动终端设备的普及,各企业越来越重视Android市场,而研究Android系统的底层驱动开发,首先需要做的便是建立一套Android版本库管理机制。
2017-04-01 09:56:48 19918
原创 win7下搭建简易FTP服务器
综合几次实习,发现FTP传输是最实用的方式,因而总结一下本地搭建FTP服务器的步骤~前提条件修改因特网FTP配置控制版面启动或关闭Windows功能设置Internet信息服务创建FTP站点查找FTP站点填写站点信息选择IP并设置SSL设置身份认证和授权FTP验证网页验证远程登录验证登录FTP下载文件上传文件
2017-03-31 21:17:09 1912
原创 博客搭建(2)--Mac下用Hexo搭建个人博客
使用Hexo搭建个人博客在此之前,有人推荐使用jekyll,有人推荐hexo,因而上网查找资料进行简单对比: - Jekyll基于Ruby, Hexo基于NodeJs。 - 两者都支持Markdown。 - Jekyll的主题相对而言没有Hexo的美观(个人见解) - 对于网上所说的Jekyll没有本地服务器,需要纠正一下,其实两者都可以实现本地预览功能,再发布到容器中同步。
2017-03-27 22:40:28 332
原创 Shell脚本实现FTP上传下载文件
Linux下使用Shell脚本实现FTP自动上传和下载文件Linux下使用Shell脚本实现FTP自动上传和下载文件登录FTP实现下载文件功能批量下载脚本代码下载单个文件脚本代码登录FTP实现上传文件功能批量上传脚本代码上传单个文件脚本代码命令解释登录FTP输入FTP用户名和密码通过binary命令传输文件切换散列符号 打印切换目录切换交互式提示文件传输断开连接分界符标志
2017-03-27 11:14:27 41564
原创 博客搭建(1)--使用github搭建个人博客
Github搭建个人博客Github搭建个人博客基本准备创建页面仓库绑定域名 其实在大二时小伙伴们已经开始讨论搭建个人博客了,只是由于自己太过懒散,一直拖延到了现在。看着周围好朋友们一个个开始经营自己的小窝,不禁感悟,是时候建立属于小天地了。不求惊天动地,只希望能记录生活的点点滴滴,让自己的生活变得更加充实起来。
2017-03-26 20:37:10 370
转载 JAVA编程规范
JAVA编程规范前一阵子在复习JAVA,搜到了基本的编码规范,感觉很有实用,在此mark一下~ 注:文章内容选自软酷实验室~~JAVA编码规范大致可以分为7个部分:JAVA编程规范命名规范注释规范缩进排版规范文件名规范声明规范语句规范编程规范命名规范1、所有的标示符都只能用 ASCII 字母(A-Z 或 a-z)、数字(0-9)和下划线“_”。2、类名是一个名词,采用大小写混合的
2017-03-24 21:42:24 221
Java实现Hadoop下词配对Wordcount计数代码实现
2017-05-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人