OrdinaryCore-CSDN博客

原创 Xavier初始化方法

Xavier参数初始化方法目的：使每一层输出的方差尽量相等，以减小深层神经网络训练的困难。

2017-11-01 09:15:17 964

原创主成分分析PCA

主成分分析（PrincipalComponent Analysis）定义：通过正交变换将一组可能存在相关性的变量转换为一组线性不相关的变量，转换后的这组变量叫做主成分。目的：减小需要分析的指标同时尽量减少原指标包含的信息损失。是最常用的降维方法。主成分：加入有一些数据分布在三维空间中一个二维平面上，用自然坐标

2017-10-31 20:28:05 440

转载奇异值分解(SVD)原理详解及推导

转载出处http://blog.csdn.net/zhongkejingwang/article/details/43053513 在网上看到有很多文章介绍SVD的，讲的也都不错，但是感觉还是有需要补充的，特别是关于矩阵和映射之间的对应关系。前段时间看了国外的一篇文章，叫A Singularly Valuable Decomposition The SVD of a Matrix，觉得分

2017-10-22 14:18:58 407

原创 tensorflow手册tensorboard可视化

2017-10-17 19:33:49 528

原创 tensorflow手册实现mnist数据集的CNN

一、CNN基本组成卷积神经网络采用了三种基本概念：局部感受野（local receptive fields），共享权重（shared weights），池化（pooling）。1、局部感受野将图像像素输入神经元排列成矩阵形式。把输入像素连接到一个隐藏神经元层。但是我们不会把每个输入像素连接到每个隐藏神经元。我们只是把输入图像进行小的，局部区域的连接。第一个隐藏层中的每个

2017-10-14 17:16:35 639

原创 windows安装Tensorflow

1、安装python 3.6环境，默认安装会自动安装pip2、确认你的显卡支持 CUDA3、安装tensorflowflow

2017-10-10 19:19:09 414

原创交叉熵、L2规范化、权重初始化推导，改进Michael Nielsen神经网络（2）

问题一：使用二次代价函数时，当神经网络在犯错较大的情况时（w，b值偏离较大，如初始值给的太大），学习缓慢，即较小。当遇到错误数据时，神经元输出易饱和，使得接近0，学习速度缓慢。所以想要使得偏导数里不出现，引入交叉熵代价函数。一、交叉熵代价函数使用交叉熵后，神经网络犯错误时学习速度更快。前后比较示意图：

2017-10-07 20:49:50 1329

原创 Michael Nielsen神经网络（1）

本例使用了sigmoid函数和二次代价函数，以下是对原代码进行注释。mnist数据集导入"""mnist_loader~~~~~~~~~~~~A library to load the MNIST image data. For details of the datastructures that are returned, see the doc strings for ``

2017-10-05 22:13:48 775

原创吴恩达mooc神经网络与深度学习

在图像领域，我们经常应用的是卷积神经网络（convolutional neural network），常缩写为CNN。对于音频等序列数据（sequence data），我们经常应用循环神经网络（recurrent neural network），常缩写为RNN。扩大神经网络规模和扩大数据量都可以提升神经网络的性能。算法革新也可以提高计算速度，如将激活函数由sigmoid改为修正线性单元R

2017-10-02 21:34:52 721

原创 LabVIEW用Grab连续采集图像的完整过程

SIT项目的基本思路是用摄像头采集图像，处理后获得参数通过RS485与PMC通信,控制电机使四轴运动，构成一个控制的回路。这次用LabVIEW搭建一个程序完成Grab的连续图像采集，为图像处理做准备。（1）IMAQ Create一个数据缓存区并给它创建一个字符串常量。（2）IMAQdx Open摄像头并为他创建一个IMAQdx的会话句柄。（3）调用IMAQdx Configure

2017-02-11 20:34:12 12911 5

原创用LabVIEW连接USB相机采集一幅图像

由于SIT项目要用LabVIEW做机器视觉相关的开发，我们购买了一款工业相机京航JHSM300m进行学习。首先安装好LabVIEW2014，Vision acquisition software（主要用于图像采集）和Vision Development Module（主要用于图像处理）。首先可以在LabVIEW初始界面的工具栏中打开Measurement&Automation Explorer

2017-02-08 21:16:24 18543 5

FaceBigCat的博客