7 ycszen

尚未进行身份认证

书山有路勤为径

等级
TA的排名 5w+

PyTorch参数初始化和Finetune

前言这篇文章算是论坛PyTorch Forums关于参数初始化和finetune的总结,也是我在写代码中用的算是“最佳实践”吧。最后希望大家没事多逛逛论坛,有很多高质量的回答。参数初始化参数的初始化其实就是对参数赋值。而我们需要学习的参数其实都是Variable,它其实是对Tensor的封装,同时提供了data,grad等借口,这就意味着我们可以直接对这些参数进行操作赋值了。这就是PyTorch简洁

2017-03-24 19:45:13

PyTorch预训练

前言最近使用PyTorch感觉妙不可言,有种当初使用Keras的快感,而且速度还不慢。各种设计直接简洁,方便研究,比tensorflow的臃肿好多了。今天让我们来谈谈PyTorch的预训练,主要是自己写代码的经验以及论坛PyTorch Forums上的一些回答的总结整理。微改模型PyTorch中的torchvision里已经有很多常用的模型了,可以直接调用:AlexNetVGGResNetS

2017-03-24 17:12:16

图像语义分割之特征整合和结构预测

前言近来阅读了PSPNet和林国省老师的几篇论文,觉得现在在semantic segmentation领域对于Multi-scale Features ensembling的关注又多起来了(当然其实一直都应用的挺多),然后林国省老师对CRF有一些新的认识和解读。这些都将总结于此。两个发展方向特征整合(Feature Ensembling) 又分为:多尺度(multi-scale) 特征整合多级

2017-03-01 23:06:33

【解决】Ubuntu安装NVIDIA驱动(咨询NVIDIA工程师的解决方案)

前言这两天把实验室服务器给装成了Ubuntu16.04+cuda8.0+cudnn5.0,本来以为应该没什么问题,结果那折腾得……不说了,都是泪。具体Caffe,Tensorflow,Mxnet的安装教程已经很多了,我这儿就不说了。本文主要想说说Nvidia驱动和Ubuntu桌面冲突的问题,当时为了解决在网上找了一圈,始终没能解决我的问题,所以这儿特意写篇博客,权当做个记录,希望能给遇到同样问题的人

2016-11-26 22:09:43

图像语义分割之FCN和CRF

前言(呕血制作啊!)前几天刚好做了个图像语义分割的汇报,把最近看的论文和一些想法讲了一下。所以今天就把它总结成文章啦,方便大家一起讨论讨论。本文只是展示了一些比较经典和自己觉得比较不错的结构,毕竟这方面还是有挺多的结构方法了。介绍 图像语义分割,简单而言就是给定一张图片,对图片上的每一个像素点分类从图像上来看,就是我们需要将实际的场景图分割成下面的分割图: 不同颜色代表不同类别。经过我阅读“

2016-09-04 21:17:05

深度学习最全优化方法总结比较(SGD,Adagrad,Adadelta,Adam,Adamax,Nadam)

前言(标题不能再中二了)本文仅对一些常见的优化方法进行直观介绍和简单的比较,各种优化方法的详细内容及公式只好去认真啃论文了,在此我就不赘述了。SGD此处的SGD指mini-batchgradientdescent,关于batchgradientdescent,stochasticgradientdescent,以及mini-batchgradientdescent的具体区别就不

2016-08-24 18:20:26

TensorFlow高效读取数据的方法

概述关于Tensorflow读取数据,官网给出了三种方法:供给数据(Feeding): 在TensorFlow程序运行的每一步, 让Python代码来供给数据。从文件读取数据: 在TensorFlow图的起始, 让一个输入管线从文件中读取数据。预加载数据: 在TensorFlow图中定义常量或变量来保存所有数据(仅适用于数据量比较小的情况)。对于数据量较小而言,可能一般选择直接将数据加载进内

2016-08-17 19:20:26

深度学习框架Torch7解析-- Tensor篇

Tensor类型多维矩阵数据的内部表示内存管理常用函数Tensor 的构造函数常用操作函数复制和初始化Rsizing提取子tensor未完待续TensorTensor类可以说是Torch中最重要的类了,因为几乎所有的包都依赖于这个类实现.它是整个Torch实现的数据基础.类型Tensor由以下几种类型:ByteTensor -- 代表 unsigned charC

2016-05-24 15:36:41

MXNet数据加载

本篇博客主要讲讲MXNet如何加载数据的,因为它自己实现了一个方便的数据加载的方法。当然最全面的还是去看MXNet的官方文档了,这里主要是简单介绍一下,外加一些自己实验的结果。目录目录一介绍二从原生数据生成lst文件三从lst文件生成rec方法一方法二三创建Data Iterator参考网站一.介绍MXNet主要使用迭代器(Iterator)来为神经网络提供数据,当然迭代器还会对数据进

2015-12-07 17:33:53

MXNet安装教程

最近一直在学习深度学习,折腾了几个比较著名的深度学习的框架。尤其被caffe的各种依赖给弄怕了,虽然最后成功了,但是经过试用发现,caffe如果仅仅是使用或者做项目是非常方便的,而且还是使用的C++呀,但是如果要研究的话,感觉caffe相对而言没这么方便。 所以,我最终看好的是我大mxnet,使用方便,灵活性和效率并重,而且使用C++写的哦,大可以研究源码,而且相对于caffe而言,安装so ea

2015-12-06 17:54:26

Scrapy 安装问题集锦

scrapy 具体安装教程网上已经有很多了,我也就不赘述了。但是在我 按照网上教程安装时,遇到的很多问题并没有一个统一的解决。所以,在此进行一个安装问题的集锦,如果大家还遇到了其他问题,欢迎提出,随时更新~ OK!直接上干货~

2015-08-08 22:58:38
勋章 我的勋章
    暂无奖章