- 博客(53)
- 收藏
- 关注
RSS订阅原创 ffmpeg使用记录
ffmpeg使用教程记录ffmpeg使用命令：拼接两个视频：ffmpeg -i result_fcn.mp4 -i result_dsfnet.mp4 -filter_complex hstack -c:v libx264 output.mp4修改视频的fps：ffmpeg -r [fps] input output图片连接成视频ffmpeg -f image2 -i ./*.jpg -r [fps] video.mp4视频拆分成图片：ffmpeg -i video.mp4 ./%
2020-05-27 16:51:44
359
原创 【Video object detection】视频目标检测简单综述
最近由于一些原因在调研视频目标检测现状，从15年ImageNet VID出来后就陆陆续续有做视频目标检测的文章了，到目前为止每年的文章出的都不算多，我就简单记录一下近几年的文章。下面这张是我画的图，简单分类一下。Key Frame就是只在某些关键帧上提feature，然后利用一些光流的信息将关键帧的信息映射到非关键帧，来做非关键帧的检测。VODTCNN：集成了很多算法，包括光流，跟踪以及图...
2019-11-18 19:42:21
7559
11
原创 【SPLT(ICCV2019)】论文阅读笔记
‘Skimming-Perusal’ Tracking: A Framework for Real-Time and Robust Long-term Tracking论文地址 代码写在前面这是Huchuan Lu这个组做的一篇长程跟踪的文章，看起来应该他们投CVPR2019的那篇MBMD上做的，文章的精度已经比MBMD高了，而且做到了real-time，把MBMD中的MDNet部分换成了S...
2019-09-25 15:38:01
1536
1
原创 近几年目标跟踪论文简单分类综述
Siamese类SiamFC（ECCV2016）SiamRPN（CVPR2018 Spotlight）：SiamFC+RPNDaSiamRPN（ECCV2018）SiamRPN++（CVPR2019）：ResNet+multilevel feature，对每个层的特征都做RPN，再结合，和C-RPN不一样；CFNet（CVPR2017）：第一篇将Siamese和相关滤波结合RASNe...
2019-08-21 20:17:44
4247
6
原创 [MTL(CVPR2019)]论文阅读笔记
Meta-Transfer Learning for Few-Shot Learning 论文地址 代码写在前面这是cvpr19年又一篇用meta-learning 做 few-shot learning的文章, 跟MAML不同的地方, 就是它不做全部参数的finetune了, 需要更新的参数变少, 使得网络不容易过拟合当前的task, 也使得网路收敛的快, 同时还使用了hard sampl...
2019-08-20 17:21:26
1813
2
原创 [LCC(CVPR2019)]论文阅读笔记
LCC: Learning to Customize and Combine Neural Networks for Few-Shot Learning 论文地址写在前面这篇论文是天津大学和新加坡国立合作的一篇 用meta-learning 做 few-shot learning 的文章, 算是我看的meta-learning的文章中写的比较接地气的,比较好看懂的文章, 看了这篇文章基本就可以...
2019-08-19 19:37:31
717
原创 [MLT(ICCV2019)]论文阅读笔记
Deep Meta Learning for Real-Time Target-Aware Visual Tracking 论文写在前面这篇文章是韩国的一个组做的, 17年就挂载arXiv上了, 一直没中, 直到今年中了ICCV, 很不容易了. 用了最近很火的Meta-learning的概念, 然后Siamese的结构, 这篇和Meta-tracker不一样的地方就是, Meta-tracke...
2019-07-30 14:26:41
1385
原创 【EDCF（IJCAI2018）】论文阅读笔记
Do not Lose the Details: Reinforced Representation Learning for High Performance Visual Tracking论文地址写在前面这是王强2018年IJCAI的一个工作，其实从王强的18到19年发表的论文来看，他一直在关注细粒度这一块的表示，可能因为他之前做的人体姿态估计中比较多的都是处理像素级别的东西。然后他通过...
2019-05-14 20:21:55
656
原创 【DiMP】Learning Discriminative Model Prediction for Tracking论文阅读
Learning Discriminative Model Prediction for Tracking 论文地址写在前面又是MD大神的一个作品，发现MD大神也把Siamese的框架用起来了，而且一用就解决了Siamese这个框架的三大固有问题，论文还是延续了我看不懂的风格，很多机器学习和概率统计中的知识，自己基础不够扎实了。MotivationSiamese的网络框架一般都只是把模板...
2019-04-25 11:14:02
16233
8
原创 【UDT(CVPR2019)】目标跟踪
Unsupervised Deep Tracking 论文地址写在前面师兄也提过弱监督迟早要用到跟踪上来，只不过自己确实是想不出使用的方式，今年的CVPR果然就出了一篇，算是开山之作了把，在DCFNet上面做的，在同一个数据集上训练的精度已经比SiamFC高了，让我这个还在想如何在SiamFC上做改进的，突然就有种想换框架的感觉，17年的论文，现在看来已经太老了呀。这篇就是很巧妙的用前向和后...
2019-04-19 15:47:34
2577
原创 【ATOM(CVPR2019 oral)】论文阅读笔记
ATOM: Accurate Tracking by Overlap Maximization 论文地址 代码地址写在前面这是MD大神19年新作，按照传统，还是有高深的数学推导和什么Gauss-Newton，总之是看不懂的东西，理论很强了，然后他们用的还是SIamese的框架，说明现在Siamese框架确实很promising的，用了IoUNet来提精度，也引入了很多机制，比如尺度变化、Ha...
2019-04-18 16:57:48
2810
3
原创 【SPM-Tracker（CVPR2019)】论文阅读笔记
SPM-Tracker: Series-Parallel Matching for Real-Time Visual Object Tracking 论文地址写在前面这又是一篇two-stage的方法，发现今年的CVPR好多用多stage训练的，这篇文章比较巧妙地使用粗糙（CM）表示和精细（FM）表示相结合，得到最终的效果。效果很好，比SiamRPN精度高，思路也比较简单，不过人家用了很大的数...
2019-04-17 15:50:36
4122
8
原创 【TADT（CVPR2019)】Target-Aware Deep Tracking目标跟踪论文笔记
Target-Aware Deep Tracking 论文地址 Code写在前面又是有大牛Ming-Hsuan Yang的一篇论文，一作应该是哈工大的一个博士（只找到这个信息，欢迎大家来纠正），这篇文章的亮点就是他们提出的一个target-ware机制，他们认为对于同一个物体，他们对于最后分类的贡献应该是在相同的通道上的。因为跟踪目前都是将分类的网络迁移过来，然而分类的网络其实处理...
2019-04-13 15:04:39
8009
26
原创 【ANT（AAAI2019）】目标跟踪论文阅读笔记
Learning Attribute-Specific Representations for Visual Tracking 论文地址写在前面这篇文章是大牛Ming-Hsuan Yang 2019AAAI的工作，主要是将跟踪中会遇到的遮挡、形变之类的问题作为每一帧的属性，通过对这个属性分branch学习，每个branch学到对应属性的特征，然后再整合来做分类和定位。感觉有点像人家人脸识别中，...
2019-04-11 20:23:46
841
原创 [TRACA(CVPR2018)]论文阅读笔记
Context-aware Deep Feature Compression for High-speed Visual Tracking 论文地址写在前面这是韩国首尔大学2018年CVPR上的一个工作，利用深度特征+相关滤波的形式做的，其中比较新的地方就是设计了一系列encoder来更好编码目标的特征，更加注重目标本身的一些context的信息，论文里面用了很多操作来提升精度。Motiv...
2019-04-03 16:08:22
776
原创 【Siam-BM】论文阅读笔记
Towards a Better Match in Siamese Network Based Visual Object Tracker论文地址 代码不开源写在前面这是SASiam的作者18年另一个工作，在VOT2018公测上也占的一席之地，只不过好像因为什么奇奇怪怪原因没有终测，但是它还是不失为一个real-time精度高的tracker，比SASiam精度也有了提升，主要是处理了旋转和...
2019-03-28 21:14:55
1520
原创 【FlowTrack（CVPR2018）】：目标跟踪论文阅读
End-to-end Flow Correlation Tracking with Spatial-temporal Attention 论文地址写在前面这是中科院大大朱政在商汤实习的时候做的，发表在2018年的CVPR上，文中提到这是第一篇将光流法和深度跟踪端到端训练的方法，他们使用的光流法就是2016年提出的FlowNet，文章只是将其拿过来重新训练了一下，没有太多讲其中的结构，而且朱政也...
2019-03-22 15:31:37
1406
7
原创 [CREST(ICCV2017)]：论文阅读笔记
CREST: Convolutional Residual Learning for Visual Tracking 论文地址 代码写在前面这篇论文是在DCF上面的一些改进，也是第一篇将残差学习应用到目标跟踪这个领域中来，他们将DCF从频域弄回到了时域，就可以用滤波的方式直接得到response map了，个人感觉其实就是SiamFC那种相关的过程，不过加了时间和空间的残差，但是精度比Sia...
2019-03-21 16:49:58
987
原创 目标跟踪OTB数据集使用过程中遇到的坑
记录一下使用OTB过程遇到的一些问题。刚刚拿到这个toolkit，一开始以为可以直接跑了，发现其实最好的是把你的tracker弄成一个exe放到它的trackers文件夹底下，然后跑main_running 就可以了，但是一般现在都用Python写了，如何打包，如何搞到Matlab中确实太麻烦。所以我就开始了我的探索，说实话可能对很多人来讲我遇到的问题很弱智，但是我就是不会啊！！哭/(ㄒoㄒ)/...
2019-03-12 19:36:23
5992
30
原创 【UPDT(ECCV2018)】论文阅读笔记
Unveiling the Power of Deep Tracking 论文地址Motivation目前目标跟踪领域的训练数据太少，而且在跟踪的时候我们只知道第一帧的ground-truth，所以其实后面帧都是没见过的物体，所以模型需要处理没见过的物体；对于deep learning在目标跟跟踪领域只是利用了中低层的数据，由于深度网络是用分辨率来换高层鲁棒的特征。但是高层的特征会失去很多...
2019-03-06 16:49:28
3940
1
原创 【SiamDW(CVPR2019)oral】论文阅读Deeper and Wider Siamese Networks for Real-Time Visual Tracking
Deeper and Wider Siamese Networks for Real-Time Visual Tracking 论文地址 代码写在前面又是一篇商汤做的关于SiamRPN的改进，加深了网络宽度与深度，优化特征提取过程，效果很好。Motivation深度的网络如ResNet在其他视觉任务上都有很好的表现，然而却不能移植到目标跟踪领域中；网络太深导致最后特征的感受野太大，更加...
2019-02-28 16:21:42
2251
原创 【StruckSiam（ECCV2018)】论文阅读
Structured Siamese Network for Real-Time Visual Tracking 论文地址这篇文章里面挺多地方不怎么懂，就记录一下，望指正。Motivation目前已有的很多tracker都只关注目标的整体模型表示而忽略了一些细节的信息，这样会使得tracker对一些blur，occlusion不够鲁棒；然而一些基于局部模型的tracker都是将目标刚性地...
2019-02-26 20:35:30
367
原创 【SiamRPN++】论文阅读笔记
SiamRPN++: Evolution of Siamese Visual Tracking with Very Deep Networks 论文地址写在前面这篇文章是之前SiamRPN和DaSiamRPN的团队做的，北邮的李博，现在毕业了在商汤，大牛就是大牛，这个SiamRPN++在所有的benchmark上都做到了最好，并且提升还很大，最大的贡献就是改变了Siam tracker...
2019-02-23 15:23:02
3739
6
原创 【Meta-tracker(ECCV2018)】论文阅读
Meta-Tracker: Fast and Robust Online Adaptation for Visual Object Trackers 论文地址 代码写在前面因为我自己对元学习没有太细致了解过，所以想要深刻理解这篇论文可能还是需要比较扎实的meta-learning基础，这篇文章将元学习引入目标跟踪中，对比了CREST和MDNet加了meta-learning之后的结果，在这两个...
2019-02-22 16:13:55
1587
2
原创 【TripletTracking(ECCV2018)】论文阅读 Triplet Loss in Siamese Network for Object Tracking
Triplet Loss in Siamese Network for Object Tracking 项目主页写在前面这篇文章发表在ECCV2018上，速度快，精度还行，但是个人感觉还是因为方法比较新才被接收的。这篇文章的思路其实很简单，很大的篇幅都是在解释triplet loss为什么管用，在这里就不详细描述这块内容，主要掌握一下思路，具体的公式以及可视化的比较可以去看论文。Motiv...
2019-02-21 15:49:24
2262
1
原创 【SA_Siam(CVPR2018)】论文阅读笔记 A Twofold Siamese Network for Real-Time Object Tracking
论文：A Twofold Siamese Network for Real-Time Object Tracking 论文地址 代码写在前面这篇文章又是一篇使用Siamese网络做tracking的文章，效果在OTB和VOT的数据集上比已有的很多实时的tracker都要好。这篇文章就是使用了两个分支，一个是用来提取语义的特征，一个是用来提取表观特征，CVPR2018王强博士的那篇论文里也提到...
2019-02-20 15:41:51
1018
原创 【VITAL(CVPR2018 Spotlight)】阅读笔记
论文：VITAL: VIsual Tracking via Adversarial Learning（利用对抗性学习的目标跟踪）论文地址写在前面这篇文章是CVPR2018的Spotlight，感觉18年跟踪方面的Spotlight都是以精度取胜了，不过在跟踪方面还是效果为先，这篇文章的思路并不难，也没有过于复杂的公式推导，可能在一些措辞上有些不好理解。它最大的优点就是把GAN应用到目标跟踪这...
2019-02-18 19:44:43
524
原创 【LSART（CVPR2018 Spotlight）】论文阅读笔记
Learning Spatial-Aware Regressions for Visual Tracking 论文地址 代码写在前面这篇文章是CVPR2018的Spotlight，在VOT2017上的效果超过了ECO和CCOT，表现还是很强的。这篇文章是将相关滤波和CNN相结合，首先提出了一个新的核函数，然后再将相关滤波的损失计算转化为用网络计算，简化了计算过程与计算复杂度。然后又使用了一...
2019-01-25 14:09:26
619
2
原创 [Real-Time MDNet]ECCV2018论文阅读笔记
Real-Time MDNet (ECCV2018) 论文地址 代码不开源写在前面这篇论文的作者之一Bohyung Han是MDNet，TCNN的作者。这篇论文从题目中也可以看到，是一个加速了的MDNet，总体网络结构和MDNet一样，就是加了一个RoIAlign层，把从卷积层输出的特征压成了3∗33*33∗3的，这样就加快了速度。并且他们的损失函数使用了两个损失项，一项是对于某个类的前景背景...
2019-01-23 10:37:18
926
8
原创 【DAT NIPS2018】目标跟踪阅读笔记
Deep Attentive Tracking via Reciprocative Learning 论文地址 代码写在前面这篇论文其实从名字中也可以看出来，又是一篇引入attention的目标跟踪文章，但这篇文章跟以往的把attention map直接乘到指定层数据中的不一样，他是把attention map作为损失函数的一个正则化项，通过影响损失函数来优化网络。整个网络是基于MDNet的...
2019-01-21 16:10:56
1483
1
原创 [MemTrack] ECCV2018 目标跟踪阅读笔记
《Learning Dynamic Memory Networks for Object Tracking》 论文地址作者自己提供的github源代码，没有VOT接口 代码地址Motivation近几年来，基于模板匹配的目标跟踪方法被大量提出来，然而基于模板匹配的方法存在的通病是模板的自适应能力比较差，无法适应目标在视频序列中发生的一些变化。为了能够做到自适应的模板更新，这篇文章引入了LST...
2019-01-17 15:51:54
1127
原创 用模拟退火算法解旅行商问题
1.问题描述旅行商问题（Travelling Salesman Problem, 简记TSP，亦称货郎担问题)：设 有n个城市和距离矩阵D=[dij]，其中dij表示 城市i到城市j的距离，i，j=1，2 … n，则问 题是要找出遍访每个城市恰好一次的一条 回路并使其路径长度为最短。2.算法设计旅行商问题是一个十分经典的NP难度问题，如果想找到真正的唯一最优的解复杂度是O(N!)的，所以求解...
2019-01-17 14:44:40
2554
原创 关于时间的不确定性推理
时间与不确定性基本思想：按照自然的时序顺序对变量进行排序，按因果次数添加变量，记录每个时间片的观测预证据。困难：变量集合是无界的，因为它需要包含全部时间片的状态与证据Markov过程一阶马尔科夫：当前状态只与上一个状态有关；二阶马尔科夫：当前状态与上两个状态有关；传感器模型：当前状态只与自己有关马尔科夫过程中除了转移模型和传感器模型之外，还需要指定0时刻的先验概率P(X0)P(X...
2019-01-17 14:37:41
2440
1
原创 目标跟踪综述【二】
跟踪中使用的特征视觉特征最理想的特性是其独特性，因此可以在特征空间中轻松区分对象。许多跟踪算法都使用特征组合颜色：用作基于直方图的外观表示的功能通常使用不同的颜色空间，例如RGB，然而，RGB空间不是感知上均匀的颜色空间，即，RGB空间中的颜色之间的差异不对应于人类感知的颜色差异。颜色空间所以很多其他的颜色空间被提出来：Nrgb是归一化的RGB，他对光线的变化不敏感。HSI...
2019-01-17 14:29:06
335
原创 贝叶斯网络（2）
目录贝叶斯网络中的精确推理通过枚举进行推理变量消元算法精确推理的复杂度团算法贝叶斯网络中的近似推理直接采样算法Markov链仿真推理通过枚举进行推理P(B∣j,m)=P(B,j,m)/P(j,m)=a∗P(B,j,m)=a∑e∑aP(B,e,a,j,m)P(B | j,m)\\ = P(B, j, m) / P(j,m) \\ = a*P(B, j, m)\\ = a\s...
2019-01-06 23:27:56
2536
原创 从元学习角度看待和思考通用智能（Valse2019\1\2）学习笔记
讲者一：王宇雄（卡内基梅隆大学博士）：他做了很多one-shot， two-shot、few-shot的工作，他表示few-shot learning学的是从小样本模型到大样本模型的映射，一个变化，一个迁移，目前的Meta-learning可以看成是元学习的一种。 Meta-learning的网络其实就是一个回归的过程，将不同的采样尺寸的Few-shot回归到Many-shot的模型，学习到的是...
2019-01-03 15:47:02
1266
1
原创 不确定性推理（计算智能，联合概率分布）
记录一下联合概率分布，以及概率推理。概率公理对于任意的命题A，B0≤P(A)≤10 \le P(A) \le 10≤P(A)≤1P(true)=1P(true) = 1P(true)=1 and P(false)=0P(false) = 0P(false)=0P(A∩B)=P(A)+P(B)−P(A∩B)P(A \cap B) = P(A) + P(B) - P(A \cap B)P...
2019-01-01 17:26:26
2571
原创 使用遗传算法解旅行商问题
1.问题描述旅行商问题（Travelling Salesman Problem, 简记TSP，亦称货郎担问题)：设 有n个城市和距离矩阵D=[dij]，其中dij表示 城市i到城市j的距离，i，j=1，2 … n，则问 题是要找出遍访每个城市恰好一次的一条 回路并使其路径长度为最短。2.算法设计旅行商问题是一个十分经典的NP难度问题，如果想找到真正的唯一最优的解复杂度是O(N!)的，所以求解...
2018-12-22 21:37:43
7652
2
原创 多媒体技术--图像处理基础（二）-图像特征
这边主要记录一下图像处理中使用的特征，包括全局特征：直方图；局部特征：Harris角点，SURF，SIFT等一、全局特征1、常用的特征颜色直方图颜色矩（Color Moments）方向梯度直方图VLAD ：globalized local feature（全局化的局部特征）颜色直方图颜色直方图就是把像素值0-255分成多个bin，计算落在每个bin上的像素值的个数即可。对于...
2018-12-03 15:18:21
1139
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人