影醉阏轩窗-CSDN博客

原创 Focal and Global Knowledge Distillation for Detectors

一. 概述论文地址：链接代码地址：链接论文简介：此篇论文是在CGNet上增加部分限制loss而来核心部分是将gt框变为mask进行蒸馏注释：仅为阅读论文和代码，未进行试验，如有漏错请不吝指出。文章的疑惑和假设仅代表个人想法。二. 详细2.1 Focal Distillation2.1.1 mask计算此篇文章在目标检测蒸馏中对FPN层进行限制，正常的操作如下公式(1)所示...

2022-05-10 10:45:00 662 3

原创二阶段目标检测总结

概述：最新几年的论文都是在单阶段、Transform上进行发掘提升，基本上2020-2021年二阶段论文全军覆没，这篇博文也是总结2016-2019年的发展，最后一篇CenternetV2比较特殊，不能完全算作传统意义的二阶段网络。目前什么地方还使用二阶段论文？比赛场景，经常使用FasterRCNN的变种+其它网络进行联合预测目标比较小的场景(使用较少，一般用anchor-free、...

2021-06-28 17:24:00 1232 2

原创 Waymo object detect 2D解决方案论文拓展

FixMatch半监督中的基础论文，自监督和模型一致性的代表作。Consistency regularization: 无监督学习的方式，数据\(A\)和经过数据增强的\(A\)计做\(A'\) ,同时输入模型\(f\) ，由于其种类相同(未知但相同)，所以\(f(A)=f(A')\) ，利用分布相同进行训练即可。Pseudo-labeling: 伪标签，使用人工标注数据集训练模型\...

2021-06-21 20:06:00 287

原创 Rethinking Training from Scratch for Object Detection

Rethinking Training from Scratch for Object Detection一. 概述正常训练目标检测的流程分为以下几种：在imagenet上进行预训练，然后在特定数据集进行tune直接在数据集上进行从头训练两种方式各有千秋，前者可以很快收敛(在特定数据集收敛快)，但是训练复杂(预训练实际长)。后者直接训练较为容易(尤其在修改模型结构时)，但是训练周期...

2021-06-16 14:29:00 331

文章目录AutoAssign源码分析一. 简介二. 论文理论2.1 联合表示2.2 正样本权重2.3 负样本权重2.4 总的loss2.5 补充loss三. 论文代码四. 总结五. 参考AutoAssign源码分析一. 简介关于动机和发展流程，原作者已经在知乎说的非常清楚，主要解决的问题总结如下：联合各个loss（cls、reg、obj），这里前人已经做过很多去除了centerness，这个东西非常难训练去除了预定义的anchor匹配策略去除FCOS类的不同FPN层解决不同尺度目标

2021-04-14 21:20:31 381

原创目标检测小网络

文章目录目标检测小网络一. Anchor-based1.1 网络结构1.2 数据和anchor1.3 一系列问题1.4 具体案例二. Anchor-free2.1 具体案例2.2 改进策略目标检测小网络一. Anchor-based1.1 网络结构当前一般采用backbone：shufflenetV2、mobilenetV2/3（V3比较难调试）、Ghostnet、SandGlassFPN：PAN、BiFPN，这部分对检测提升很大（实际使用得进行裁剪压缩，原始版本不适合小模型），追求极致性能的

2021-03-29 15:15:21 1344

原创 Hrank模型剪枝

HRank: Filter Pruning using High-Rank Feature Map概述这篇文章非常简单，直接使用每层的 featurefeaturefeature 结果去判断 filter−kernelfilter-kernelfilter−kernel 的重要程度：上图展示了网络每一层的特征重要程度分布情况，如何确定重要性？oji(I,:,:)=∑i=1rσiuiviT=∑i=1r′σiuiviT+∑i=r′+1rσiuiviT\begin{aligned}\mathbf{o}

2021-03-29 15:07:25 599 2

原创 Anchor-Free模型总结

文章目录Anchor-Free综述一. CornerNet1.1 概述1.2 模块介绍1.2.1 Heatmap1.2.2 Offset1.2.3 Grouping Corners1.2.4 Corner Pooling1.3 总结二. CenterNet2.1 概述2.2 Center-Regression三. FCOS3.1. 概述3.2. 模块介绍3.2.1 论文思路简介3.3.2 回归形式3.3 参考文献四 ATSS五.GFLV15.1. 论文简介5.2. 模块详解5.2.1 谈谈分布5.2.2 分

2021-03-23 14:14:59 1806

原创 Anchor-Free总结

目录Anchor-Free综述一. CornerNet1.1 概述1.2 模块介绍1.2.1 Heatmap1.2.2 Offset1.2.3 Grouping Corners1.2.4 Corner Pooling1.3 总结二. CenterNet2.1 概述2.2 Center-Regression三. FCOS3.1. 概述3.2. 模块介绍3.2.1 论文思路简介3.3.2 回归形式3...

2021-03-16 20:12:00 458

原创 FastHand

FastHand: Fast Hand Pose Estimation From A Monocular Camera论文地址数据集：DatasetUsageDesimage resolutionJointsImagesYotube2DTrainingReal-world256 × 2562147125GANeratedHandsTraining...

2021-02-22 18:56:00 2445

原创 Constrast Learnning

目录Constrast Learnning一. 概念简介Constrast Learnning一. 概念简介有一篇英文说得很好：英文版中文翻译queue一个队列，用于存放负样本使用立马拿出来，效率高可以设置的非常大，数量大(对比学习需要大量负样本，这点最重要)MOCO使用了动态的方式(总数设置固定值，每次iteration传入一个batch的新特征，移除一个batch的...

2021-01-08 19:36:00 243

原创 BlazePose: On-device Real-time Body Pose tracking

BlazePose: On-device Real-time Body Pose tracking一. 论文简介主要做的贡献如下(可能之前有人已提出)：这里不说跟踪，仅关注关键点估计部分通过关键点检测到人手大概位置，在做手回归，最后再做估计通过heatmap辅助训练回归关键点注意：Holistic mode 是这篇论文的一个整体应用，其中跟踪部分可以使用任何跟踪方法，注意创新...

2021-01-04 20:12:00 490

原创知识蒸馏

知识蒸馏一. Distilling the Knowledge in a Neural Network知识蒸馏的开端之作，简单叙述蒸馏过程：先训练一个大网络，比如Resnet50用于分类任务搭建一个小网络训练结构，比如mobilenetV2训练小网络的同时推理大网络，大网络的结果去指导小网络(KDLoss用于估计分布的相似性)类似的代码：链接地址类似的文章：链接地址比较简单的...

2020-12-16 21:10:00 329

原创 3D Human Pose Estimation with 2D Marginal Heatmaps

3D Human Pose Estimation with 2D Marginal Heatmaps一. 论文简介主要做的贡献如下(可能之前有人已提出)：使用2Dheatmap代替3Dheatmap排列 \(x,y,z\) 的读取顺序使用JSLoss规范heatmap的分布二. 模块详解2.1 2Dheatmap替代3Dheatmap刚开始读论文的时候感觉作者想象力提...

2020-12-16 20:57:00 199

原创模型剪枝

目录模型剪枝一. 基础回顾二. Pruning Filters for Efficient ConvNets三. Learning Efficient Convolutional Networks through Network Slimming四. Rethinking the Value of Network Pruning模型剪枝一. 基础回顾首先回顾一下卷积的过程，输入：\(x=...

2020-12-16 11:29:00 370

原创 3D Hand Shape and Pose from Images in the Wild

文章目录3D Hand Shape and Pose from Images in the Wild一. 论文简介二. 模块详解2.1 Encoder and Regression2.2 Projection and Mask2.3 Dataset三. 缺点3D Hand Shape and Pose from Images in the Wild一. 论文简介从单张图像中恢复 2D keypoints + 3D keypoints + mesh + instrinsic(图像坐标系到像素坐标系)

2020-10-31 10:48:46 465 2

原创 Monocular Real-time Hand Shape and Motion Capture using Multi-modal Data

文章目录Monocular Real-time Hand Shape and Motion Capture using Multi-modal Data一. 论文简介二. 模块详解2.1 DetNet2.2 IKNet2.3 Dataset三. 缺点Monocular Real-time Hand Shape and Motion Capture using Multi-modal Data一. 论文简介从单张图像中恢复 2D keypoints + 3D keypoints + mesh，在数据量

2020-10-28 10:18:48 781 3

原创 SMAP

文章目录SMAP: Single-Shot Multi-Person Absolute 3D Pose Estimation一. 论文简介二. 模块详解2.1 整体结构介绍SMAP: Single-Shot Multi-Person Absolute 3D Pose Estimation一. 论文简介采用bottom-top的方式进行3D人体姿态检测，出的结果包括：3D root-relate + Absolute-depth + PAFs。主要做的贡献如下（可能之前有人已提出）：3D bot

2020-10-28 10:18:02 441

原创 Distribution-Aware Coordinate Representation for Human Pose Estimation

Distribution-Aware Coordinate Representation for Human Pose Estimation一. 论文简介设计gaussian heatmap的后处理，获得更精确的位置坐标主要做的贡献如下（可能之前有人已提出）：encode使用non-bias生成heatmapdecode使用gaussian函数梯度求取二. 模块详解2.1 整体结构介绍论文思想比较简单，整体进行概括编码部分不进行说明，现在都是这样做的。解码部分是此论文核心

2020-10-28 10:17:26 206

原创 APLoss

Towards Accurate One-Stage Object Detection with AP-Loss一. 论文简介笔者部分不理解，仅记录自己理解部分。解决目标检测（一阶段）样本不均衡问题，统一loss和评价指标直接联系。主要做的贡献如下（可能之前有人已提出）：设计一个AP-Loss（包括前向和后向传播）二. 模块详解2.1 论文思路简介这里以一张图像为例子：核心思想：(a)当前预测的正样本概率（scorescorescore）尽可能大于所有负样本的概率（scores

2020-10-28 10:16:11 1240 5

原创 RFBNet

文章目录Receptive Field Block Net for Accurate and Fast Object Detection一. 论文简介二. 模块详解2.1 论文思路简介2.2 具体实现2.2.1 具体实现三. 参考文献Receptive Field Block Net for Accurate and Fast Object Detection一. 论文简介用于目标检测，增加感受野。主要做的贡献如下（可能之前有人已提出）：设计一个增大感受野的模块RFB二. 模块详解2.

2020-10-28 10:15:18 312

原创 DropBlock

DropBlock: A regularization method for convolutional networks一. 论文简介正则化卷积层，防止过拟合主要做的贡献如下（可能之前有人已提出）：正则化卷积层的模块（正则化Conv层），类似dropout（正则化FC层）二. 模块详解2.1 论文思路简介正常的DropOut是对FC层做随机失活，如何对卷积层做随机失活？按照DropOut的思路，直接对卷积层的feature做随机失活，如下图（b）所示，试验效果并不理想，作者猜测是

2020-10-28 10:14:20 319

原创 GroupBN

Group Normalization一. 论文简介主要做的贡献如下（可能之前有人已提出）：类似BN的一种归一化，使用group进行归一化二. 模块详解2.1 BN的做法设 XXX 为输入的 batchbatchbatch 数据，μB、σB\mu_B、\sigma_BμB、σB 为当前 batchbatchbatch 的均值和方差，running_u、runnnig_σrunning\_u、runnnig\_\sigmarunning_u、runnnig_σ 为滑动平均（全局）的均

2020-10-28 10:12:35 232

原创 GFocal

文章目录Generalized Focal Loss: Learning Qualified and Distributed Bounding Boxes for一. 论文简介二. 模块详解2.1 谈谈分布2.2 分类Loss2.3 回归Loss三. 参考文献Generalized Focal Loss: Learning Qualified and Distributed Bounding Boxes for一. 论文简介将目标检测Loss和评价指标统一，提升检测精度。这是一篇挺好的论文，下面会将

2020-10-28 10:10:31 565

原创 NMS总结

目录NMS总结一. NMS二. Soft-NMS三. IOU-Guided NMS四. Softer-NMS五. DIOU-NMS六. 总结NMS总结一. NMS目标检测：同一个类别中，以置信度为首选，置信度高的，抑制(删除)周围交集大的置信度低的框。这里直接以Soft-NMS论文中的一幅图为例子：输入：每次输入一个类，类内进行NMS\(B={b_1,...,b_N}\) ：检...

2020-10-27 15:21:00 489

原创 TARGETDROP: A TARGETED REGULARIZATION METHOD FOR CONVOLUTIONAL NEURAL NETWORKS

TARGETDROP: A TARGETED REGULARIZATION METHOD FOR CONVOLUTIONAL NEURAL NETWORKSDense Object Detection一. 论文简介笔者感觉有点水的文章，想着既然看了就做个小记录吧主要做的贡献如下(可能之前有人已提出)：提出一个目标正则化模块二. 模块详解2.1 论文详解文章的出发点？下图...

2020-10-26 14:49:00 202

原创 Generalized Focal Loss: Learning Qualified and Distributed Bounding Boxes for Dense Object Detection

目录Generalized Focal Loss: Learning Qualified and Distributed Bounding Boxes forGeneralized Focal Loss: Learning Qualified and Distributed Bounding Boxes forDense Object Detection一. 论文简介将目标检测Loss和...

2020-10-23 11:50:00 277 1

原创 Group Normalization

Group Normalization一. 论文简介主要做的贡献如下(可能之前有人已提出)：类似BN的一种归一化，使用group进行归一化二. 模块详解2.1 BN的做法设 \(X\) 为输入的 \(batch\) 数据，\(\mu_B、\sigma_B\) 为当前 \(batch\) 的均值和方差，\(running\_u、runnnig\_\sigma\) 为滑动平均(...

2020-10-22 21:35:00 205 3

原创 FCOS: Fully Convolutional One-Stage Object Detection

FCOS: Fully Convolutional One-Stage Object Detection一. 论文简介Anchor-Free文章主要做的贡献如下(可能之前有人已提出)：FPN分阶段回归Center-ness Loss二. 模块详解2.1 论文思路简介论文整体比较简单，直接从头读到尾没有什么障碍，好像Anchor-free的文章都比较简单。下面直接以模块介...

2020-10-19 21:01:00 57

原创 DropBlock: A regularization method for convolutional networks

DropBlock: A regularization method for convolutional networks一. 论文简介正则化卷积层，防止过拟合主要做的贡献如下(可能之前有人已提出)：正则化卷积层的模块(正则化Conv层)，类似dropout(正则化FC层)二. 模块详解2.1 论文思路简介正常的DropOut是对FC层做随机失活，如何对卷积层做随机失活？...

2020-10-19 15:52:00 448

原创 Cross Stage Partial Network(CSPNet)

Cross Stage Partial Network(CSPNet)一. 论文简介降低计算量，同时保持或提升精度主要做的贡献如下(可能之前有人已提出)：提出一种思想，特征融合方式(降低计算量的同时保证精度)二. 模块详解2.1 论文思路简介论文其实非常简单，和shufflenetV2中的InvertedResidual基本差不多，只不过这是一种思想，可以扩展到FPN、De...

2020-10-15 21:19:00 4143

原创 Receptive Field Block Net for Accurate and Fast Object Detection

目录Receptive Field Block Net for Accurate and Fast Object DetectionReceptive Field Block Net for Accurate and Fast Object Detection一. 论文简介用于目标检测，增加感受野。主要做的贡献如下(可能之前有人已提出)：设计一个增大感受野的模块RFB二. 模块...

2020-10-15 18:55:00 308

原创 Towards Accurate One-Stage Object Detection with AP-Loss

Towards Accurate One-Stage Object Detection with AP-Loss一. 论文简介笔者部分不理解，仅记录自己理解部分。解决目标检测(一阶段)样本不均衡问题，统一loss和评价指标直接联系。主要做的贡献如下(可能之前有人已提出)：设计一个AP-Loss(包括前向和后向传播)二. 模块详解2.1 论文思路简介这里以一张图像为例子：...

2020-10-10 18:08:00 157

原创 Disentangled Non-Local Neural Networks

目录Disentangled Non-Local Neural Networks一. 论文简介二. 模块详解2.1 论文思路简介2.2 具体实现2.2.1 理论部分2.2.2 具体实现Disentangled Non-Local Neural Networks一. 论文简介理论(部分感觉不是很合理，不懂大佬思维)和实践相结合的论文，感觉很不错，第一次读很难读懂。解决局部感受野的问题，是上...

2020-09-16 19:17:00 1173 7

原创 Non-local Neural Networks

Non-local Neural Networks一. 论文简介图像上(扩大感受野)，视频序列(临近几帧像素不同的问题联合)，从局部信息到全局信息主要做的贡献如下(可能之前有人已提出)：解决局部感受野，设计一个Block二. 模块详解2.1 Local和Non-LocalLocal和Non-Local都是针对感受野来说的，3*3卷积就代表当前像素的感受野范围为9(8也可以...

2020-09-14 21:06:00 153

原创 Toward fast and accurate human pose estimation via soft-gated skip connections

目录Toward fast and accurate human pose estimation via soft-gated skip connections一. 论文简介二. 模块详解2.1 Soft-Gate模块2.2 Feature融合Toward fast and accurate human pose estimation via soft-gated skip connection...

2020-09-07 19:24:00 528

原创 Rethinking Bottleneck Structure for Efficient Mobile Network Design

Rethinking Bottleneck Structure for Efficient Mobile Network Design一. 论文简介减少模块提取特征时的丢失，增强模块提取特征的能力采用类似hourglass的结构，先降采样后升采样(相对于通道)二. 模块详解2.1 整体结构介绍depth-wise(w/ Relu) + points-wise(W/O Relu...

2020-09-04 17:42:00 191

原创 GhostNet: More Features from Cheap Operations

GhostNet: More Features from Cheap Operations一. 论文简介论文可视化特征图如下所示，目的是找到更多的特征对(Ghost)如何找到？论文意思是保留内在特征(instrinsic feature)，可以获得更多的特征对如何判定？未解释二. 模块详解2.1 整体结构介绍Ghost module先进行正常卷积(代码用的1*1降...

2020-09-04 16:18:00 83 1

原创 SMAP: Single-Shot Multi-Person Absolute 3D Pose Estimation

目录SMAP: Single-Shot Multi-Person Absolute 3D Pose Estimation一. 论文简介二. 模块详解2.1 整体结构介绍SMAP: Single-Shot Multi-Person Absolute 3D Pose Estimation一. 论文简介采用bottom-top的方式进行3D人体姿态检测，出的结果包括：3D root-relate...

2020-09-02 11:42:00 432

原创爬取取百度和Flickr图像

爬取百度和Flickr图像import requestsfrom threading import Threadimport reimport timeimport hashlibclass BaiDu: """ 爬取百度图片 """ def __init__(self, name, page): self.start_time = ...

2020-08-21 11:11:00 230