总结我的一些理解和看法:19年提出的TBC-Net算法将深度学习应用到了红外弱小目标检测领域,网络轻量级,并能在NVIDIA Jetson AGX Xavier嵌入式开发板上实现实时性。
TBC包含TEM和SCM,最厉害的点在利用SCM对图像中存在目标的个数(0 1 2 3)进行分类,训练TEM时(预先训练好的SCM参数不变)损失函数增加了一项fC(也就是文章所提的语义约束项),增添了语义信息。

网络结构

涉及到的图像表示:

1.target extraction module (TEM)

TEM模块是一个轻量级的图像分割网络。

如图,TEM包括下采样(卷积+最大池化)、上采样(最邻近插值+卷积)、相同尺度下的feature map通过残差连接融合。

其中L(卷积网络层数)和BC( The number of channels that the input layer expands is called base channels)两个参数设定影响网络性能, 文中When BC = 16 and L = 5, the network performance is good enough.
TEM输出:

2. Semantic Constraint Module(SCM)

SCM模块是一个分类网络,用fT’作为输入,根据图像中的目标个数进行分类(0 1 2 3——没有目标、目标个数1、……)。

3.Segmentation and Detection

阈值分割:

损失函数设置(重点!)和训练方法

1.训练方法

2.损失函数设置

  • Target Extraction Loss:The extracted target image fT0should be as close as possible to the ground truth fT .

  • Background Suppression Loss:利用sparse constraint

  • Classification Loss:交叉熵损失函数用于分类

  • Total loss:

3.合成数据:

简单概括:文中使用了六个真实序列,利用某种方法合成了目标个数为0-3的小目标数据集。

网络评价指标

红外弱小目标检测之TBC-Net相关推荐

  1. 2021-03-22 基于视觉显著性的红外弱小目标检测-王警予 |笔记

    基于视觉显著性的红外弱小目标检测-王警予 | 阅读笔记 第四章 基于稀疏低秩分解的红外弱小目标检测 key 视觉注意力机制 稀疏低秩分解 针对人类视觉显著性是基于人类视觉注意的特点,将红外图像中显著性 ...

  2. 弱小目标检测跟踪算法研究(5) 基于顶帽变换(Top_hat)算法的红外弱小目标检测之背景抑制

    基于顶帽变换(Top_hat)算法的红外弱小目标检测之背景抑制 1. 前言 2. 顶帽变换(Top_hat)算法 3. Matlab仿真 4. 小结 1. 前言 红外图像中的弱小目标,目标属性包涵&q ...

  3. 弱小目标检测跟踪算法研究(7) 基于简单平滑滤波算法的红外弱小目标检测之背景抑制

    基于简单平滑滤波算法的红外弱小目标检测之背景抑制 1. 前言 2. 平滑滤波算法 3. Matlab仿真 4. 小结 1. 前言 红外图像中的弱小目标,目标属性包涵"弱"和&quo ...

  4. 《融合视觉显著性和局部熵的红外弱小目标检测》论文复现

    1.复现论文概要 复现的论文为<融合视觉显著性和局部熵的红外弱小目标检测>(赵鹏鹏,李庶中等,中国光学2022,http://www.chineseoptics.net.cn/cn/art ...

  5. 弱小目标检测跟踪算法研究(4) 基于双边滤波(BF)的红外弱小目标检测之背景抑制Opencv

    基于双边滤波(BF)的红外弱小目标检测之背景抑制Opencv 1. 前言 2. 双边滤波算法 3. Opencv实例 4. 小结 1. 前言 红外图像中的弱小目标,目标属性包涵"弱" ...

  6. 弱小目标检测跟踪算法研究(4) 基于双边滤波(BF)的红外弱小目标检测之背景抑制

    基于双边滤波(BF)的红外弱小目标检测之背景抑制 1. 前言 2. 双边滤波算法 3. Matlab仿真 4. 小结 1. 前言 红外图像中的弱小目标,目标属性包涵"弱"和&quo ...

  7. 红外弱小目标检测:LoG尺度空间

    一.目的 界定红外小目标的尺寸,拒绝多尺度重复计算,算法加速. 利用 LoG尺度空间进行红外弱小目标检测的基本思想如下: 1)当 LoG算子的中心坐标和目标中心坐标重合时,红外弱小目标在 LoG尺度空 ...

  8. 弱小目标检测跟踪算法研究(5) 基于顶帽变换(Top_hat)算法的红外弱小目标检测之背景抑制Opencv

    基于顶帽变换(Top_hat)算法的红外弱小目标检测之背景抑制Opencv 1. 前言 2. 顶帽变换(Top_hat)算法 3. Opencv实例 4. 小结 1. 前言 红外图像中的弱小目标,目标 ...

  9. 红外弱小目标检测算法综述

    红外弱小目标检测算法综述 ------ 参考文献: 李俊宏,张萍,王晓玮,黄世泽.红外弱小目标检测算法综述[J].中国图象图形学报,2020,25(09):1739-1753. ------ 依据是否 ...

最新文章

  1. mysql killed进程不结束_php和mysql连接方式(短 长 池)
  2. SqlServer性能优化 自定义动化性能收集(四)
  3. SpringBoot 集成Mybatis
  4. 【错误记录】GitHub 网站和仓库无法访问 ( 域名重定向 | 检查 C:\Windows\System32\drivers\etc\hosts 配置文件中的 GitHub 地址域名配置 )
  5. 几种在Linux下查询外网IP的办法
  6. C++main函数的参数介绍以及如何在main函数前执行一段代码
  7. asp.net 导出Excel 设置格式
  8. mongodb分布式集群搭建手记
  9. 1.C#WinForm基础制作简单计算器
  10. 以CSS方式提高您网站的速度
  11. pandas_计算最大回撤
  12. MySQL备份文件.ibd、.frm、.MYD、.MYI的恢复教程
  13. 建设一个SaaS平台需要知道什么,做什么(附多图)
  14. ECharts 柱状图上显示数据,并自定义图标
  15. LeetCode知识点总结 - 997
  16. 修改手机服务器密码忘了怎么办啊,交管服务平台忘了密码而且换了手机号
  17. Microsoft SQL Server2000 四个版本的区别及下载地址
  18. 人生建议:千万不要考ACCA!看完这篇文章你都知道了!
  19. 深度学习(DeepLearning)最最基础的科普ppt
  20. 五十步笑百步翻译软件测试,文言文五十步笑百步原文翻译

热门文章

  1. 【对讲机的那点事】玩对讲机你知道那些因素影响对讲机的距离吗?
  2. 基于组合优化的出租车订单调度模型
  3. 量化投资八大常见误区
  4. 《墨攻》还真不是盖的!!
  5. pycharm:无法加载文件activate.ps1,因为在此系统上禁止运行脚本,Windows10系统
  6. 海尔H40E10刷机教程(经验分享)
  7. android fence机制,Android中的GraphicBuffer同步機制-Fence
  8. 欧姆龙CP1E通讯详解
  9. 以“学生”、“成绩”表为数据源,使用 SQL 视图创建一个名为“学生不及格课程数”统计查询,显示字段为:学号、姓名、不及格门数。
  10. 一个JavaScript贷款计算器