ZMFF: Zero-shot multi-focus image fusion

(ZMFF: Zero-shot 多聚焦图像融合)

(本论文的先导片:ZERO-SHOT MULTI-FOCUS IMAGE FUSION)

这是我们之前的扩展工作。在ZMFF,我们做一些改动和改进相比原来的框架。首先,用源图像代替深度图像先验网络(INet)的输入噪声,使训练过程更加稳定。该方法能够为INet提供最有价值的指导信息,对清晰融合图像的先验信息进行建模,从而提高了融合图像的性能。其次,我们使用深度掩模先验网络(mask prior networks (MNet))来估计每个源图像的对应聚焦图,而不是仅估计一个掩模。有了这个设计,我们可以很容易地扩展我们的框架,以适应情况下有两个以上的源图像,并获得更好的性能。最后, 我们在合成和真实的MFF数据集上进行了大量的实验,消融研究和相应的详细分析,有效地证明了所有这些网络重构大大提高了IMNet的通用性和灵活性。

相关工作

Deep image prior(DIP)

最近,Ulyanov等人提出的深度图像先验(DIP),使用一个精心设计的“hour-glass”生成器来捕捉低级图像统计,表明图像先验不一定需要从大规模的数据集。相反,深层网络的结构也可以捕获输入图像的统计特性的深之前解决一些标准低层次的图像恢复问题(如图像超分辨率、图像去噪、图像完成,等等)没有任何训练数据。最近,研究基于这项工作取得了很大进展领域的图像恢复。Gandelsman等人提出了基于耦合DIP的图像分解任务的通用框架,Ren等人将DIP应用于图像去模糊,并获得了视觉上有利的结果。Uezato等人提出使用类似网络的编码器-解码器来利用引导图像的多尺度特征,并使用深度解码器来生成输出图像。更进一步,深度生成先验(DGP)提出了一种通过在大规模自然图像数据集上训练的生成对抗网络(GAN)来捕获丰富图像先验的有效方法。一般来说,在真实数据集极其缺乏的情况下,深度图像先验确实可以提供很大帮助。

方法

MFF problem formulation

MFF可以看作是源图像

Zero-sho原先的升级版:hourglass网络:U-Net相关推荐

  1. Hourglass网络

    1. 堆叠hourglass网络  https://www.cnblogs.com/darkknightzh/p/11486185.html 2. hourglassnet网络解析 https://b ...

  2. 堆叠hourglass网络

    本文目录 目录 1. 简介 2. stacked hourglass 3. hourglass 4. 上采样myUpsample 5. 残差模块 6. conv 7. ConvBlock 1. 简介 ...

  3. SSHFD:IBM提出的单阶段人体跌倒检测网络

    点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 这篇文章是由IBM研究院发表的有关于老人跌倒识别的文章.整体网络比 ...

  4. mc服务器右上角信号格,手机右上角的网络信号标识是什么意思?

    E指EDGE网络,属2.75G. 移动卡的手机图标有这三种 G,E,T或者(H) 移动用户: G:全称: gprs既传输速率理论的峰值为114Kbps,这是早其的 无线网络传输方式. E:全称: ED ...

  5. 文本识别新王者CharNet:卷积字符网络

    本文解读了ICCV 2019 论文 Convolutional Character Networks,该算法CharNet在多个文本检测识别数据集取得了SOTA,代码已开源,地址在本文留言区. htt ...

  6. 虚拟化网络与云网关打通的解决方案

    01 背景 随着云计算与网络技术的不断发展,公司内越来越多的业务有着上云的需求.我们底层虚拟化团队基于社区openstack版本提供云服务,借助社区的力量能够快速实现一套满足基本功能的云平台.但原生n ...

  7. 论文阅读 Hourglass:Stacked Hourglass Networks for Human Pose Estimation

    摘要   本文介绍了一种新的卷积网络结构.为了最好的捕捉与身体相关的各种空间关系,所有尺度的特征都被处理和整合.我们展示了重复的自底向上.自顶向下的处理过程与中间监督结构一起使用是如何有效改善网络性能 ...

  8. 某二级支行网络的设计与实现

    某二级支行网络的设计与实现 绪论 背景概述 银行网络发展现状 银行网络发展趋势 总体设计方案 需求分析 设计目标 设计原则 总体拓扑图 拓扑说明 IP地址及VLAN规划 各功能子区之间IP地址及VLA ...

  9. 移动手机信号的各种标识代表的网络

    手机信号G是指GPRS,是2.5G网络 手机信号E是指EDGE网络,属2.75G. 手机信号3G是指普通3G网络,速度在2-7M. 手机信号H是指3G的升级版hsdpa网络,是3.5G,速度可达14. ...

最新文章

  1. 网页中插入VLC播放器播放rtsp视频流步骤
  2. 视觉三维重建的关键技术及实现思路汇总
  3. 为什么 StackOverflow 上的代码片段会摧毁你的项目?
  4. python中bind的用法_JS中的apply、call和bind的用法和区别
  5. easyScholar——文献数据库插件
  6. Python简明教程之后应该学什么?
  7. APP自动化-显示等待/强制等待/命令等待
  8. qq微信连不上服务器6,手机wifi连接上了只有QQ微信能联网其他软件都上不了网是什么原因...
  9. 百度、火星(高德)、84坐标系相互转换
  10. ps批量修改图片尺寸
  11. 使用Python做饼图
  12. 嵌入式Linux应用与开发——内核配置选项含Linux最新版本kernel下载后续操作
  13. qt 移动文件夹到另一目录下
  14. 滁州市化工厂人员定位系统——苏州新导智能科技,技术精湛,定位精确
  15. 获取新榜微信公众号指数信息,并服务器上部署
  16. 计算机不能进入桌面,电脑开机后无法进入桌面怎么办?
  17. ELK之logstash
  18. 一个Python里最好的分词库!
  19. wfp(微软)对付flash
  20. 考研数据结构中的经典算法(总归纳)

热门文章

  1. 计算机网络如何计算有效ip地址个数,如何计算到底有多少个IP地址及IP地址的种类及取值范围...
  2. 互联网金融: 十大信息安全风险与十大最佳安全实践
  3. 中国区首发 | 规模化敏捷RTE(企业级敏捷教练/发布火车工程师)国际认证课程
  4. 笔记本开机后桌面图标变乱
  5. Java培训:为什么java如此流行且经久不衰?
  6. 第二届电气、机械与计算机工程国际学术会议(ICEMCE2018)简单记录
  7. 简单用Python+OpenCv实现AI人脸识别--(3)—训练人脸识别模型
  8. 深度学习auc_test auc 和测试集auc 差距非常大
  9. bogomips 骁龙820_解读|手机CPU综合性能排行:骁龙820吊打一切
  10. oracle强制拉库跳过recovery,学习笔记:Oracle坏块 数据库recover恢复时遇到坏块的解决思路案例...