网络结构:(主要是对CRL的改进

主要贡献:

1 将立体匹配的所有步骤合并到一个网络来改善准确性和有效性

2 使用特征恒量的用于视差优化的子网络

三个阶段:特征提取-> 代价计算、聚合和视差估计-> 计算特征恒量用于最后视差调优

特征恒量:特征相关和重构误差  紫色块和红色块

前面紫色块:粗略的较大范围的一致性

后面紫色块:精细的较小范围的一致性

(correlation layer:相关的计算等价于匹配代价,相关值越低匹配代价越高)

流程:

1  输入图像先提取多尺度的特征,左右图像的共享权重提取的特征用于视差估计和视差调优。

2  correlation layer且级联左图特征,希望提供低级语义信息,视差估计采用了encoder-decoder结构,采取了一些跳跃连接。

[绿色块为初始视差估计,初始视差图会存在深度不连续获取异常点]

3  用特征恒量进行调优:特征恒量是在不同视差左右特征的一致性,正确的视差会得到较大的相关结果。重建损失是根据初始视差图,将右图warp到左图,合成的左图和原左图计算一个误差,误差越大则初始视差估计越大。

初始视差 + 重建视差 + 左图特征 先级联特征相关,再加上绿色的初始视差估计得到最终的视差结果。

可多次迭代利用好视差优化模块,结合残差和初始视差得到的最终视差作为下一次迭代的初始视差,送入网络再次调优。

论文阅读《Learning for Disparity Estimation through Feature Constancy》相关推荐

  1. 《基于卷积神经网络的深度迁移学习,用于燃气轮机燃烧室的故障检测》论文阅读

    目录 突出 抽象 引言 1.1动机 1.2文献综述获得的结论 1.3贡献 1.4组织 2方法 2.1燃汽轮机组故障知识共享 2.2迁移学习 2.3 基于卷积神经网络的深度迁移学习 2.4用于燃气轮机燃 ...

  2. 基于卷积神经网络和投票机制的三维模型分类与检索 2019 论文笔记

    作者:白静 计算机辅助设计与图形学学报 1.解决的问题 由于三维模型投影得到的视图是由不同视点得到,具有相对独立性,这种像素级的融合运算并没有直接的物理或者几何意义,更有可能造成图像有益信息淹没和混淆 ...

  3. TextCNN——基于卷积神经网络的文本分类学习

    1.CNN基础内容 CNN的全称是Convolutional Neural Network,是一种前馈神经网络.由一个或多个卷积层.池化层以及顶部的全连接层组成,在图像处理领域表现出色. 本文主要学习 ...

  4. 读懂深度迁移学习,看这文就够了 | 赠书

    百度前首席科学家.斯坦福大学副教授吴恩达(Andrew Ng)曾经说过:迁移学习将是继监督学习之后的下一个促使机器学习成功商业化的驱动力. 本文选自<深度学习500问:AI工程师面试宝典> ...

  5. 一种基于卷积神经网络的图像去雾研究-含matlab代码

    目录 一.绪论 二.去雾卷积网络 2.1 特征提取 2.2 多尺度映射 2.3 局部均值 2.4 非线性回归 三.实验与分析 四.Matlab代码获取 一.绪论 雾是一种常见的大气现象,空气中悬浮的水 ...

  6. 机械臂论文笔记(一)【基于卷积神经网络的二指机械手 抓取姿态生成研究 】

    基于卷积神经网络的二指机械手 抓取姿态生成研究 论文下载 摘要 第1章 绪论 1.1 抓取生成国内外研究现状 1.1.1已知物体抓取生成 1.1.2相似物体抓取生成 1.1.3 未知物体抓取生成 1. ...

  7. 毕业设计 - 基于卷积神经网络的乳腺癌分类 深度学习 医学图像

    文章目录 1 前言 2 前言 3 数据集 3.1 良性样本 3.2 病变样本 4 开发环境 5 代码实现 5.1 实现流程 5.2 部分代码实现 5.2.1 导入库 5.2.2 图像加载 5.2.3 ...

  8. 基于卷积神经网络与迁移学习的油茶病害图像识别

    基于卷积神经网络与迁移学习的油茶病害图像识别 1.研究思路 利用深度卷积神经网络强大的特征学习和特征表达能力来自动学习油茶病害特征,并借助迁移学习方法将AlexNet模型在ImageNet图像数据集上 ...

  9. Python深度学习实例--基于卷积神经网络的小型数据处理(猫狗分类)

    Python深度学习实例--基于卷积神经网络的小型数据处理(猫狗分类) 1.卷积神经网络 1.1卷积神经网络简介 1.2卷积运算 1.3 深度学习与小数据问题的相关性 2.下载数据 2.1下载原始数据 ...

  10. 基于卷积神经网络实现图片风格的迁移 1

    卷积神经网络详解 一.实验介绍 1.1 实验内容 Prisma 是最近很火的一款APP,它能够将一张普通的图像转换成各种艺术风格的图像.本课程基于卷积神经网络,使用Caffe框架,探讨图片风格迁移背后 ...

最新文章

  1. 【Python游戏】推箱子—老少皆宜的益智游戏,看你能过几关?
  2. linux nas解决方案_阿里产品总监:四大 Linux 支持的 NAS 解决方案
  3. css img 适配尺寸_CSS容易使人蒙圈的几个经典问题
  4. 剑指offer——面试题38:数字在排序数组中出现的次数
  5. Mysql 报错:Unknown collation: ‘utf8mb4_0900_ai_ci‘
  6. 数据结构学习篇(一)---大纲、简介、作用
  7. 解决 Win11 开机ctfmon.exe不能自启
  8. 使用 SoundSource 取代Mac系统内置的音量控制器
  9. Python爬虫实现网页自动刷票
  10. 现代笑话二则2 木子家创作
  11. sketch导出html可以跳转,Sketch导入、导出功能说明及技巧
  12. html 单元格被撑开_表格单元格td设置宽度无效始终有内部的内容撑开
  13. RabbitMQ简介以及AMQP协议
  14. Python 趣味百题
  15. JS中的DOM与BOM
  16. 用尘埃粒子计数器对高效过滤器检测检漏方法怎样?
  17. 弄底层基础的东西往往慢,枯燥,要慢慢磨
  18. IP和Soc的概念、安全设计、验证和调试
  19. idesk卸载教程_【亲测可行】Autodesk 卸载工具,一键完全彻底卸载删除autodesk软件专门卸载工具...
  20. cesium鼠标移入移出实体显示提示框

热门文章

  1. 港股中的老千,千万别碰!
  2. 物联网应用平台开发——项目总结报告
  3. python调用短信宝API发送短信(附python代码 易理解)
  4. STM32F103移植uCOS-III
  5. jboss eap mysql_JBoss EAP 7概述
  6. java金蝶星空云金蝶Java 对接 金蝶云星空 接口 对接 金蝶API 对接 金蝶 接口 解决 会话失效 问题 会话已失效,请重新登录
  7. 迷你播放器--第一阶段(2)--退出时自动最小化(不是关闭),增加当前播放曲目的跑马灯效果
  8. QQ音乐for Mac 已经登陆MAC OSX
  9. 无分类编址(超网)中的网络前缀
  10. 控制科学与工程(自动化)保研经验【2】——南开、同济篇