传统 optical-flow-based solutions 当 flow estimation 失败的时候,就变得非常困难;而最新的基于神经网络的方法直接预测像素值,经常产生模糊的结果。

通过训练一个神经网络,来学习去合成视频帧,通过 flowing pixel values from existing ones, 我们称之为:deep voxel flow. 所提出的方法不需要人类监督,任何video都可以用于训练,通过丢掉,并且预测现有的frames。

本文所涉及到的两个重要的部分,一个是 video interporation;一个是 video extrapolation

本文的目标是结合这两种方法的优势。作者有两个方面的观察:

  1. 大部分像素块都是近邻图像的直接copy,而直接copy pixels 比模拟产生他们,要简单的多。

  2. 端到端训练的神经网络是一个非常有效的工具。对于 video interpolation 和 extrapolation 来说,更是如此,因为训练可以是无限的;任何video都可以用于训练一个无监督的神经网络。

利用现有的video进行无监督的学习。我们扔掉 frames,然后利用损失函数来衡量 产生的像素值 和 gt 像素值之间的差距。

2017-ICCV-(DVF)Video Frame Synthesis using Deep Voxel Flow相关推荐

  1. 视频插帧(Video Frame interpolation)论文及源码

    视频插帧论文列表(含Code) 蓝色突出表示热门方法 CCF A AAAI 2019 CyclicGen:Deep Video Frame Interpolation Using Cyclic Fra ...

  2. RIFE: Real-Time Intermediate Flow Estimation for Video Frame Interpolation——精读笔记

    RIFE: Real-Time Intermediate Flow Estimation for Video Frame Interpolation 原文:https://arxiv.org/pdf/ ...

  3. 【无标题】XVFI: eXtreme Video Frame Interpolation (ICCV oral)

    XVFI: eXtreme Video Frame Interpolation (ICCV oral) 这篇文章做了什么? 出发点 贡献点 XVFI 模型 BiOF-I BiOF-T 这篇文章做了什么 ...

  4. 详解插帧算法DAIN论文和代码(Depth-Aware Video Frame Interpolation)

    Project : https://sites.google.com/view/wenbobao/dain Paper: https://arxiv.org/abs/1904.00830 Code: ...

  5. 2019-CVPR-上交-(DAIN)Depth-Aware Video Frame Interpolation

    可以把30fps的进一步插帧到480fps(16倍插帧) 英伟达的Super SloMo只用在了真实拍摄的视频上,而这项研究却可以扩展到常见的任何类型视频:电影.定格动画. 动画卡通等等. DAIN的 ...

  6. CVPR2019|Depth-Aware Video Frame Interpolation【论文阅读笔记】

    CVPR2019|Depth-Aware Video Frame Interpolation[论文阅读笔记] 作者 相关链接 1.前言 2.介绍 3.算法 4.实验 作者 Wenbo Bao, Wei ...

  7. 论文阅读——S. Lee, et al., Beyond Natural Motion: Exploring Discontinuity for Video Frame Interpolation

    S. Lee, et al., Beyond Natural Motion: Exploring Discontinuity for Video Frame Interpolation 摘要 1. 介 ...

  8. 视频插值--Video Frame Interpolation via Adaptive Separable Convolution

    Video Frame Interpolation via Adaptive Separable Convolution ICCV2017 https://github.com/sniklaus/py ...

  9. 视频插帧--Video Frame Interpolation via Adaptive Convolution

    Video Frame Interpolation via Adaptive Convolution CVPR2017 http://web.cecs.pdx.edu/~fliu/project/ad ...

最新文章

  1. Tensorflow常用函数说明(一)
  2. css字体样式 1204
  3. 【Level 08】U08 Positive Attitude L5 Satisfy your need to know
  4. centos7安装浏览器
  5. linux ios文件是否存在,技术|如何在 Linux 中验证 ISO 镜像
  6. 44.Linux/Unix 系统编程手册(下) -- 管道和 FIFO
  7. py-R-FCN安装记录
  8. 给SLAM小车添加 手柄遥控 功能 罗技F710和PS4 手柄
  9. 知网文献最新下载技巧
  10. 服务器主板支持什么cpu,怎么看主板支持什么CPU(主板和cpu兼容搭配知识)
  11. 程序员的奋斗史(三十三)——人在囧途之应聘篇(三)
  12. php 获取上周日期_php获取本周以及上周 开始 和结束的日期
  13. 计算机检测不到双显示器,win10装双屏检测不到另一显示器怎么解决
  14. python常用的量化金融库
  15. ETL工程师系列课程_Oracle数据库
  16. Python-- error: [WinError 3] 系统找不到指定的路径。: 'C:\\Program Files (x86)\\Microsoft Visual Studio 14.0\\VC
  17. 此语言无法安装在此计算机,[修复]无法在Windows 10中安装语言包 | MOS86
  18. iOS【UI之QQ聊天布局_键盘通知实现自动弹出隐藏_自动回复】
  19. Single Image Reflection Removal
  20. 利用 OpenCC 工具进行文字的简繁转换

热门文章

  1. UE编辑器:复制粘贴出错
  2. 申小雨命案审理延期至3月5日 警方将翻译嫌犯口供
  3. matlab 音调_音调策略的问题
  4. redis第一章:redis原理,使用背景,下载安装
  5. 全国计算机一级考试操作题mos,计算机二级MOSffice考试word题型汇总附答案.docx
  6. 华为麒麟810芯片鸿蒙,华为自研麒麟810实体芯片首曝光 传说中的“鸿蒙”要来了?...
  7. sorl 查询 跟 mybatisboot集成sorl
  8. iOS APP启动图片适配iPhoneX
  9. jsapi支付java_Java通过JsApi方式实现微信支付.doc
  10. java方法设置切点_如何通过自定义注解实现AOP切点定义