SteadyFlow: Spatially Smooth Optical Flow for Video Stabilization

2024-05-14 16:16:01

我们通过光流初始化staedyFlow，然后通过时空分析丢弃不连续运动，并通过运动补偿填充缺失区域。

通过时空分析不连续的光流区域

（1）：空间分析：
章节4.2：In the spatial domain, we threshold the gradient magnitude of raw optical flow to identify discontinuous regions. Once the magnitude at p is larger than the threshold (0.1 in our experiment), p is considered as ’outlier’。

检查原始光流的梯度大小，当梯度>0.1时，则认为p是外点。这种办法只能检测到移动目标的边界。因此，我们需要时间分析来定位目标
（2）时间分析：
首先，定义ct§ = ∑t ut§,其中p表示图像的某个像素pixel，ut§表示像素p在时间为t的帧的位移，ct§表示从0到t时间内的位移矢量和。如果没有运动的区域，位移矢量和应该是连续的。在发生运动的区域，位移矢量和是快速变化的。
所以，通过定义Mt来获得外点p.

通过运动补偿填充缺失区域

参考:
[14] Content-preserving warps for 3d video stabilization
[15] Subspace video stabilization
[17] Video stabilization with a depth camera

[14]

迭代优化的步骤：

At each iteration, the first step is to exclude outliers and fill in the missing regions of the input SteadyFlow according to the mask Mt. The motion completion is described in Section 4.3. The second step is to stabilize the SteadyFlow, which will be described in Section 5. In the third step, the stabilized SteadyFlow is then used to further refine Mt by temporal analysis of discontinuous flow vectors as described in Section 4.2.

SteadyFlow: Spatially Smooth Optical Flow for Video Stabilization相关推荐

读书笔记22：Optical Flow Guided Feature: A Fast and Robust Motion Representation for Video Action Recogni
文章题目:Optical Flow Guided Feature: A Fast and Robust Motion Representation for Video Action Recogniti ...
Python+OpenCV：Optical Flow（光流）
Python+OpenCV:Optical Flow(光流) 理论 Optical flow is the pattern of apparent motion of image objects be ...
论文阅读：RAFT: Recurrent All-Pairs Field Transforms for Optical Flow
文章目录 1. 论文总述 2. RAFT结构被传统算法所启发 3. RAFT的三个重大创新点 4. 光流算法需要解决的难点 5. 传统光流算法简介及缺点 6. Fast DIS 有可能存在的问题 7. ...
opencv光流Optical Flow
光流Optical Flow 现在四轴飞行器越来越火,如何在室内进行定位呢?不同于传统四轴的姿态控制,电机驱动,室外定位,都有了一套完整的方案,室内定位还是没有完全成熟.,目前大四轴可以利用的GPS定 ...
光流 | OpenCV3实现LK Optical Flow（代码类）
github:https://github.com/MichaelBeechan CSDN:https://blog.csdn.net/u011344545 ===================== ...
视觉里程计 | OF-VO：Robust and Efficient Stereo Visual Odometry Using Points and Feature Optical Flow
博主github:https://github.com/MichaelBeechan 博主CSDN:https://blog.csdn.net/u011344545 代码执行环境:Windows 8 ...
opencv求两张图像光流_光流（optical flow）和openCV中实现
转载请注明出处! ! ! 光流(optical flow)和openCV中实现光流的概念: 是Gibson在1950年首先提出来的. 它是空间运动物体在观察成像平面上的像素运动的瞬时速度.是利用图像 ...
Review on Optical Flow Research
Overview What is Optical Flow? 光流(optic flow)是什么呢?名字很专业,感觉很陌生,但本质上,我们是最熟悉不过的了.因为这种视觉现象我们每天都在经历.从本质上说 ...
HALCON：Optical Flow（光流法）
HALCON:Optical Flow(光流法) 光流法基本原理光流概念由Gibson在1950年首先提出来,它是一种简单实用的图像运动表达方式,通常定义为一个图像序列中图像亮度模式的表观运动,即空 ...

最新文章

热门文章