视频超分辨率中什么最重要?为什么要帧对齐?

插值法:丢失高频信息
SR本质:恢复高频


答案:帧对齐和对时序信息的利用才是研究的关键
BasicVSR认为

传播分类

为什么帧对齐:我们希望t+1帧中运动物体的位置大致回到t帧的位置,从而让两针进行信息上的叠加

光流法
08:08

09:57

利用3D卷积网络自适应性自动捕获运动变化(消耗内存、性能)
10:40

性能不稳定
11:40

12:44

13:49
把3维模式运算用2维CNN做,可以节约计算开销
15:36
特征图之间的聚合

15:57

16:03

17:08