双向递归视频恢复网络

多任务PSNR提升1–4 dB

一种同时利用过去与未来帧信息的RNN单元,配合时空注意力特征融合模块,以更低的计算复杂度统一处理运动模糊、湍流、噪声与低分辨率等多种视频退化。

Yadong, Wang · 白相志

Pattern Recognition 2023

参数信息

PSNR提升
1–4 dB
测试视频数量
35666
测试帧数量
515774

技术优势

统一处理多种退化

同一个网络结构可以处理运动模糊、湍流、噪声和低分辨率四种不同退化,无需为每种任务单独设计模型。

同时利用前后帧信息

设计的RNN单元让隐藏状态双向流动,从而在提取特征时融合过去和未来的时间信息,提升当前帧恢复质量。

计算复杂度更低

与最先进方法相比,计算复杂度降低数倍,在相同效果下需要的计算资源更少。

应用场景