深度参考帧生成网络

编码效率提升 5.22%

利用光流精确预测运动,生成更可靠的参考帧。

Jianghao, Jia · Yuantong, Zhang · Zhu, Han · 陈震中 · Liu, Zizheng · Xu, Xiaozhong · Liu, Shan

IEEE Transactions on Circuits and Systems for Video Technology 2023

参数信息

分量编码效率提升
5.22 %
配置下提升
3.61 %
配置下提升
3.83 %

技术优势

参考帧更可靠

利用光流网络从重建帧合成与当前帧相似的参考图像,为运动估计和补偿提供更接近真实值的候选,减少预测残差。

双向和单向预测用一个网络搞定

提出光流重组策略,使同一网络架构既能处理双向预测也能处理单向预测,简化部署,无需为每种模式单独训练或存储模型。

直接兼容现有VVC编码器

通过规范性地修改时间运动矢量预测,将生成帧无缝插入参考帧列表,已集成到参考软件VTM-15.0中,无需改动编码器整体架构。

应用场景