不插帧也流畅
视频隐式神经表示首次用帧索引对齐中间特征,质速双升且能直接编解码。
Xinjie, Zhang · Yang, Ren · He, Dailan · Xingtong, Ge · Tongda, Xu · 王燕 · Qin, Hongwei · Zhang, Jun
2024
同一个条件解码器结构同时支持重建、修复、插帧与压缩,无需为不同任务重新训练或切换模型。
帧索引作为先验引导特征对齐,减少了训练过程中的特征漂移,使模型更快达到可用精度。
时间感知仿射变换与高频保持损失共同保留了视频中的细节与纹理,重建质量优于基线。