统一视频重建模型

跨相机快门通用

通过统一建模和共享参数，一个模型即可处理滚动快门和全局快门相机的视频重建，无需修改架构。

樊斌 · Zhexiong, Wan · 施柏鑫 · 许超 · 戴玉超

IEEE Transactions on Image Processing 2024

技术优势

不用改架构

快门适配器无参数，可直接嵌入现有视频重建架构，无需重新设计网络。

跨快门直接能用

预训练模型不经过任何微调就能在未见过的快门类型上取得合理性能。

微调就刷新纪录

微调后性能超越快门专用方法，且保持强泛化能力。

应用场景

• 视频处理：统一处理不同快门视频，省去为每种快门单独开发和维护模型。
• 消费级相机：直接适配手机和相机中常见的滚动快门，提升视频重建效果。
• 图像传感器：屏蔽快门差异，让重建算法不依赖传感器具体快门实现。