跨类别知识迁移网络

零样本点云重建

面向零样本单视图点云重建，通过共享知识库从已知类别挖掘可迁移知识，显著提升对新类别的重建能力。

Lai, Lvlong · Jian, Chen · 吴庆耀

IEEE Transactions on Multimedia 2023

技术优势

新类别也能重建

通过从已知类别挖掘可迁移知识，模型在零样本设置下能有效重建训练中未见过的新类别物体。

知识库可迁移

维护一个知识库，从已知类别中挖掘可迁移知识，帮助重建新类别，实现跨类别知识共享。

重建质量更高

通过共享知识库进行点云自编码器辅助学习，使知识库收集更丰富的三维点云知识，从而提升重建性能。

应用场景

• 三维视觉：为三维视觉任务提供零样本单视图重建能力，可直接从单张图像生成新类别物体的点云。
• 机器人感知：机器人可据此从单目图像感知未知物体的三维形状，无需事先训练该类物体。
• 逆向工程：从单张照片快速重建新零件的点云模型，辅助逆向工程中的数字化流程。
• 建筑信息建模：对未建模的新构件从单视图生成三维点云，加速BIM模型创建。