多模态DiT材料生成器

图像文本双输入

该生成器可从扭曲或遮挡的材样图像与文本提示中直接生成高质量材质贴图,修正畸变的能力优于现有方法。

Ma, Xiaohe · Deschaintre, Valentin · Haşan, Miloş · Luan, Fujun · 周昆 · 吴鸿智 · Hu, Yiwei

ACM Transactions on Graphics 2025

技术优势

畸变也能生成

即使输入图像中的材样表面扭曲、斜视或部分遮挡,模型也能提取材质特征并重建完整贴图。

文本可控生成

用户可通过文本提示指定期望的材质属性或风格,生成过程受额外语义指导。

多样性提升

相较于先前方法,本模型能生成更多样的材质结果,为创作者提供更丰富的选择。

修正更彻底

对于输入图像中的几何和遮挡畸变,本方法的修正效果优于以往工作。

应用场景