交通多模态基础模型

检测分类分割全能

首个开源的多任务、多模态交通基础模型，可同时处理检测、分类和分割任务。

Shi, Yifeng · Feng, Lv · Xinliang, Wang · Chunlong, Xia · Shaojie, Li · Shujie, Yang · Teng, Xi · Zhang, Gang

2023

技术优势

一个模型搞定三类任务

同时处理检测、分类和分割，无需为每个任务单独训练模型。

直接开源，拿来就能用

代码和模型权重已公开，可直接下载使用，便于快速集成到现有系统。

应用场景

• 交通监控：用一个模型完成车辆检测、车型分类和道路分割，省去多模型部署。
• 智能交通感知：作为感知底座，处理多模态交通数据，减少对标注数据的依赖。
• 低空飞行器巡检：对航拍图像同时进行目标检测和地物分割，提升巡检效率。
• 自动驾驶感知：处理车载多模态输入，统一输出检测和分割结果，简化感知管线。