TRACE: 火灾后不可逆损伤下的物体理解与特征恢复

摘要

TRACE 是面向火灾后物体理解的转换感知基准，含 21.4K 个基于真实图像的合成场景与物体级完好—退化配对演化，覆盖 189 个类别、499 个物体身份，定义退化物体检测、完好状态恢复与检索、原始材质恢复、完好描述生成、功能推理五项任务。现有模型随退化加剧急剧下降：RF-DETR 的 mAP 相对下降 71%，InternVL3.5 检索 R@1 从 93.85 降至 28.11。作者提出即插即用的 Feature Recovery Module (FRM)，在宿主模型冻结条件下仅用配对特征监督，把退化编码器特征映射为完好对齐表示，提升场景级检测、CLIP/SigLIP2 特征恢复及四项物体级 VLM 任务，平均相对增益为检索 12.5%、材质恢复 20.1%、描述生成 13.2%、功能推理 12.4%，且退化越重增益越大。