火災後物體理解的特徵恢復技術
為何重要
TRACE 基準為災難檢測領域提供了從嚴重退化穩健性切入的評估標準。FRM 展示了「Plug-and-play」修復模組的巨大價值,讓開發者能在不微調龐大基礎模型的前提下,顯著提升複雜場景下的模型表現,這種高效能增強路徑更符合產業實作成本考量。
火災後物體的幾何結構與材質常發生不可逆變化,導致標準電腦視覺模型失效。研究團隊提出 TRACE 基準,包含 21.4K 張實景合成場景與 189 種類別,並定義五項檢測與還原任務。在嚴重損壞情境下,RF-DETR 的 mAP 銳減 71%,InternVL3.5 的 R@1 則從 93.85 跌至 28.11。針對此問題,團隊提出 Feature Recovery Module (FRM),在不凍結主機模型下,顯著提升了檢索(+12.5%)、材質還原(+20.1%)與描述生成(+13.2%)等指標。