OneTrack: Demystifying the Conflict Between Detection and Tracking in End-to-End 3D Trackers (ECCV 2024)

研究介绍:

本文提出了一种解决视觉3D感知中端到端多目标追踪器在检测任务中性能退化的方法。 现有研究趋于在统一模型中同时完成端到端的多目标检测和追踪,但这种共同优化往往导致模型检测能力相对于单纯检测器的大幅下滑。 此前,这一问题常被模糊地归因于不同任务需求的目标特征不兼容,而缺乏明确解释。我们发现,检测和追踪任务的冲突源于正样本分配的部分差异,导致两任务优化过程中的分类梯度部分矛盾。

基于此观察,我们通过部分裁剪在两任务中具有相反样本正负性的目标样本的梯度以修复了两任务在优化过程中的冲突。 提出的OneTrack方法基于完全统一的检测/追踪物体特征表示,在其检测性能等同于单纯检测器的同时,其多目标追踪性能大幅超越前有工作。

图1.分类梯度的反向传播。 在两任务中样本正负性冲突的训练样本的分类梯度被部分裁剪,如(b),以避免梯度冲突
图2.OneTrack训练管线

Updated: 2025-08-24 — 11:08 下午

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

Zhaoxiang Zhang © 2020