根据任务复杂度，目标跟踪标注主要分为单目标跟踪与多目标跟踪两大类。单目标跟踪要求在视频起始帧给定目标后，在后续帧中持续跟踪该特定目标。多目标跟踪则更为复杂，需要在视频中同时跟踪多个目标，并正确处理目标的出现、消失、交叉、遮挡等情形，维持准确的身份标识。

其技术难点集中体现在以下几个方面： 

1.目标身份一致性维持：当目标被严重遮挡后重现、或多个目标外观相似且运动轨迹交叉时，如何准确判断其身份连续性，是标注的最大挑战，直接关系到MOTA、IDF1等核心评价指标。 

2.形变与尺度变化的适应：目标在运动过程中可能发生非刚性形变（如行人行走）或尺度剧烈变化（如车辆由远及近），标注框需要紧密贴合目标，这对标注精度提出了极高要求。 

3.密集与遮挡场景的处理：在人群密集或交通拥堵场景中，目标相互遮挡频繁，标注者需要根据可见部分进行合理推断，确保标注的合理性与一致性。

4.长时跟踪与轨迹管理：对于长视频，目标可能多次出入画面，标注系统需提供高效的轨迹片段管理与身份关联工具，以应对长时跟踪任务。

信息来源：网易伏羲