
多目标跟踪与视频记忆跟踪就是检测加关联。每帧都做检测。通过 ID 将当前帧的检测与上一帧的轨迹进行匹配。类型:构建语言:Python前置条件:第4阶段第06课 (YOLO 检测)、第4阶段第08课 (Mask R-CNN)、第4阶段第24课 (SAM 3)时长:~60 分钟学习目标区分基于检测的跟踪和基于查询的跟踪,并说出算法家族名称(SORT、DeepSORT、ByteTrack、BoT-SORT、SAM 2 记忆跟踪器、SAM 3.1 Object Multiplex)从零实现 IoU + 匈牙利分配的经典跟踪流程解释 SAM 2 的记忆库及其为什么比基于 IoU 的关联更好地处理遮挡读懂三个跟踪指标(MOTA、IDF1、HOTA)并为给定用例选择合适的指标问题描述检测器告诉你单帧中物体在哪里。跟踪器告诉你第t帧中的哪个检测与第t-1帧中的检测是同一个物体。没有跟踪,你就无法统计越过线的物体数量、跟踪球穿过遮挡区域、或者知道"4号车已经在这个车道上待了8秒"。跟踪对每个面向视频的产品都至关重要:体育分析、安防监控、自动驾驶、医学视频分析、野生动物监测、商标计数。核心构建模块是共享的:逐帧检测器、运动模型(卡尔曼滤波器或更复杂的模型)、关联步骤(基于 IoU / 余弦 / 学习特征的匈牙利算法)、以及轨迹生命周期(诞生、更新、消亡)。2026 年带来了两个新模式:SAM 2 基于记忆的跟踪(特征记忆替代运动模型关联)和SAM 3.1 Object Multiplex(同一概念的多个实例共享记忆)。本课先讲解经典流程,再介绍基于记忆的方法。核心概念基于检测的跟踪