融合检测与跟踪的半自动视频目标标注

作者：陈庆林; 谷雨; 宋忠浩; 聂圣东

来源：计算机工程与应用, 2020, 1-12.

• 视频图像
• 目标标注
• 目标检测
• 目标跟踪
• 关键帧提取 video image
• target annotation
• target detection
• target tracking
• key frames extraction

针对视频图像连续帧间的目标具有冗余性，采用手动标注方式耗时耗力的问题，提出一种融合检测和跟踪算法的视频目标半自动标注框架。首先利用手动标注的样本离线训练改进YOLO v3模型，并将该检测模型作为在线标注的检测器。其次，在线标注时在初始帧手动确定目标位置和标签，在后续帧根据检测框与跟踪框的IOU(Intersection-Over-Union)值自动确定目标的位置，并利用跟踪器的响应输出判断目标消失，从而自动停止当前目标标注。最后，采用一种基于目标显著性的关键帧提取算法选择关键帧。采用自建舰船目标数据集进行了改进YOLO v3检测性能对比实验，并采用舰船视频序列验证了提出的视频目标半自动标注方法...

• 单位
  自动化学院; 杭州电子科技大学