人工智能数据标注实战教程 课件 3.2 视频跨帧追踪标注任务.pptx

第三章 视频标注项目任务二 视频跨帧追踪标注任务 内容概括知识背景典型应用场景实践标注操作 1. 知识背景视频跨帧追踪任务则是研究如何在连续视频帧中的感兴趣目标的位置和运动信息，通常跟踪结果用矩形框表示。视频跟踪任务中跟踪的目标可以是视频中的任何物体，或者选定的任何区域，并不需要事先获取目标的类别信息，追踪过程也可以从任意帧开始。视频跨帧追踪作为一个中低层的视觉分析任务，对众多其它视觉任务具有良好的辅助作用，如协助视频目标检测、视频目标分割、视频行人重识别等。 2.典型应用场景安全监控城市交通人机交互体育交互军事领域自动驾驶医疗诊断 3.实践标注操作（1）准备数据来自于2022年北京冬奥会中国选手武大靖参赛的视频节选，格式为mp4（2）创建工程开启label-studio。在启动页选择单击“create project”按钮创建项目 3.实践标注操作（3）导入数据选择“Data Import”标签页，选择“Upload Files”，在弹出框中选择准备好的视频数据文件，进行导入 3.实践标注操作（4）选择模板切换到“Labeling Setup”选项卡，指定项目模板类型为“Custom template” 3.实践标注操作（5）编写模板代码进入模板配置页面后，在代码编辑区域输入模板源码。 3.实践标注操作（6）开始标注首先在数据标注区下方点选“wudajing”数据标签，选中后标签颜色发生变化。 3.实践标注操作（6）开始标注之后在视频区域通过拖放鼠标左键在武大靖图像周围绘制边界框，如下图所示。如需调整边界框大小或位置，可点击边界框通过鼠标进行放大、缩小或位置移动。 3.实践标注操作（6）开始标注第一帧数据标注完成后，点击下一帧按钮查看下一帧图像，发现标注框依然存在，此时只需依据标注对象真实位置与标注框位置的相对关系，重新修正标注框位置与大小即可。如果基本吻合也可不做调整。重复此步操作，直至所有帧标注完成。 3.实践标注操作（6）开始标注当视频帧中出现其他标注对象时，选中下方的对应标签，在帧中绘制该对象的标注框，如下图所示，此时画面中出现了工作人员，选中“staff”标签，对两位工作人员进行标注，并在之后的视频帧中及时调整标注框位置和大小。 3.实践标注操作（6）开始标注如果目标对象消失则应该在对应帧中删除标注框，删除方法是在视频画面下方区域的帧状态栏中选中对象消失的帧，再点击标注框删除按钮。 3.实践标注操作（7）查验标注效果从头开始浏览视频，注意观察播放过程中标注框的位置是否与标注对象位置相吻合，如果发现部分时间点误差较大，可跳转到对应帧重新调整标注框位置或大小。 3.实践标注操作（7）导出结果单击“Export”按钮，在弹出菜单中选择导出格式并保存。 小结知识目标：（1）明确视频帧追踪标注相关概念（2）明确视频帧追踪标注方法思政目标：（1）工匠精神（2）爱国热情