项目详情
标注平台支持统计项目的进展情况以及团队成员的标注效率,便于管理员把控项目整体进度,及时掌握成员的标注效率。单击项目名称后操作栏的“项目详情”,查看项目整体进度以及人员标注效率统计。项目详情分为项目概览、关联题库以及人员详情。
数据类型为音频和文本的项目,暂不支持关联题库。项目详情分为项目概览和人员详情两部分。
项目概览
项目概览包括项目信息、项目今日状态以及项目相关数据图表统计,管理员可以快速掌握项目当前进度。
- 项目信息:项目名称、项目标注团队、项目预计结束时间、累计交付通过任务数、累计交付通过帧数以及总时长等信息。
图1 项目信息
- 今日状态统计:与昨日相比,今日项目中标注任务数量、审核、验收、交付任务数量及变化。绿色箭头表示上升,红色箭头表示下降。
图2 今日状态统计
- 审核/验收任务:待审核任务数包含待预初审及待预终审,审核中包含预初审,预终审。不统计重预(初终)审任务。
- 统计数值只显示项目任务流程包含的流程数值,如果流程中不包含,则用“--”代替数值。
- 项目任务流程:展示当前项目的流程。
图3 项目任务流程
- 项目相关数据图表统计:为便于管理员快速掌握项目进展情况,平台实时统计标注项目中相关重要数据量变化并将其制作成图表。管理者可通过图表中图形的变化了解当前项目进程。可设置时间范围,查询指定时间段内项目重要指标变化情况。目前为以下五种图表,图标的展示根据项目任务流程有所裁剪:
- 标注帧数统计:平台统计标注任务从任务下发、任务标注提交、重标注数这几个标注任务常见环节中数量变化,并以帧为单位绘制成图表。
图4 标注帧数统计
- 项目参与人数:标注员认领任务后,进行标注并保存任务进度,被平台视为参与该项目。同样,审核员认领审核任务进行审核并保存任务进度,被平台视为参与该项目。平台统计参与项目的标注员和审核员人数,并绘制成图表。
图5 项目参与人数
- 平均标注效率:标注平台实时统计项目标注速度变化情况,支持按帧数、框数或对象数查看。
图6 平均标注效率
- 标注工作时长为标注工作花费的总时长(实时统计)。
- 按帧查看时 :标注速度=累计已提交任务的标注工作时长/总帧数。
- 按对象查看:标注速度=累计已提交任务的标注工作时长/总对象数。
- 按框查看:标注速度=累计已提交任务的标注工作时长/总框数。
- 鼠标静止时间大于等于5分钟,静止时间不计入标注工作时长内。
- 单日标注修改帧数:统计当日项目中所有标注员提交的标注任务总帧数。
图7 单日标注修改帧数
- 单日重标注任务数:根据项目流程,如果已提交的标注任务不满足下一步流程操作员的通过标准,操作员将其打回给标注员进行重标注,图表统计每天处于重标注状态的任务,同一任务单日多次被退回至重标注,不重复统计。
图8 单日重标注任务数
- 标注帧数统计:平台统计标注任务从任务下发、任务标注提交、重标注数这几个标注任务常见环节中数量变化,并以帧为单位绘制成图表。
关联题库
每个标注项目均可关联题库以及考试,课程或考试需在培训考试系统中创建完成,具体可参考培训考试。
- 进入项目详情页,单击“关联题库”页签;
- 单击“关联培训”或“关联考试”,选择“课程名称”或“考试名称”以及“职能”;
图9 关联培训
图10 关联考试
- 单击“确认”,课程或考试添加成功。
- 编辑题库
可单击操作栏的“编辑”,编辑职能。
- 解绑题库或考试
可单击操作栏的“解绑”,解绑题库或考试。
- 查看题库或考试详情
单击题库或考试名称,可查看题库或考试详情。
人员详情
标注平台统计承包标注项目的标注团队中所有标注员和审核员的累计工作量情况,如累计工作时长、提交任务数量等。管理员可单击箭头升序或降序排列,查看标注员和审核员的完成情况排序,也可以筛选时间,展示特定时间段内标注员、审核员(初审员/终审员)的任务累计完成情况。标注平台从帧数、标注框或对象三个维度统计累计提交任务数、累计工作时长、累计确认数、平均耗时五个指标,衡量标注员、审核员(初审员/终审员)的任务完成情况。
人员详情模块的展示根据项目任务流程有所裁剪。(标注员统计、初审员统计、终审员统计)
- 累计确认框数:标注员、初审员、终审员提交任务中确认有效框数的数量以及返修环节中新增的有效框数之和。
返修后有效框数变更会在重新提交任务时刷新。
- 累计提交任务数:标注员、初审员、终审员认领并提交的任务数量。
如果提交的任务,被下一步流程操作员退回时,则此任务不计入累计提交任务数。
- 累计重标注任务数:标注员重标注的任务次数。如果某任务返修多次,则累计重标注任务数叠加,累计提交任务数不变(只有标注员统计重标注任务)。
- 累计工作时长:标注员累计标注总时长、初审员累计初审总时长、终审员累计终审总时长,包含各自返修时长。
返修后有效帧变更为无效帧,累计时长会减去无效帧时间。无效帧变更为有效帧,累计时长会加上有效帧时间。
- 平均单框耗时:平均单帧标注/初审/终审的时间,计算方式为:累计工作时长/累计确认有效数。
导出人员标注效率
标注平台支持导出该项目所有标注员,初审员,终审员的标注效率,以Excel形式下载至本地,便于用户查看。单击人员详情页面的导出按钮,即可将当前页面的标注效率导出。