文档中心 > 团队标注-创建人管理团队标注任务
创建人管理团队标注任务

最近更新时间:2021-08-10

创建团队标注任务后,将标注任务指派给不同的团队,由多人完成标注任务。

在成员进行数据标注过程中,支持查看标注任务进展、发起验收、继续验收以及查看验收报告等功能。

1 标注任务进展

登录紫光云控制台,选择产品与服务->人工智能->AI开发平台。

点击左侧“数据文件->数据集”,进入数据集列表,点击数据集名称,进入数据集概览页。

点击上方标注任务进展,可以查看团队标注任务的列表。

列表中展示了标注团队任务的情况。

2 发起验收

验收时采用抽样验收策略,即从待验收样本中抽样出一部分数据标注进行验收,通过对这部分抽样的数据标注进行查看后,可以选择对“剩余”待验收样本通过,或者不通过。

当团队的成员已开始数据标注,至少要标注一个对象,数据集的创建者即可发起验收,对标注结果进行抽验。此时“发起验收”变亮。

验收时,抽样策略有2种:按百分比或者按数量。当百分比不足一个标注对象时,按照1个标注对象来验收。按数量时,1<=数量<=待验收对象数。

发起验收,并抽样点击确定后,进入验收页面。

验收对于单个待验收对象可以选择合格、不合格。不合格时,可以写不合格原因。

3 继续验收

如果一个标注任务,已经发起过验收,但是验收未完成,则不能建立新的验收任务,即“发起验收”置灰。继续验收变亮。

针对需继续验收的任务,单击“继续验收”。系统直接进入“实时验收报告”页面,您可以继续验收未验收的图片,设置其“验收结果”

4 完成验收

在验收页面,左上角点击完成验收。可以一次性对剩余待验收样本验收通过或者验收驳回。需要二次确认对话框。

可以一次性验收通过或者验收驳回。在二次确认对话框后生效。

验收的总体思路是,被抽样的单个对象可以选择合格还是不合格。您根据抽样合格率的情况,在完成验收的时候,一次性对“剩余”所有标注样本通过或者不通过。

例如:

  • 标注3个图片,验收时抽样数量2,第一张合格,第二张不合格。完成验收时,选择验收通过。则第一张和第三张状态是已标注,第二张状态已驳回。

  • 标注3个图片,验收时抽样数量2,第一张合格,第二张不合格。完成验收时,选择验收驳回。则第一张状态是已标注,第二张和第三张状态已驳回。

5 查看验收报告

针对进行中或已完成的标注任务,都可以查看其验收报告。在“标注任务进展”页签中,单击“验收报告”,即可在弹出的“验收报告”对话框中查看详情。

验收报告中,罗列了每次验收的详情和验收通过率。如果验收通过,则验收通过率 = 合格数/抽样数。

6 未标注重新分配

在标注过程中,可能出现有些队员就是不标注的现象,对于这个问题,可以针对某个队员,将他未标注的对象重新分配给团队的其他成员。

在标注任务进展页面,点击某个标注任务的下拉菜单,看到这个任务的所有标注队员。

在队员列表的操作列,点击“未标注重新分配”,将某个队员未标注的对象分配给团队其他成员。

其中,标注团队,不能改,只能在团队内部将未标注重新分配。

创建人将某个标注人未标注的文件重新在团队内部分配后,旧标注人标注任务中,未标注图片变为0,新标注人将平分旧标注人的那些未标注图片。