数据标注工程(第2版)

第1 章 数据标注概述

1.1 数据标注的起源与发展 1

1.1.1 什么是数据标注 3

1.1.2 数据标注分类概述 4

1.1.3 数据标注流程概述 7

1.2 数据标注的应用案例 8

1.2.1 出行行业 8

1.2.2 金融行业 8

1.2.3 医疗行业 9

1.2.4 家居行业 9

1.2.5 安防行业 9

1.2.6 公共服务 10

1.2.7 电子商务 10

1.3 新职业-人工智能训练师 10

1.3.1 有多少智能，就有多少人工 10

1.3.2 让AI 更懂人类的新职业 11

1.3.3 *后一批人工智能的“老师” 16

1.4 数据越多，智能越好 17

1.5 作业与练习 19

参考文献 19

第2 章 数据采集与清洗

2.1 数据采集 21

2.1.1 数据采集方法 21

2.1.2 数据采集流程 22

2.1.3 标注数据采集案例 24

2.2 数据清洗 26

2.2.1 数据清洗方法 27

2.2.2 数据清洗流程 28

2.2.3 数据清洗的评判 29

2.2.4 数据清洗实例 29

2.3 作业与练习 31

参考文献 31

第3 章 数据标注分类及应用

3.1 图像标注 33

3.1.1 什么是图像标注 33

3.1.2 图像标注任务类型 34

3.1.3 图像标注方式 35

3.1.4 图像标注案例 37

3.2 语音标注 40

3.2.1 什么是语音标注 40

3.2.2 语音标注任务类型 40

3.2.3 案例分享：方言片段截取标注 42

3.3 文本标注 43

3.3.1 什么是文本标注 43

3.3.2 文本标注类型 44

3.3.3 文本标注应用领域 45

3.4 视频数据标注 47

3.4.1 什么是视频数据标注 47

3.4.2 视频与图像数据标注的差异 47

3.4.3 视频数据标注的分类 48

3.5 作业与练习 48

参考文献 48

第4 章 数据标注流程及管理

4.1 数据标注项目流程 49

4.1.1 项目启动 50

4.1.2 项目规划 51

4.1.3 项目执行 52

4.1.4 项目监控 52

4.1.5 项目收尾 53

4.2 数据标注团队架构 53

4.2.1 标注团队组建 54

4.2.2 标注团队架构 55

4.3 数据标注角色分工 56

4.4 数据标注团队沟通 57

4.4.1 项目相关方管理 57

4.4.2 团队沟通建设 58

4.5 数据标注安全管理 60

4.5.1 数据安全的重要性 60

4.5.2 数据信息泄露案例 60

4.5.3 数据安全管理 61

4.6 数据标注标准化管理 63

4.6.1 项目管理 65

4.6.2 人员管理 68

4.6.3 订单管理 68

4.6.4 客户关系管理 69

4.7 作业与练习 70

参考文献 70

第5 章 数据标注质量管理

5.1 数据质量影响算法效果 71

5.2 数据标注质量标准 73

5.2.1 图像标注质量标准 73

5.2.2 语音标注质量标准 75

5.2.3 文本标注质量标准 76

5.3 数据标注质量检验方法 76

5.3.1 实时检验 76

5.3.2 全样检验 77

5.3.3 抽样检验 78

5.4 数据标注质量风险控制 80

5.5 作业与练习 81

参考文献 81

第6 章 数据标注进度管理

6.1 数据标注人效制定 82

6.1.1 定时人效测量 82

6.1.2 定量人效测量 83

6.1.3 步骤拆解人效测量 83

XIV 数据标注工程（第2 版）

6.2 数据标注进度规划 84

6.3 数据标注进度风险控制 85

6.4 作业与练习 86

第7 章 数据标注平台

7.1 线上平台 87

7.1.1 竹节实战平台介绍 87

7.1.2 竹节平台使用方法 87

7.1.3 AIDP 数据标注工具能力说明 89

7.2 线下平台 119

7.2.1 标注工具安装环境搭建 119

7.2.2 LabelImg 标框标注工具的使用方法 123

7.2.3 Labelme 多边形区域标注工具安装与使用方法 130

7.3 作业与练习 134

参考文献 134

第8 章 数据标注实战

8.1 语音类-方言ASR 项目数据标注案例 135

8.1.1 项目需求 135

8.1.2 标注界面及功能说明 135

8.1.3 音频分类说明 136

8.1.4 音频裁剪说明 137

8.1.5 文字标准执行细则 138

8.2 语音类-客服录音项目数据标注案例 141

8.2.1 确定是否包含有效语音 141

8.2.2 确定语音的噪音情况 141

8.2.3 确定说话人数量 141

8.2.4 确定说话人性别 141

8.2.5 确定是否包含口音 142

8.2.6 语音内容方面 142

8.3 图片类-OCR 数据标注案例 143

8.3.1 框选规则 143

8.3.2 文字转写规则 147

8.4 图片类-人脸数据标注案例 148

8.4.1 标框标注 148

8.4.2 描点标注 150

8.5 无人驾驶2D 图像标注案例 152

8.5.1 项目目的 152

8.5.2 标注内容 153

8.5.3 标注界面及操作方法 153

8.5.4 标注规则 154

8.6 NLP 数据泛化文本标注案例 157

8.6.1 标注目的 157

8.6.2 标注页面 157

8.6.3 标注说明 157

8.6.4 NLP 名词解析 165

8.6.5 标注细则 165

8.7 作业与练习 167

附录