商务数据采集与处理

项目一　初识商务数据　1

任务一　认识数据　2

一、什么是数据　2

二、数据的作用　3

三、数据类型　5

四、数据集　6

任务二　认识大数据　8

一、什么是大数据　10

二、大数据的应用领域　11

三、大数据案例分析　12

任务三　认识商务数据　13

一、什么是商务数据　14

二、商务数据的来源　14

三、商务数据的应用范围　15

四、商务数据分析的作用　17

【项目小结】　18

项目二　初识数据采集　19

任务一　理解数据采集的概念　20

一、什么是数据采集　21

二、数据采集的原则　21

任务二　掌握数据采集流程　22

一、数据采集流程　22

二、商务数据采集流程的注意事项　24

任务三　设计数据采集与处理方案　25

一、数据采集与处理方案构成　26

二、举例——店铺商品销售数据采集与处理方案　28

三、举例——市场规模数据采集与处理方案撰写　29

四、举例——直通车推广数据采集与处理方案撰写　30

【项目小结】　32

项目三　初识数据采集工具　33

任务一　认识数据采集工具　34

一、数据采集渠道　35

二、数据采集常用工具　37

三、选择数据采集工具的依据　42

任务二　掌握数据采集方法　44

一、数据采集方法的说明　45

二、商务数据采集的方法　46

【项目小结】　49

项目四　网络调查数据采集　50

任务一　设计网络调查方案　51

一、什么是网络调查　51

二、设计网络调查方案的方式和步骤　53

任务二　设计网络调查问卷　57

一、网络调查问卷的定义　58

二、设计网络调查问卷的原则　58

三、设计网络调查问卷的步骤　59

四、网络调查问卷的收集　61

任务三　处理与分析问卷数据　61

一、问卷数据的预处理　62

二、问卷数据的分析方法　63

【项目小结】　67

项目五　数据库数据采集　69

任务一　认识数据库　70

一、数据库的基本概念　70

二、数据库系统　71

三、数据库管理系统　77

四、数据库的类型　79

任务二　应用数据库　80

一、数据库应用系统的相关概念　80

二、Access　2010数据库的应用　85

任务三　数据库数据采集实例　91

一、SQL　91

二、创建SQL查询　91

【项目小结】　95

项目六　采集器数据采集　96

任务一　认识八爪鱼采集器　97

一、初始八爪鱼采集器　97

二、安装八爪鱼采集器　97

三、认识八爪鱼界面　98

四、八爪鱼采集器的应用　102

任务二　掌握采集器数据采集功能　111

一、智能防封　112

二、登录采集　114

三、循环方式　116

四、翻页操作　119

五、判断条件　121

六、XPath数据定位　123

七、图片采集和导出　130

八、提取数据　134

九、云采集　137

任务三　采集商务网站数据　137

【项目小结】　140

项目七　数据处理　141

任务一　数据清洗　142

一、重复数据清洗　142

二、缺失数据清洗　145

三、异常数据清洗　146

四、逻辑错误数据清洗　147

五、　数据格式清洗　149

任务二　数据加工　153

一、数据抽取　153

二、数据转换　156

三、数据计算　162

【项目小结】　164

参考文献　165