大数据预处理技术

导 言 单元1 数据读写 学习情境1 使用Python读写职业能力大数据分析平台【岗位】数据 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 学习情境2 使用Pandas读写职业能力大数据分析平台【技能】数据 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 单元2 数据清洗 学习情境3 使用正则表达式从网页中提取招聘联系人的邮箱地址 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 学习情境4 使用Pandas对职业能力大数据分析平台【工资】表进行清洗 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 单元3 数据集成 学习情境5 使用Pandas实现对职业能力大数据分析平台多个学生信息 数据源进行集成 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 单元4 数据规约 学习情境6 使用NumPy+Pandas实现对工资数据进行数量规约 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 单元5 数据变换 学习情境7 使用Pandas+Sklearn对学生成绩实现数据规范化 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 单元6 Kettle工具使用 学习情境8 使用ETL工具Kettle对职业能力大数据分析平台学生信息 数据进行清洗 学习情境描述 学习目标 任务书 获取信息 工作计划 进行决策 知识准备 相关案例 工作实施 评价反馈 拓展思考 单元7 MapReduce数据处理 学习情境9 使用MapReduce合并职业能力大数据分析平台【技能】数据