清华科技大讲堂数据思维/胡广伟

目录

第1章数据思维导论

1．1数、数据与大数据

1．1．1数

1．1．2数据

1．1．3大数据

1．2数据科学

1．2．1数据科学的内涵及兴起

1．2．2数据科学的学科定位

1．2．3数据科学的研究内容

1．2．4数据科学的工作流程

1．3相关的“思维”范式

1．3．1思维

1．3．2科学思维

1．3．3统计思维

1．3．4数据思维

小结

讨论与实践

参考文献

第2章数据思维基础

2．1数据思维的产生

2．1．1思维原料的变化

2．1．2思维主体的变化

2．1．3思维工具的变化

2．1．4思维形式的变化

2．2数据思维的范式

2．2．1科学方法论

2．2．2科学认识论

2．2．3科学行动范式

2．3数据思维的特点

2．3．1整体性

2．3．2量化性

2．3．3互联性

2．3．4价值性

2．3．5动态性

2．4数据思维的局限

2．4．1全数据模式的幻像

2．4．2量化思维的焦虑

2．4．3相关性的过度崇拜

2．5数据思维的应用

2．5．1数据思维的应用价值

2．5．2数据思维的应用流程

2．5．3数据思维的应用方法

2．6数据行为

2．6．1数据行为的概念

2．6．2数据行为的分类

2．6．3数据行为的基本原则

小结

讨论与实践

参考文献

第3章数据思维原理： 信息学视角

3．1*大熵原理

3．1．1熵及信息熵的概念

3．1．2*大熵原理的内涵

3．1．3*大熵原理的应用

3．2*小努力原理

3．2．1*小努力原理的内涵

3．2．2*小努力原理的应用

3．3对数透视现象

3．3．1对数透视现象的内涵

3．3．2网络环境下的对数透视现象

3．4信息生命周期理论

3．4．1信息生命周期的内涵

3．4．2信息生命周期运动的认识

3．4．3信息生命周期理论

3．4．4大数据与信息生命周期理论

3．5小世界现象

3．5．1小世界现象的由来

3．5．2小世界现象的研究类型

3．5．3小世界网络现象的应用

小结

讨论与实践

参考文献

第4章数据思维模式

4．1全数据思维

4．1．1抽样数据： 以小见大

4．1．2全数据： 以大见小

4．1．3大数据： 还原事物间的联系

4．2容错性思维

4．2．1允许出现错误

4．2．2混杂的大数据也可能更精确

4．2．3接受混杂是趋势

4．3实时性思维

4．3．1成批处理方式

4．3．2实时处理方式

4．3．3两种处理方式对比

4．4相关性思维

4．4．1相关关系

4．4．2相关性思维的应用

4．4．3如何处理两种关系

小结

讨论与实践

参考文献

第5章数据生产

5．1数据生产的概念

5．2数据生产的特点

5．3数据生产的目标

5．3．1采集全量数据

5．3．2发现数据的新价值

5．3．3考虑外部用户的需求

5．4数据生产的阶段

5．5数据的生产源

5．5．1互联网数据

5．5．2移动网络数据

5．5．3物联网数据

小结

讨论与实践

参考文献

第6章数据采集

6．1数据采集的概念

6．2数据来源

6．3数据选择

6．4数据采集的方法及工具

6．4．1系统日志采集方法

6．4．2传感器采集方法

6．4．3网络爬虫采集方法

6．4．4其他数据采集方法

小结

讨论与实践

参考文献

第7章数据存储

7．1传统数据存储

7．1．1存储设备

7．1．2存储系统网络架构

7．2大数据时代的数据存储

7．2．1大数据存储系统的特点

7．2．2分布式存储

7．2．3云存储

7．3数据库技术

7．3．1数据库技术的发展

7．3．2关系数据库

7．3．3NoSQL

小结

讨论与实践

参考文献

第8章数据预处理

8．1数据预处理的必要性

8．2数据清洗

8．2．1缺失数据处理

8．2．2冗余数据处理

8．2．3噪声数据处理

8．3数据变换

8．3．1大小变换

8．3．2类型变换

8．4数据集成

8．4．1内容集成

8．4．2结构集成

8．5其他预处理方法

8．5．1数据脱敏

8．5．2数据归约

8．5．3数据标注

小结

讨论与实践

参考文献

第9章数据分析

9．1业务理解

9．2数据理解

9．3数据分析分类

9．3．1结构化数据分析

9．3．2文本分析

9．3．3Web数据分析

9．3．4多媒体数据分析

9．3．5社交网络数据分析

9．3．6移动数据分析

9．4数据分析方法的选择

9．4．1分类算法

9．4．2聚类算法

9．4．3关联分析

9．4．4回归分析

9．4．5深度学习

9．4．6统计方法

9．5数据分析常见陷阱

小结

讨论与实践

参考文献

第10章数据可视化

10．1数据可视化概述

10．2Microsoft Excel

10．2．1创建图表

10．2．2选择正确的图表

10．3Tableau

10．3．1Tableau Desktop

10．3．2Tableau Online

10．3．3Tableau Mobile

10．4ECharts

10．4．1丰富的可视化类型

10．4．2获取ECharts

10．4．3ECharts简单案例

10．5Rggplot2

10．6D3．js

10．7Processing

10．8BDP

小结

讨论与实践

参考文献

第11章数据之殇

11．1数据安全

11．1．1数据安全的概念

11．1．2数据安全的价值

11．1．3数据安全的威胁

11．1．4数据安全技术

11．2数据治理

11．2．1数据治理的概念

11．2．2数据治理的意义

11．2．3数据治理内容

11．3数据伦理

11．3．1数据中立性

11．3．2数据独裁

11．3．3道德判断

小结

讨论与实践

参考文献

第12章数据思维的应用

12．1城市治理中的数据思维

12．1．1大数据与城市治理

12．1．2大都市在行动

12．2数字金融中的数据思维

12．2．1银行

12．2．2数字化资产管理

12．3智慧物流中的数据思维

12．3．1菜鸟驿站

12．3．2货车帮

12．3．3运满满

12．4智慧医疗中的数据思维

12．4．1BAT布局互联网医疗

12．4．2医疗职业的改变

12．4．3移动医疗新模式

12．5人工智能中的数据思维

12．5．1AlphaGo，仅仅是开始

12．5．2自动驾驶汽车的困境

12．5．3感知识别技术的大爆发

12．6智能制造中的数据思维

12．6．1北科亿力科技

12．6．2江苏沙钢集团

12．6．3上海仪电显示

12．7现代农业中的数据思维

12．7．1北京佳格天地

12．7．2北京农信互联

小结

讨论与实践

参考文献