作者:厦门大学计算机科学系 林子雨 博士/副教授

本书详细阐述了培养复合型大数据专业人才所需要的大数据相关知识。全书共9章,内容包括大数据概述、大数据与其他新兴技术的关系、大数据基础知识、大数据应用、数据采集与预处理、数据存储与管理、数据处理与分析、数据可视化、大数据分析综合案例。在大数据基础知识部分,详细介绍了与培养学生的数据素养相关的知识,包括大数据安全、大数据思维、大数据伦理、数据共享、数据开放、大数据交易和大数据治理。
本书可以作为高等院校大数据专业的导论课教材,也可供相关技术人员参考。
| 章节 | 讲义PDF |
| 第1章-大数据概述 | |
| 第2章-大数据与其他新兴技术的关系 | |
| 第3章-大数据基础知识 | |
| 第4章-大数据应用 | |
| 第5章-数据采集与预处理 | |
| 第6章-数据存储与管理 | |
| 第7章-数据处理与分析 | |
| 第8章-数据可视化 | |
| 第9章-大数据分析综合案例 |
第1章 大数据概述
数据的概念、大数据时代到来的背景、大数据的发展历程、世界各国的大数据发展战略、大数据的概念与影响、大数据的应用以及大数据产业
第2章 大数据与其他新兴技术的关系
物联网的概念和应用、云计算的概念和应用、大数据和云计算以及物联网的相互关系、人工智能的概念与关键技术、大数据与人工智能的关系、区块链的概念与技术原理、大数据与区块链的关系
第3章 大数据基础知识
大数据安全,大数据思维,大数据伦理,数据共享,数据开放,大数据交易
第4章 大数据应用
大数据在各行各业的主要应用
第5章 数据采集与预处理
数据采集、数据清洗、数据转换、数据脱敏
第6章 数据存储与管理
传统的数据存储与管理技术、大数据时代的数据存储与管理技术、大数据处理架构Hadoop、分布式文件系统HDFS、NoSQL数据库、云数据库、分布式数据库HBase
第7章 数据处理与分析
数据处理与分析的概念、机器学习和数据挖掘算法、大数据处理与分析技术、大数据处理与分析代表性产品
第8章 数据可视化
可视化概述、可视化图表、可视化工具、可视化典型案例
第9章 大数据分析综合案例
案例任务、系统设计、技术选择、系统实现、案例所需知识和技能
由林子雨老师主讲《大数据导论》授课视频,请到网易云课堂观看。
大数据应用案例视频与《大数据导论》教材对应关系
(共计200分钟视频)
| 视频编号 | 应用案例名称 | 时长(分钟) | 教材章节 | 在哪个小节中播放 |
| 视频2-1 | 智能仓储物流管理系统 | 3 | 第2章 大数据与其他新兴技术的关系 | 2.2.3 物联网的应用 |
| 视频2-2 | 厦门自动化码头 | 3 | 第2章 大数据与其他新兴技术的关系 | 2.2.3 物联网的应用 |
| 视频2-3 | 利用Tilt Brush在虚拟三维空间里绘画 | 1 | 第2章 大数据与其他新兴技术的关系 | 图2-19对应的动画 |
| 视频2-4 | 京东智能分拣 | 3 | 第2章 大数据与其他新兴技术的关系 | 图2-24对应的视频 |
| 视频2-5 | 波士顿动力机器人抗干扰开门 | 1 | 第2章 大数据与其他新兴技术的关系 | 表2-2 人工智能分类及典型产品示例 |
| 视频2-6 | 波士顿动力机器人合作开门 | 1 | 第2章 大数据与其他新兴技术的关系 | 表2-2 人工智能分类及典型产品示例 |
| 视频2-7 | 波士顿动力Atlas人形机器人跳跃空翻 | 1 | 第2章 大数据与其他新兴技术的关系 | 表2-2 人工智能分类及典型产品示例 |
| 视频2-8 | 波士顿动力机器人野外跑步跨越障碍 | 1 | 第2章 大数据与其他新兴技术的关系 | 表2-2 人工智能分类及典型产品示例 |
| 视频2-9 | 阿里云出海布局全球云计算 | 2 | 第2章 大数据与其他新兴技术的关系 | 2.1 云计算 |
| 视频2-10 | 亚洲最大标准最高的金融数据中心 | 2 | 第2章 大数据与其他新兴技术的关系 | 2.1.3 云计算数据中心 |
| 视频2-11 | 物联网智能井盖系统 | 3 | 第2章 大数据与其他新兴技术的关系 | 2.2.3 物联网的应用 |
| 视频2-12 | 智能化物联网灌溉系统让农业节本增收 | 2 | 第2章 大数据与其他新兴技术的关系 | 2.2.3 物联网的应用 |
| 视频2-13 | 法院审理涉比特币纠纷 | 2 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-14 | 暗网中很多非法交易用比特币支付 | 3 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-15 | 日本比特币支付 | 2 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-16 | 北美最大的比特币矿场 | 2 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-17 | 深山里的比特币“矿场” | 2 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-18 | 比特币“矿难”风暴 | 3 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-19 | 数字货币ICO有多疯狂 | 1 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频2-20 | 加密猫 | 3 | 第2章 大数据与其他新兴技术的关系 | 2.5 大数据与区块链 |
| 视频4-1 | 训练球队 | 10 | 第4章 大数据应用 | 4. 11. 1 训练球队 |
| 视频4-2 | 老年人健康监测 | 10 | 第4章 大数据应用 | 4. 2 大数据在生物医学领域的应用 |
| 视频4-3 | 智慧医疗 | 8 | 第4章 大数据应用 | 4. 2 大数据在生物医学领域的应用 |
| 视频4-4 | 环境监测 | 4 | 第4章 大数据应用 | 4. 4. 2 环保监测 |
| 视频4-5 | 农作物病虫害防治 | 9 | 第4章 大数据应用 | 无 |
| 视频4-6 | 石油探测 | 12 | 第4章 大数据应用 | 无 |
| 视频4-7 | 汽车制造 | 5 | 第4章 大数据应用 | 4. 6 大数据在汽车领域的应用 |
| 视频4-8 | 高炉改造 | 12 | 第4章 大数据应用 | 无 |
| 视频4-9 | 火箭发动机制造 | 6 | 第4章 大数据应用 | 无 |
| 视频4-10 | 工业互联网 | 10 | 第4章 大数据应用 | 无 |
| 视频4-11 | 共享单车 | 8 | 第4章 大数据应用 | 4. 4. 1 智能交通 |
| 视频4-12 | 道路交通规划 | 8 | 第4章 大数据应用 | 4. 4. 1 智能交通 |
| 视频4-13 | 海鲜市场管理 | 3 | 第4章 大数据应用 | 4. 13 大数据在政府领域的应用 |
| 视频4-14 | 旅游监管 | 6 | 第4章 大数据应用 | 4. 13 大数据在政府领域的应用 |
| 视频4-15 | 政府数据融合 | 2 | 第4章 大数据应用 | 4. 13 大数据在政府领域的应用 |
| 视频4-16 | 用大数据抵御网络攻击 | 8 | 第4章 大数据应用 | 4. 12. 2 应用大数据技术防御网络攻击 |
| 视频4-17 | 车货对接 | 11 | 第4章 大数据应用 | 4. 3 大数据在物流领域的应用 |
| 视频4-18 | 种猪选择 | 6 | 第4章 大数据应用 | 无 |
| 视频4-19 | 商品精准营销 | 9 | 第4章 大数据应用 | 4. 7 大数据在零售领域的应用 |
| 视频4-20 | 信用评价和金融风控 | 10 | 第4章 大数据应用 | 4. 5 大数据在金融领域的应用 |
| 视频4-21 | 无人驾驶 | 11 | 第4章 大数据应用 | 4. 6 大数据在汽车领域的应用 |
| 视频4-22 | 司法审判 | 12 | 第4章 大数据应用 | 无 |
| 视频4-23 | 寻找被拐儿童 | 9 | 第4章 大数据应用 | 无 |
| 视频4-24 | 洪水预测 | 11 | 第4章 大数据应用 | 无 |
| 视频4-25 | 城市公共安全平台 | 5 | 第4章 大数据应用 | 4.4 大数据在城市管理领域的应用 |