大数据案例实验教程 / “十四五”普通高等教育系列教材
定价：￥50.00
作者： 林民，柳林，张树钧
出版时间：2024-08
最新印次日期：2024-8
出版社：中国铁道出版社
- 中国铁道出版社
- 9787113312541
- 1-1
- 521426
- 49259264-7
- 16开
- 2024-08
- 计算机类
- 本科
内容简介
实验在教学过程中占据十分重要的地位， 特别是在大数据教学中尤为重要。本书针对高校在开设大数据课程过程中遇到的大数据实验指导专业师资不足、难以培养实用型人才、专业学习与实际应用脱轨等诸多问题， 本着 “有用、够用、实用” 的原则， 设计了大量的大数据实验项目， 引导学生对大数据常用知识点进行探究。全书分为两部分 （共11章）: 第一部分大数据概述及实验环境简介， 内容包括大数据技术概述、实验相关组件介绍; 第二部分典型案例实验， 容包括销售信息查询实验、气象数据探索性分析实验、地震数据分析实验、信用卡逾期预测实验、电影推荐实验、社交网络推荐实验、航班图实验、自然语言处理实验、深度主题模型。通过学习本书， 可使读者熟练掌握大数据环境下的案例开发， 提高实际问题的分析和解决能力。本书适合作为高等院校大数据及人工智能专业的实践课程教材， 也可作为非计算机专业研究生学习大数据相关内容的实验指导手册。
目录
第一部分 大数据概述及实验环境简介
第 1 章 大数据技术概述……………………………………………………………………… 2
1. 1 大数据概念及特征 ……………………………………………………………………… 2
1. 2 大数据的数据处理流程 ………………………………………………………………… 3
1. 3 大数据的数据安全 ……………………………………………………………………… 6
思考题………………………………………………………………………………………… 7
第 2 章 实验相关组件介绍…………………………………………………………………… 8
2. 1 HDFS …………………………………………………………………………………… 8
2. 2 MapReduce ……………………………………………………………………………… 11
2. 3 Hive …………………………………………………………………………………… 15
2. 4 HBase …………………………………………………………………………………… 16
2. 5 Storm …………………………………………………………………………………… 17
2. 6 Flume …………………………………………………………………………………… 18
2. 7 Kafka …………………………………………………………………………………… 19
2. 8 Spark …………………………………………………………………………………… 21
思考题 ………………………………………………………………………………………… 27
第二部分 典型案例实验
第 3 章 销售信息查询实验 ………………………………………………………………… 29
3. 1 实验目标……………………………………………………………………………… 29
3. 2 实验环境……………………………………………………………………………… 29
3. 3 实验方法……………………………………………………………………………… 30
3. 4 实验过程……………………………………………………………………………… 31
3. 5 实验总结……………………………………………………………………………… 40
思考题 ………………………………………………………………………………………… 40
第 4 章 气象数据探索性分析实验 ………………………………………………………… 41
4. 1 实验目标……………………………………………………………………………… 41
4. 2 实验环境……………………………………………………………………………… 41
4. 3 实验方法……………………………………………………………………………… 42
4. 4 实验过程……………………………………………………………………………… 432
4. 5 实验总结……………………………………………………………………………… 47
思考题 ………………………………………………………………………………………… 47
第 5 章 地震数据分析实验 ………………………………………………………………… 48
5. 1 实验目标 ………………………………………………………………………………… 48
5. 2 实验环境……………………………………………………………………………… 48
5. 3 实验方法……………………………………………………………………………… 49
5. 4 实验过程……………………………………………………………………………… 50
5. 5 实验总结……………………………………………………………………………… 56
思考题 ………………………………………………………………………………………… 56
第 6 章 信用卡逾期预测实验 ……………………………………………………………… 57
6. 1 实验目标……………………………………………………………………………… 57
6. 2 实验环境……………………………………………………………………………… 57
6. 3 实验方法……………………………………………………………………………… 57
6. 4 实验过程……………………………………………………………………………… 58
思考题 ………………………………………………………………………………………… 65
第 7 章 电影推荐实验 ……………………………………………………………………… 66
7. 1 实验目标……………………………………………………………………………… 66
7. 2 实验环境……………………………………………………………………………… 66
7. 3 实验方法……………………………………………………………………………… 67
7. 4 实验过程……………………………………………………………………………… 69
7. 5 实验总结……………………………………………………………………………… 74
思考题 ………………………………………………………………………………………… 74
第 8 章 社交网络推荐实验 ………………………………………………………………… 75
8. 1 实验目标……………………………………………………………………………… 75
8. 2 实验环境……………………………………………………………………………… 75
8. 3 实验方法……………………………………………………………………………… 75
8. 4 实验过程……………………………………………………………………………… 76
8. 5 实验总结……………………………………………………………………………… 78
思考题 ………………………………………………………………………………………… 78
第 9 章 航班图实验 ………………………………………………………………………… 79
9. 1 实验目标……………………………………………………………………………… 79
9. 2 实验环境……………………………………………………………………………… 79
9. 3 实验方法……………………………………………………………………………… 79
9. 4 实验过程……………………………………………………………………………… 80
9. 5 实验总结……………………………………………………………………………… 89
思考题 ………………………………………………………………………………………… 89
第 10 章 自然语言处理实验 ………………………………………………………………… 90
10. 1 实验目标 ……………………………………………………………………………… 90
10. 2 实验环境 ……………………………………………………………………………… 90
10. 3 实验方法 ……………………………………………………………………………… 91
10. 4 实验过程 ……………………………………………………………………………… 92
10. 5 实验总结 ……………………………………………………………………………… 96
思考题 ………………………………………………………………………………………… 96
第 11 章 扩展: 深度主题模型……………………………………………………………… 97
11. 1 词嵌入 ………………………………………………………………………………… 97
11. 2 主题模型…………………………………………………………………………… 116
11. 3 嵌入式主题模型…………………………………………………………………… 120
参考文献……………………………………………………………………………………… 128
第 1 章 大数据技术概述……………………………………………………………………… 2
1. 1 大数据概念及特征 ……………………………………………………………………… 2
1. 2 大数据的数据处理流程 ………………………………………………………………… 3
1. 3 大数据的数据安全 ……………………………………………………………………… 6
思考题………………………………………………………………………………………… 7
第 2 章 实验相关组件介绍…………………………………………………………………… 8
2. 1 HDFS …………………………………………………………………………………… 8
2. 2 MapReduce ……………………………………………………………………………… 11
2. 3 Hive …………………………………………………………………………………… 15
2. 4 HBase …………………………………………………………………………………… 16
2. 5 Storm …………………………………………………………………………………… 17
2. 6 Flume …………………………………………………………………………………… 18
2. 7 Kafka …………………………………………………………………………………… 19
2. 8 Spark …………………………………………………………………………………… 21
思考题 ………………………………………………………………………………………… 27
第二部分 典型案例实验
第 3 章 销售信息查询实验 ………………………………………………………………… 29
3. 1 实验目标……………………………………………………………………………… 29
3. 2 实验环境……………………………………………………………………………… 29
3. 3 实验方法……………………………………………………………………………… 30
3. 4 实验过程……………………………………………………………………………… 31
3. 5 实验总结……………………………………………………………………………… 40
思考题 ………………………………………………………………………………………… 40
第 4 章 气象数据探索性分析实验 ………………………………………………………… 41
4. 1 实验目标……………………………………………………………………………… 41
4. 2 实验环境……………………………………………………………………………… 41
4. 3 实验方法……………………………………………………………………………… 42
4. 4 实验过程……………………………………………………………………………… 432
4. 5 实验总结……………………………………………………………………………… 47
思考题 ………………………………………………………………………………………… 47
第 5 章 地震数据分析实验 ………………………………………………………………… 48
5. 1 实验目标 ………………………………………………………………………………… 48
5. 2 实验环境……………………………………………………………………………… 48
5. 3 实验方法……………………………………………………………………………… 49
5. 4 实验过程……………………………………………………………………………… 50
5. 5 实验总结……………………………………………………………………………… 56
思考题 ………………………………………………………………………………………… 56
第 6 章 信用卡逾期预测实验 ……………………………………………………………… 57
6. 1 实验目标……………………………………………………………………………… 57
6. 2 实验环境……………………………………………………………………………… 57
6. 3 实验方法……………………………………………………………………………… 57
6. 4 实验过程……………………………………………………………………………… 58
思考题 ………………………………………………………………………………………… 65
第 7 章 电影推荐实验 ……………………………………………………………………… 66
7. 1 实验目标……………………………………………………………………………… 66
7. 2 实验环境……………………………………………………………………………… 66
7. 3 实验方法……………………………………………………………………………… 67
7. 4 实验过程……………………………………………………………………………… 69
7. 5 实验总结……………………………………………………………………………… 74
思考题 ………………………………………………………………………………………… 74
第 8 章 社交网络推荐实验 ………………………………………………………………… 75
8. 1 实验目标……………………………………………………………………………… 75
8. 2 实验环境……………………………………………………………………………… 75
8. 3 实验方法……………………………………………………………………………… 75
8. 4 实验过程……………………………………………………………………………… 76
8. 5 实验总结……………………………………………………………………………… 78
思考题 ………………………………………………………………………………………… 78
第 9 章 航班图实验 ………………………………………………………………………… 79
9. 1 实验目标……………………………………………………………………………… 79
9. 2 实验环境……………………………………………………………………………… 79
9. 3 实验方法……………………………………………………………………………… 79
9. 4 实验过程……………………………………………………………………………… 80
9. 5 实验总结……………………………………………………………………………… 89
思考题 ………………………………………………………………………………………… 89
第 10 章 自然语言处理实验 ………………………………………………………………… 90
10. 1 实验目标 ……………………………………………………………………………… 90
10. 2 实验环境 ……………………………………………………………………………… 90
10. 3 实验方法 ……………………………………………………………………………… 91
10. 4 实验过程 ……………………………………………………………………………… 92
10. 5 实验总结 ……………………………………………………………………………… 96
思考题 ………………………………………………………………………………………… 96
第 11 章 扩展: 深度主题模型……………………………………………………………… 97
11. 1 词嵌入 ………………………………………………………………………………… 97
11. 2 主题模型…………………………………………………………………………… 116
11. 3 嵌入式主题模型…………………………………………………………………… 120
参考文献……………………………………………………………………………………… 128
