本课程从大数据分析的原理、技术和应用的角度，围绕着大数据分析的基础知识、大数据分析平台的核心原理、大数据分析的关键技术、大数据分析的应用四个方面进行讲述，使学生能掌握大数据分析的基本原理和核心技术，同时熟悉大数据分析的原理和技术在商业、投资、保险和银行中的应用，并能搭建大数据分析平台分析大规模数据集。
1、使学生能够掌握大数据分析的核心原理和关键技术
2、使学生了解大数据分析在不同行业中的应用
3、培养学生搭建大数据分析平台分析大规模数据集的能力
第一章 绪论
大数据的产生背景与概念
大数据的特点和技术概述
大数据的应用与价值体现
大数据时代的思维变革
第一章单元作业
第一章单元测试
第二章 开源大数据平台
开源大数据平台（Hadoop）
开源大数据平台（Spark）
简明实验指南
第二章单元作业
第三章 Hadoop分布式文件系统——HDFS
3.1HDFS概述
3.2HDFS体系结构
3.3&3.4HDFS存储原理与优缺点分析
补充材料：熟悉常用的HDFS操作
补充材料：相关论文
第三章单元测试
第三章单元作业
第四章 MapReduce并行编程模型
4.7MapReduce编程实践教学视频
4.1概述
4.2MapReduce体系结构
4.3MapReduce工作流程
4.4MapReduce实例分析
4.5MapReduce编程实践
4.6MapReduce优缺点分析
第四章上机实验
补充资料：相关论文
第四章单元测试
第五章 Hadoop 2.0的资源管理调度框架——YARN
5.1 YARN产生的背景 &5.2 YARN设计思路
5.3 YARN体系结构
5.4 YARN工作流程
5.5 YARN优缺点分析
第五章单元作业
第六章 大数据的获取
6.1 网络爬虫基础知识
6.2 Requests库
6.3 Beautiful Soup库
6.4 综合实验
第六章单元作业
第七章 大数据分析算法
7.1 聚类算法
7.2 分类算法
第七章单元作业
第七章单元测验
第八章 大数据分析应用
8.1大数据分析在商业中的应用（大数据营销）
8.2 大数据分析在投资中的应用
8.3 大数据分析在保险中的应用
8.4 大数据分析在银行中的应用
第八章单元测试
第八章单元作业
计算机基础、操作系统、计算机网络
为积极响应国家低碳环保政策， 2021年秋季学期开始，中国大学MOOC平台将取消纸质版的认证证书，仅提供电子版的认证证书服务，证书申请方式和流程不变。
电子版认证证书支持查询验证，可通过扫描证书上的二维码进行有效性查询，或者访问 https://www.icourse163.org/verify，通过证书编号进行查询。学生可在“个人中心-证书-查看证书”页面自行下载、打印电子版认证证书。
完成课程教学内容学习和考核，成绩达到课程考核标准的学生（每门课程的考核标准不同，详见课程内的评分标准），具备申请认证证书资格，可在证书申请开放期间（以申请页面显示的时间为准），完成在线付费申请。
认证证书申请注意事项：
1. 根据国家相关法律法规要求，认证证书申请时要求进行实名认证，请保证所提交的实名认证信息真实完整有效。
2. 完成实名认证并支付后，系统将自动生成并发送电子版认证证书。电子版认证证书生成后不支持退费。
[1]大数据技术原理与应用:概念、存储、处理、分析与应用(第二版).林子雨. 人民邮电出版社,2017
[2]大数据基础编程、实验和案例教程. 林子雨.清华大学出版社, 2017
[3]Hadoop权威指南(第3版). [美] Tom White著. 华东师范大学数据科学与工程学院译.清华大学出版社, 2015.
[4]Hadoop实战. [美]Chuck Lam著. 韩冀中译. 人民邮电出版社, 2011.
[5]大数据商业应用场景. 王叁寿. 机械工业出版社, 2016,7.
[6]Hadoop+Spark 大数据巨量分析与机器学习整合开发实战. 林大贵. 清华大学出版社, 2017,1.
课程配套教材：大数据分析原理和应用.海沫,李海峰.电子工业出版社.2023,4.
链接：https://item.jd.com/13965260.html
副教授
由高教社联手网易推出，让每一个有提升愿望的用户能够学到中国知名高校的课程，并获得认证。
网上有害信息举报（涉未成年人）：网站 https://www.12377.cn 邮箱（涉未成年人） youdao_jubao@rd.netease.com
粤B2-20090191-26
| 京ICP备12020869号-2 |
京公网安备44010602000207
©2014-2025
浙公网安备 33010802012594号
