本课程突出“大数据分析”这一主题，从大数据分析的原理、技术和应用的角度，沿着“大数据分析基础知识--大数据分析平台核心原理--大数据分析关键技术--大数据分析应用”的主线进行讲述，并从工程伦理、工匠精神、科技报国和科学思维四个方面融入课程思政元素。

通过本课程的学习，使学生能够掌握：

·大数据的基本知识；

·大数据平台的核心原理；

·大数据获取、存储、处理、分析和可视化的关键技术；

·大数据在商业、投资、保险、银行中的实际应用；

·工程开发中需遵守的伦理规则和职业道德。

同时培养学生：

·搭建大数据分析平台的工程技术能力；

·面向大规模、多类型数据集的分析及处理能力；

·基于大数据思维方式进行数据分析的能力；

·将大数据技术与实际财经应用问题相结合，实现快速决策分析的能力；

·精益求精的大国工匠精神；

·科技报国的家国情怀和使命担当；

·以科学思维推动社会进步的使命和担当。

课程内容具体包括：

(1)大数据分析的基础知识部分介绍了大数据的产生背景与概念、大数据的特点和技术概述、大数据的应用和价值、大数据时代的思维变革；

(2)大数据分析平台的核心原理部分介绍了开源大数据平台—Hadoop和Spark的起源、发展、体系架构、基本运行机制、安装部署过程及使用方法等、大数据存储和管理—分布式文件系统HDFS和分布式数据库HBase的基本原理和编程实践、大数据处理—MapReduce并行编程模型和流处理平台Flink的基本原理和编程实践、Hadoop 2.0的资源管理调度框架—YARN的基本原理；

(3)大数据分析的关键技术部分介绍了大数据获取、数据清洗、数据规约、数据标准化、大数据分析算法（包括典型聚类、分类算法，深度学习算法）的原理和应用、大数据可视化方法的原理和应用；

(4)大数据分析的应用部分以案例的形式介绍了大数据在商业、金融、证券、投资、保险、国际贸易中的应用，并给出大数据分析技术在上市公司信用风险预测研究中的具体实现过程；

(5)在工程伦理方面，通过案例讲解和讨论，让学生了解工程开发中需遵守的伦理规则和职业道德；在工匠精神方面，通过案例讲解，培养学生数据分析过程中精益求精的大国工匠精神；在科技报国方面，通过对国家大数据战略相关的重要讲话和重要文件的要点解读，激发学生科技报国的家国情怀和使命担当；在科学思维方面，通过案例讲解和讨论，培养学生以科学思维推动社会进步的使命担当。