基于Spark平台的考勤数据决策树回归分析

摘要：

校园大数据分析是目前大数据研究的重要领域,针对历年积累的大量学生考勤数据,传统的数据库技术几乎无法完成全量的数据分析,串行的计算方法很难在短时间内计算出分析结果.大数据技术是解决此类问题的一种较好的方法.本文提出了一种基于Spark平台的决策树回归分析方法,可在较短时间内完成大量考勤数据的分析,生成影响学生课堂出勤率的决策树,该决策树对学生课堂出勤率的监测预警以及教学管理决策有一定的参考意义.文中详细描述了数据并行处理的流程以及采用CART算法对学生课堂出勤率进行回归分析的方法.并且比较了传统数据库技术与并行数据处理方式进行学生考勤数据分析的效率,该方法取得了较好的效果.

关键词：大数据、决策树、回归分析、考勤分析、CART

所属期刊栏目：37

分类号：TP399(计算技术、计算机技术)

资助基金：内蒙古农业大学基础学科科研启动基金项目JC2014006;内蒙古农业大学实验教学仪器设备研制项目2015

在线出版日期：2018-07-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：130-135