基于Spark的大数据计算模型

摘要：

作为第三代机器学习工具，spark被视为替换Hadoop的下一代数据处理解决方案.包括了迭代计算、批处理计算、内存计算、流式计算、数据查询分析计算及图计算,提供了强大的内存计算引擎.Spark有望成为下一代大数据热门框架.研究分析了Spark组件生态圈和Lambda架构.最后介绍了Spark应用于机器学习领域.

关键词：机器学习、spark、Hadoop

所属期刊栏目：12

分类号：TP301(计算技术、计算机技术)

资助基金：陕西广播电视大学2015年度科研课题《信息技术与云计算技术研究》项目编号15D-08-B08；陕西工商职业学院2015年度教革课题《大数据下的计算机类课程资源建设实践研究》项目编号GJ1529

在线出版日期：2016-08-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共2页

页码：7-8