基于Spark的矩阵分解推荐算法

摘要：

针对传统矩阵分解算法在处理海量数据信息时所面临的处理速度和计算资源的瓶颈问题,利用Spark在内存计算和迭代计算上的优势,提出了Spark框架下的矩阵分解并行化算法.首先,依据历史数据矩阵初始化用户因子矩阵和项目因子矩阵;其次,迭代更新因子矩阵,将迭代结果置于内存中作为下次迭代的输入;最后,迭代结束时得到矩阵推荐模型.通过在GroupLens网站上提供的MovieLens数据集上的实验结果表明,加速比(Speedup)值达到了线性的结果,该算法可以提高协同过滤推荐算法在大数据规模下的执行效率.

关键词：协同过滤、推荐算法、矩阵分解、迭代最小二乘法、Spark

所属期刊栏目：35

分类号：TP301.6(计算技术、计算机技术)

在线出版日期：2015-12-01（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：2781-2783,2788