朴素并行LDA

摘要：

并行潜在狄利克雷分配(LDA)主题模型在计算与通信两方面的时间消耗较大,导致训练模型的时间过长,因而无法被广泛应用.提出朴素并行LDA算法,针对计算和通信分别提出改进方法.一方面通过加入单词影响因子以及设置阈值的方法来降低文本训练的粒度,另一方面通过降低通信频率来减少通信时间.实验结果表明,优化后的并行LDA在保证精度损失为1％的前提下,将训练速度提高了36％,有效提高了并行的加速比.

关键词：潜在狄利克雷分配、并行、加速优化

所属期刊栏目：42

分类号：TP391(计算技术、计算机技术)

资助基金：国家自然科学基金61003154,61373092,61033013,61272449,61202029;江苏省教育厅重大项目12KJA520004;苏州大学创新团队SDT2012B02;广东省重点实验室开放课题SZU-GDPHPCL-2012-09

在线出版日期：2015-07-06（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：243-246