一种分布式用户浏览点击模型算法

摘要：

为从海量搜索点击日志中快速挖掘用户行为, 提出一种分布式用户浏览点击模型 (UBM) 算法.原始UBM算法求出的检验度参数E只与搜索结果文档所在排序位置以及上一文档的点击位置有关, 且非常稳定, 基于此特性, 将EM迭代求解转换为抽样估计检验度以求解吸引度的分布式UBM算法.在Spark数据平台上进行仿真, 结果表明, 与原始UBM算法相比, 该算法能够解决点击日志中存在的严重数据倾斜问题, 且运行效率较高.

关键词：点击日志、点击模型、用户浏览点击模型算法、搜索引擎、Spark平台

所属期刊栏目：45

分类号：TP391(计算技术、计算机技术)

资助基金：中国科学院信息化专项"中国科学院信息化评估"Y647021189

在线出版日期：2019-05-31（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：1-6