电子商务商品归一化方法研究

摘要：

电子商务网站中不断增长的商品数量和商品规模对数据管理提出了新的挑战,其中一项重要基本任务是商品归一化,即识别属于同一个客观实体的所有商品.商品归一化的实现有助于提高商品搜索的准确性、改善用户的体验.但由于在电子商务网站中,特别是在C2C (Customer-to-Customer)模式下,商品信息的数据质量很低且缺乏统一的模式定义规范,导致已有的商品归一化方法难以适用.针对这一问题,文中设计了一种将数据集成、数据清理和商品归一化相结合的混合框架.该框架首先基于图的方法进行模式集成,然后利用商品的描述信息进行数据清理,从而得到数据质量更高且模式统一的商品信息数据;在数据集成和数据清理之后,利用逻辑斯蒂回归(Logistic regression)模型训练分类器,从而得到商品之间的相似度矩阵,最后对相似度矩阵聚类实现商品归一化.通过与已有的方法在真实数据上进行对比实验,验证了文中提出的方法的有效性.

关键词：实体识别、模式集成、数据清理、逻辑斯蒂回归、聚类、电子商务

所属期刊栏目：37

分类号：TP311(计算技术、计算机技术)

资助基金：国家自然基金61103039,61232002;国家“九七三”重点基础研究发展规划项目基金2012CB316200;国家“八六三”高技术研究发展计划项目基金2012AA011003;the National Natural Science Foundation of China.61103039 and 61232002;the National Basic Research Program973 Programof China2012CB316203;the National High Technology Research and Development Program863 Programof China2012AA011003

在线出版日期：2014-07-10（万方平台首次上网日期，不代表论文的发表时间）

页数：共14页

页码：312-325