位置编码在数据仓库ETL中的应用

摘要：

为了保证数据仓库中数据的质量,在数据挖掘前必须进行数据清洗.ETL是构建数据仓库的重要环节,数据清洗就包含在其中.而检测和消除数据仓库中的相似重复记录是数据清洗和提高数据质量要解决的关键问题之一.该文将位置编码技术引入到数据仓库ETL中,提出了一种相似重复记录的检测算法,并给出了不同级别匹配阈值的动态确定方法.通过实验表明该算法具有较好的检测效果.

关键词：数据清洗、位置编码、数据仓库、ETL、相似重复记录

所属期刊栏目：33

分类号：TP311(计算技术、计算机技术)

在线出版日期：2007-03-05（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：50-52