MD5算法在消除重复网页算法中的应用

摘要：

Intemet用户通过常用搜索引擎获取Web信息时,往往得到了大量的重复网页信息,从而导致搜索效率不高.本文利用MD5算法成熟及可移植性好的特点,提出了一种基于MD5的消除重复网页的算法,实验证明该算法能有效的去除重复网页,时间和空间的复杂度不高,具有较强的实用价值.

关键词：搜索引擎、重复网页、MD5

分类号：TP393(计算技术、计算机技术)

资助基金：教育部科学技术研究项目教技司2001224

在线出版日期：2005-11-10（万方平台首次上网日期，不代表论文的发表时间）

页数：共2页

页码：15-16