节点文献
网页查重技术在企业数据仓库中的应用
Automatic detection of online duplication documents and its application in enterprise data warehouse
【摘要】 介绍了处理网页排重的三类通用方法,并介绍了在企业数据仓库系统中,通过利用相似性检索技术实现情报资料自动排重的应用。通过对测试结果的评估表明,这种基于相似性检索技术的自动排重的方法能够达到较好的效果,实现了企业情报资料智能化预处理的应用。
【Abstract】 Three general methods to detect duplicate Web pages were introduced. The similarity search technique was used to detect duplicate information automatically in enterprise data warehouse. The results indicate that the similarity search method is fit for intelligent pretreatment of enterprise intelligence data.
【关键词】 数据仓库;
网页查重;
支持向量机;
向量空间模型;
【Key words】 data warehouse; online duplicate documents detection; Support Vector Machine (SVM); Vector Space Model(VSM);
【Key words】 data warehouse; online duplicate documents detection; Support Vector Machine (SVM); Vector Space Model(VSM);
- 【文献出处】 计算机应用 ,Computer Applications , 编辑部邮箱 ,2005年07期
- 【分类号】TP393.09
- 【被引频次】8
- 【下载频次】163