节点文献
WEB挖掘研究和基于多层次数据库的智能化WEB挖掘引擎系统的实现
Search of WEB Mining and Realization of Intelligent WEB Minning System Based on MLDB
【作者】 王维花;
【导师】 李长河;
【作者基本信息】 西安理工大学 , 计算机应用技术, 2004, 硕士
【摘要】 论文首先介绍了WEB挖掘和信息检索的概念、相关技术以及国内外发展现状与趋势,描述了现今常用的WEB挖掘方法和工具,提出并实现了基于WEB挖掘和多层次数据库的综合智能化WEB挖掘引擎系统—IWMES(Intelligent WEB Mining Engine System)。该系统通过Web Services技术,建立在现有搜索引擎基础之上,以XML技术解决了多样性和非结构性的WEB数据转换,形成了WEB多层次数据库,利用了WEB挖掘面向结构化或半结构化数据的智能化数据抽取和知识发现过程,并且构造了数据仓库的高性能查询体系结构—HPQS,利用MIDAS技术形成了高性能索引库结构,弥补了当前搜索引擎在覆盖范围、准确率、复杂查询语言的使用和结果表现方式等方面的不足,改善了信息检索的效率。 本文阐述了系统的体系结构,说明了索引库、WEB多层次数据库、数据仓库、数据收集器、数据预处理器和综合数据挖掘器等组成部分的基本功能。并且详细介绍了该系统的实现原理、系统构架以及索引库、WEB信息资源搜索、多层次数据库、数据仓库、数据预处理和数据挖掘等功能模块的构建,并结合模块的功能实现流程图,陈述了整个系统的实现过程。尤其详细介绍了在系统中所使用的数据仓库模块的设计、实施以及OWB软件体系结构的实现,并给出了相应的软件流程图、模块功能结构图、实现方法和部分程序代码,以及系统实现过程中所用到的部分算法。
【Abstract】 The thesis recommends the concepts, relevant technology of WEB mining and information retrieval, and trends both at home and abroad at first, describes commonly methods and tools nowadays, realizes the synthesis intelligent engine system of IWMES on the basis of web data mining and multilevel database. This system is set up on the existing search engine foundations through Web Services’ technology, has solved variety and non-structural WEB data with XML technology, has formed WEB multi- level data base, and constructed the system structure in high performance of data warehouse, utilized MIDAS technology to form the high-performance index storehouse structure, has remedied the deficiency of search engines at coverage, accuracy etc, and improved efficiency of information retrieval.The thesis explains the systematic structures, the basic functions of index storehouse, WEB multi-level databases and other constitutes. Not in detail introduces its realization principles and systematic frameworks, and, combining the module function flow charts of realization, states the whole systematic realization course. Finally, this paper realizes the intelligent system combination structure excavate and mining of content, and provides corresponding software flow charts, function structure charts of the module, implementation methods and some procedure codes, and some interconnected system algorithms used in the process of the realization of the system.
- 【网络出版投稿人】 西安理工大学 【网络出版年期】2004年 03期
- 【分类号】TP393.09
- 【被引频次】2
- 【下载频次】284