节点文献

FTP搜索引擎数据采集策略的研究

Data acquisition strategy for FTP search engine

  • 推荐 CAJ下载
  • PDF下载
  • 不支持迅雷等下载工具,请取消加速工具后下载。

【作者】 郭立力胡亮张小栓

【Author】 GUO Li-li1,3,HU Liang1,ZHANG Xiao-shuan1,2(1.China Agricultural University,Beijing 100083,China;2.Key Laboratory of Computer Information Processing Techonlogy,Soochow University,Jiangsu 215006,China;3.Postage Stamp Printing Bureau of China Post Group,Beijing 100054,China)

【机构】 中国农业大学中国邮政集团邮票印制局苏州大学计算机信息处理技术重点实验室

【摘要】 为了解决传统FTP Search Engine的检索时效性问题,提出了一种有针对性的数据采集更新模型。在该模型中,更新频率被设计用于解决在怎样尽可能降低服务器负载压力的前提下保证较高的平均有效下载比率的问题,而队列排序用于解决在一次数据采集更新中怎样确定FTP站点队列采集对象顺序的策略优化。

【Abstract】 Because the traditional FTP search engines usually adopt centralized spiders to collect data,the temporal effectiveness insuf-ficient is their major demerit.For solving this problem,an efficient data acquisition model is presented.The key technologies involve data update frequency and queue order.The data update frequency is designed to provide a balance between a good ratio of available FTP file download links and a high data acquisition frequency.The queue order is designed to optimize the order strategy of FTP sites in a data acquisition task.

【基金】 国家863高技术研究发展计划基金项目(2006AA10Z239);欧盟亚洲信息技术与通信基金项目(Europe Aid/117839/C/G-41-15);江苏省高校省级重点实验室开放基金项目(2006)
  • 【文献出处】 计算机工程与设计 ,Computer Engineering and Design , 编辑部邮箱 ,2009年08期
  • 【分类号】TP393.093
  • 【被引频次】1
  • 【下载频次】164
节点文献中: 

本文链接的文献网络图示:

本文的引文网络