节点文献

蒙古文停用词和英文停用词比较研究

A Comparative Study on Between Mongolian Stop Words and English Stop Words

  • 推荐 CAJ下载
  • PDF下载
  • 不支持迅雷等下载工具,请取消加速工具后下载。

【作者】 巩政关高娃

【Author】 GONG Zheng,GUAN Gaowa(College of Computer Science,Inner Mongolia University,Hohhot,Inner Mongolia 010021,China)

【机构】 内蒙古大学计算机学院

【摘要】 该文采用联合熵算法(Union Entropy,UE)初步确定了蒙古文停用词,接着从初步确定的蒙古文停用词中去掉蒙古文实体名词及同形异义词,再通过对英文停用词和蒙古文停用词的词性比较,确定了蒙古文停用词表。最后用蒙古文停用词表和英文停用词表进行了文档信息检索的对比实验。实验结果表明,用该文所述方法确定的蒙古文停用词表进行蒙古文文档检索,比用英文停用词翻译成蒙古文进行蒙古文文档检索的准确率更高。

【Abstract】 In this paper,we initially set the Mongolian stop words with the union entropy algorithm(union entropy,UE),and then remove Mongolian entities nouns and homographs from Mongolian stop words.finally we compare the parts of speech of English stop words and Mongolian stop wordsto determine the Mongolian stopword list.We test the Mongolian stopword list and the English stopword list on document information retrieval task.The results show that the method used in this paper to determine the Mongolian stopword list has higher accuracy in Mongolian document retrieval than the simple translation English stop words into Mongolian.

【基金】 内蒙古自治区自然科学基金资助项目(2009MS0903);内蒙古大学科技创新团队建设计划(智能与蒙古文信息处理)资助
  • 【文献出处】 中文信息学报 ,Journal of Chinese Information Processing , 编辑部邮箱 ,2011年04期
  • 【分类号】TP391.1
  • 【被引频次】11
  • 【下载频次】199
节点文献中: 

本文链接的文献网络图示:

本文的引文网络