节点文献

基于上下文的真词错误检查及校对方法

Context-dependent word error’s correcting and proofreading

  • 推荐 CAJ下载
  • PDF下载
  • 不支持迅雷等下载工具,请取消加速工具后下载。

【作者】 陆玉清洪宇陆军姚建民朱巧明

【Author】 Yu-Qing Lu,Yu Hong,Jun Lu,Jian-Min Yao,Qiao-Min Zhu Provincial Key Laboratory of Computer Information Processing Technology Soochow University,Suzhou,China,215006

【机构】 苏州大学江苏省计算机信息处理重点实验室

【摘要】 英文文本中的真词错误即输入的错词是和原词相似的另一个有效词。本文主要研究了对该类错误的检测。通过从所要检测的单词的上下文中提取句法和语义两个方面的特征,运用文档频率和信息增益进行特征筛选,实现了对上下文特征的有效提取。最终把判断该单词使用的正确与否看作分类问题,使用Winnow分类算法进行训练和测试。通过5阶交叉验证,所收集的61组混淆集的平均正确率与召回率分别为96%,79.47%。

【Abstract】 Context-dependent word errors in English texts are errors in which one correctly spelled word is substituted for another.This paper mainly discussed how to detect this type of errors.In the work reported here, we represent a method that firstly we extract features of syntax and semantics from the word context,and then we use Document Frequency and Information Gain to do feature selection,realizing the effective extraction of contextual features At last,we modeled the detecting task as a classification using the Winnow algorithm to train and test the sentences that are related with those confusion words.With five-across validation,the average precision and recall are respectively 96%,79.47%according to the 6lgroups of confusion sets.

【基金】 国家自然科学基金(NO.60873105)项目支持
  • 【会议录名称】 第六届全国信息检索学术会议论文集
  • 【会议名称】第六届全国信息检索学术会议
  • 【会议时间】2010-08-12
  • 【会议地点】中国黑龙江牡丹江
  • 【分类号】TP391.3
  • 【主办单位】中国中文信息学会信息检索与内容安全专业委员会
节点文献中: