节点文献
一种基于可信度的人名识别方法
Recognition of Person Names based on Reliability
【Author】 LUO Zhiyong SONG Rou(Beijing University of Technology, Beijing 100022, China); ~2(Beijing Language and Culture University, Beijing 100083, China)
【机构】 北京工业大学计算机学院; 北京语言大学语言信息处理研究所;
【摘要】 专名识别是中文自动分词的重要任务。本文分析了目前流行的基于语料库和统计语言模型(SLM)的专名识别方法中存在的问题,同时以人名识别为例,在规则和统计相结合的基础上,提出了一种基于可信度的人名识别方法。从我们对《人民日报》1998年1月、2000年12月(共约379万字)语料的开放测试结果来看,基于可信度的人名识别方法比SLM方法识别效果有较大的提高,同时比基于规则和知识库的分词系统具有更好的扩充性。
【Abstract】 This paper puts forward a recognition strategy of person names in modern Chinese word segmentation based on reliability. The method successfully resolves the problem of mis-estimate in SLM method. Large-scale test on real corpus show that this method has got high performance and precision.
【Key words】 Word Segmentation; Recognition of person-names; SLM; Reliability;
- 【会议录名称】 第二届全国学生计算语言学研讨会论文集
- 【会议名称】第二届全国学生计算语言学研讨会
- 【会议时间】2004-08
- 【分类号】TP391.4
- 【主办单位】中国中文信息学会