一种新的面向领域的鲁棒性文本分析算法

作     者：陶县俊 邬晓钧 王晓东 郑方 TAO Xianjun;WU Xiaojun;WANG Xiaodong;ZHENG Fang

作者机构：河南师范大学计算机与信息技术学院河南新乡453007 清华信息科学技术国家实验室技术创新与开发部语音和语言技术中心北京100084 

基　　金：河南省重点科技攻关项目资助(08210221007) 

出 版 物：《中文信息学报》 (Journal of Chinese Information Processing)

年 卷 期：2010年第24卷第4期

页      码：39-43页

摘      要：在自然语言处理的应用中,特别是在对口语文本、网络文本的处理中,待分析的文本经常会包含字词和句式上的错误。该文描述了一种基于线图分析方法改进的鲁棒性文本分析算法。该算法利用当前活动弧和规则库中的终结符,对基于领域词表的分词过程无法识别的语句串进行错误推测,将无法识别的语句串纠正为可能的正确文字。实验结果表明,在采用拼音的同音匹配进行推测纠错的情况下,该文所设计的鲁棒性文本分析算法相对于燕方法,分析度提高了14.78%,而语句平均分析循环次数增长为9.363%。

主 题 词：计算机应用 中文信息处理 线图分析方法 鲁棒性 错误推测 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

核心收录：

D　O　I：10.3969/j.issn.1003-0077.2010.04.006

馆 藏 号：203641419...