基于MapReduce的中文词性标注CRF模型并行化训练研究

作     者：刘滔 雷霖 陈荦 熊伟 LIU Tao;LEI Lin;CHEN Luo;XIONG Wei

作者机构：国防科学技术大学电子科学与工程学院长沙410073 

基　　金：新闻出版重大科技工程项目(1041STC40889/01-2) 863计划(2011AA120300)资助 

出 版 物：《北京大学学报（自然科学版）》 (Acta Scientiarum Naturalium Universitatis Pekinensis)

年 卷 期：2013年第49卷第1期

页      码：147-152页

摘      要：针对条件随机场模型面对大规模数据传统训练算法单机处理性能不高的问题,提出一种基于MapReduce框架的条件随机场模型训练并行化方法,设计了条件随机场模型特征提取及参数估计的并行算法,实现了迭代缩放算法的并行。实验表明,所提出的并行化方法在保证训练结果正确性的同时,大大减少了训练时间,效率得到较大提升。

主 题 词：词性标注 条件随机场 MapReduce 并行 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

核心收录：

D　O　I：10.13209/j.0479-8023.2013.022

馆 藏 号：203144182...