摘要:随着自然语言处理技术的发展和大规模语料库的出现,各类自然语言应用中使用的语言模型规模也越来越大。IRSTLM①在训练语言模型时采用了划分词典分块训练快速合并的方式,从而在训练大规模语料时取得了优异的性能。但它受限于训练方式,难以估算精确概率。本文在分析和重实现IRSTLM的基础上提出了一种方法,可以用来修正合并后的语言模型。在机器翻译上的实验表明,该方案有助于改进生成的语言模型的质量。同时,本项实验还填补了java平台上语言模型训练和使用工具的空白。
原文链接:http://www.cqvip.com//QK/89810X/200801/88739072504848564849484852.html
送人玫瑰,手留余香~如您已下载到该资源,可在回帖当中上传与大家共享,欢迎来CDA社区交流学习。(仅供学术交流用。)