摘要:汉语的自动分词,是计算机中文信息处理领域中一个基础而困难的课题.该文提出了一种将汉语文本句子切分成词的新方法,这种方法以N-gram模型为基础,并结合有效的Viterbi搜索算法来实现汉语句子的切词.由于采用了基于
机器学习的自组词算法,无需人工编制领域词典.该文还讨论了评价分词算法的两个定量指标,即查准率和查全率的定义,在此基础上,用封闭语料库和开放语料库对该文提出的汉语分词模型进行了实验测试,表明该模型和算法具有较高的查准率和查全率.
原文链接:http://www.cqvip.com//QK/91130A/200111/5669715.html
送人玫瑰,手留余香~如您已下载到该资源,可在回帖当中上传与大家共享,欢迎来CDA社区交流学习。(仅供学术交流用。)