线上期刊服务咨询,发表咨询:400-808-1701 订阅咨询:400-808-1721

“切分变异”考证——兼谈“金本位”语言资源的建设

张霄军 语文学刊 2008年第01期

摘要:本文区别汉语自动分词中的“切分变异”、“组合型歧义”和“分词不一致”这三个概念,着重就“切分变异”这一分词现象的产生原因进行考证,并在真实语料调查的基础上统计切分变异字串在观察语料库中出现次数。探讨切分变异消解的原则。同时,本文还就“金本位”高质量分词语料库的建设提出设想和一种基于机器学习和错误驱动的算法。

关键词:切分变异分词不一致金本位分词语料库

单位:南京师范大学文学院 江苏南京210097

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

语文学刊

省级期刊

¥163.20

关注 20人评论|3人关注