基于hmm的楚辞自动分词标注研究

？研究古代和现代汉语的自动分词标注技术，用隐马尔科夫模型对《楚辞》进行自动分词标注实验，通过比较分词后的标注词性概率，取最大概率作为最后的分词和词性标注结果，并在其中使用全切分和加值平滑算法。经过实验调整分词标注程序模块和参数，最终得到一个分词标注辅助软件，其开放测试的分词f值为85%，标注f值为55%，高出基准f值14个百分点。