收藏本站
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

基于组合度的汉语分词决策算法研究

刘利东  
【摘要】:提出了汉字组合的组合度概念 ,讨论了组合度与组合的成词能力之间的关系 ,利用决策树的方法挖掘了组合度与分词模板的关系 .在此基础上得出了一种新的分词算法 .实验表明组合度对组合成词能力的影响远远大于组合频率的影响 .这种分词方法对汉语分词的歧义问题、人名、地名识别问题 ;新词识别问题等都有一定的作用 .

知网文化
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978