收藏本站
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

上下文相关汉语自动分词及词法预处理算法

黄河燕  李渝生  
【摘要】:提出了一种适合于汉英机器翻译的上下文相关汉语自动分词及词法预处理算法.该算法采用正向多路径匹配算法和基于上下文相关知识的歧义切分消解算法,充分利用汉英机译系统词典库中的大量语法和语义等知识进行上下文相关的规则推导消歧,使自动分词的准确率达到了99%以上.同时,该算法还对汉语中意义冗余的重叠词和可以与中心词离合的虚词等进行了词法预处理,从而一方面可以减少系统词典的收词量,另一方面方便于对句子的分析处理

知网文化
【相似文献】
中国期刊全文数据库 前10条
1 刘源;字词频统计与汉语分词规范[J];语文建设;1992年05期
2 孙茂松,黄昌宁,高海燕,方捷;中文姓名的自动辨识[J];中文信息学报;1995年02期
3 孙茂松,邹嘉彦;汉语自动分词研究中的苦干理论问题[J];语言文字应用;1995年04期
4 骆正清,陈增武,胡上序;一种改进的MM分词方法的算法设计[J];中文信息学报;1996年03期
5 张民,李生,王海峰,赵铁军,王铁志;基于知识评价的快速汉语自动分词系统[J];情报学报;1996年02期
6 侯敏,孙建军;汉语自动分词中的歧义问题[J];语言文字应用;1996年01期
7 沈达阳,孙茂松,黄昌宁;汉语自动分词和词性标注一体化系统[J];中文信息;1996年05期
8 孙茂松,黄昌宁,邹嘉彦,陆方,沈达阳;利用汉字二元语法关系解决汉语自动分词中的交集型歧义[J];计算机研究与发展;1997年05期
9 黄昌宁;中文信息处理中的分词问题[J];语言文字应用;1997年01期
10 黄河燕,李渝生;上下文相关汉语自动分词及词法预处理算法[J];应用科学学报;1999年02期
中国重要会议论文全文数据库 前10条
1 贺前华;徐秉铮;;神经网络在汉语自动分词中的应用[A];第二届全国人机语音通讯学术会议论文集[C];1992年
2 孙茂松;;汉语自动分词研究的若干最新进展——清华大学相关工作简介[A];辉煌二十年——中国中文信息学会二十周年学术会议论文集[C];2001年
3 廉竹钧;;汉语组合型切分歧义字段消歧方法研究[A];第一届学生计算语言学研讨会论文集[C];2002年
4 曲维光;;解决汉语自动分词的方法选择[A];第一届学生计算语言学研讨会论文集[C];2002年
5 孙茂松;王洪君;董秀芳;;《信息处理用现代汉语分词词表》规范[A];语言计算与基于内容的文本处理——全国第七届计算语言学联合学术会议论文集[C];2003年
6 庄丽;包塔;朱小燕;;盲人用计算机软件系统中的语音和自然语言处理技术[A];第七届全国人机语音通讯学术会议(NCMMSC7)论文集[C];2003年
7 庄丽;包塔;朱小燕;;盲人用计算机软件系统中的语音和自然语言处理技术[A];第七届全国人机语音通讯学术会议论文集[C];2003年
8 杨尔弘;方莹;乔羽;;汉语自动分词和词性标注评测[A];第二届全国学生计算语言学研讨会论文集[C];2004年
9 杨超;李仁发;蒋斌;;一种高效的汉语自动分词词典机制[A];NCIRCS2004第一届全国信息检索与内容安全学术会议论文集[C];2004年
10 肖航;靳光瑾;;现代汉语词语切分歧义库构建[A];第三届全国语言文字应用学术研讨会论文集[C];2004年
中国博士学位论文全文数据库 前1条
1 贺前华;汉语自动分词及机器翻译研究[D];华南理工大学;1993年
中国硕士学位论文全文数据库 前10条
1 程晓静;自然语言处理在药物专利检索系统中的应用[D];大连理工大学;2004年
2 罗小虎;基于蚁群算法的汉语自动分词的研究与实现[D];苏州大学;2004年
3 赵志靖;汉语自动分词技术及其在机器人辅助教育智能接口中的应用研究[D];天津师范大学;2004年
4 马哲;垃圾邮件过滤系统的研究与实现[D];浙江大学;2005年
5 唐培丽;基于语义的汉语文本主题词提取算法研究与实现[D];吉林大学;2005年
6 杨超;基于最大匹配的书面汉语自动分词研究[D];湖南大学;2004年
7 代建英;汉语自动分词系统的研究与实现[D];重庆大学;2005年
8 刘禹孜;汉语自动分词中排除歧义字段算法的研究[D];重庆大学;2005年
9 胡可;基于人工免疫系统的信息过滤技术研究[D];西南交通大学;2006年
10 熊冬明;汉语自动分词和中文人名识别技术研究[D];浙江大学;2006年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978