收藏本站
《福建电脑》 2010年02期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

一种改进的基于Hash的中文分词算法研究

蔡蕊  
【摘要】:在分析已有的中文分词算法的基础上,利用改进的词典结构,提出一种新的基于Hash的中文分词算法。理论和实验证明,改进的算法可以进一步提高分词的效率。
【作者单位】山东大学计算机科学与技术学院;
【分类号】:TP391.1

手机知网App
【引证文献】
中国硕士学位论文全文数据库 前1条
1 徐兴智;科技平台撮合系统的设计与实现[D];吉林大学;2010年
【参考文献】
中国期刊全文数据库 前4条
1 李振星,徐泽平,唐卫清,唐荣锡;全二分最大匹配快速分词算法[J];计算机工程与应用;2002年11期
2 孙茂松,左正平,黄昌宁;汉语自动分词词典机制的实验研究[J];中文信息学报;2000年01期
3 陈玉忠,李保利,俞士汶;藏文自动分词系统的设计与实现[J];中文信息学报;2003年03期
4 赵曾贻,陈天娥,朱兰;一种基于语词的分词方法[J];苏州大学学报(自然科学);2002年03期
【共引文献】
中国期刊全文数据库 前10条
1 杜道流;指称、陈述理论及其对上古语法研究的意义[J];安徽大学学报;2004年01期
2 姜红;;具体名词和抽象名词的不对称现象[J];安徽大学学报(哲学社会科学版);2009年02期
3 施发笔;试论《水浒传》介词避复的技巧[J];安徽教育学院学报;2002年04期
4 阮绪和;形名偏正结构的语法功能[J];安徽教育学院学报;2003年02期
5 陶振伟;;“拿”的语法化[J];安徽教育学院学报;2006年04期
6 樊友新;;从“被就业”看“被”的语用功能[J];合肥师范学院学报;2010年02期
7 冯鸣;英语表持续时段的for短语和汉语时量词语的比较[J];安徽广播电视大学学报;2001年02期
8 王有卫;;语素文字说质疑[J];安徽广播电视大学学报;2010年03期
9 柳国栋;;《论语》重叠词略论[J];安徽职业技术学院学报;2008年02期
10 高艳萍;于红;尹祥贵;綦孝姬;王春永;赵志强;;基于双数组Trie树的渔业领域分词研究[J];安徽农业科学;2008年11期
中国重要会议论文全文数据库 前10条
1 李影;付莉;;韩国中小学生“是”的错序偏误分析[A];语言与文化研究(第四辑)[C];2009年
2 沈焕生;朱磊;;基于信息内容的关键词抽取研究[A];中国电子学会第十五届信息论学术年会暨第一届全国网络编码学术年会论文集(上册)[C];2008年
3 高璐;陈琪;李永宏;于洪志;;藏语语音合成中本文分析的若干问题研究[A];第九届中国语音学学术会议论文集[C];2010年
4 吕晓玲;;闽南方言南安话的类结构助词“得”、“说”、“伊”、“通”[A];福建省辞书学会第五届会员代表大会暨第十九届年会论文集[C];2009年
5 田长生;;浅谈《论语》中的复叠现象[A];江西省语言学会2005年年会论文集[C];2005年
6 阮绪和;;江西武宁(上汤)话的程度副词“死、几、蛮”[A];江西省语言学会2005年年会论文集[C];2005年
7 魏亮珍;;浅析《吕梁英雄传》中的“给”[A];江西省语言学会2006年年会论文集[C];2006年
8 周小婕;;数词研究综述[A];江西省语言学会2006年年会论文集[C];2006年
9 王安琛;;试论“V—V”结构[A];江西省语言学会2006年年会论文集[C];2006年
10 王安琛;;重叠式动补短语的句法语义分析[A];江西省语言学会2006年年会论文集[C];2006年
中国博士学位论文全文数据库 前10条
1 陈佳;论英汉运动事件表达中“路径”单位的“空间界态”概念语义及其句法—语义接口功能[D];上海外国语大学;2010年
2 郭红;基于第二语言教学的汉语语气范畴若干问题研究[D];南开大学;2010年
3 杨先明;0-5岁汉语儿童语言发展的认知研究[D];武汉大学;2010年
4 彭懿;英汉肤觉形容词的认知语义研究[D];湖南师范大学;2010年
5 龙又珍;现代汉语寒暄系统研究[D];武汉大学;2009年
6 李青;现代汉语把字句主观性研究[D];吉林大学;2011年
7 朱怀;概念整合与汉语非受事宾语句[D];吉林大学;2011年
8 王欣;汉日否定表达对比研究[D];吉林大学;2011年
9 莫启扬;语言中的时间性及其操作[D];西南大学;2011年
10 吴淑琼;基于汉语句法结构的语法转喻研究[D];西南大学;2011年
中国硕士学位论文全文数据库 前10条
1 黄雪;俄汉语词汇理据性对比研究[D];哈尔滨师范大学;2010年
2 马晶晶;表人名词类词缀“X手”、“X者”、“X员”分析比较[D];辽宁师范大学;2010年
3 乌晓丽;“X+—N比—N+VP”表义功能新探[D];辽宁师范大学;2010年
4 刘婧一;元代笔记分词理论与实践[D];广西师范学院;2010年
5 曹萍;府城官话研究[D];广西师范学院;2010年
6 旷金辉;汉英名词前置修饰语语序对比研究[D];上海外国语大学;2010年
7 陶胜妃;现代汉语谓词修饰词前后位置比较研究[D];上海外国语大学;2010年
8 严伟剑;疑问代词“怎么”“怎样”“怎么样”对比研究[D];上海外国语大学;2010年
9 耿冰;“实现事件”结构词汇化模式的英汉对比研究[D];上海外国语大学;2010年
10 王冰;《红楼梦》中茶”相关行为映射译者风格研究[D];大连理工大学;2010年
【同被引文献】
中国期刊全文数据库 前4条
1 王伊明,蔡鸿明;基于Oracle复制的针对结构化数据的搜索引擎功能的实现[J];东华大学学报(自然科学版);2005年04期
2 张淼;智能检索及跨库检索技术在数据库建设中的应用研究[J];科技情报开发与经济;2005年12期
3 李萌;孙甲;贾佳;孙济庆;;基于搜索引擎的中文文本检索效果比较研究[J];情报探索;2009年02期
4 文继军,王珊;SEEKER:基于关键词的关系数据库信息检索[J];软件学报;2005年07期
中国重要会议论文全文数据库 前1条
1 周小平;梁一平;邓左祥;;元搜索引擎研究[A];2009年中国高校通信类院系学术研讨会论文集[C];2009年
中国硕士学位论文全文数据库 前8条
1 李炎茗;元搜索引擎的现状研究与改进设计[D];华中师范大学;2002年
2 陈默;基于神经网络的元搜索引擎[D];浙江大学;2006年
3 张瑞;基于Lucene的中英文文档全文搜索引擎[D];电子科技大学;2008年
4 孙鑫;元搜索引擎结果个性化排序的研究与实现[D];中国石油大学;2008年
5 张芳;基于专业搜索引擎的元搜索引擎的研究与实现[D];华中科技大学;2007年
6 赵夷平;传统搜索引擎与语义搜索引擎比较研究[D];吉林大学;2009年
7 胡升泽;个性化元搜索引擎若干关键技术研究[D];国防科学技术大学;2008年
8 吕霞;搜索引擎去重算法的研究与实现[D];江苏大学;2009年
【二级参考文献】
中国期刊全文数据库 前10条
1 陈桂林,王永成,韩客松,王刚;一种改进的快速分词算法[J];计算机研究与发展;2000年04期
2 吴胜远;一种汉语分词方法[J];计算机研究与发展;1996年04期
3 梁南元;书面汉语自动分词系统—CDWS[J];中文信息学报;1987年02期
4 揭春雨 ,刘源 ,梁南元;论汉语自动分词方法[J];中文信息学报;1989年01期
5 何克抗,徐辉,孙波;书面汉语自动分词专家系统设计原理[J];中文信息学报;1991年02期
6 孙茂松,左正平,黄昌宁;汉语自动分词词典机制的实验研究[J];中文信息学报;2000年01期
7 王忠效,范植华;汉字自适应散列分组查找算法[J];中文信息学报;2001年02期
8 周强,张伟,俞士汶;汉语树库的构建[J];中文信息学报;1997年04期
9 刘挺,吴岩,王开铸;串频统计和词形匹配相结合的汉语自动分词系统[J];中文信息学报;1998年01期
10 陈玉忠,李保利,俞士汶,兰措吉;基于格助词和接续特征的藏文自动分词方案[J];语言文字应用;2003年01期
【相似文献】
中国期刊全文数据库 前10条
1 姚兴山;;基于哈希算法的中文分词算法的改进[J];图书情报工作;2008年06期
2 王坚,赵恒永;专业搜索引擎中文分词算法的实现与研究[J];福建电脑;2005年07期
3 盛启东;谭守标;徐超;冯二媛;陈军宁;;巧用黑盒法逆推百度中文分词算法[J];计算机技术与发展;2010年04期
4 蔡蕊;;一种改进的基于Hash的中文分词算法研究[J];福建电脑;2010年02期
5 王坚,赵恒永;专业搜索引擎的实现与研究——中文分词算法[J];电子科学技术评论;2005年03期
6 丁洁;;基于最大概率分词算法的中文分词方法研究[J];科技信息;2010年21期
7 蔡勇智;基于最大匹配分词算法的中文词语粗分模型[J];福建电脑;2005年09期
8 耿新青;陶凤梅;黄宏光;;一种基于近邻匹配的中文分词算法Jlppeccz[J];鞍山师范学院学报;2010年04期
9 曾华琳,李堂秋,史晓东;一种基于提取上下文信息的分词算法[J];计算机应用;2005年09期
10 匡振国;倪宏;嵇智辉;刘磊;;一种基于Lucene的影片搜索引擎的研究和应用[J];计算机工程与应用;2008年29期
中国重要会议论文全文数据库 前10条
1 王敏;叶宽余;薛峰;;一种面向网店商品搜索的中文分词系统设计[A];全国第22届计算机技术与应用学术会议(CACIS·2011)暨全国第3届安全关键技术与应用(SCA·2011)学术会议论文摘要集[C];2011年
2 修驰;宋柔;;基于“大词”实例的中文分词研究[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
3 张梅山;邓知龙;车万翔;刘挺;;统计与词典相结合的领域自适应中文分词[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
4 韩冬煦;常宝宝;;基于边界熵和卡方统计量的多领域适应性中文分词方法[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
5 黄居仁;;瓶颈,挑战,与转机:中文分词研究的新思维[A];中国计算机语言学研究前沿进展(2007-2009)[C];2009年
6 曾华琳;史晓东;李堂秋;;基于上下文信息提取的概率分词算法[A];第六届汉语词汇语义学研讨会论文集[C];2005年
7 苏亮;孙斌;;一种基于Lucene的Hash改进中文分词算法的实现[A];2007通信理论与技术新发展——第十二届全国青年通信学术会议论文集(上册)[C];2007年
8 姜文斌;王志洋;刘群;吕雅娟;;基于马尔可夫间隔标注的中文分词算法[A];中国计算机语言学研究前沿进展(2007-2009)[C];2009年
9 黄建华;常守锋;董晶晶;;面向北斗短报文的中文分词及压缩编码算法[A];第三届中国卫星导航学术年会电子文集——S02卫星导航信号体制及兼容与互操作[C];2012年
10 赵海;揭春雨;;基于子串标注的中文分词:寻找更佳的标注单元[A];内容计算的研究与应用前沿——第九届全国计算语言学学术会议论文集[C];2007年
中国重要报纸全文数据库 前10条
1 清华大学IT可用性实验室;2005中文搜索引擎质量对比[N];计算机世界;2005年
2 本报记者 张彤;让计算机说中国话[N];网络世界;2004年
3 记者 吴苡婷;用技术挖出网络信息中“金子”[N];上海科技报;2009年
4 贺俊;汇聚亿万草根智慧 奇虎发布经验搜索[N];证券日报;2006年
5 记者 杨朝晖;医药搜索:不再“众里寻他千百度”[N];科技日报;2007年
6 中国科学院计算技术研究所 王 斌;内容为王[N];计算机世界;2004年
7 张韬;谷歌推出“谷歌拼音”力拼百度[N];上海证券报;2007年
8 王翌;互联网2005:个性化生存[N];计算机世界;2005年
9 记者 李霆钧;国内首个“影视剧植入广告分析系统”出炉[N];中国电影报;2010年
10 王宾;加速争夺中国搜索市场[N];北京商报;2006年
中国博士学位论文全文数据库 前10条
1 张京楣;基于统计方法的文本风格分析研究[D];山东大学;2012年
2 何嘉;基于遗传算法优化的中文分词研究[D];电子科技大学;2012年
3 孙越恒;基于统计的NLP技术在中文信息检索中的应用研究[D];天津大学;2005年
4 孙道军;文本挖掘预处理相关基础技术分析与应用研究[D];北京邮电大学;2008年
5 杨传耀;中文信息检索索引模型及相关技术研究[D];复旦大学;2007年
6 陈博;WEB文本情感分类中关键问题的研究[D];北京邮电大学;2008年
7 任飞亮;高适应性基于实例的机器翻译中关键技术研究[D];东北大学;2008年
8 张友华;面向智能服务的Web内容计算研究与应用[D];中国科学技术大学;2006年
9 汤步洲;序列标注问题的监督学习方法及应用[D];哈尔滨工业大学;2011年
10 董建设;协作式垃圾邮件过滤关键技术研究[D];兰州理工大学;2009年
中国硕士学位论文全文数据库 前10条
1 马忠宝;基于支持向量机的中文文本分类系统研究[D];武汉理工大学;2006年
2 杨彦;基于Hash结构的机械统计分词系统[D];中南大学;2005年
3 戚晶;基于RSS的搜索引擎的研究与实现[D];吉林大学;2006年
4 马莉;基于SVM的垃圾邮件过滤的研究[D];山东大学;2005年
5 王新梅;基于内容挖掘的垃圾邮件过滤技术[D];武汉理工大学;2006年
6 李培国;基于人工神经网的中文垃圾邮件过滤器的设计与实现[D];暨南大学;2007年
7 李腊腊;基于特殊标志符的中文分词算法研究[D];湖北工业大学;2010年
8 刘琨;搜索引擎的研究与实现[D];西安电子科技大学;2004年
9 王圆;文本内容过滤的关键技术研究[D];东北师范大学;2006年
10 李东海;基于Nutch技术的主题搜索引擎实现[D];吉林大学;2008年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026