收藏本站
《计算机与数字工程》 2012年04期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

一种支持Ajax框架的网络爬虫的设计与实现

钱程  阳小兰  
【摘要】:目前传统爬虫无法爬取Ajax动态网站,为解决该问题,该文设计了一个支持Ajax的网络爬虫,提出了AjaxCrawler的体系结构,实现了浏览器、模拟器、控制器和自动机,并通过实验,进行了爬取结果的对比,证明了其效果。
【作者单位】武昌理工学院信息工程学院;
【分类号】:TP393.092

【参考文献】
中国期刊全文数据库 前1条
1 赵永屹;宿红毅;胡韶辉;;基于AJAX与J2EE的新型Web应用的设计与实现[J];计算机工程与设计;2007年01期
【共引文献】
中国期刊全文数据库 前4条
1 房国志;丛亮;徐焱鑫;;基于AJAX技术的B/S结构CRM系统的设计与实现[J];哈尔滨理工大学学报;2007年03期
2 刘鹏;黄诗诗;俞奕;;基于Ajax的数字地图构建方法研究[J];科技信息;2006年07期
3 夏文秀;随书光盘的上网管理及应用实践[J];图书馆学刊;2005年02期
4 张健,欧红;应用正则式抽取Google网页内容[J];现代图书情报技术;2005年09期
中国博士学位论文全文数据库 前1条
1 李卫国;水稻生长模拟与决策支持系统的研究[D];南京农业大学;2005年
中国硕士学位论文全文数据库 前8条
1 杨海东;基于Ajax技术的异步搜索引擎研究与实现[D];南京信息工程大学;2007年
2 陈书;智能跨平台网站导航技术研究[D];北京化工大学;2005年
3 刘常;语义信息自动生成研究[D];北京邮电大学;2007年
4 张建伟;基于Ajax医疗随访系统的开发研究[D];暨南大学;2007年
5 金晓鸥;互联网舆情信息获取与分析研究[D];上海交通大学;2008年
6 王爽;基于J2EE的网络考试系统的设计与实现[D];西北大学;2008年
7 刘彤;垂直搜索引擎技术研究与应用[D];西安建筑科技大学;2008年
8 吴兵华;基于深度网络的信息检索模型研究[D];武汉理工大学;2008年
【二级参考文献】
中国期刊全文数据库 前10条
1 卢春燕;雷景生;;基于模糊关联的交互式Web信息检索技术[J];广西师范大学学报(自然科学版);2007年02期
2 张强弓,喻国宝,廖湖声,隋树林;一种元搜索引擎的查询结果处理模型[J];华南理工大学学报(自然科学版);2004年S1期
3 张树瑜,朱仲英;基于MT决策树的Web信息抽取研究[J];计算机工程与应用;2004年13期
4 吕林涛;万经华;周红芳;;基于AJAX的Web无刷新页面快速更新数据方法[J];计算机应用研究;2006年11期
5 刘高勇;汪会玲;;Agent技术对知识社区协同学习的支持及其实现[J];情报理论与实践;2006年03期
6 张冰,赖杰贤;一种基于J2EE的Web应用的设计与实现[J];计算机工程与设计;2004年06期
7 刘芳,肖铁军;XML应用的基石:XML解析技术[J];计算机工程与设计;2005年10期
8 郑耿忠,刘秋梅;基于XML和J2EE的远程教育资源共享模型研究及实现[J];计算机工程与设计;2005年11期
9 王星;潘郁;;基于AJAX技术的Web模型在网站开发中的应用研究[J];微计算机信息;2006年27期
10 陆伟,万维雅;基于认知观点的信息检索交互模型[J];中国图书馆学报;2005年02期
中国博士学位论文全文数据库 前4条
1 熊文新;信息检索Query语言分析[D];北京语言大学;2006年
2 张榕;术语定义抽取、聚类与术语识别研究[D];北京语言大学;2006年
3 彭涛;面向专业搜索引擎的主题爬行技术研究[D];吉林大学;2007年
4 杨传耀;中文信息检索索引模型及相关技术研究[D];复旦大学;2007年
中国硕士学位论文全文数据库 前1条
1 罗兵;支持AJAX的互联网搜索引擎爬虫设计与实现[D];浙江大学;2007年
【相似文献】
中国期刊全文数据库 前10条
1 刘磊安;符志强;;基于Lucene.net网络爬虫的设计与实现[J];电脑知识与技术;2010年08期
2 王军;彭建;;网络爬虫的结构设计研究[J];科技信息(学术研究);2007年27期
3 何志文;郭利刚;;搜索引擎技术在互联网音视频节目监测系统中的应用[J];广播与电视技术;2009年03期
4 石柯;周利兵;陶文兵;;基于移动代理的MAISE爬虫的设计与实现[J];华中科技大学学报(自然科学版);2005年S1期
5 曹忠;赵文静;;一种优化的网络爬虫的设计与实现[J];电脑知识与技术;2008年35期
6 梁雪松;张容;;网络爬虫对网络安全的影响及其对策分析[J];计算机与数字工程;2009年12期
7 周巍巍;;网络爬虫网页库智能更新策略分析与研究[J];电脑知识与技术;2010年31期
8 Sergey Brin;Lawrence Page;万思;;Google搜索引擎剖析[J];程序员;2003年04期
9 彭赓;范明钰;;基于改进网络爬虫技术的SQL注入漏洞检测[J];计算机应用研究;2010年07期
10 陈治昂;张毅;李大学;;基于Web智能的网络广告监测器研究与设计[J];重庆邮电大学学报(自然科学版);2009年01期
中国重要会议论文全文数据库 前10条
1 维尼拉·木沙江;吐尔洪·吾司曼;;维、哈、柯文搜索引擎中网页爬行器的设计与实现[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
2 陶冶;刘建勋;唐明董;;基于Map/Reduce的分布式Web服务搜索引擎设计与实现[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
3 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年
4 姚树宇;赵少东;;一种使用分布式技术的搜索引擎[A];2005年全国开放式分布与并行计算学术会议论文集[C];2005年
5 张成岗;周奇;;智能化的网络信息搜索引擎——数据检索及分析系统(DRANS)[A];第九次全国生物物理大会学术会议论文摘要集[C];2002年
6 王继民;彭波;孟涛;;基于搜索引擎日志发现相近Web查询[A];2005年信息与通信领域博士后学术会议论文集[C];2005年
7 王灿辉;张敏;马少平;;Web作弊与反作弊技术综述[A];第二届全国信息检索与内容安全学术会议(NCIRCS-2005)论文集[C];2005年
8 吴丽辉;张凯;张刚;王斌;;个性化Web信息采集系统PSearch的设计[A];全国第八届计算语言学联合学术会议(JSCL-2005)论文集[C];2005年
9 刘红军;杨红俊;;如何高效地利用互联网搜集情报资源[A];四川省电子学会情报专业委员会学术交流会论文集[C];2006年
10 张冠群;杜建清;杨家海;;基于搜索引擎的网站流量估算模型[A];2009年全国开放式分布与并行计算机学术会议论文集(下册)[C];2009年
中国重要报纸全文数据库 前10条
1 胡斌;快速用好搜索引擎四妙计[N];中国计算机报;2005年
2 本报记者 冯卫东;下一代搜索引擎呼之欲出[N];科技日报;2009年
3 李海峰;“网络钓鱼”骗术升级[N];沈阳日报;2005年
4 陶秋丰;万事俱备,只欠东风[N];电脑报;2007年
5 刘占军;“红蓝黄绿”任我搜[N];中国电脑教育报;2009年
6 刘文;搜索需要“量体裁衣”[N];科技日报;2006年
7 飘零刀客;提升网站排名[N];电脑报;2005年
8 邢晔;网络检索:“音乐”“科技”最“染毒”[N];新华每日电讯;2007年
9 鲜艳花开;让一搜与Maxthon联姻[N];电脑报;2004年
10 乐天 编译;搜索引擎优化的9个技巧[N];计算机世界;2009年
中国博士学位论文全文数据库 前10条
1 郭眈;中文互联网视频搜索引擎系统策略研究[D];北京交通大学;2012年
2 王镠璞;基于用户体验的互联网搜索引擎医学信息检索可用性评估研究[D];吉林大学;2010年
3 张伟;基于WWW的聚类引擎研究[D];重庆大学;2003年
4 徐文贤;因特网矿业信息资源及其利用研究[D];中南大学;2001年
5 陈治平;智能搜索引擎理论与应用研究[D];湖南大学;2003年
6 吴永辉;面向专业领域的网络信息采集及主题检测技术研究与应用[D];哈尔滨工业大学;2010年
7 臧铖;个性化搜索中隐私保护的关键问题研究[D];浙江大学;2008年
8 刘玉婷;网页排序中的随机模型及算法[D];北京交通大学;2009年
9 宗校军;中文网页定题采集及分类研究[D];华中科技大学;2006年
10 江开忠;上下文感知的Web搜索关键技术研究[D];华东师范大学;2008年
中国硕士学位论文全文数据库 前10条
1 薛云;Internet上元搜索引擎的研究与设计[D];太原理工大学;2003年
2 李建平;智能化WEB信息搜索引擎的研究与实现[D];大庆石油学院;2003年
3 田生伟;基于涉农词典的搜索引擎的研究与实践[D];新疆大学;2004年
4 李珏伶;搜索引擎网页相关性评估方法设计及其在rank模型上的应用[D];北京交通大学;2011年
5 肖坤;面向用户兴趣的校园网聚类搜索引擎的研究与实现[D];国防科学技术大学;2010年
6 刘琨;搜索引擎的研究与实现[D];西安电子科技大学;2004年
7 刘妮娜;Web数据挖掘和个性化搜索引擎研究[D];浙江大学;2005年
8 黄刚;基于JXTA的搜索引擎系统研究[D];西南交通大学;2004年
9 苏国荣;校园网搜索引擎排序的去重方法研究[D];国防科学技术大学;2010年
10 袁宏;基于移动Agent的中文信息搜索引擎系统模型的研究[D];沈阳工业大学;2003年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026