收藏本站
《软件》 2013年12期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

一个基于hadoop的并行社交网络挖掘系统

李冠辰  
【摘要】:最近几年,以微博为首的社交网络迅猛发展,这些平台上包含了网民对于时事热点的观点,对生活和人际关系的看法等大量有价值的信息和资源。由于微博数据非常庞大又难以获取等困难,如何有效地对社交网络进行数据挖掘,是近两年数据挖掘研究的重点和热点。本工作设计和实现了一个基于Hadoop的并行社交网络挖掘系统,包含了分布式数据库,并行爬虫,并行数据处理和并行数据挖掘算法集,可以有效地获取和分析挖掘海量的社交网络数据,为社团分析,用户行为分析,用户分类,微博分类等工作提供支持。
【作者单位】北京邮电大学计算机系;
【分类号】:TP393.092;TP311.52

【共引文献】
中国期刊全文数据库 前10条
1 郎波;张博宇;;面向大数据的非结构化数据管理平台关键技术[J];信息技术与标准化;2013年10期
2 邵景峰;崔尊民;王进富;白晓波;;大数据下纺织制造执行系统的构建[J];纺织器材;2013年06期
3 张亚楠;谭跃生;;基于MapReduce的并行遮盖文本聚类算法[J];内蒙古科技大学学报;2013年03期
4 周国亮;朱永利;王桂兰;;CC-MRSJ:Hadoop平台下缓存敏感的星型联接算法[J];电信科学;2013年10期
5 李志宏;马倩;周广刚;;国内管理科学领域高校间学术论文合著网络的时间演化分析[J];管理工程学报;2013年04期
6 方锦清;刘强;李永;;自然科学家的创作多峰现象及创新能力[J];复杂系统与复杂性科学;2014年01期
7 王鹏;黄焱;刘峰;安俊秀;;大数据技术中计算与数据的协作机制[J];成都信息工程学院学报;2014年01期
8 杜政颉;王鹏;黄焱;郎福通;;一种基于Storm编程模型的迭代Topology方案[J];成都信息工程学院学报;2014年01期
9 范飞;黄文明;邓珍荣;;Oozie工作流在Mahout分布式数据挖掘中的应用[J];桂林电子科技大学学报;2014年01期
10 孟令玺;李洪亮;;基于CA-PSO算法的云计算资源调度策略[J];计算机仿真;2013年10期
中国博士学位论文全文数据库 前10条
1 李健;云计算环境下最小化运营开销的调度技术研究[D];北京邮电大学;2013年
2 尹莉;基础数学领域作者合作网络实证分析[D];西北大学;2013年
3 韩晶;大数据服务若干关键技术研究[D];北京邮电大学;2013年
4 程祥;高效可靠的虚拟网络映射技术研究[D];北京邮电大学;2013年
5 李韧;基于Hadoop的大规模语义Web本体数据查询与推理关键技术研究[D];重庆大学;2013年
6 路海平;铁路货运嵌入社会物流的模式及运作机制研究[D];北京交通大学;2013年
7 杨婧;大型工程项目网络化建模及关键节点分析方法研究[D];国防科学技术大学;2012年
8 卢风顺;面向CPU/GPU异构体系结构的并行计算关键技术研究[D];国防科学技术大学;2012年
9 王辉;在线社交网络上谣言传播关键问题研究[D];合肥工业大学;2013年
10 孙鹏;动车组维修物联网及其关键技术研究[D];中国铁道科学研究院;2013年
中国硕士学位论文全文数据库 前10条
1 杨祎;Wiki知识网络的网络特性与演化模型研究[D];浙江理工大学;2013年
2 钟馨;社会关系影响下民众避难决策行为研究[D];西南交通大学;2013年
3 王中义;软件系统函数调用关系的复杂性研究[D];石家庄铁道大学;2013年
4 刘恒;基于复杂网络的合作关系研究[D];北京邮电大学;2013年
5 陈贞;HDFS环境下的访问控制技术研究[D];重庆大学;2013年
6 王均瑶;基于复杂网络的南岭地区地球化学场研究[D];首都师范大学;2013年
7 张丹;HDFS中文件存储优化的相关技术研究[D];南京师范大学;2013年
8 潘吴斌;基于云计算的并行K-means气象数据挖掘研究与应用[D];南京信息工程大学;2013年
9 赵洪昌;云计算下的关联分析和模糊聚类研究[D];南京信息工程大学;2013年
10 汪洋;通信网云计算平台资源调度策略与算法研究[D];南昌大学;2013年
【相似文献】
中国期刊全文数据库 前10条
1 刘玮;刘凤娟;;计算机应用技术在工程项目管理中的应用研究[J];光盘技术;2009年03期
2 ;工程地质计算机应用的先驱——怀念邹小安教授[J];工程地质计算机应用;2010年02期
3 王伟;;浅析高职计算机应用基础课程的教学[J];中国科技信息;2011年03期
4 徐海涛;;全国计算机应用技术证书考试[J];中国考试(高考版);1998年04期
5 ;新年献词[J];工程地质计算机应用;1998年04期
6 韦港;;祝贺工程地质计算机应用主页接入Internet[J];工程地质计算机应用;1998年02期
7 ;全国第三次水利水电工程地质计算机应用技术交流会暨工程地质计算机应用技术协作网成立大会纪要[J];工程地质计算机应用;1999年04期
8 ;工程地质计算机应用技术协作网首届协作委员会第四次常务委员会会议(扩大)纪要[J];工程地质计算机应用;2002年02期
9 万世明;高职院校计算机应用技术专业课程体系设置的思考与探索[J];武汉船舶职业技术学院学报;2005年03期
10 ;计算机应用技术学科专家——李绍稳教授[J];农业网络信息;2006年10期
中国重要会议论文全文数据库 前10条
1 田启明;;基于三方联动的高职计算机应用技术专业改革探索[A];Proceedings of 2010 National Vocational Education of Communications and Information Technology Conference (2010 NVCIC)[C];2010年
2 汪健雄;王明哲;李琪;;Struts在客票系统中的应用[A];扩大铁路对外开放、确保重点物资运输——中国科协2005年学术年会铁道分会场暨中国铁道学会学术年会和粤海通道运营管理学术研讨会论文集[C];2005年
3 王海;;文稿管理数字化——文稿管理系统的设计与实现[A];自主创新与持续增长第十一届中国科协年会论文集(4)[C];2009年
4 王海;;文稿管理数字化——文稿管理系统的设计与实现[A];数字电视产业与三网融合学术研讨会论文集[C];2009年
5 王晓林;刘蕊;薛建生;;一种异构环境下智能节点重叠网络的改进方案[A];第十届中国科协年会信息化与社会发展学术讨论会分会场论文集[C];2008年
6 刘恕;;试论传统媒体与社交网络的交互融合——从新华社电视进驻开心网说起[A];第十一届中国科协年会第33分会场新媒体与科技传播研讨会论文集[C];2009年
7 刘恕;;试论传统媒体与社交网络的交互融合——从新华社电视进驻开心网说起[A];自主创新与持续增长第十一届中国科协年会论文集(4)[C];2009年
8 吴冬;赵宏斌;薛建生;;一种高效利用移动节点接入带宽策略[A];第十届中国科协年会信息化与社会发展学术讨论会分会场论文集[C];2008年
9 崔云飞;刘东;李昀;;云计算:一种新型服务计算模式[A];2008年中国高校通信类院系学术研讨会论文集(下册)[C];2009年
10 张伟;马亚龙;徐豪华;;仿真模型中数据的可信度[A];第十届中国科协年会论文集(一)[C];2008年
中国重要报纸全文数据库 前10条
1 北京 徐海涛;全国计算机应用技术证书NIT考试介绍[N];中国电脑教育报;2001年
2 陈晓嘉;会当凌绝顶 一览众山小[N];中华读书报;2001年
3 邓奇敏;坚持走正版化之路[N];建筑时报;2010年
4 子非;另类 数字英雄[N];厂长经理日报;2000年
5 本报通讯员 邹益芳;土生土长的专家[N];中国邮政报;2011年
6 本报记者 王瑜琨;今年研招报考呈现三大特点[N];中国教育报;2005年
7 ;全国信息应用技术证书(NIT)考试[N];电脑报;2001年
8 刘昊;9.7万考生今日考研[N];北京日报;2005年
9 曹克顺;搭建事业发展的大舞台[N];中国冶金报;2010年
10 本报记者 赵敏;李涛 让知识与财富同行[N];厂长经理日报;2002年
中国博士学位论文全文数据库 前5条
1 杨文翰;实用化的计算机辐射信息截获技术研究[D];北京邮电大学;2011年
2 郭龙飞;社交网络用户隐私关注动态影响因素及行为规律研究[D];北京邮电大学;2013年
3 刘芳;信息可视化技术及应用研究[D];浙江大学;2013年
4 吴保来;基于互联网的社交网络研究[D];中共中央党校;2013年
5 程振宇;社交网络下网络互动对购买意愿影响及信任保障机制研究[D];北京邮电大学;2013年
中国硕士学位论文全文数据库 前10条
1 徐宁;计算机兵棋的关键技术研究与实现[D];东北大学;2009年
2 廖师坤;广西惠佳信装饰集团企业文化手册项目设计与实现[D];山东大学;2011年
3 杨启超;综控计算机测试台的设计与实现[D];西安电子科技大学;2013年
4 王冰;社交网络电子商务应用用户研究与交互设计[D];大连海事大学;2009年
5 匡仁玉;泰和的宗族与区域社会[D];南昌大学;2007年
6 郁玮;中国留学生在英国的跨文化适应状况以及对校内网的使用[D];上海外国语大学;2009年
7 王辰玲;基于.NET的小型医院信息管理系统的设计与实现[D];吉林大学;2012年
8 刘乾;基于社交网络和地理位置信息的好友推荐方法研究[D];浙江大学;2013年
9 罗思源;计算机耳鸣病历管理与诊疗系统的研制[D];西安科技大学;2013年
10 张涛;个人寂寞时使用SNS类型网站寻求慰藉之动机研究[D];西北大学;2011年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026