收藏本站
收藏 | 投稿 | 论文排版

基于PaaS技术的大数据云化平台实践

徐海勇  黄岩  
【摘要】:大数据平台作为数据存储、处理和服务的基础平台,需支撑内部和外部多种大数据应用的开发及运行。提出一种把PaaS(platform as a service,平台即服务)技术应用到大数据平台的方案,详细描述了大数据PaaS云化平台的架构体系以及分层调度、多租户管理、Hadoop任务全局调度等关键技术方案。实践证明,该平台可以显著提高大数据应用的开发效率,实现应用快速部署上线;同时,其良好的弹性伸缩能力可以有效地提高大数据应用系统资源的使用效率。

知网文化
【相似文献】
中国期刊全文数据库 前20条
1 陈昉,施伯乐;多版本调度器的分析[J];计算机学报;1990年10期
2 郭建新;李冀;魏明亮;陆桑璐;陈贵海;谢立;;基于簇结构的分层调度器的设计和实现[J];计算机科学;2001年04期
3 王克宏,谢树煜,汤志忠;μs16系统的固化特征——二、固化的多任务调度器[J];微电子学与计算机;1985年04期
4 张芳琴;;Nachos中基于优先级调度器的实现[J];佛山科学技术学院学报(自然科学版);2013年05期
5 逄利华;张锦春;;基于Hadoop的分布式数据库系统[J];办公自动化;2014年05期
6 郑玮;;Hadoop释放大数据潜能[J];软件和信息服务;2012年10期
7 李雨;;鼠眼看Linux调度器(上)[J];程序员;2006年02期
8 刘尔凯;崔振东;;基于HADOOP技术 实现银行历史数据线上化研究[J];金融电子化;2014年01期
9 张桂兰;王飞超;;Linux内核完全公平调度器的分析及模拟[J];中国科技信息;2009年04期
10 马肖燕;洪爵;;多资源公平调度器在Hadoop中的实现[J];集成技术;2012年03期
11 邹群;;一种基于Hadoop的数字图书存储系统设计方案[J];黑龙江史志;2014年01期
12 程勋;楼荣生;施伯乐;;一种混合调度协议[J];计算机科学;1994年06期
13 侯宗浩,董小社,郑守淇,刘爱华,胡雷钧;多入口集群负载均衡问题研究[J];计算机工程;2004年18期
14 余澄丹,程家兴;Delphi下时钟调度器的开发[J];北京电子科技学院学报;2005年02期
15 杨嘉;王移芝;;Linux内核调度器算法研究与性能分析[J];计算机技术与发展;2006年03期
16 李雨;;鼠眼看Linux调度器(完结篇)[J];程序员;2006年03期
17 邓雪峰;张健;;数据调度器可自动重构的并行I/O系统研究[J];计算机与数字工程;2008年02期
18 张海燕;吴凡;王建新;;基于蚁群算法的Hadoop资源感知调度器研究[J];计算机工程与应用;2014年15期
19 谌章义;毕伟;向万红;王国安;吴爱国;;基于Hadoop的海量电费数据处理模型[J];计算机系统应用;2014年05期
20 胡红钱;施伟锋;;基于μCOS-Ⅱ系统任务调度器的汽车多媒体系统设计[J];计算机应用;2011年S1期
中国重要会议论文全文数据库 前1条
1 叶永凯;董威;舒绍娴;徐小平;;freeRTOS内核的RM调度器的设计与实现[A];第十六届计算机工程与工艺年会暨第二届微处理器技术论坛论文集[C];2012年
中国硕士学位论文全文数据库 前10条
1 祝太锋;基于LVS动态反馈负载均衡的算法改进[D];东华理工大学;2014年
2 杨晨;面向高性能计算的YARN平台关键技术与应用研究[D];南京大学;2016年
3 郭一峰;分布式在线图书爬虫系统的设计与实现[D];北京交通大学;2016年
4 刘阳;基于YARN的高响应性Hadoop计算资源调度器的研究与实现[D];哈尔滨工业大学;2016年
5 王硕;Hama中满足公平性和负载均衡资源调度器的研究及实现[D];电子科技大学;2016年
6 陈昕;Hadoop任务调度算法本地性优化研究[D];南华大学;2016年
7 曾道涛;基于Hadoop系统的自学习资源调度器模型研究[D];华中科技大学;2016年
8 余飞;操作系统调度器结构及算法研究[D];国防科学技术大学;2011年
9 刘君;基于Hadoop技术的气象数据采集及数据挖掘平台的研究[D];天津理工大学;2015年
10 赵伟;基于Hadoop的数据挖掘算法并行化研究[D];西南交通大学;2015年
中国重要报纸全文数据库 前6条
1 本报记者 郭涛;机器大数据也离不开Hadoop[N];中国计算机报;2013年
2 乐天 编译;Hadoop:打开大数据之门的金钥匙[N];计算机世界;2012年
3 启文;中创软件:创新平台服务“四化同步”[N];中国电子报;2012年
4 范范 编译;Hadoop用户可以使用多种搜索引擎[N];网络世界;2013年
5 记者 任荃 实习生 董冰清;上海研发公共服务平台5年服务量达849.6万次[N];文汇报;2009年
6 码实信息科技创始人 夏淳 于波 李彬;PaaS重新定义软件[N];中国计算机报;2012年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978