收藏本站
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

大数据系统综述

李学龙  龚海刚  
【摘要】:随着科学、技术和工程的迅猛发展,近20年来,许多领域(如光学观测、光学监控、健康医护、传感器、用户数据、互联网和金融公司以及供应链系统)都产生了海量的数据(更恰当的描述或许是"无限"的数据,例如,在光学观测和监控等应用中,数据都是源源不断而来的,形成了"数据灾难"),大数据的概念也随之再次引起重视.与传统的数据相比,除了大容量等表象特点,大数据还具有其他独特的特点,例如大数据通常是无结构的,并且需要得到实时分析,因此大数据的发展需要全新的体系架构,用于处理大规模数据的获取、传输、存储和分析.本文对大数据分析平台进行了尽可能详尽的文献调研,首先介绍了大数据的基本定义和大数据面临的一些挑战;然后提出了大数据系统框架,将大数据系统分解为数据生成、数据获取、数据存储和数据分析等4个模块,这4个模块也构成了大数据价值链;随后讨论了学术界和工业界中和大数据相关的方法和机制;最后介绍了典型的大数据系统基准和大数据的一些科学问题.本文意图为非专业读者提供大数据的全景知识,也为高级读者定制自己的大数据解决方案提供辅助思想,希望能够对大数据相关的科技和工程人员起到一些参考作用.

知网文化
【相似文献】
中国期刊全文数据库 前20条
1 邓兴升;变形监测水准网数据管理软件的研制和应用[J];大坝与安全;2000年04期
2 ;Quantum StorNext数据管理软件[J];软件世界;2009年11期
3 郝南军;;Leebs & Northrup公司产品信息(二)[J];国外科学仪器;1986年02期
4 夏红,刘燕;环境监测数据管理软件[J];环境监测管理与技术;1997年06期
5 路易斯·科尔蒂,项龙;基础设施服务和提供强化定性数据资源的需求[J];国际社会科学杂志(中文版);2004年03期
6 于晓辉;张卓勇;张孝芳;范国强;张鹏;;大黄高效液相色谱-指纹图谱数据管理软件的开发[J];计算机与应用化学;2006年08期
7 郭嘉凯;;大数据航海时代[J];软件和信息服务;2012年09期
8 汪明珠;解苑明;;测控数据管理软件在堆芯中子注量率测量系统中的应用[J];核电子学与探测技术;2010年07期
9 付朋侠;;数据生命周期管理理论研究及实施建议[J];科技创业家;2013年17期
10 杨英;防止生产混乱现象的方法[J];管理科学文摘;1997年11期
11 周强,徐翠华,任天山,张京;放射性监测数据管理软件的设计与实现[J];中国辐射卫生;2004年03期
12 周强;徐翠华;张京;张庆;赵力;李文红;任天山;;环境放射性水平调查数据管理软件的研发[J];中国辐射卫生;2007年01期
13 江晓鹤;林炳耀;戴建秋;;应用微型机建立城市与区域发展的数据管理软件包[J];南京大学学报(自然科学版);1984年02期
14 张京;吉艳琴;周强;尹亮亮;李文红;徐翠华;苏旭;;全国饮用水中总α总β数据管理软件的研发[J];中国辐射卫生;2012年04期
15 ;SPA推数据知识管理[J];每周电脑报;1999年17期
16 郭郡浩;刘玉秀;蔡辉;;EpiData用于数据管理逻辑核查功能的实现[J];中国临床药理学与治疗学;2008年05期
17 庄春生,刘成安,刘宏伟,陈东升;企业物流信息集成数据管理软件的设计[J];河南科学;2005年06期
18 王伟廷;;PATH、APPEND和COMSPEC的使用[J];电脑爱好者;1994年03期
19 马国学;;利用VFP9.0及SQL Server 2000设计数据管理软件[J];电脑编程技巧与维护;2009年14期
20 邓兴升,王新洲,游扬声;垂线测量数据管理软件的研制及应用[J];测绘信息与工程;2003年01期
中国重要会议论文全文数据库 前5条
1 李炜;陈勇;徐玉朋;张艺;崔苇苇;王于仨;王娟;韩大炜;陆波;杨彦佶;;HXMT低能望远镜数据管理软件设计[A];第二十四届全国空间探测学术交流会论文摘要集[C];2011年
2 景韶光;陈定昌;蒋酂平;;一体化生态环境控制工程顶层规划与产业推动研究[A];高科技产业的系统工程管理论文集[C];2003年
3 梁志伟;刘保延;何丽芸;文天才;胡镜清;谢雁鸣;程翼宇;;“数据为先导”临床实践型科研的信息管理方法与应用[A];首届中国IT与医药卫生高层论坛论文集[C];2004年
4 杨世兴;杨宇鸿;;地形图数字化生产过程中数据程序化管理初探[A];2001年东北三省测绘学术与信息交流会论文集[C];2001年
5 邓兴升;;垂线测量数据管理软件的研制及应用[A];中国水力发电工程学会大坝安全监测专业委员会年会暨学术交流会论文集[C];2000年
中国硕士学位论文全文数据库 前10条
1 何宇;叶轮机压力测量分析数据管理软件设计[D];南京航空航天大学;2011年
2 田胜利;针对HBase的MapReduce数据访问方式的优化[D];国防科学技术大学;2012年
3 陈倪娜;面向Agent的协同数据管理软件模型研究[D];南京航空航天大学;2009年
4 蔡起超;航天器推进系统数据管理系统设计及实现[D];哈尔滨工业大学;2013年
5 曾理宁;车载数据库若干关键技术研究[D];湖南大学;2011年
6 刁静;雷电探测网中心站数据库设计与实现[D];华中科技大学;2012年
7 王海山;基于WebGIS的疫情监测预警系统的研究[D];湖北工业大学;2011年
8 崔家堂;安全生产自动化数据管理软件设计与实现[D];电子科技大学;2011年
9 王大力;基于移动通信数据处理的公安流动人口管理系统设计与研究(PSFPMS)[D];同济大学;2007年
10 王艳明;基于B/S结构的疾病预防信息系统的设计与实现[D];吉林大学;2007年
中国重要报纸全文数据库 前10条
1 本报记者 刘丽丽;慷孚:得数据者得天下[N];计算机世界;2009年
2 ;昆腾新版数据管理软件上市[N];人民邮电;2007年
3 李雪;华尔街:数据如何从分散到整合[N];中国计算机报;2008年
4 ;数据管理软件廉价化[N];计算机世界;2002年
5 赛迪智库软件与信息服务研究所;美国将发展大数据提升到战略层面[N];中国电子报;2012年
6 本报记者 霍娜;微软:大数据最重要的是洞察力[N];中国计算机报;2013年
7 本报记者 郭平;自始至终管数据[N];计算机世界;2003年
8 电脑商报记者 刘一冰;“电子发现”正掀热浪[N];电脑商报;2009年
9 ;让发电集团的管控有力、高效[N];中国计算机报;2010年
10 佟乐;归档数据处于危险时刻[N];网络世界;2007年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978