《中国科学:信息科学》2015年01期

发布时间：2017-01-14 09:57

  本文关键词：大数据系统综述，由笔耕文化传播整理发布。

《中国科学:信息科学》 2015年01期

投稿

大数据系统综述

   

【摘要】：随着科学、技术和工程的迅猛发展,近20年来,许多领域(如光学观测、光学监控、健康医护、传感器、用户数据、互联网和金融公司以及供应链系统)都产生了海量的数据(更恰当的描述或许是"无限"的数据,例如,在光学观测和监控等应用中,数据都是源源不断而来的,形成了"数据灾难"),大数据的概念也随之再次引起重视.与传统的数据相比,除了大容量等表象特点,大数据还具有其他独特的特点,例如大数据通常是无结构的,并且需要得到实时分析,因此大数据的发展需要全新的体系架构,用于处理大规模数据的获取、传输、存储和分析.本文对大数据分析平台进行了尽可能详尽的文献调研,首先介绍了大数据的基本定义和大数据面临的一些挑战;然后提出了大数据系统框架,将大数据系统分解为数据生成、数据获取、数据存储和数据分析等4个模块,这4个模块也构成了大数据价值链;随后讨论了学术界和工业界中和大数据相关的方法和机制;最后介绍了典型的大数据系统基准和大数据的一些科学问题.本文意图为非专业读者提供大数据的全景知识,也为高级读者定制自己的大数据解决方案提供辅助思想,希望能够对大数据相关的科技和工程人员起到一些参考作用.

【作者单位】： 中国科学院西安光学精密机械研究所光学影像分析与学习中心
【关键词】：
【基金】：
【分类号】：TP311.13
【正文快照】：

国家自然科学基金(批准号:61125106)资助项目1引言近年来,“大数据”已广为人知,并被认为是信息时代的新“石油”,这主要基于两点共识.首先,在过去20年间,数据产生速度越来越快.据国际数据公司IDC报道[1],2011年产生和复制的数据量超过1.8 Z字节,是过去5年数据增长的9倍,并将

下载全文 更多同类文献

PDF全文下载

CAJ全文下载

(如何获取全文？ 欢迎：购买知网充值卡、在线充值、在线咨询)

CAJViewer阅读器支持CAJ、PDF文件格式，AdobeReader仅支持PDF格式

【参考文献】

中国期刊全文数据库 前2条

1 NGUYEN Quang Vinh;QIAN Yu;HUANG MaoLin;ZHANG JiaWan;;[J];Science China(Information Sciences);2013年05期

2 何清;庄福振;曾立;赵卫中;谭庆;;[J];中国科学:信息科学;2014年07期

【共引文献】

中国期刊全文数据库 前6条

1 张孝;周宁南;;[J];科研信息化技术与应用;2013年01期

2 阳振坤;杨传辉;李震;;[J];科研信息化技术与应用;2013年01期

3 任堃;李战怀;;[J];华东师范大学学报(自然科学版);2014年05期

4 张滨;陈吉荣;乐嘉锦;;[J];计算机应用与软件;2014年11期

5 张正平;杨春;胡勤友;;[J];中国航海;2013年03期

6 Sayar Ahmet;Pierce Marlon;Fox C.Geoffrey;;[J];Journal of Central South University;2014年01期

中国博士学位论文全文数据库 前3条

1 王金宝;[D];哈尔滨工业大学;2013年

2 何敬;[D];西南交通大学;2013年

3 帖军;[D];华中科技大学;2013年

中国硕士学位论文全文数据库 前6条

1 陆鹏超;[D];哈尔滨工业大学;2012年

2 赵扬名;[D];武汉科技大学;2013年

3 张光辉;[D];东华大学;2014年

4 袁大星;[D];华中科技大学;2013年

5 余基映;[D];华中科技大学;2013年

6 王冬;[D];郑州大学;2014年

【二级参考文献】

中国期刊全文数据库 前1条

1 宋晓云;苏宏升;;[J];现代电子技术;2007年02期

【相似文献】

中国期刊全文数据库 前10条

1 邓兴升;[J];大坝与安全;2000年04期

2 ;[J];软件世界;2009年11期

3 郝南军;;[J];国外科学仪器;1986年02期

4 夏红,刘燕;[J];环境监测管理与技术;1997年06期

5 路易斯·科尔蒂,项龙;[J];国际社会科学杂志(中文版);2004年03期

6 于晓辉;张卓勇;张孝芳;范国强;张鹏;;[J];计算机与应用化学;2006年08期

7 郭嘉凯;;[J];软件和信息服务;2012年09期

8 汪明珠;解苑明;;[J];核电子学与探测技术;2010年07期

9 付朋侠;;[J];科技创业家;2013年17期

10 杨英;[J];管理科学文摘;1997年11期

中国重要会议论文全文数据库 前5条

1 李炜;陈勇;徐玉朋;张艺;崔苇苇;王于仨;王娟;韩大炜;陆波;杨彦佶;;[A];第二十四届全国空间探测学术交流会论文摘要集[C];2011年

2 景韶光;陈定昌;蒋酂平;;[A];高科技产业的系统工程管理论文集[C];2003年

3 梁志伟;刘保延;何丽芸;文天才;胡镜清;谢雁鸣;程翼宇;;[A];首届中国IT与医药卫生高层论坛论文集[C];2004年

4 杨世兴;杨宇鸿;;[A];2001年东北三省测绘学术与信息交流会论文集[C];2001年

5 邓兴升;;[A];中国水力发电工程学会大坝安全监测专业委员会年会暨学术交流会论文集[C];2000年

中国重要报纸全文数据库 前10条

1 本报记者 刘丽丽;[N];计算机世界;2009年

2 ;[N];人民邮电;2007年

3 李雪;[N];中国计算机报;2008年

4 ;[N];计算机世界;2002年

5 赛迪智库软件与信息服务研究所;[N];中国电子报;2012年

6 本报记者 霍娜;[N];中国计算机报;2013年

7 本报记者　郭平;[N];计算机世界;2003年

8 电脑商报记者 刘一冰;[N];电脑商报;2009年

9 ;[N];中国计算机报;2010年

10 佟乐;[N];网络世界;2007年

中国硕士学位论文全文数据库 前10条

1 何宇;[D];南京航空航天大学;2011年

2 田胜利;[D];国防科学技术大学;2012年

3 陈倪娜;[D];南京航空航天大学;2009年

4 蔡起超;[D];哈尔滨工业大学;2013年

5 曾理宁;[D];湖南大学;2011年

6 刁静;[D];华中科技大学;2012年

7 王海山;[D];湖北工业大学;2011年

8 崔家堂;[D];电子科技大学;2011年

9 王大力;[D];同济大学;2007年

10 王艳明;[D];吉林大学;2007年

  本文关键词：大数据系统综述，由笔耕文化传播整理发布。

，

本文编号：237367