数据湖——一种更好的大数据存储架构

发布时间：2017-09-24 01:21

  本文关键词：数据湖——一种更好的大数据存储架构

  更多相关文章： 数据湖 数据池

【摘要】："数据湖"是通过将原始数据分类存储到不同数据池,并在各数据池里将数据整合转化成容易分析的统一存储格式进行存储,以方便用户对大量原始数据池中原本几近废弃的数据加以分析利用,从而产生经济效益。该文首先介绍了数据湖的结构,其次介绍了数据湖中各数据池的特点及应用;最后介绍了各数据池之间的联系并举例说明了数据湖的架构。
【作者单位】： 西安石油大学计算机学院;
【关键词】： 数据湖 数据池
【分类号】：TP311.13;TP333
【正文快照】： 随着计算机技术的迅速发展,数据量日益增多,因而大数据管理[3]也是大数据发展中的一大挑战。数据池可存储大量不同来源、格式各异的数据的存储空间,而数据湖[1,2,5]则是包含多个数据池的存储空间,而且每个数据池中的数据都是来源相同并在池内进行整合形成格式统一的数据。目前

【相似文献】

中国期刊全文数据库 前10条

1 邓爱华;;大数据时代来临 你准备好了吗?[J];科技潮;2012年09期

2 刘中宇;刘海良;;大数据时代高校云资源应用[J];现代教育技术;2013年07期

3 陶雪娇;胡晓峰;刘洋;;大数据研究综述[J];系统仿真学报;2013年S1期

4 ;大数据[J];财务与会计(理财版);2013年07期

5 孙志伟;;大数据时代中小企业的应对策略[J];未来与发展;2013年10期

6 宋慧欣;;大数据时代的自动化机遇[J];自动化博览;2013年10期

7 ;大数据的崛起:趋势、机遇与挑战[J];互联网周刊;2013年24期

8 邓春宇;郭阳;李俊妮;王伯伊;;大数据在县级供电公司中的应用[J];农村电气化;2014年03期

9 谢然;;大数据引领智能交通 且行且珍惜[J];互联网周刊;2014年08期

10 李晓辉;王淑艳;;大数据及其挑战[J];科技风;2012年23期

中国重要会议论文全文数据库 前4条

1 李田;郭利;冯鹏;;某型导弹单元设备自动检测系统软件设计[A];全国第十五届计算机科学与技术应用学术会议论文集[C];2003年

2 高世光;邓苏;王长缨;;关于ADO+引导数据种类的演变的研究[A];第十八届全国数据库学术会议论文集（技术报告篇）[C];2001年

3 颜涯;邵佩英;;GIS与MIS系统集成技术在城市规划中的应用[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

4 谢国忠;;大数据时代下的企业管理与创新[A];创新驱动：新机遇 新挑战——2013年全国企业管理创新大会资料汇编[C];2013年

中国重要报纸全文数据库 前10条

1 中国科学技术发展战略研究院 许晔;大数据时代来袭 中国宜加紧布局[N];经济参考报;2013年

2 记者 李成成;崭露头角的大数据时代[N];企业家日报;2013年

3 ;精简企业数据是时候了[N];计算机世界;2008年

4 光大证券;“大数据”或成重要投资主线[N];中国证券报;2012年

5 本报记者 郭涛 李奕;与大数据打交道的那些人[N];中国计算机报;2012年

6 本报记者 齐洁;大数据蕴藏创业空间[N];中国经营报;2012年

7 吴勇毅;大数据“热”下的“冷”思考[N];中国冶金报;2012年

8 抚苏;众望所归，大数据时代来临[N];电脑报;2013年

9 《网络世界》记者 于翔;大数据的价值实现之旅[N];网络世界;2013年

10 本报记者 孙琦子;这些年,一起忽悠着的“大数据”[N];经济观察报;2013年

中国博士学位论文全文数据库 前5条

1 张兰廷;大数据的社会价值与战略选择[D];中共中央党校;2014年

2 李琦;基于多源数据的交通状态监测与预测方法研究[D];吉林大学;2013年

3 张新;区域性防灾减灾信息服务体系研究[D];中国科学院研究生院（遥感应用研究所）;2006年

4 李智慧;基于可视化的三维放射治疗计算机模拟系统的研究[D];四川大学;2002年

5 袁培森;基于LSH的Web数据相似性查询研究[D];复旦大学;2011年

中国硕士学位论文全文数据库 前10条

1 郭铭;大数据时代包头公安基础信息化建设研究[D];内蒙古大学;2015年

2 贾同;大数据对高等教育发展的推动研究[D];西南大学;2015年

3 张靖雯;基于GPS路网的重卡动力参数分析系统开发[D];长安大学;2015年

4 张辉;基于移动互联网的高速公路公众信息服务系统分析与研究[D];长安大学;2015年

5 邓先明;基于西安市矿产资源规划关系数据库的数据质量控制研究[D];长安大学;2015年

6 魏亚红;流式数据的并行分类算法研究[D];曲阜师范大学;2015年

7 黄成鹏;大数据时代的个人隐私[D];华中师范大学;2015年

8 霍美娜;基于Hadoop海量数据分析的反腐云计算设计与实现[D];山东大学;2015年

9 朱迪;云计算在电力系统中的应用研究[D];华北电力大学;2015年

10 程彬彬;基于Hadoop的气温数据组织及时空分异特征提取方法研究[D];南京师范大学;2015年

，

本文编号：908550