基于Hive和Impala的物流运力供应链数据仓库研究

发布时间：2017-08-16 05:11

  本文关键词：基于Hive和Impala的物流运力供应链数据仓库研究

  更多相关文章： Hive Impala 物流运力供应链 海量数据 数据仓库

【摘要】：针对物流行业中传统数据库在海量数据存储和交互性查询方面的不足,提出了基于Hive和Impala物流运力供应链数据仓库的构建方法,可以实现快速查询。最后搭建阿里云上的PC集群,对海量供应链数据进行查询分析测试,表明该数据仓库能满足海量物流运力供应链数据存储以及查询方面的需求。
【作者单位】： 四川师范大学计算机与科学技术学院;西南交通大学交通运输与物流学院;西南交通大学信息科学与技术学院;
【关键词】： Hive Impala 物流运力供应链 海量数据 数据仓库
【基金】：四川省科技厅科技支撑项目(2012GZX0090,2014GZX0002)
【分类号】：TP311.13;F274
【正文快照】： 1引言近年来,随着物流行业的不断发展与进步,运力供应链数据信息量急剧增加[1],运力供应链是一条从顶端货主到底端司机的运输流网络,中间也存在着很多交互性的合作交易环节。海量数据存储和交互性查询分析使得传统数据库越来越难适应物流行业信息化的建设需求。随着“大数据”

【相似文献】

中国期刊全文数据库 前10条

1 陶再平,陈奇,俞瑞钊;数据仓库在企业中应用的研究[J];计算机工程;2000年07期

2 赵玉源,梁阿磊,白英彩;一种数据仓库联机维护算法[J];计算机工程;2000年08期

3 颜端武,张玉峰;数据仓库的成本效益分析与风险管理研究[J];情报科学;2000年09期

4 陈建平;数据仓库的管理与使用[J];长春邮电学院学报;2000年03期

5 马洪江;浅论数据仓库在企业管理决策支持系统中的应用[J];成都大学学报(自然科学版);2000年03期

6 邓文华,梅志红;基于数据仓库的铁路物资管理决策支持系统的研究[J];华东交通大学学报;2000年02期

7 王德军,邹永显;抓住核心 e化银行[J];上海微型计算机;2000年48期

8 唐宏,聂能,熊思民,赵明伟;数据仓库实现技术[J];数字通信;2000年08期

9 赵军,王国胤,吴中福,李华;数据仓库及其实现[J];数字通信;2000年08期

10 秦勉,杨整;数据仓库与银行利润[J];中国信用卡;2000年04期

中国重要会议论文全文数据库 前10条

1 李洁;李庆忠;王海洋;;一种有效的在线修改数据仓库算法[A];第十六届全国数据库学术会议论文集[C];1999年

2 冯建华;蒋旭东;刘建民;周立柱;;面向市场分析与预测的数据仓库平台[A];第十六届全国数据库学术会议论文集[C];1999年

3 王晓玲;谢鸿强;刘安;董逸生;;数据仓库建模工具的研制[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

4 张德辉;李建中;;多维压缩数据仓库上的并行聚集算法[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

5 潘海为;李建中;;数据仓库的并行加载算法[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

6 宋荷庆;胡华;;在证券公司业务中建造数据仓库[A];第十八届全国数据库学术会议论文集（技术报告篇）[C];2001年

7 隋琪;王海洋;;一种基于数据仓库的服务评估方法[A];第二十二届中国数据库学术会议论文集（技术报告篇）[C];2005年

8 宋国杰;杨冬青;林子雨;唐世渭;王腾蛟;谢昆青;;实时主动数据仓库的概念、问题及应用[A];第二十四届中国数据库学术会议论文集（研究报告篇）[C];2007年

9 杜瀊;宋自林;;虚拟数据仓库的研究与应用[A];第十五届全国数据库学术会议论文集[C];1998年

10 程永生;乐嘉锦;;数据仓库:数据的提取与转化[A];数据库研究进展97——第十四届全国数据库学术会议论文集（下）[C];1997年

中国重要报纸全文数据库 前10条

1 首之;银行业数据仓库技术应用亟待起步[N];金融时报;2005年

2 ;数据仓库解决方案[N];中国计算机报;2002年

3 中国人民大学数据仓库与商务智能工程研究中心 $$　　中国人民大学数据与知识工程研究所王珊、谢佳明、陈红、刘中蔚、邵琦洪、张宁;创建数据仓库：要面向三条路线[N];中国计算机报;2002年

4 IBM 软件 Barry Devlin 博士;信息集成——数据仓库架构的扩展[N];中国计算机报;2003年

5 李军;数据仓库新增长点在哪里？[N];中国计算机报;2004年

6 段云峰 杨凤年 宋俊德;数据仓库必不可少[N];计算机世界;2002年

7 文武;数据仓库助大鹏转型[N];计算机世界;2003年

8 ;数据仓库实施的“新浪潮”[N];计算机世界;2005年

9 本报记者 侯闯;竞争压力推动数据仓库应用[N];计算机世界;2005年

10 本报记者 程亮;数据仓库人才紧缺[N];人才市场报;2005年

中国博士学位论文全文数据库 前10条

1 宋旭东;企业集团数据仓库系统关键技术研究[D];大连理工大学;2010年

2 陈燕;数据仓库的设计与实现[D];大连理工大学;2000年

3 栗然;电力负荷分析与预测的分布式数据仓库和数据挖掘研究[D];华北电力大学（河北）;2009年

4 李学锋;矿山企业数据仓库的应用研究[D];昆明理工大学;2005年

5 冯玉;数据仓库环境中近似查询处理技术研究[D];中国科学院研究生院（计算技术研究所）;2002年

6 马军杰;基于数据仓库与联机处理的区域经济发展管理决策支持系统研究[D];华东师范大学;2007年

7 孙剑;海洋环境数据仓库与数据挖掘应用研究[D];中国海洋大学;2011年

8 陈金玉;数据仓库实体化视图联机—致性维护研究[D];重庆大学;2002年

9 赵贵菊;勘探开发数据仓库的模型研究和应用[D];中国地质大学（北京）;2010年

10 朱传华;三峡库区地质灾害数据仓库与数据挖掘应用研究[D];中国地质大学;2010年

，

本文编号：681574