基于Hadoop的时态信息存储与时态关系演算问题研究

发布时间：2018-07-23 18:17

【摘要】：面对海量的非结构化时态信息,构建了在分布式环境下的数据存储模型,并在此基础上提出一种基本的时态数据处理方法。使用Hadoop平台下的分布式、非结构化数据库HBase对海量时态数据进行存储,构造以时态集合为时态存储单元的时态数据存储模型;针对分布式处理特征和时态集合数据类型,提出一种在Map/Reduce编程计算模式下进行海量时态信息关系演算的实现方法;通过扩展时态区间关系运算,实现以时态集合为基本时态数据操作对象的交、并等关系运算。以医疗时态数据作为研究实例,表明了所提出的时态数据存储模型和关系演算方案在分布式应用系统下的适用性。
[Abstract]:In the face of massive unstructured temporal information, a data storage model in distributed environment is constructed, and a basic temporal data processing method is proposed. The distributed unstructured database HBase is used to store massive temporal data under Hadoop platform, and a temporal data storage model with temporal set as temporal storage unit is constructed, and the distributed processing features and temporal set data types are analyzed. This paper presents a method to implement the relational calculus of massive temporal information under the Map/Reduce programming computing mode, and by extending the temporal interval relation operation, realizes the intersection and equal relation operation of temporal set as the basic temporal data operation object. Taking medical temporal data as an example, the applicability of the proposed temporal data storage model and relational calculus scheme in distributed application systems is demonstrated.
【作者单位】： 广东工业大学计算机学院;
【基金】：国家自然科学基金资助项目(60970044,61272067,60736020) 广东省自然科学基金资助项目(S2011040004281,S2013010014457)
【分类号】：TP333

【参考文献】

相关期刊论文 前2条

1 叶小平;;基于时态变量对象关系模型及代数运算[J];计算机研究与发展;2007年11期

2 王宁;杨扬;由海涌;赵耀培;孟坤;;极大有序频繁项目集的时间属性分析方法[J];小型微型计算机系统;2013年01期

【共引文献】

相关期刊论文 前4条

1 李景文;邹文娟;田丽亚;农佳捷;苏浩;;基于过程的面向对象时空数据模型数据组织方法[J];测绘科学;2013年05期

2 谢秋妹;高春鸣;王小兰;;基于故事浅层理解与事件框架的语义建模[J];计算机科学;2013年10期

3 欧阳继红;李双;孙伟;富倩;;运动对象间的方位关系推理方法[J];吉林大学学报(工学版);2014年01期

4 吴静;邓敏;刘慧敏;;一种有向线间拓扑关系与方向关系的集成表达模型[J];武汉大学学报(信息科学版);2013年11期

相关博士学位论文 前4条

1 万静;全序偏序时态数据库的研究[D];哈尔滨理工大学;2009年

2 周牧;室内WLAN距离依赖型匹配定位算法研究[D];哈尔滨工业大学;2012年

3 王晓东;基于Voronoi图的定性运动推理[D];天津大学;2012年

4 赵卫锋;基于空间认知的智能导航方法研究[D];武汉大学;2011年

相关硕士学位论文 前8条

1 王栋;生态产品并行生产分系统与相关技术研究[D];河南大学;2011年

2 舒展;时态关系模型的改进及在绩效管理系统中的应用[D];广西大学;2011年

3 刘东川;RFID复杂事件检测方法及应用[D];哈尔滨工业大学;2013年

4 王昱;SQL语言的时态扩展及其查询重写技术研究[D];大连工业大学;2009年

5 黄金霞;基于SCFG的复杂人体行为识别[D];中南大学;2013年

6 刘孝毓;基于时空序列的栅格压缩编码变化算法研究[D];山东农业大学;2013年

7 谢秋妹;故事事件语义建模及其应用研究[D];湖南大学;2013年

8 涂传飞;考虑时态信息的本体知识的不确定性推理研究[D];华中科技大学;2013年

【二级参考文献】

相关期刊论文 前5条

1 郝忠孝,李艳娟;具有多时间粒度的时态数据库初等关键字、简单范式分解问题研究[J];计算机研究与发展;2005年09期

2 郝忠孝;李艳娟;;具有多时间粒度的时态多值依赖及时态模式分解方法研究[J];计算机研究与发展;2007年05期

3 印鉴;姚树宇;薛少锷;杨文新;刘玉葆;;一种基于索引的高效k-支配Skyline算法[J];计算机学报;2010年07期

4 韩蒙;张炜;李建中;;RAKING:一种高效的不确定图K-极大频繁模式挖掘算法[J];计算机学报;2010年08期

5 刘玉奎;周立柱;范举;;中文深度万维网数据库的现状研究[J];计算机学报;2011年02期

【相似文献】

相关期刊论文 前10条

1 曹计昌,张凡;IC卡数据存储模型的研究[J];计算机工程与科学;2004年05期

2 祖研;帅仁俊;陈平;;基于分布式文件系统的图片存储服务的研究[J];通信技术;2011年04期

3 谢桂兰;罗省贤;;基于Hadoop MapReduce模型的应用研究[J];微型机与应用;2010年08期

4 洪沙;杨深远;;云计算关键技术及基于Hadoop的云计算模型研究[J];软件导刊;2010年09期

5 胡志刚;梁晓扬;;基于Hadoop的海量网格数据建模[J];计算机系统应用;2010年10期

6 王敬昌;;基于Hadoop分布式计算架构的海量数据分析[J];数字技术与应用;2010年07期

7 曹英忠;谢晓兰;赵鹏;;基于Hadoop的云存储实践[J];现代计算机(专业版);2011年24期

8 郑霄;李宏亮;吴东;原昊;;分布式状态空间生成的设计与实现[J];计算机工程与应用;2009年32期

9 李丽英;唐卓;李仁发;;基于LATE的Hadoop数据局部性改进调度算法[J];计算机科学;2011年11期

10 侯建;帅仁俊;侯文;;基于云计算的海量数据存储模型[J];通信技术;2011年05期

相关会议论文 前2条

1 夏芳;陈虹;宋磊;沈卫超;;数值模拟网格数据模型设计与实现[A];第15届全国信息存储技术学术会议论文集[C];2008年

2 林佳烨;;云计算在电信行业数据分析领域的应用[A];广东通信2010青年论坛优秀论文集[C];2010年

相关博士学位论文 前3条

1 夏军宝;空间科学大数据存储模型SP-HDF及应用研究[D];中国地质大学（北京）;2013年

2 魏青松;大规模分布式存储技术研究[D];电子科技大学;2004年

3 杨晋强;空间数据集群服务体系结构与算法研究[D];解放军信息工程大学;2010年

相关硕士学位论文 前10条

1 张建;基于Hadoop的云计算模型研究及气象应用[D];南京信息工程大学;2012年

2 吴金朋;一种大数据存储模型的研究与应用[D];北京邮电大学;2013年

3 程佳;一种基于Hadoop的RDF数据划分与存储研究[D];南京大学;2013年

4 孙元成;基于Hadoop的视频监控数据中心关键支撑技术研究与应用[D];北京邮电大学;2013年

5 邹华;云计算的数据存储模型研究及应用[D];湖南大学;2013年

6 陈殿伟;基于Hadoop的虚拟筛选海量数据存储及结果处理的设计和实现[D];兰州大学;2012年

7 邰建华;Hadoop平台下的海量数据存储技术研究[D];东北石油大学;2012年

8 高明;实时BI系统中基于DSO的数据存储模型研究[D];大连海事大学;2012年

9 曾理;Hadoop的重复数据清理模型研究与实现[D];南华大学;2010年

10 高蓟超;Hadoop平台存储策略的研究与优化[D];北京交通大学;2012年

，

本文编号：2140227