海量地震数据存取效率的分析与优化
发布时间:2021-12-28 06:48
随着勘探技术的不断发展,采集到的地震数据量级越来越大,地震数据存取效率成为地震数据处理过程中的主要瓶颈,本文对海量地震数据的存取效率进行了分析和优化,主要的工作和创新点包括三个方面的内容:设计并实现了支持多格式地震数据存取的数据模型;在地震数据存取流程中实现了多线程的处理,并对线程个数选择策略进行了研究;对存储地震数据信息的数据库设计了状态监控工具,并制定了一系列的优化方法和状态监控工具。首先,设计多格式地震数据的模型,使地震数据处理平台支持多种格式数据的存取,并对通用地震数据的表结构进行了设计。实践表明,借助多格式地震数据的模型,省去了数据处理开始和结束阶段不同类型格式转换的耗时,并且能够节约一部分存储空间。其次,对地震数据存取流程的特点和系统环境做了深入分析,将多线程技术引用到数据存取的流程中,并实现了多线程处理的进度跟踪、暂停与恢复等功能。研究了线程个数选择方法,设计了一套结合系统环境的平衡策略,并将其应用于多线程处理流程中。实践表明,多线程技术的使用对存取效率有了极大的提高,而平衡策略能够使多线程最大程度的利用系统资源。最后,设计并实现了数据库的监控工具,从参数、SQL语句、存...
【文章来源】: 中国石油大学(北京)北京市 211工程院校 教育部直属院校
【文章页数】:75 页
【文章目录】:
摘要
ABSTRACT
第1章 绪论
1.1 研究背景和意义
1.2 研究现状
1.3 研究内容
1.4 论文组织结构
第2章 地震数据存取效率的研究
2.1 地震数据存取流程简介
2.1.1 地震数据加载
2.1.2 地震数据导出
2.1.3 地震数据格式转换
2.1.4 地震数据合并
2.2 地震数据存取效率的分析
2.3 地震数据存取优化思路
2.3.1 优化思路
2.3.2 存取流程优化后的变化
2.4 本章小结
第3章 多格式地震数据存取的扩展
3.1 地震数据格式简介
3.1.1 地震数据描述
3.1.2 SEGY格式数据简介
3.1.3 SEGD格式数据简介
3.1.4 ATT格式数据简介
3.2 多格式地震数据模型的建立
3.2.1 简单工厂模式建立多格式地震数据模型
3.2.2 地震数据通用数据库表结构设计
3.2.3 地震数据格式类型判定方法
3.2.4 多格式道头显示工具
3.3 本章小结
第4章 地震数据多线程处理优化
4.1 多线程技术
4.1.1 多线程简介
4.1.2 多核CPU与多线程
4.2 多线程处理的实现
4.2.1 QT实现多线程处理
4.2.2 进度记录
4.2.3 暂停与恢复
4.2.4 线程个数选择策略
4.3 本章小结
第5章 地震数据库监控与优化
5.1 监控工具的实现
5.1.1 几种Mysql数据库监控工具的介绍
5.1.2 数据库监控信息的说明
5.1.3 数据库监控工具的实现
5.2 数据库优化的方法
5.2.1 参数优化
5.2.2 SQL语句优化
5.2.3 存储方式优化
5.2.4 索引优化
5.3 本章小结
第6章 测试与应用
6.1 性能测试
6.1.1 测试环境
6.1.2 测试数据
6.1.3 测试方案及结果
6.2 大数据量前提下的应用效果分析
6.3 总结与展望
参考文献
致谢
【参考文献】:
期刊论文
[1]中国海油地震勘探技术进展与发展方向 [J]. 李绪宣,朱振宇,张金淼. 中国海上油气. 2016(01)
[2]数据库优化在海量数据下的研究与应用 [J]. 岑巍. 计算机时代. 2015(02)
[3]地震行业“大数据”应用探讨 [J]. 屈佳,郑蕊,王宁. 城市与减灾. 2014(04)
[4]基于MySQL数据库的优化 [J]. 吴沧舟,兰逸正,张辉. 电子科技. 2013(09)
[5]多核多线程技术综述 [J]. 眭俊华,刘慧娜,王建鑫,秦庆旺. 计算机应用. 2013(S1)
[6]国产地震处理解释软件的发展 [J]. 王宏琳,罗国安. 石油地球物理勘探. 2013(02)
[7]SEG-Y地震数据格式解析及转换方法 [J]. 王增波,李雁鸿,赵剑,陈继红,钱忠平. 物探装备. 2012(03)
[8]海量并行处理系统的大数据读写接口优化研究 [J]. 文必龙,宗文栋. 郑州轻工业学院学报(自然科学版). 2012(03)
[9]多核架构下的多线程负载平衡 [J]. 李实,刘乃琦,郭建东. 计算机应用. 2008(S2)
[10]Windows环境下基于Qt的SEGY格式地震数据可视化 [J]. 张婉,王磊. 石油工业计算机应用. 2007(04)
硕士论文
[1]针对地震大数据的分布式文件系统的研究与设计[D]. 陆梦寒.中国科学技术大学. 2014
[2]地震数据并行访问策略的研究[D]. 赵满.东北石油大学. 2013
[3]分布式MySQL数据库集群在线监测系统设计与实现[D]. 黄旭.哈尔滨工业大学. 2012
[4]地震数据可视化研究与实现[D]. 李耀伟.电子科技大学. 2011
[5]基于等待事件的Oracle数据库调优与实时监控研究[D]. 谭磊.成都理工大学. 2010
[6]地震数据可视化技术研究及应用[D]. 张友加.湖南大学. 2009
[7]基于多核系统的线程调度[D]. 覃中.电子科技大学. 2009
[8]基于MAP协议的信令适配器的设计与实现[D]. 聂承桥.华中科技大学. 2008
本文编号:3553613
【文章来源】: 中国石油大学(北京)北京市 211工程院校 教育部直属院校
【文章页数】:75 页
【文章目录】:
摘要
ABSTRACT
第1章 绪论
1.1 研究背景和意义
1.2 研究现状
1.3 研究内容
1.4 论文组织结构
第2章 地震数据存取效率的研究
2.1 地震数据存取流程简介
2.1.1 地震数据加载
2.1.2 地震数据导出
2.1.3 地震数据格式转换
2.1.4 地震数据合并
2.2 地震数据存取效率的分析
2.3 地震数据存取优化思路
2.3.1 优化思路
2.3.2 存取流程优化后的变化
2.4 本章小结
第3章 多格式地震数据存取的扩展
3.1 地震数据格式简介
3.1.1 地震数据描述
3.1.2 SEGY格式数据简介
3.1.3 SEGD格式数据简介
3.1.4 ATT格式数据简介
3.2 多格式地震数据模型的建立
3.2.1 简单工厂模式建立多格式地震数据模型
3.2.2 地震数据通用数据库表结构设计
3.2.3 地震数据格式类型判定方法
3.2.4 多格式道头显示工具
3.3 本章小结
第4章 地震数据多线程处理优化
4.1 多线程技术
4.1.1 多线程简介
4.1.2 多核CPU与多线程
4.2 多线程处理的实现
4.2.1 QT实现多线程处理
4.2.2 进度记录
4.2.3 暂停与恢复
4.2.4 线程个数选择策略
4.3 本章小结
第5章 地震数据库监控与优化
5.1 监控工具的实现
5.1.1 几种Mysql数据库监控工具的介绍
5.1.2 数据库监控信息的说明
5.1.3 数据库监控工具的实现
5.2 数据库优化的方法
5.2.1 参数优化
5.2.2 SQL语句优化
5.2.3 存储方式优化
5.2.4 索引优化
5.3 本章小结
第6章 测试与应用
6.1 性能测试
6.1.1 测试环境
6.1.2 测试数据
6.1.3 测试方案及结果
6.2 大数据量前提下的应用效果分析
6.3 总结与展望
参考文献
致谢
【参考文献】:
期刊论文
[1]中国海油地震勘探技术进展与发展方向 [J]. 李绪宣,朱振宇,张金淼. 中国海上油气. 2016(01)
[2]数据库优化在海量数据下的研究与应用 [J]. 岑巍. 计算机时代. 2015(02)
[3]地震行业“大数据”应用探讨 [J]. 屈佳,郑蕊,王宁. 城市与减灾. 2014(04)
[4]基于MySQL数据库的优化 [J]. 吴沧舟,兰逸正,张辉. 电子科技. 2013(09)
[5]多核多线程技术综述 [J]. 眭俊华,刘慧娜,王建鑫,秦庆旺. 计算机应用. 2013(S1)
[6]国产地震处理解释软件的发展 [J]. 王宏琳,罗国安. 石油地球物理勘探. 2013(02)
[7]SEG-Y地震数据格式解析及转换方法 [J]. 王增波,李雁鸿,赵剑,陈继红,钱忠平. 物探装备. 2012(03)
[8]海量并行处理系统的大数据读写接口优化研究 [J]. 文必龙,宗文栋. 郑州轻工业学院学报(自然科学版). 2012(03)
[9]多核架构下的多线程负载平衡 [J]. 李实,刘乃琦,郭建东. 计算机应用. 2008(S2)
[10]Windows环境下基于Qt的SEGY格式地震数据可视化 [J]. 张婉,王磊. 石油工业计算机应用. 2007(04)
硕士论文
[1]针对地震大数据的分布式文件系统的研究与设计[D]. 陆梦寒.中国科学技术大学. 2014
[2]地震数据并行访问策略的研究[D]. 赵满.东北石油大学. 2013
[3]分布式MySQL数据库集群在线监测系统设计与实现[D]. 黄旭.哈尔滨工业大学. 2012
[4]地震数据可视化研究与实现[D]. 李耀伟.电子科技大学. 2011
[5]基于等待事件的Oracle数据库调优与实时监控研究[D]. 谭磊.成都理工大学. 2010
[6]地震数据可视化技术研究及应用[D]. 张友加.湖南大学. 2009
[7]基于多核系统的线程调度[D]. 覃中.电子科技大学. 2009
[8]基于MAP协议的信令适配器的设计与实现[D]. 聂承桥.华中科技大学. 2008
本文编号:3553613
本文链接:https://www.wllwen.com/projectlw/dqwllw/3553613.html