梦想云数据连环湖建设研究

发布时间：2021-01-01 03:27

　　中国石油信息化在30多年的持续发展中,历经分散建设、集中建设、集成应用3个阶段,正在迈向协同共享新阶段,努力建成"共享中国石油"。中国石油上游业务板块顺应数字化转型发展需要,针对中国石油上游平台多、数据库多、孤立应用多的"三多"问题,结合实际业务需求和信息技术发展趋势,对上游业务数据资源体系进行了系统的研究,对数据的汇聚、存储和应用进行了深入的分析,组织研发了勘探开发梦想云及数据湖技术,并在梦想云1.0统一数据湖的基础上,提出了逻辑统一、互联互通的集团级主湖和油气田公司级区域湖的数据连环湖设计与建设方案,通过试点验证,取得了预期效果,为梦想云2.0数据生态建设提供了有力支撑。 

【文章来源】：中国石油勘探. 2020年05期 北大核心

【文章页数】：7 页

【部分图文】：

梦想云连环湖总体方案示意图

对于结构化数据管理（图4），在集团总部统一建立上游业务通用应用（统建）的数据贴源层，数据结构基于源头系统。按照上游业务共享数据需要，确定数据管理范围，在共享存储层治理环境的中间库里通过数据治理及ETL工具对数据进行标准化后（该类共享数据标准简称S0）存储到基于EPDM 2.0扩展的共享存储层，进而根据业务应用需要，建立面向业务主题的高速服务，支撑分析应用。图4 结构化数据存储逻辑架构图

图3 数据湖管理工具逻辑架构图各油气田及研究单位部署区域湖，其中结构化数据由两部分组成。第一部分是基于S0标准的数据，由各油气田采集并治理后入区域湖，同时统一同步到主湖，以满足通用应用需要。第二部分是油田自建部分，由各油气田自行治理后存储到区域湖共享存储层（区域湖自建共享数据标准，简称S1），支撑油田本地化应用。

【参考文献】：
期刊论文
[1]中国石油勘探开发梦想云研究与实践[J]. 杜金虎,时付更,张仲宏,王铁成,丁建宇.  中国石油勘探. 2020(01)



本文编号：2950864