智能配用电大数据存储架构设计

发布时间：2017-08-02 01:00

  本文关键词：智能配用电大数据存储架构设计

  更多相关文章： 大数据 海量数据 框架设计 智能配用电 数据处理 存储

【摘要】：针对智能配用电数据海量、高维度、多源异构等特点,提出一种大数据存储的三层管理框架设计方案。首先,对智能配用电数据组成进行分类划分。然后,提出智能配用电数据存储的资源层、元数据层和实际数据层的三层管理框架,在资源管理层,应用虚拟化技术、负载均衡和资源调度完成对物理资源的管理;在元数据管理层,使用数据预处理技术对智能配用电的元数据进行分类,采用中间件技术完成XML元数据仓库管理;在实际数据管理层,利用NoSQL技术,通过Map和Reduce的有效结合,完成海量数据的分层分区快速存储。最后,在实验室环境下对该设计方案进行初步的应用,验证了所设计方案能够对结构化、半结构化和非结构化数据进行统一存储,可为智能配用电大数据技术的应用提供基础支撑作用。
【作者单位】： 天津大学智能电网教育部重点实验室;国网上海市电力公司;
【关键词】： 大数据 海量数据 框架设计 智能配用电 数据处理 存储
【基金】：国家高技术研究发展计划(863计划)资助项目(2015AA05203)~~
【分类号】：TM76
【正文快照】： 0引言大数据技术正成为各行各业的应用热点,智能配用电(SPDU)作为实现电网资源优化配置、电能合理利用、节能降耗和能效提升的重要手段,不仅含有量大面广的电力设备和应用系统,还包括支撑这些设备和系统正常运行的多种途径、多类型输入输出海量数据,并且这些数据容量大、采集

【相似文献】

中国重要会议论文全文数据库 前1条

1 程永军;李苏军;王跃利;;作战实验态势展示与分析框架设计[A];第13届中国系统仿真技术及其应用学术年会论文集[C];2011年

，

本文编号：606913