重复数据删除技术在基于云存储的智能电网中的应用研究
本文选题:重复数据删除 + 云存储 ; 参考:《华北电力大学》2013年硕士论文
【摘要】:随着智能电网的发展,电网运行时的实时数据呈海量化急剧增加,传统数据中心压力日渐攀升。这就需要利用云存储技术和重复数据删除技术对海量的电网数据进行快速有效地存储与处理。 云存储技术和重复数据删除技术是当今存储行业的两大研究热点。云存储技术以提供数据存储服务来解决存储设备管理维护、安全稳定和成本问题,实现存储设备向存储服务的转变。重复数据删除技术旨在消除数据大量冗余、缩减存储空间。两种技术的结合充分发挥了它们的优势,为智能电网的存储提供了高效处理能力。既将海量电网数据存储在云端,又能充分利用重复数据删除技术和云端的存储资源对海量电网数据进行压缩存储。 本文研究了一套电网数据的高效存储和空间最大利用的解决方案。本文改进了数据块级的重复数据删除策略并验证了其可行性。将重复数据删除技术部署在云端,构建了基于云存储的重复数据删除架构。另外,本文设计了智能电网云平台架构,,使其层次结构分别对应于云计算的结构层次并提供相应的服务,解决了在对海量电网数据进行相关操作时资源分配和动态负载均衡问题,介绍了在云环境下电网数据经过重复数据删除相关处理的存储访问删除机制。 将基于云存储的重复数据删除架构应用于智能电网云平台上,使得智能电网中大量相同的数据以更加轻便的方式存储,既可以高效存储及访问又结合了云存储的特点对大量增加的索引表进行分布式存储,实现云的实际利用价值。本文的涉及范围从基于云存储的重复数据删除架构,到智能电网云平台架构以及云环境下资源分配和动态负载均衡,整个从数据存储到数据查询,形成了一个完整的对智能电网数据进行空间优化操作的体系。
[Abstract]:With the development of smart grid, the real-time data of power grid is increasing rapidly, and the pressure of traditional data center is increasing day by day. It is necessary to use cloud storage technology and repeated data deletion technology to store and process massive power grid data quickly and effectively. Cloud storage technology and repeated data deletion technology are two research hotspots in storage industry. Cloud storage technology to provide data storage services to solve storage device management and maintenance, security and stability and cost issues, to achieve storage devices to storage services. Repetitive data deletion is designed to eliminate large amounts of data redundancy and reduce storage space. The combination of the two technologies gives full play to their advantages and provides efficient processing capacity for smart grid storage. Not only the massive power grid data is stored in the cloud, but also the repeated data deletion technology and the cloud storage resources can be used to compress and store the massive power grid data. In this paper, a set of efficient storage and spatial maximum utilization of grid data is studied. This paper improves the repeated data deletion strategy at block level and verifies its feasibility. The repeated data deletion technology is deployed in the cloud, and a cloud storage based repetitive data deletion architecture is constructed. In addition, this paper designs the cloud platform architecture of smart grid, which makes the hierarchical structure correspond to the cloud computing structure and provide the corresponding services. This paper solves the problem of resource allocation and dynamic load balancing in the operation of massive power grid data, and introduces the storage access deletion mechanism of power grid data through repeated data deletion related processing in cloud environment. The repeated data deletion architecture based on cloud storage is applied to the smart grid cloud platform, so that a large number of the same data in the smart grid can be stored in a more portable way. It not only can store and access efficiently, but also combine the characteristics of cloud storage to store a large number of index tables in a distributed way, and realize the practical value of cloud utilization. The scope of this paper ranges from cloud storage based repetitive data deletion architecture to smart grid cloud platform architecture and resource allocation and dynamic load balancing in cloud environment, from data storage to data query. A complete system for spatial optimization of smart grid data is formed.
【学位授予单位】:华北电力大学
【学位级别】:硕士
【学位授予年份】:2013
【分类号】:TP333
【参考文献】
相关期刊论文 前10条
1 陆春艳;向兵;姜炜超;陈国章;周永真;;用电信息采集系统中重复数据删除技术研究[J];电测与仪表;2010年S1期
2 江道灼;申屠刚;李海翔;吴志力;杨贵玉;;基础信息的标准化和规范化在智能电网建设中的作用与意义[J];电力系统自动化;2009年20期
3 赵俊华;文福拴;薛禹胜;林振智;;云计算:构建未来电力系统的核心计算平台[J];电力系统自动化;2010年15期
4 王德文;宋亚奇;朱永利;;基于云计算的智能电网信息平台[J];电力系统自动化;2010年22期
5 丁杰;奚后玮;韩海韵;周爱华;;面向智能电网的数据密集型云存储策略[J];电力系统自动化;2012年12期
6 张怀宇;朱松林;张扬;楼其民;张亮;;输变电设备状态检修技术体系研究与实施[J];电网技术;2009年13期
7 沐连顺;崔立忠;安宁;;电力系统云计算中心的研究与实践[J];电网技术;2011年06期
8 蒋江,张民选,廖湘科;基于多种资源的负载平衡算法的研究[J];电子学报;2002年08期
9 李建江;崔健;王聃;严林;黄义双;;MapReduce并行编程模型研究综述[J];电子学报;2011年11期
10 史卫江;曹荣新;曹增新;;智能电网综述[J];华北电力技术;2010年05期
相关会议论文 前2条
1 丁辉;张大华;罗志明;;基于Hadoop的海量数据处理平台研究[A];2011电力通信管理暨智能电网通信技术论坛论文集[C];2011年
2 陈德桂;;智能电网促进了低压电器新品种的发展与新技术的应用[A];2011中国电工技术学会学术年会论文集[C];2011年
相关博士学位论文 前2条
1 桂勋;多核并行和设计模式在海量电力暂态数据处理与分析中的应用研究[D];西南交通大学;2009年
2 唐跃中;数字化电网若干关键技术研究[D];浙江大学;2010年
相关硕士学位论文 前1条
1 王震;重复数据删除软件技术在银行备份系统的应用研究[D];复旦大学;2009年
本文编号:1948619
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/1948619.html