用电信息采集系统数据库的云存储设计
本文关键词:用电信息采集系统数据库的云存储设计,,由笔耕文化传播整理发布。
【摘要】:随着用电采集范围的逐步扩大,特别是“全覆盖、全采集、全费控”建设工作的推进,用电采集数据量的不断激增给数据管理带来了极大的难题,一是大量采集数据的存储问题,二是大数据的业务分析应用问题。以采集系统全覆盖为支撑,深入挖掘采集系统数据,深化应用采集系统功能,加强与营销、配电等相关系统集成,实现电费抄核自动化、线损管理精细化、互动服务智能化、费控功能实用化的“四化”目标,全面推进营销发展方式转变,全面提升公司供电服务水平。但面对电网每天采集上传的大数据如何实时存储和对存储采集数据的业务分析挖掘成为系统控制和应用的关键。特别是线损管理、负荷管理、计量在线监测、电压合格率管理、供电可靠性分析等都需要通过对所采集到的数据进行存储、快速分析和智能诊断,为系统应用提供支撑。 根据目前用电信息采集系统中存在的存储、计算和扩展瓶颈,积极探索新技术的应用。利用基于实时数据库、云计算一体机相融合技术,即实现由传统的“集中分析-集中处理-统一展示”到“分布式分析-分布式处理-统一展示”的过度,用电采集信息数据入库采用实时数据流处理技术,底层数据管理采用DataCube分布式基础架构,基于云存储文件系统,以实现类关系型数据库的复杂关联查询。主要工作、方法及研究内容: 1)研究基于用电信息采集系统的数据实时处理支撑技术,解决用电信息实时高效存储、实时分析、实时计算等时效性比较高的一系列需求; 2)针对不同的数据类型,开发关系数据库、实时数据库及云实时存储平台之间进行数据交换共享的接口; 3)设计通用的数据接口,为营销稽查监控系统、供电品质实时在线智能评价系统、配电生产指挥平台、营销业务应用系统、营销GIS系统等提供数据分析及数据处理支持; 4)搭建具有高可靠性、稳定性和扩展性的云计算服务平台,为用电信息采集系统的业务功能拓展做好技术支撑; 5)研究针对海量数据实时在线分析挖掘和统计的功能,为有序用电智能决策分析提供强有力的依据。 项目应用实施效果: 基于实时数据库与云计算、云实时存储平台技术相融合的一体化应用,由主控制节点和处理节点构成,包括了存储子系统、处理子系统和调度子系统等,使用高效的并行计算技术和先进的索引机制实现实时任务的快速处理、复杂任务的高效计算以及大数据批处理任务的高吞吐率。为电力企业提供一个整合的业务框架蓝图,帮助电力企业成为“随需而变”的企业。
【关键词】:用电采集 实时数据库 分布式存储与计算 海量数据 云计算 云存储
【学位授予单位】:山东大学
【学位级别】:硕士
【学位授予年份】:2014
【分类号】:TM76;TP333;TP311.13
【目录】:
- 中文摘要8-10
- Abstract10-12
- 第一章 绪论12-14
- 1.1 系统现状12
- 1.2 面临问题及发展趋势12-14
- 第二章 问题描述、理论基础及先进技术14-54
- 2.1 现有业务应用和数据构成14
- 2.2 业务应用需求分析14-16
- 2.2.1 基本应用14
- 2.2.2 高级应用14-15
- 2.2.3 业务应用需求总结15-16
- 2.3 数据构成分析16-18
- 2.4 数据存储性能分析18-19
- 2.5 研究探索19
- 2.6 理论基础19-28
- 2.6.1 系统目标及原则21-22
- 2.6.2 优化存储策略22-23
- 2.6.3 分布式文件存储系统23-25
- 2.6.4 存储访问接口25-26
- 2.6.5 分级动态存储方式26
- 2.6.6 优化存储关键技术26-27
- 2.6.7 分布式调度引擎27-28
- 2.7 应用技术说明28-54
- 2.7.1 系统安全性28-35
- 2.7.2 系统可靠性与扩展性35-38
- 2.7.3 数据存储系统38-40
- 2.7.4 计算与存储集群的可靠性与负载均衡设计40-54
- 第三章 应用解决方案54-66
- 3.1 总体应用54-61
- 3.1.1 性能提升54
- 3.1.2 数据存储54-56
- 3.1.3 数据处理56-59
- 3.1.4 基于云实时存储与关系数据库的应用系统架构59-61
- 3.2 系统特点、性能和功能61-66
- 3.2.1 系统特性61
- 3.2.2 系统特点61-62
- 3.2.3 系统性能62-64
- 3.2.4 系统功能64-66
- 第四章 应用实施规划66-69
- 4.1 应用工作原理66
- 4.2 与原系统整合方案66-67
- 4.3 应用实施步骤67-69
- 第五章 结论69-70
- 参考文献70-72
- 致谢72-73
- 学位论文评闽及答辩情况表73
【相似文献】
中国期刊全文数据库 前10条
1 叶瑜;;灌区信息采集系统设计研究[J];工程与建设;2007年06期
2 贺俊伟;孟卫;周冬梅;;移动GIS在城市规划中的应用[J];地理空间信息;2011年01期
3 韩方珍,俞守华,陈联诚,区晶莹;广州市农业信息服务体系建设模式研究[J];农业网络信息;2005年08期
4 王征清;张文德;成全;;基于Multi-Agent的主题信息采集结构模式探究[J];情报探索;2007年01期
5 徐薇;;Web信息采集中页面分块技术的研究[J];武汉科技学院学报;2007年05期
6 钱力;齐林海;马素霞;;基于ASP.NET 2.0 AJAX的Web信息采集系统的设计与实现[J];中国电力教育;2007年S3期
7 赵晓东;;办公自动化通用信息采集系统研究[J];办公自动化;2008年18期
8 张洪民;;纳税申报电子信息采集系统设计[J];农业网络信息;2010年03期
9 陈诚;夏峰;蔡龙;;用电信息采集系统本地网络方案[J];农村电气化;2011年03期
10 李雅;秦会斌;徐伟;章潋;;一种基于无线传感器网络的火险信息采集系统[J];电子与封装;2008年04期
中国重要会议论文全文数据库 前10条
1 夏泽举;;用电信息采集系统实用化关键问题及探讨[A];2011年安徽省智能电网技术论坛论文集[C];2011年
2 ;用电信息采集系统的规划与建设[A];2011年安徽省智能电网技术论坛论文集[C];2011年
3 程德山;刘梁宝;李浩;;六安市区用电信息采集系统的通信组网技术研究[A];2011年安徽省智能电网技术论坛论文集[C];2011年
4 李瑞平;;3G视频信息采集系统在黄河内蒙古河段防汛中的应用[A];经济策论(上)[C];2011年
5 赵丙镇;谢伟;朱彬若;孙雪飞;;基于EPON技术的用电信息采集系统本地信道[A];经济发展方式转变与自主创新——第十二届中国科学技术协会年会(第四卷)[C];2010年
6 张荧锋;金家善;耿俊豹;;用于评价中继级维修保障能力的信息采集系统[A];中国造船工程学会修船技术学术委员会船舶维修理论与应用论文集第八集(2005—2006年度)[C];2006年
7 刘建国;赵毅博;崔冬雪;赵其林;范秦海;宋全军;;数字化铁饼三维信息采集系统的研制与实验[A];第12届全国运动生物力学学术交流大会论文汇编[C];2008年
8 张素智;李宝燕;樊得强;;面向用户和领域本体的Web信息采集系统[A];计算机研究新进展(2010)——河南省计算机学会2010年学术年会论文集[C];2010年
9 赵毅博;刘建国;赵其林;宋全军;谢双伟;;基于USB传输与无线传输的的数字化铁饼三维信息采集系统的研制与测试[A];第十三届全国运动生物力学学术交流大会论文汇编[C];2009年
10 于泉;石若川;荣建;;基于近景摄影测量的交通信息采集系统[A];2007第三届中国智能交通年会论文集[C];2007年
中国重要报纸全文数据库 前10条
1 林平;河南公司高质量建设用电信息采集系统[N];国家电网报;2010年
2 通讯员 丁罕 王涛;无锡地区用电信息采集系统建设起步[N];中国电力报;2010年
3 盛雪锋 王强;安吉电力启动用电信息采集系统建设[N];华东电力报;2010年
4 记者 王龙飞 通讯员 祁文运;用电信息采集系统将在全省开建[N];山西经济日报;2011年
5 记者 刘成根 通讯员 王华栋 常锦凤;朔州供电:将建设用电信息采集系统[N];山西经济日报;2010年
6 钟丽军 李熊 常秉玉;浙江青海加快用电信息采集系统建设[N];国家电网报;2010年
7 通讯员 陈悦伟 记者 冯翠昕;我市将建设用电信息采集系统[N];承德日报;2010年
8 谢德胜;马鞍山启用交通违法信息采集系统[N];人民公安报·交通安全周刊;2011年
9 陈杰 王慧斌;青海国税成功应用信息采集系统[N];中国税务报;2005年
10 通讯员 常秉玉;青海电力推进用电信息采集系统建设[N];中国电力报;2009年
中国博士学位论文全文数据库 前9条
1 杨志清;服务于安全运营管理的高速公路网信息系统[D];同济大学;2008年
2 姜兆顺;基于结构化住院病历采集系统对糖尿病及血管并发症辨证论治规律的研究[D];中国中医研究院;2005年
3 梁琨;二维条码谷物溯源颗粒的研制及溯源信息采集系统研究[D];南京农业大学;2012年
4 宗校军;中文网页定题采集及分类研究[D];华中科技大学;2006年
5 李永军;花岗岩类地质信息的采集与集成[D];长安大学;2005年
6 许凌飞;基于炉口火焰光谱信息的转炉炼钢终点在线碳含量测量方法研究[D];南京理工大学;2011年
7 唐松;视网膜母细胞瘤综合治疗及与肿瘤血管生成细胞因子关系的研究[D];南方医科大学;2013年
8 张良力;面向安全预警的机动车驾驶意图识别方法研究[D];武汉理工大学;2011年
9 耿艳利;下肢运动模式识别及动力型假肢膝关节控制方法研究[D];河北工业大学;2012年
中国硕士学位论文全文数据库 前10条
1 李志尧;公安接警信息采集系统的设计与实现[D];北京交通大学;2010年
2 赵迪;远程主机信息采集系统的设计与实现[D];电子科技大学;2010年
3 吴翠雁;基于Nutch的信息采集系统的研究与实现[D];华南理工大学;2010年
4 周晔;一种增量式并行Web信息采集系统[D];暨南大学;2005年
5 解金耀;基于SMS的无线信息采集系统的研究与设计[D];大连海事大学;2005年
6 魏一帆;分布式信息采集系统Web划分技术研究[D];哈尔滨工业大学;2010年
7 李治;基于Web的机床信息采集系统的研究与开发[D];大连理工大学;2005年
8 陈浩;用户用电信息采集系统设计[D];兰州大学;2012年
9 徐林海;用电信息采集系统开发阶段风险管理研究[D];华北电力大学;2013年
10 许丽华;电力用户用电信息采集系统的设计和实现[D];复旦大学;2010年
本文关键词:用电信息采集系统数据库的云存储设计,由笔耕文化传播整理发布。
本文编号:333227
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/333227.html