自动分层存储技术及其应用

发布时间：2020-03-20 04:42

【摘要】：在当今信息化的大背景下,数据量的增长迅速,越来越多的数据内容生成并存储。存储系统在各行业日益应用广泛,带来管理的难度与瓶颈。由于数据具有生命周期,在不同的时期存在的意义也不同。在数据刚生成时,带来的价值最高,随着时间推移,访问频度降低,价值也随之下降。信息量的增长使存储管理难度增加,将数据分级则可以简化存储管理,使重要和常用的数据能在最短时间内访问到,极少使用的数据放在廉价的存储设备上 本文讨论的重点便是在同一存储系统内,如何根据数据的访问冷热度不同,将存储分为不同层次应对不同的需求。随着近些年固态闪存盘的广泛使用,在存储上通过固态闪存盘及其他类型磁盘构建不同存储层级,利用各类磁盘的不同性能特点,在自动分层存储中使用软件层进行控制,结合不同的算法对负荷进行分析,通过持续监控、热点分析、数据迁移,实现热点数据的自动化迁移,在保持成本不变的前提下,达到满足性能与容量的需要。 针对数据库数据的特殊特点,将自动分层存储的理论应用于数据库实际应用,结果表明自动分层存储对数据库性能的改善同时降低了总体拥有成本。展望自动分层存储与未来新技术：虚拟内存、存储虚拟化、云技术的结合使用,具有有更广阔的应用。
【图文】：

因此容量几乎是无限大。〔‘，’〕第二节用户数据的特点分析通常情况中，用户的各类数据占比如图1一1所示:图1一1用户各类数据占比由图中可以看出，经常使用的数据在用户的所有数据中占比并不高，由此可见数据的冷热度不均，引申出后续问题，如果将所有数据全部布局于高速设备上并不经济，因为相当一部分数据对响应速度没有要求，但如果全部布局于低速设备又会有应用因为响应速度太慢而无法容忍。因此，引入分层的概念应用于不同需求的数据将能有的放矢的改善现状。除了不同的存储需求，还有出于对于高性能高吞吐量应用的支持，特别是现在风头正劲的虚拟化技术。为了在一台设备上支持更多的虚拟应用，就需要系统支持更大的吞吐量以及更高的性能。全部采用高速介质在成本上现在依然不是可行的，也不是必须的。根据数据局部性原理，，被频繁访问的数据是局部而有限的。如果把高频率访问的数据放在高速存储介质

图2一3不同类型磁盘的IOPS对比数据处理能力，同样的Raid组情况下，每分钟更新数据固态闪存盘是普通光纤通道磁盘的7倍多。图2一4对比了固态闪存磁盘和普通光纤通道磁盘的每分钟更新数据量。 TranscationPermin250002000015000D亡Crr‘亡f

本文编号：2591263