25.存储虚拟化

什么是存储？

侠义的存储定义：存储介质；CD,DVD，磁带，硬盘等

广义的存储定义：一切可以使数据存储的方式；

1.存储系统：磁盘阵列，控制器等

2.存储软件（备份软件，管理软件，快照，复制等增值软件）

3.存储网络（HBA卡，光纤交换机，FC/SAS线缆等）

4.存储解决方案（集中存储，归档，备份，容灾等）

存储的发展历程

存储---从附属于服务器到剥离成独立系统

存储---从独立系统到网络共享存储

存储的组网类型

DAS（Direct Attached Storage）

NAS（Network Attached Storage）

网络附加存储

SAN（Storage Area Networks）

存储形态简介

集中式存储系统

分布式存储系统

分布式存储系统，是将数据分散存储在多台独立的服务器上。

分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。

随着分布式存储越来越普及，现在一些对性能要求比较高的应用也开始使用分布式存储，比如金融系统的数据库。

存储业务类型

RAID技术

RAID的数据组织形式 

RAID的数据保护方式

RAID热备和重构的概念

热备（Hot Spare）的定义

p当冗余的RAID组中某个硬盘失效时，在不干扰当前RAID系统正常使用的情况下，用RAID系统中另外一个正常的备用硬盘自动顶替失效硬盘，及时保证RAID系统的冗余性。

热备有两种方式：

1.p全局式：备用硬盘为系统中所有的冗余RAID组共享。

2.p专用式：备用硬盘为系统中某一组冗余RAID组专用。

常见的RAID技术介绍

 RAID 0 ：没有容错设计的条带硬盘阵列，以条带形式将RAID组的数据均匀分布在各个硬盘中。

RAID 1 ：又称镜像（Mirror），数据同时一致写到主硬盘和镜像硬盘。

RAID 3 ：带有校验的并行数据传输阵列，数据条带化分布在数据盘中，同时使用专用校验硬盘存放校验数据。

RAID 5 ：与RAID 3机制类似，但校验数据均匀分布在各数据硬盘上，RAID成员硬盘上同时保存数据和校验信息，数据块和对应的校验信息保存在不同硬盘上。RAID 5是最常用的RAID方式之一。

RAID 10 ：将镜像和条带进行两级组合的RAID级别，第一级是RAID 1镜像对，第二级为RAID 0。RAID 10 也是一种应用比较广泛的RAID级别。

RAID6 DP技术

DP：Double Parity，就是在RAID 4所使用的一个行XOR校验硬盘的基础上又增加了一个硬盘用于存放斜向的XOR校验信息。

横向校验盘中P0-P3为各个数据盘中横向数据的校验信息。

斜向校验盘中DP0-DP3为各个数据盘及横向校验盘的斜向数据校验信息。     

RAID2.0+

增强型RAID技术，有效解决了机械硬盘容量越来越大，重构一块机械硬盘所需时间越来越长，传统RAID组重构窗口越来越大而导致重构期间又故障一块硬盘而彻底丢失数据风险的问题。

传统RAID2.0+技术：

在RAID 2.0的基础上提供了更细粒度（可以达几十KB粒度）的资源颗粒，形成存储资源的标准分配及回收单位，类似计算虚拟化中的虚拟机，我们称之为虚拟块技术。 

华为RAID 2.0+

是华为针对传统RAID的缺点，设计的一种满足存储技术虚拟化架构发展趋势的全新的RAID技术，其传统固定管理模式为两层虚拟化管理模式，在底层块级虚拟化（Virtual for Disk）硬盘管理的基础之上，通过一系列Smart效率提升软件，实现了上层虚拟化（Virtual for Pool）的高效资源管理。

存在问题：

存储的数据最终都会存储到SSD盘上，如果有些盘片上存放的数据不均匀，就可能导致某些压力大的SSD盘成为系统的瓶颈。

解决方法：

为应对该问题，华为存储系统采用新型的RAID 2.0+块虚拟化技术，通过更细粒度的划分，实现所有LUN的数据均衡的分布在每个SSD盘上，实现盘的负载均衡。

1.多块硬盘组成一个存储池。

2.存储系统将存储池中的每个SSD硬盘划分为固定大小的CK（通常大小为4MB）进行逻辑空间管理。

3.来自不同SSD硬盘的CHUNK按照用户在DeviceManager上设置的“RAID策略”组成CKG。

4.CKG再被划分为更细粒度的Grain（通常为8KB）。用户创建LUN时，存储系统以Grain为单位映射到LUN，实现对存储资源的精细化管理。

 相比传统RAID机制，RAID2.0+具备如下优势：

业务负载均衡，避免热点。数据打散到资源池内所有硬盘上，没有热点，硬盘负荷平均，避免个别盘因为承担更多的写操作而提前达到寿命的上限。

快速重构，缩小风险窗口。当硬盘故障时，故障盘上的有效数据会被重构到资源池内除故障盘外的所有盘上，实现了多对多的重构，速度快，大幅缩短数据处于非冗余状态的时间。

全盘参与重构。资源池内所有硬盘都会参与重构，每个盘的重构负载很低，重构过程对上层应用无影响。