1、Raid的学习和基础知识Raid的学习和基础知识+正文+1.什么是Raid;RAID（Redundant Array of Inexpensive Disks）称为廉价磁盘冗余阵列。RAID 的基本想法是把多个便宜的小磁盘组合到一起，成为一个磁盘组，使性能达到或超过一个容量巨大、价格昂贵的磁盘。目前 RAID技术大致分为两种：基于硬件的RAID技术和基于软件的RAID技术。其中在Linux下通过自带的软件就能实现RAID功能，这样便可省去购买昂贵的硬件 RAID 控制器和附件就能极大地增强磁盘的 IO 性能和可靠性。由于是用软件去实现的RAID功能，所以它配置灵活、管理方便。同时使用软件RAI
2、D，还可以实现将几个物理磁盘合并成一个更大的虚拟设备，从而达到性能改进和数据冗余的目的。当然基于硬件的RAID解决方案比基于软件RAID技术在使用性能和服务性能上稍胜一筹，具体表现在检测和修复多位错误的能力、错误磁盘自动检测和阵列重建等方面。2.RAID级别介绍;一般常用的RAID阶层，分别是RAID 0、RAID1、RAID 3、RAID 4以及RAID 5，再加上二合一型 RAID 0+1或称RAID 10。我们先把这些RAID级别的优、缺点做个比较： RAID级别 相对优点 相对缺点RAID 0 存取速度最快 没有容错RAID 1 完全容错 成本高RAID 3 写入性能最好 没有多任务功
3、能RAID 4 具备多任务及容错功能 Parity 磁盘驱动器造成性能瓶颈RAID 5 具备多任务及容错功能 写入时有overheadRAID 0+1/RAID 10 速度快、完全容错 成本高2.1 RAID0的特点与应用;也称为条带模式（striped），即把连续的数据分散到多个磁盘上存取，如图所示。当系统有数据请求就可以被多个磁盘并行的执行，每个磁盘执行属于它自己的那部分数据请求。这种数据上的并行操作可以充分利用总线的带宽，显著提高磁盘整体存取性能。因为读取和写入是在设备上并行完成的，读取和写入性能将会增加，这通常是运行 RAID 0 的主要原因。但RAID 0没有数据冗余，如果驱动器出现
4、故障，那么将无法恢复任何数据。2.2 RAID 1 的特点与应用;RAID 1又称为镜像（Mirroring），一个具有全冗余的模式，如图所示。RAID 1可以用于两个或2xN个磁盘，并使用0块或更多的备用磁盘，每次写数据时会同时写入镜像盘。这种阵列可靠性很高，但其有效容量减小到总容量的一半，同时这些磁盘的大小应该相等，否则总容量只具有最小磁盘的大小。2.3 RAID 3特点与应用;RAID 3 是将数据先做XOR 运算，产生Parity Data后，在将数据和Parity Data 以并行存取模式写入成员磁盘驱动器中，因此具备并行存取模式的优点和缺点。进一步来说，RAID 3每一笔数据传输，
5、都更新整个Stripe即每一个成员磁盘驱动器相对位置的数据都一起更新，因此不会发生需要把部分磁盘驱动器现有的数据读出来，与新数据作XOR运算，再写入的情况发生这个情况在 RAID 4和RAID 5会发生，一般称之为Read、Modify、Write Process，我们姑且译为为读、改、写过程。因此，在所有 RAID级别中，RAID 3的写入性能是最好的。RAID 3的 Parity Data 一般都是存放在一个专属的Parity Disk，但是由于每笔数据都更新整个Stripe，因此，RAID 3的 Parity Disk 并不会如RAID 4的 Parity Disk，会造成存取的瓶颈。R
6、AID 3的并行存取模式，需要RAID 控制器特别功能的支持，才能达到磁盘驱动器同步控制，而且上述写入性能的优点，以目前的Caching 技术，都可以将之取代，因此一般认为RAID 3的应用，将逐渐淡出市场。RAID 3 以其优越的写入性能，特别适合用在大型、连续性档案写入为主的应用，例如绘图、影像、视讯编辑、多媒体、数据仓储、高速数据撷取等等。2.4 RAID 4特点与应用;创建RAID 4需要三块或更多的磁盘，它在一个驱动器上保存校验信息，并以RAID 0方式将数据写入其它磁盘，如图所示。因为一块磁盘是为校验信息保留的，所以阵列的大小是（Nl）*S，其中S是阵列中最小驱动器的大小。就像在
7、RAID 1中那样，磁盘的大小应该相等。如果一个驱动器出现故障，那么可以使用校验信息来重建所有数据。如果两个驱动器出现故障，那么所有数据都将丢失。不经常使用这个级别的原因是校验信息存储在一个驱动器上。每次写入其它磁盘时，都必须更新这些信息。因此，在大量写入数据时很容易造成校验磁盘的瓶颈，所以目前这个级别的RAID很少使用了。RAID 4 是采取独立存取模式，同时以单一专属的Parity Disk 来存放Parity Data。RAID 4的每一笔传输Strip资料较长，而且可以执行Overlapped I/O，因此其读取的性能很好。但是由于使用单一专属的Parity Disk 来存放Parit
8、y Data，因此在写入时，就会造成很大的瓶颈。因此，RAID 4并没有被广泛地应用。2.5 RAID 5特点与应用;在希望结合大量物理磁盘并且仍然保留一些冗余时，RAID 5 可能是最有用的 RAID 模式。RAID 5可以用在三块或更多的磁盘上，并使用0块或更多的备用磁盘。就像 RAID 4一样，得到的 RAID5 设备的大小是（N1）*S。RAID5 与 RAID4 之间最大的区别就是校验信息均匀分布在各个驱动器上，如图4所示，这样就避免了RAID 4中出现的瓶颈问题。如果其中一块磁盘出现故障，那么由于有校验信息，所以所有数据仍然可以保持不变。如果可以使用备用磁盘，那么在设备出现故障之后
9、，将立即开始同步数据。如果两块磁盘同时出现故障，那么所有数据都会丢失。RAID5 可以经受一块磁盘故障，但不能经受两块或多块磁盘故障。RAID 5也是采取独立存取模式，但是其Parity Data 则是分散写入到各个成员磁盘驱动器，因此，除了具备Overlapped I/O 多任务性能之外，同时也脱离如RAID 4单一专属Parity Disk的写入瓶颈。但是，RAI?D 5在座资料写入时，仍然稍微受到读、改、写过程的拖累。由于RAID 5 可以执行Overlapped I/O 多任务，因此当RAID 5的成员磁盘驱动器数目越多，其性能也就越高，因为一个磁盘驱动器再一个时间只能执行一个 Thr
10、ead，所以磁盘驱动器越多，可以Overlapped 的Thread 就越多，当然性能就越高。但是反过来说，磁盘驱动器越多，数组中可能有磁盘驱动器故障的机率就越高，整个数组的可靠度，或MTDL (Mean Time to Data Loss) 就会降低。由于RAID 5将Parity Data 分散存在各个磁盘驱动器，因此很符合XOR技术的特性。例如，当同时有好几个写入要求发生时，这些要写入的数据以及Parity Data 可能都分散在不同的成员磁盘驱动器，因此RAID 控制器可以充分利用Overlapped I/O，同时让好几个磁盘驱动器分别作存取工作，如此，数组的整体性能就会提高很多。基本
11、上来说，多人多任务的环境，存取频繁，数据量不是很大的应用，都适合选用RAID 5 架构，例如企业档案服务器、WEB 服务器、在线交易系统、电子商务等应用，都是数据量小，存取频繁的应用。2.6 RAID 0+1RAID 10的特点与应用；RAID 0+1/RAID 10，综合了RAID 0 和 RAID 1的优点，适合用在速度需求高，又要完全容错，当然经费也很多的应用。 RAID 0和RAID 1的原理很简单，合起来之后还是很简单，我们不打算详细介绍，倒是要谈谈，RAID 0+1到底应该是 RAID 0 over RAID 1，还是RAID 1 over RAID 0，也就是说，是把多个RAID
12、 1 做成RAID 0，还是把多个 RAID 0 做成RAID 1？RAID 0 over RAID 1假设我们有四台磁盘驱动器，每两台磁盘驱动器先做成RAID 1，再把两个RAID 1做成RAID 0，这就是RAID 0 over RAID 1：(RAID 1) A = Drive A1 + Drive A2 (Mirrored)(RAID 1) B = Drive B1 + Drive B2 (Mirrored)RAID 0 = (RAID 1) A + (RAID 1) B (Striped)RAID 1 over RAID 0假设我们有四台磁盘驱动器，每两台磁盘驱动器先做成RAID 0
13、，再把两个RAID 0做成RAID 1，这就是RAID 1 over RAID 0：(RAID 0) A = Drive A1 + Drive A2 (Striped)(RAID 0) B = Drive B1 + Drive B2 (Striped)RAID 1 = (RAID 1) A + (RAID 1) B (Mirrored)在这种架构之下，如果 (RAID 0) A有一台磁盘驱动器故障，(RAID 0) A就算毁了，当然RAID 1仍然可以正常工作；如果这时 (RAID 0) B也有一台磁盘驱动器故障，(RAID 0) B也就算毁了，此时RAID 1的两磁盘驱动器都算故障，整个RA
14、ID 1资料就毁了。因此，RAID 0 OVER RAID 1应该比RAID 1 OVER RAID 0具备比较高的可靠度。所以我们建议，当采用RAID 0+1/RAID 10架构时，要先作RAID 1，再把数个RAID 1做成RAID 0。3. 怎样选择Raid级别;RAID 012345 到底哪一种适合你，不只是成本问题，容错功能和传输性能的考虑以及未来之可扩充性都应该符合应用的需求。RAID 在市场上的的应用，已经不是新鲜的事儿了，很多人都大略了解RAID的基本观念，以及各个不同RAID LEVEL 的区分。但是在实际应用 面，我们发现，有很多使用者对于选择一个合适的RAID LEVEL
15、，仍然无法很确切的掌握，尤其是对于RAID 0+1 (10)，RAID 3， RAID 5之间的选择取舍，更是举棋不定。3.1 RAID条切“striped”的存取模式;在使用数据条切Data Stripping 的RAID 系统之中，对成员磁盘驱动器的存取方式，可分为两种：并行存取Paralleled Access独立存取Independent AccessRAID 2和RAID 3 是采取并行存取模式。RAID 0、RAID 4、RAID 5及RAID 6则是采用独立存取模式。3.2 平行存取模式;并行存取模式支持里，是把所有磁盘驱动器的主轴马达作精密的控制，使每个磁盘的位置都彼此同步，然
16、后对每一个磁盘驱动器作一个很短的I/O数据传送，如此一来，从主机来的每一个I/O 指令，都平均分布到每一个磁盘驱动器。为了达到并行存取的功能，RAID 中的每一个磁盘驱动器，都必须具备几乎完全相同的规格：转速必须一样；磁头搜寻速度Access Time必须相同；Buffer 或Cache的容量和存取速度要一致；CPU处理指令的速度要相同；I/O Channel 的速度也要一样。总而言之，要利用并行存取模式，RAID 中所有的成员磁盘驱动器，应该使用同一厂牌，相同型号的磁盘驱动器。3.2.1 并行存取的基本工作原理;假设RAID中共有四部相同规格的磁盘驱动器，分别为磁盘驱动器A、B、C和D，我们
17、在把时间轴略分为T0、T1、T2、T3和T4：T0： RAID控制器将第一笔数据传送到A的Buffer，磁盘驱动器B、C和D的Buffer都是空的，在等待中T1： RAID控制器将第二笔数据传送到B的Buffer，A开始把Buffer中的数据写入扇区，磁盘驱动器C和D的Buffer都是空的，在等待中T2： RAID控制器将第三笔数据传送到C的Buffer，B开始把Buffer中的数据写入扇区，A已经完成写入动作，磁盘驱动器D和A的Buffer都是空的，在等待中T3： RAID控制器将第四笔数据传送到D的Buffer，C开始把Buffer中的数据写入扇区，B已经完成写入动作，磁盘驱动器A和B的B
18、uffer都是空的，在等待中T4： RAID控制器将第五笔数据传送到A的Buffer，D开始把Buffer中的数据写入扇区，C已经完成写入动作，磁盘驱动器B和C的Buffer都是空的，在等待中 如此一直循环，一直到把从主机来的这个I/O 指令处理完毕，RAID控制器才会受处理下一个I/O 指令。重点是在任何一个磁盘驱动器准备好把数据写入扇区时，该目的扇区必须刚刚好转到磁头下。同时RAID控制器每依次传给一个磁盘驱动器的数据长度，也必须刚刚好，配合磁盘驱动器的转速，否则一旦发生 miss，RAID 性能就大打折扣。3.2.2 并行存取RAID的最佳应用;并行存取RAID之架构，以其精细的马达控制
19、和分布之数据传输，将数组中每一个磁盘驱动器的性能发挥到最大，同时充分利用Storage Bus的频宽，因此特别适合应用在大型、数据连续的档案存取应用，例如：影像、视讯档案服务器数据仓储系统多媒体数据库电子图书馆印前或底片输出档案服务器其它大型且连续性档案服务器由于并行存取RAID架构之特性，RAID 控制器一次只能处理一个I/O要求，无法执行Overlapping 的多任务，因此非常不适合应用在 I/O次数频繁、数据随机存取、每笔数据传输量小的环境。同时，因为并行存取无法执行Overlapping 的多任务，因此没有办法隐藏磁盘驱动器搜寻seek的时间，而且在每一个I/O的第一笔数据传输，都要
20、等待第一个磁盘驱动器旋转延迟rotational latency，平均为旋转半圈的时间，如果使用一万转的磁盘驱动器，平均就需要等待50 usec。所以机械延迟时间，是并行存取架构的最大问题。3.3 独立存取模式;相对于并行存取模式，独立存取模式并不对成员磁盘驱动器作同步转动控制，其对每个磁盘驱动器的存取，都是独立且没有顺序和时间间格的限制，同时每笔传输的数据量都比较大。因此，独立存取模式可以尽量地利用overlapping 多任务、Tagged Command Queuing等等高阶功能，来 隐藏上述磁盘驱动器的机械时间延迟Seek 和Rotational Latency。由于独立存取模式可以
21、做overlapping 多任务，而且可以同时处理来自多个主机不同的I/O Requests，在多主机环境如Clustering，更可发挥最大的性能。3.3.1 独立存取RAID的最佳应用;由于独立存取模式可以同时接受多个I/O Requests，因此特别适合应用在数据存取频繁、每笔数据量较小的系统。例如：在线交易系统或电子商务应用多使用者数据库ERM及MRP 系统小文件之文件服务器4. 创建和维护Raid;4.1 mdadm;在Linux服务器中是通过mdadm工具来创建和维护软RAID的，mdadm在创建和管理软RAID时非常方便，而且很灵活。mdadm常用的参数有如下： * -creat
22、e或-C：创建一个新的软RAID，后面接raid设备的名称。例如，/dev/md0，/dev/md1等。 *-assemble或-A：加载一个已存在的阵列，后面跟阵列以及设备的名称。 *-detail或-D：输出指定RAID设备的详细信息。 *-stop或-S：停止指定的RAID设备。 *-level或-l：设置RAID的级别，例如，设置“-level=5”则表示创建阵列的级别是RAID 5。 *-raid-devices或-n：指定阵列中活动磁盘的数目。 *-scan或-s：扫描配置文件或/proc/mdstat文件来搜索软RAID的配置信息，该参数不能单独使用，只能配置其它参数才能使用。下
23、面将通过一个实例来讲述通过mdadm如何实现软RAID的功能。4.1.1 创建分区;【实例1】某台机器上有4块空闲的硬盘，分别是/dev/sdb、/dev/sdc、/dev/sdd和/dev/sde，并用这四块硬盘来创建来创建一个RAID 5，具体操作步骤如下：首先使用“fdisk”命令在每块硬盘上创建一个分区，操作如下：rootxiaop-laptop:/# fdisk /dev/sdbDevice contains neither a valid DOS partition table, nor Sun, SGI or OSF disklabelBuilding a new DOS dis
24、klabel. Changes will remain in memory only,until you decide to write them. After that, of course, the previouscontent wont be recoverable.Warning: invalid flag 0x0000 of partition table 4 will be corrected by w(rite)Command (m for help): n #按n创建新分区Command actione extendedp primary partition (1-4) #输
25、入p 选择创建主分区pPartition number (1-4): 1 #输入 1 创建第一个主分区First cylinder (1-102, default 1): #直接回车,选择分区开始柱面这里就从 1 开始Using default value 1Last cylinder or +size or +sizeM or +sizeK (1-102, default 102):Using default value 102Command (m for help): w #然后输入w写盘The partition table has been altered!Calling ioctl(
26、) to re-read partition table.Syncing disks.针对其余几块硬盘也做相同操作，按照此步骤在另外的两块磁盘上做同样的操作;全部做完后,运行 fdisk -l 应该可以看到如下信息: Disk /dev/sdb: 214 MB, 214748160 bytes64 heads, 32 sectors/track, 204 cylindersUnits = cylinders of 2048 * 512 = 1048576 bytes Device Boot Start End Blocks Id System/dev/sdb1 1 204 208880 fd
27、Linux raid autodetectDisk /dev/sdc: 214 MB, 214748160 bytes64 heads, 32 sectors/track, 204 cylindersUnits = cylinders of 2048 * 512 = 1048576 bytes Device Boot Start End Blocks Id System/dev/sdc1 1 204 208880 fd Linux raid autodetectDisk /dev/sdd: 214 MB, 214748160 bytes64 heads, 32 sectors/track, 2
28、04 cylindersUnits = cylinders of 2048 * 512 = 1048576 bytes Device Boot Start End Blocks Id System/dev/sdd1 1 204 208880 fd Linux raid autodetect看到上面三个磁盘上分别建了一个分区,分区大小都一样;4.1.2 创建RAID 5;创建完/dev/sdb1、/dev/sdc1、/dev/sdd1、/dev/sde1四个分区后，下面就可以来创建RAID 5了，其中设定/dev/sde1作为备用设备，其余为活动设备，备用设备的作用是一旦某一设备损坏可以立即使用
29、备用设备替换。操作命令如下：rootxiaop-laptop:/# mdadm -create /dev/md0 -level=5 -raid-devices=3 -spare-devices=1 /dev/sdb-e1mdadm: array /dev/md0 started.其中“-spare-devices=1”表示当前阵列中备用设备只有一块，即作为备用设备的“/dev/sde1”，若有多块备用设备，则将“-spare-devices”的值设置为相应的数目。成功创建完成RAID设备后，通过如下命令可以查看到RAID的详细信息：rootxiaop-laptop:/# mdadm -deta
30、il /dev/md0/dev/md0:Version : 00.90.01Creation Time : Mon Jan 22 10:55:49 2007Raid Level : raid5Array Size : 208640 (203.75 MiB 213.65 MB)Device Size : 104320 (101.88 MiB 106.82 MB)Raid Devices : 3Total Devices : 4Preferred Minor : 0Persistence : Superblock is persistentUpdate Time : Mon Jan 22 10:55:52 2007State : cleanActive Device
