CentOS4.4下利用mdadm建立Raid5

一、环境

1.操作系统为CentOS4.4,mdadm软件为系统自带的,版本1.6.0-3

2.hda安装的是系统,sda、sdb、sdc、sdd四块硬盘建立Raid5,其中sdd为热备。

二、准备

1.首先需要将四块SCSI硬盘格式化。敲入命令fdisk –l,系统显示sda、sdb、sdc、sdd的一些信息,并提示磁盘没有包含一个有效的分区表。

2.[root@centos /]# fdisk /dev/sda

Command (m for help): n      #输入字母n,添加一个新的分区。

Command action

   e   extended

   p   primary partition (1-4)

p                                        #创建主分区。

Partition number (1-4): 1       #可创建四个主分区,此处输入1,创建第一个。

First cylinder (1-1044, default 1):        #因为是将硬盘分为一个区,所以默认回车即可。

Using default value 1

Last cylinder or +size or +sizeM or +sizeK (1-1044, default 1044):

Using default value 1044

Command (m for help): t       #更改分区的文件系统ID。

Selected partition 1

Hex code (type L to list codes): fd        #fd  Linux raid auto

Changed system type of partition 1 to fd (Linux raid autodetect)

Command (m for help): w            #保存退出

3.按照上步骤处理四块硬盘,然后可以使用命令fdisk –l再次查看,可以看到四块硬盘已经完成准备。

三、配置

1.创建raid非常简单,只需要一条命令即可。

[root@centos /]# mdadm -C -v /dev/md0 -l5 -n3 /dev/sda1 /dev/sdb1 /dev/sdc1 -x1 /dev/sdd1

#参看帮助mdadm --create --help

mdadm: layout defaults to left-symmetric

mdadm: chunk size defaults to 64K

mdadm: size set to 8388544K

mdadm: array /dev/md0 started.

[root@centos /]#

2.创建文件系统为ext3

[root@centos /]# mkfs.ext3 /dev/md0

创建目录/mnt/raid,挂载

[root@centos /]# mkdir /mnt/raid

[root@centos /]# mount /dev/md0 /mnt/raid

3.了解raid状况

[root@centos /]# mdadm -D /dev/md0

4.启动和停止

停止之前需要umount,然后mdadm –S /dev/md0

启动:[root@centos /]# mdadm -A /dev/md0 /dev/sda1 /dev/sdb1 /dev/sdc1 /dev/sdd1

如果已经建立了配置文件,启动可使用命令mdadm –As /dev/md0

5.关于配置文件

系统中包含一个配置文件的样例/usr/share/doc/mdadm-1.6.0/mdadm.conf-example,可以参照建立/dev/mdadm.conf配置文件,也可通过命令mdadm –Ds查看详情,然后使用vi编辑保存文本文件

[root@centos /]# vi /etc/mdadm.conf

DEVICE /dev/sd[abcd]1

ARRAY /dev/md0 level=raid5 num-devices=3 UUID=63cb965b:79486986:d389c551:67677f20

为使系统reboot后能够自动挂载raid目录,需要修改/etc/fstab文件,加入如下一行:/dev/md0                /mnt/raid               ext3    defaults        0 0

四、故障测试

1.测试前,在/mnt/radi下建立一个文件使用

[root@centos raid]# ll / |tee ./ls.txt

mdadm自带命令可以标记某块硬盘为损坏,参看帮助mdadm --manage –h。

故障测试中,标记sda硬盘损坏

[root@centos /]# mdadm /dev/md0 -f /dev/sda1

mdadm: set /dev/sda1 faulty in /dev/md0

2.查看状态

[root@centos /]# more /proc/mdstat

Personalities : [raid5]

md0 : active raid5 sdd1[3] sdc1[2] sdb1[1] sda1[4](F)

      16771584 blocks level 5, 64k chunk, algorithm 2 [3/2] [_UU]

      [====>................]  recovery = 22.8% (1916928/8385792) finish=1.9min speed=55892K/sec

unused devices: <none>

[root@centos /]#

因为sdd硬盘为热备,系统显示raid重构中,进度22.8%,且sda1标记(F)。

稍等再次查看:

[root@centos/]# more /proc/mdstat

Personalities : [raid5]

md0 : active raid5 sdd1[0] sdc1[2] sdb1[1] sda1[3](F)

      16771584 blocks level 5, 64k chunk, algorithm 2 [3/3] [UUU]

unused devices: <none>

[root@centos /]# mdadm -D /dev/md0

/dev/md0:

        Version : 00.90.01

  Creation Time : Fri Jun  1 13:00:31 2007

     Raid Level : raid5

     Array Size : 16771584 (15.99 GiB 17.17 GB)

    Device Size : 8385792 (7.100 GiB 8.59 GB)

   Raid Devices : 3

  Total Devices : 4

Preferred Minor : 0

    Persistence : Superblock is persistent



    Update Time : Fri Jun  1 13:23:49 2007

          State : clean

Active Devices : 3

Working Devices : 3

Failed Devices : 1

  Spare Devices : 0



         Layout : left-symmetric

     Chunk Size : 64K



    Number   Major   Minor   RaidDevice State

       0       8       49        0      active sync   /dev/sdd1

       1       8       17        1      active sync   /dev/sdb1

       2       8       33        2      active sync   /dev/sdc1

       3       8        1       -1      faulty   /dev/sda1

           UUID : 63cb965b:79486986:d389c551:67677f20

         Events : 0.16 [root@centos /]#

3.移除损坏的硬盘

[root@centos /]# mdadm /dev/md0 -r /dev/sda

mdadm: hot removed /dev/sda

[root@centos /]#

至此可以拿下损坏的硬盘

4.添加新的硬盘到raid中

新硬盘接入系统中,应进行正确的分区,且最好与之前换掉的硬盘保持相同的设备号。然后执行命令

[root@centos /]# mdadm /dev/md0 -a /dev/sda