「存儲(chǔ)數(shù)據(jù)恢復(fù)」IBM DS5300由于硬盤(pán)壞道導(dǎo)致RAID5崩潰的數(shù)據(jù)恢復(fù)

環(huán)境：

IBM DS5300的存儲(chǔ)

一個(gè)機(jī)頭連接4個(gè)擴(kuò)展柜

2組由50塊600GB的硬盤(pán)組的RAID5

故障：

一組由27塊600G硬盤(pán)組成的，存放Oracle數(shù)據(jù)庫(kù)文件的RAID5崩潰。在存儲(chǔ)系統(tǒng)上層一共分了11個(gè)卷：10個(gè)1TB，1個(gè)4TB。磁盤(pán)故障導(dǎo)致存儲(chǔ)不可用。

數(shù)據(jù)恢復(fù)過(guò)程：

1、硬件檢測(cè)：

工程師先對(duì)27塊硬盤(pán)做了硬件檢測(cè)，發(fā)現(xiàn)2塊硬盤(pán)出現(xiàn)壞道、SMART的錯(cuò)誤冗余級(jí)別已經(jīng)超過(guò)閥值，對(duì)25塊正常的硬盤(pán)進(jìn)行全盤(pán)鏡像，對(duì)2塊有壞道的硬盤(pán)用硬件工具進(jìn)行了恢復(fù)并生成鏡像文件。

2、故障分析：

首先收集IBM DS5300存儲(chǔ)日志信息。存儲(chǔ)上兩塊盤(pán)指示燈亮黃燈，用收集到的日志信息分析出兩塊硬盤(pán)的掉線(xiàn)時(shí)間，推斷出那塊硬盤(pán)里面的數(shù)據(jù)是最新的，用數(shù)據(jù)最新的硬盤(pán)進(jìn)行數(shù)據(jù)恢復(fù)。

3、經(jīng)過(guò)工程師的研討后，提出以下解決方案：

方案一：通過(guò)IBM DS存儲(chǔ)管理軟件進(jìn)行強(qiáng)制上線(xiàn)，在強(qiáng)制上線(xiàn)之前把存儲(chǔ)的所有硬盤(pán)都進(jìn)行備份后強(qiáng)制上線(xiàn)。

方案二：通過(guò)對(duì)硬盤(pán)底層數(shù)據(jù)分析，進(jìn)行RAID重組，從底層提取數(shù)據(jù)，重新加載oracle數(shù)據(jù)庫(kù)，調(diào)試上層應(yīng)用。

4、實(shí)施方案：

把存儲(chǔ)的所有硬盤(pán)都進(jìn)行備份，先采用第一種方案，先在模擬器上進(jìn)行測(cè)試，之后在存儲(chǔ)上進(jìn)行上線(xiàn)操作。

通過(guò)IBM DS存儲(chǔ)管理軟件進(jìn)行強(qiáng)制上線(xiàn)，強(qiáng)制上線(xiàn)之后raid處于降級(jí)狀態(tài)，這個(gè)時(shí)候設(shè)置好熱備盤(pán)，讓熱備盤(pán)頂上，進(jìn)行數(shù)據(jù)同步，同步完之后上層的卷直接可以用了，所有數(shù)據(jù)也都可見(jiàn)了，上層應(yīng)用也能正常使用。

第一種解決方案，節(jié)省了很多時(shí)間，上層應(yīng)用也不需要在調(diào)試，可以直接啟動(dòng)。

5、數(shù)據(jù)恢復(fù)結(jié)果驗(yàn)證：

由于上層的卷直接可以用了，所以數(shù)據(jù)也都可見(jiàn)了，處于安全考慮，工程師將卷里的文件都拷貝出來(lái)，然后移交給客戶(hù)公司。整個(gè)恢復(fù)過(guò)程一共歷時(shí)5天。