Netapp數(shù)據(jù)恢復(fù)—Netapp存儲中卷被誤刪除的數(shù)據(jù)恢復(fù)案例

NetApp存儲數(shù)據(jù)恢復(fù)環(huán)境：
NetApp FAS某型號存儲，該NetApp存儲中有96塊扇區(qū)大小是520字節(jié)的SAS硬盤。存儲中的lun都映射給小型機(jī)使用，存放Oracle數(shù)據(jù)庫文件，采用ASM裸設(shè)備存儲方式。

NetApp存儲故障：
工作人員誤操作刪除了該NetApp存儲上所有l(wèi)un。
和工作人員溝通后得知：由于業(yè)務(wù)需要，需要重新規(guī)劃該NetApp存儲的存儲空間，工作人員直接把存儲卷全部刪除并重新分配。在完成卷的刪除但還沒有重新分配的時(shí)候，上層業(yè)務(wù)宕機(jī)。運(yùn)維工程師緊急排查故障情況，發(fā)現(xiàn)跑業(yè)務(wù)的服務(wù)器上的磁盤都“消失”了，無法訪問數(shù)據(jù)。

NetApp存儲數(shù)據(jù)恢復(fù)過程：
1、北亞企安數(shù)據(jù)恢復(fù)工程師到達(dá)現(xiàn)場后將該NetApp存儲中每塊磁盤編號后取出，由硬件工程師初步檢測沒有發(fā)現(xiàn)有硬盤存在明顯硬件故障，都可以正常讀取。于是以只讀方式將每塊磁盤做扇區(qū)級全盤鏡像，鏡像完成后按照編號將所有磁盤還原到該NetApp存儲中。后續(xù)的數(shù)據(jù)分析和數(shù)據(jù)恢復(fù)操作都基于鏡像文件進(jìn)行，避免對原始磁盤數(shù)據(jù)造成二次破壞。
2、分析Netapp存儲的存儲過程。
a、分析盤序和LVM的組成方式。
b、掃描硬盤內(nèi)的所有節(jié)點(diǎn)，一般只掃描MBFI（用戶節(jié)點(diǎn)）。
c、在節(jié)點(diǎn)掃描結(jié)果中找到文件大小符合需求的節(jié)點(diǎn)，提取此節(jié)點(diǎn)并判斷索引根；
d、根據(jù)索引根內(nèi)的第一級數(shù)據(jù)指針提取本文件的所有直接數(shù)據(jù)指針（需要參考節(jié)點(diǎn)中0x03位置的MAP深度，為0x00時(shí)直接從節(jié)點(diǎn)內(nèi)提取數(shù)據(jù)，0x01時(shí)需要提取一次MAP，0x02時(shí)需要提取兩次MAP......）。指針提取完畢后開始提取文件數(shù)據(jù)。
3、在硬盤靠前扇區(qū)的位置找到超級塊相關(guān)信息，從超級塊相關(guān)信息中獲取磁盤組名字、磁盤組邏輯起始塊號、總塊數(shù)、磁盤組中raid的編號。
netapp超級塊：

北亞企安數(shù)據(jù)恢復(fù)——Netapp數(shù)據(jù)恢復(fù)

4、每個(gè)數(shù)據(jù)塊占8個(gè)扇區(qū)，數(shù)據(jù)塊后附加64字節(jié)數(shù)據(jù)塊的描述信息。根據(jù)這些信息可以判斷出作為校驗(yàn)盤的磁盤（提取數(shù)據(jù)需剔除校驗(yàn)盤）。
校驗(yàn)塊描述信息樣例：

北亞企安數(shù)據(jù)恢復(fù)——Netapp數(shù)據(jù)恢復(fù)

5、根據(jù)每塊磁盤8號扇區(qū)的磁盤信息以及磁盤末尾的RAID盤序表確定盤序。首先確定各個(gè)磁盤所屬aggr組，然后再判斷組內(nèi)盤序。數(shù)據(jù)指針跳轉(zhuǎn)時(shí)不考慮校驗(yàn)盤，所以只需要取得數(shù)據(jù)盤的盤序即可。
netapp盤序表：

北亞企安數(shù)據(jù)恢復(fù)——Netapp數(shù)據(jù)恢復(fù)

6、Netapp的節(jié)點(diǎn)分布在數(shù)量眾多的數(shù)據(jù)塊內(nèi)，數(shù)據(jù)塊內(nèi)節(jié)點(diǎn)被統(tǒng)一組織為節(jié)點(diǎn)組。每個(gè)節(jié)點(diǎn)組的前半部分字節(jié)記錄一些系統(tǒng)數(shù)據(jù)，后半部分字節(jié)記錄各個(gè)文件節(jié)點(diǎn)。根據(jù)用戶級別可將文件節(jié)點(diǎn)分為兩類：“MBFP”系統(tǒng)文件節(jié)點(diǎn)和“MBFI”用戶文件節(jié)點(diǎn)，在數(shù)據(jù)恢復(fù)時(shí)一般只需要MBFI節(jié)點(diǎn)組即可。
netapp節(jié)點(diǎn)樣例圖：

北亞企安數(shù)據(jù)恢復(fù)——Netapp數(shù)據(jù)恢復(fù)

7、獲取目錄項(xiàng)，并根據(jù)其節(jié)點(diǎn)編號找到對應(yīng)節(jié)點(diǎn)。
目錄項(xiàng)信息：

北亞企安數(shù)據(jù)恢復(fù)——Netapp數(shù)據(jù)恢復(fù)

8、完成對NetApp存儲的存儲結(jié)構(gòu)的分析后，使用北亞企安自主開發(fā)的NetApp解析程序提取數(shù)據(jù)， 解析asm文件系統(tǒng)并提取出數(shù)據(jù)庫文件。

北亞企安數(shù)據(jù)恢復(fù)——Netapp數(shù)據(jù)恢復(fù)

9、搭建小機(jī)環(huán)境，安裝oracle數(shù)據(jù)庫，檢測數(shù)據(jù)庫文件和備份文件。
a、通過提取出的數(shù)據(jù)庫文件啟動數(shù)據(jù)庫，數(shù)據(jù)庫可以正常啟動。
b、檢測數(shù)據(jù)庫備份文件，篩選出最新的數(shù)據(jù)庫備份文件，使用篩選出的備份文件還原數(shù)據(jù)庫。經(jīng)過用戶驗(yàn)證后，確認(rèn)恢復(fù)出來的數(shù)據(jù)庫文件無誤，本次數(shù)據(jù)恢復(fù)工作完成。

審核編輯 黃宇