1 前期工作
2.1 問題描述
7133陣列中硬盤損壞,影響陣列中raid安全,需要更換7133硬盤。
2.2 根因分析
硬盤故障,主要是由於時間的原因,磁頭劃傷硬盤,造成壞道,屬於計算機設備中使用過程中的正常損耗。
2.3 解決方案總結
熱插拔更換硬盤,依據不同情況在線rebuilding陣列數據或加入熱備盤。
2 詳細操作步驟
熱插拔更換硬盤,依據不同情況在線rebuilding陣列數據或加入熱備盤。
這裏設定的時間根據硬盤容量大小、轉速等因素不同而不同,這裏是估算時間;
3.1 操作前準備工作
3.1.1 提前備份數據庫及陣列相關數據
(包括但不僅限於相關vg備份,應單獨備份系統和應用配置信息等),請系統管理員及時完成,以下步驟非特別註明均由我方維護人員完成;
3.1.2 檢查設備和硬盤狀態,保存必要信息和文件
(lscfg、lspv、lsvg、errpt、snap等),查看raid類型、raid目前狀態(應爲good或degraded狀態)、raid中是否有熱備盤、raid5中故障硬盤應不超過1塊等情況;
3.1.3 確定需要更換硬盤的槽位(閃燈確認);
3.2 維護操作步驟
3.2.1 查看是否必要手工刪除硬盤
T時(T時爲開始維護動作開始時間),如果故障硬盤所在Array已是Degraded,跳過本步;如果不是(既硬盤頻繁報錯,但是Array還沒有變爲Degraded),從陣列中刪除硬盤(選擇change member disks In an array中的remove a disk from ssa raid array);
3.2.2 故障硬盤設爲service mode
T時5分,diag中選擇SSA Service Aids中set service mode,將故障硬盤設爲service mode;
3.2.3 物理更換硬盤
T時10分,物理更換硬盤
3.2.4 退出service mode,更新硬盤信息到系統
T時15分,退出service mode,此時新加盤標識燈熄滅,但pdiskn還是原來的硬盤信息,需要更新,Rmdev –dl pdiskn (n爲故障硬盤,下同),cfgmgr –vl ssar;這樣的方法不產生新的pdisk以及hdisk。
3.2.5 修改新加硬盤屬性
T時20分,如果系統中熱備盤已加入故障硬盤所在raid,則修改新加硬盤屬性爲熱備盤, 現在查看raid應有此熱備盤定義;
如果系統中沒有熱備盤,則改變新加硬盤屬性爲陣列候選盤,並加入raid(如果在add時沒有可選的盤,則在Swap Members of an SSA RAID Array子菜單下選擇replace子菜單進入,選空白盤和新加盤對換),raid數據開始重組;
3.2.6 rebuilding完成;檢查陣列狀態good
T+1時,rebuilding完成;檢查陣列狀態good;
3.2.7 hacmp中定義的另一臺機器上刷新硬盤信息
T+1時3分,Hacmp中定義的另外一臺機器上Rmdev –dl pdiskn,cfgmgr –vl ssar,以保持pvid等信息的一致性;
3.3 收尾工作
3.3.1 測試
T+1時5分,請系統管理員進行相關測試;
再次檢查確認、填寫相應表單
3.3.2 再次檢查確認、填寫相應表單,工作完畢。
3.4 應急回退方案
1、 如果陣列rebuliting失敗,若raid狀態爲degraded狀態,則更換新加硬盤,重做raid rebuilding;
2、 如果陣列rebuliting失敗,若raid狀態爲failed,則更換raid中硬盤,使用備份恢復vg數據。
實踐情況:
維護操作步驟
收尾工作
1、 T+1時5分,請系統管理員進行相關測試;
2、 再次檢查確認、填寫相應表單,工作完畢。
應急回退方案
3、 如果陣列rebuliting失敗,若raid狀態爲degraded狀態,則更換新加硬盤,重做raid rebuilding;
4、 如果陣列rebuliting失敗,若raid狀態爲failed,則更換raid中硬盤,使用備份恢復vg數據。
二、備件
8509 (9.1GB SSA disk)
8518 |
SSA 18GB 10000轉 |
7133-D40(T40) |
|
8536 |
07N9438 |
SSA 36GB 10000轉 |
7133 |
18P3548 |
7133 |
||
18P2200 |
7133 |
||
18P1126 |
7133 |
||
8572 |
07N9428 |
SSA 73GB 10000轉7133-D40(T40) |
7133 |
8646 |
SSA 146GB 10000轉7133-D40(T40) |
7133 |
|
6536 |
SSA 36GB 15000轉7133-D40(T40) |
7133 |
|
6572 |
SSA 73GB 15000轉7133-D40(T40) |
7133 |
|
SSA 146GB 15000轉7133-D40(T40) |
7133 |