原本應該是要找硬體廠商比較快,但是因為要等待時間,想先來網路上找找看方向自己來處理看看!!
公司伺服器有新增硬碟,我記得之前有幫他新增擴充硬碟的插槽,之前都沒發現有兩顆無法使用,最近有同事跟我說,發現有600G的空間無法使用,我有附上硬碟資訊。
我有個疑問是,燈沒有亮會不會是組裝排現有問題導致無法使用,可是在xencenter上的資訊又有出現總額包含那300G*2的兩顆硬碟,會有可能燈沒亮但其實他是可以用的,只是因為沒有將容量給format,所以才沒辦法將那600G的容量擴充初來。
HP Smart Array controller 擴展陣列需要 HP Array Configuration Utility (ACU)
Interface: GUI, CLI, or Scripting (打包在 HP Smart Array Advanced Pack)。
重建陣列只需要 Option ROM Configuration for Arrays (ORCA)
Interface: Menu-based or CLI (HP ProLiant 100 Series servers do not support the CLI format)。 建議參考 HP ROM-Based Setup Utility User Guide。
HP 伺服器問題不找 HP 就是瞎耽誤工夫〜
如果,版主的HP主機設備是超過保固期限,
而請一次HP原廠/附廠/協力商/經銷商的工程師,費用要多少?
那如果找當初銷售HP主機的業務來看,
那業務會樂意來現場查看嗎?
業務有能力解決技術上的問題嗎?
業務及工程師到場的人工費用,大家有被收過多少錢?
如果沒有超過保固期限,那請業務及工程師來到場技術協助,應該還是要付費吧?大家有被收過多少錢?
版主的HP主機設備感覺是HP ProLiant 3xx G7 系列產品,使用ORCA重建陣列是免費的,只需要reboot the server then press F5 ~
亂亂更換第三方硬碟,可能破壞原廠設備軟硬體系統整體穩定性,哭爹哭媽都沒得救了~
reboot the server then press F5
確認兩顆硬碟有劃入 RAID ?
要等晚上關機後我要確認一下。
Press the F8 key when prompted during the array controller initialization to use the ORCA utility to modify the controller default settings.
如果兩顆硬碟沒有劃入的RAID,請參考HP ROM-Based Setup Utility User Guide to initialize 兩顆硬碟。
這是網路上看到的,如果原本主機是你及同事一同組裝,回想一下,紅框處是否有卡,是否有第三條,第四條SAS線材
版主的發問有“在xencenter上的資訊又有出現總額包含那300G*2的兩顆硬碟”,確定有SAS連線。
HD燈會不會亮
是看HD背板的LED燈
HD背板的LED燈不亮
基本上有可能要更新韌體或是換背板
接線要接錯其實很困難
評估這主要屬於硬體問題
(即便RAID CARD抓得到HD也一樣要處理燈號問題)
這個找HP沒錯
XEN部份不熟
但以Linux觀念來看
RAID擴充後
仍要手動將volume或是LVM空間擴展
才能真正使用到
你的狀況應該是此表的最後一項:
SAS 與 SATA 硬碟機 - LED 組合/活動解釋
出現這種狀態, 並不代表硬碟故障, 而是陣列(RAID)的設定中, 沒有用到這兩顆硬碟, 例如: 被設定成 RAID 的 Hot-spare 硬碟 (這樣要等其他硬碟壞了, 他才會開始活動), 或根本沒有劃入 RAID 內 (這樣就永遠不會動).
用 HP 的 iLO 進去看, 應該可以知道他的組態.
假如你的系統,不是你規劃的,而且有學長or同事會背黑鍋,對於硬碟故障所造成的風險,主管不予顧慮,那就太好了!
則請將第九顆,第十顆硬碟,
以JBOD的方式,加入現有的儲存空間,則可以增加600GB
若將9,10硬碟先組成RAID0的方式,加入現有的儲存空間,則應該可以多300GBx2=600GB
若將9,10硬碟先組成RAID1(Mirror)後,再加入現有的儲存空間,則應該可以多300GB
若將現有的儲存空間(RAID0),以擴展陣列(EXPAND ARRAY,RAID),則僅會使用到每一顆的146GB,
所以擴展後的陣列空間,應該僅有增加146GBx2=292GB
或是,總容量應該是146GB*10=1460GB
--
題外話!
第一點,你的磁碟陣列,是軟體式,還是硬體式?
如果是硬體式,那你的OS系統有沒有安裝ARRAY Manager軟體呢?
如果可以,請補貼上Array Manager的Device,Logic Disk,physical Disk 相關訊息!
如果是軟體式,能否查看/proc/mdstat內容呢?
第二點,一組SAS傳輸線,可以控制四顆硬碟!
會不會你的磁碟陣列卡,是八通道的磁碟陣列卡,所以能控制前面八顆硬碟
而第9,10顆硬碟,是直接接到主機板,所以不受陣列卡控制!
你的主機機箱雖然可安裝16顆硬碟,但你能提供or確認陣列卡的型號?
以便釐清是八通道陣列卡,還是12通道陣列卡,還是16通道的陣列卡呢?
還有,會不會當初的業務疏忽,雖然主機是16槽,磁碟陣列卡是16通道
但,沒有裝四條SAS傳輸線呀!
僅有安裝兩條SAS傳輸線呢?--->若是這樣,第9,10顆硬碟只有電源燈會亮,讀寫燈號不會亮喔!
建議,找個時間,將此XEN系統關機,下架並拆開機殼,觀察調查一下吧!
第三點,如果你的主機是使用硬體陣列卡,假如有安裝四條SAS傳輸線
請確認一下,第9,10顆硬碟是否已經初始化(Initialization)呢?
要作過初始化,陣列卡才會認為該硬碟由陣列卡管理,這樣才能拿來組成RAID的element,或是Spare Disk
否則,沒有Initialization的硬碟,也許是舊的硬碟,而屬性變成Legacy喔!
希望ianianwu能回覆此篇留言!
如果ianianwu能讓他人參觀機房,請告知小高喔!
本人很樂意去參觀,並提供意見的!
my phone :0800-211-266
限彰化以北地區!交通我會自行負擔!
謝謝你這麼仔細的,因為已經下班我來不及在補磁碟畫面,確實是有146G*4硬碟、新增的300G*6(2顆沒亮燈)硬碟,剩下的我還在看你的回覆仔細想一下問題,要看機房的我要問一下我們主管,沒有黑鍋的問題啦,哈!!
所以,左側兩顆新的300GB硬碟,並沒有插槽編號,對不對!??
對的,沒錯唷!!
你上述的問題,我禮拜一晚上會關機檢查一下,我記得我安裝的時候都是廠商寄來的排線,能安裝我都用上了,應該是沒有多餘或者漏缺的,確實要開箱在檢查一下,磁碟分割的狀態我要問一下當時怎麼分配的,當時說要做磁碟分割就是抓不到另外那600g的容量,所以就擱著沒管,現在所有伺服器容量都爆滿了,現在要把這600g挖出來用,才開始要找問題。
如果你的陣列空間是RAID5/6
那以下的作法,你可以參考一下
將(1)的146GB硬碟,與左一的300GB硬碟交換,並等待Rebuild完成
再將(2)的146GB硬碟,與左二的300GB硬碟交換,並等待Rebuild完成
透過Array Manager軟體,將此RAID空間,作Online-Raid-Expand(ORE)
這樣子陣列的總空間,應該可以從1068GB,再多285GB吧!
前提是,貴公司有NAS嗎?有NAS才能資料複製,移動,轉移,及多台XEN備援及共用!
如果沒有,問問看採購,能否添購該項設備!
PS,可以找我規劃or向我採買!
電話,0800-211-266
使用NAS的好處,空間充分利用!
--多台Xen主機可以一起始用NAS的總容量!
擴充門檻低!
--NAS已經含有抽取盒,僅購買硬碟即可!
可擴充性高!
--NAS機台可以安裝8到12顆硬碟,空間不足,還能搭配擴充櫃,再多10顆至24顆硬碟。
--特殊機種有96顆硬碟可以擴充
每GB平均投資成本低!
--WD 紅標6000GB硬碟,與HP的原廠300GB小硬碟,售價相同!
好處多多!
傳輸效能可以升級至MultiPath,4條1Gbps或是4條10Gbps的iSCSI傳輸高性能!
可將146GB的抽取盒子留下使用,不用買原廠SAS硬碟,可以改買WD SAS硬碟600GB,應該可以相容使用!
若是想改用2.5吋SATA 1000GB or 1500GB 的SATA硬碟,
建議先找一台筆電,拆下2.5吋SATA的舊硬碟,
先將舊硬碟裝在該HP主機上,去確認RAID卡是否允許使用SATA硬碟,
如果RAID卡能夠偵測到此舊SATA硬碟的型號及容量!
則可以建議公司主管,
採購四顆2.5吋的WD SATA 黑標7200RPM 的1000GB硬碟(五年保固)
or
採購四顆2.5吋的HGST日立 SATA 5400RPM 的1500GB硬碟(三年保固)
如果不可行,則改建議公司主管,
採購四顆2.5吋的WD 企業10000RPM的SAS 600GB硬碟(五年保固)
採購硬碟前,若是多顆磁碟的容量組成空間,有超過2048GB時,請先確認您的Xen系統,是否有支援GPT分割表!
否則4顆1000GB組成RAID5,邏輯磁碟容量本來是3000GB,
卻因為系統僅能使用MBR分割表,格式化後的可用空間,卻變成2000GB or 793GB
否則4顆1500GB組成RAID5,邏輯磁碟容量本來是4500GB,
卻因為系統僅能使用MBR分割表,格式化後的可用空間,卻變成2000GB or 189GB
如果你的Xen系統不支援GPT分割表,則可能還有一個變通方式
去確認RAID卡能否支援Logic Disk分割
如果容量是3000GB的RAID5空間,那就分割成兩個小磁碟,容量皆小於2048GB即可!
如果容量是4500GB的RAID5空間,那就分割成三個小磁碟,容量皆小於2048GB即可!
Dell H700 SAS八通道磁碟陣列卡,就可以支援Logic Disk 分割。
像是我的客戶使用Acer AR385F1主機,最多僅能安裝安裝6顆3.5吋硬碟,
所以三年前就選了3000GB的硬碟,來組成RAID5的空間,總容量是15TB
因為VMware ESXi 4.1.0沒有支援GPT分割表,
而支援GPT分割表的VMware ESXi5.1版,RAM授權卻太小,所以就不使用VM5.1版
我的變通方式,就是將15TB分割成7個2TB,及1個1TB的儲存空間
再將這八個儲存空間,透過increase按鈕,將這分割的空間,再串起來當作15TB使用
稍後附圖給你參考!
結論,你要熟悉你的Xen系統,是否有支援GPT分割表,或是陣列卡是否能作Logic Disk分割!
我猜你的陣列可能的組成方式
A.146GBx4,組成RAID10,容量是292GB,300GBx4,組成RAID5,容量是900GB,共1192GB
B.146GBx4,組成RAID6,容量是292GB,300GBx4,組成RAID5,容量是900GB,共1192GB
C.146GBx8,組成RAID6,容量是876GB,(300GB用剩154GB)x4,組成RAID6,容量是308GB,共1184GB
D.146GBx8,組成RAID0,容量是1168GB,(300GB用剩154GB)無法再組成RAID5,故總容量是1168GB
我的變通方式,就是將15TB分割成7個2TB,及1個1TB的儲存空間
再將這八個儲存空間,透過increase按鈕,將這分割的空間,再串起來當作15TB使用
這是網路上看到的,如果原本主機是你及同事一同組裝,回想一下,紅框處是否有卡,是否有第三條,第四條SAS線材
確認硬體安裝沒有問題,進入F8配置陣列將另外兩顆作raid起來,硬碟燈啟動了,可是在xencenter卻看不到新增的硬碟資訊,還在找問題在哪。
擴展陣列需要 HP Array Configuration Utility (ACU)
如果沒有 HP Smart Array Advanced Pack 需要 download HP ProLiant Offline Array Configuration Utility
https://h20566.www2.hp.com/portal/site/hpsc/template.PAGE/public/psi/swdDetails/?javax.portlet.begCacheTok=com.vignette.cachetoken&javax.portlet.endCacheTok=com.vignette.cachetoken&javax.portlet.prp_bd9b6997fbc7fc515f4cf4626f5c8d01=wsrp-navigationalState%3Didx%3D%7CswItem%3DMTX_3c888073127c4c65b7bd8559eb%7CitemLocale%3D%7Cmode%3D%7Caction%3DdriverDocument&javax.portlet.tpst=bd9b6997fbc7fc515f4cf4626f5c8d01&ac.admitted=1408978994879.876444892.199480143
謝謝版主不論白貓黑貓,抓到老鼠就是好貓〜
問題感覺在於 ORCA 的原廠默認設置:RAID 5 is autoconfigured and maxium for 8 hard disk drivers before OS loaded。 HP 觀念:RAID5的最佳硬碟組合數是8,最多不超過14。
版主在8顆 OS loaded 硬碟之外新增兩顆硬碟可能造成系統 autoconfigured 的困擾〜