請教各位有使用Storage的先進是否有碰到類似的問題..
我們主要是作為VMWare ShareStorage 的應用
我們3年前買了一台 dell SCV2000 iSCSI 10G2 port2控制器的 Storage
原本是使用MD3的產品因為使用體驗很好..後來汰舊換新就很自然的在預算可能的狀況升級新一代的Dell SCV產品..

但是惡夢就此開始了..

Dell 是採現金交易,對使用月結方式的客戶需要找一家SI廠商作過水..
當產品到貨後..因為手上有一堆專案在處理..就延了10天左右才開始開箱測試使用..
因為對於DELL的售後服務也感到很滿意所以想也沒什麼問題..
但是上架開始測試之後就有發現一個很奇怪的問題.. 它在有些時侯效能特別差..
我以前也都大概使用 ATTO Disk Benchmark 等軟體大概測試一下..再試試搬檔案的讀寫效能就OK了..
經過此事件後我對 IOMater 這軟體都熟了不少..

在初步的測試中發現.. 正常狀況.. 複製檔案的速度大概可以有 600MB/S ~ 800MB/S 同時讀寫的效能.
也就是說 以此速度 一個 120GB 的 GuestOS 複製或搬移 大概 3~5分鐘就可以完成.
但是卻會發現有時 它複製同一個檔案..效能只剩 3~6MB/S
當時作了很多測試..發現在多工IO很多時不易發現..問題大都出現在 只有1個IO在執行時..會剛好那個IO就會特別慢..但是有時同一個作業又會飛快7常.
後來找DELL連線檢查問題..連控制器都換了2組..但是狀況依舊..
而時間已經過了近一個月.. Dell 也無法接受我退貨的要求..SI只是過水也無法幫我吞退貨..
後來想..應該是FW的問題或許下個更版就解決了..而且它也不是每次出現..是偶而單一IO時才會如此.. 後來內部討論就不卡驗收了.
後來幾個版本的更新都沒有修正此問題..

而之後都會偶而發生 低效能的狀況..
如: 複製佈署一個 GuestOS 平時大概 3~5分鐘完成, 低效能時就需要 2~10個小時.
ERP過帳平時大概5分鐘完成, 但是有時就是 過了半小時還沒過完.. User 反應此問題時..就只能請 User 停掉行程再重新過帳一次..

這些也就算了..
它在3年內 發生了2次.. 整個 Storage 都在忙碌的狀況.. 前端的所有GuestOS 全都會變得奇慢無比..且會持續20~30天..
IO延遲非常嚴重.. 好像所有的磁碟動作都成了慢動作.. 每次過檔都要半小時以上.. 複制GuestOS也要8小時以上.. 主機常會停格不動..
找DELL技術支援檢查了半天都看不出原因.. 就說是我的前端負載太重, 磁碟IO效能不足. 建議我換SSD的磁碟..
但是我檢查我前端的IO平時都用大概 250 IOPS , 10MB/S 左右的讀寫流量.. 根本不是如此的問題..
後來我也將 上面的LUN資料淨空,沒有任何的IO在SCV上面再看它仍然有 500MB/S 1750 IOPS 在持續運作..整整24小時以上的時間.
然後DELL技術工程師又改口說這也是正常的.. SCV本來就有背景的最佳化運作在執行.
我完全沒辦法接受此說法..在背景無感的運作也就算了..佔用 80%以上的資源整整一個月在作莫名其妙最佳化..
而這台Storage 是連快照Dedupe什麼都沒有的功能.. 只是當簡單的RAID使用..還會如此不受控..
跟我說這是"正常"的.. 請問大家所用的Storage 都會有這麼"正常"的狀況發生嗎??

附圖 最近又發生的背景 IO 狀況

我在 8/1 3:30 左右 將 LUN淨空, 可以看到 SCV背景仍有大量IO 持續到 8/2 3:00
如果它隨時都沒理由就來這樣一次IO風暴.. 這樣的 Storage 要如何才能"正常"使用??
PS: 此次的IO風暴持續20天..

最後分享我最近借測的4台 Storeage IOMeter 測試結果..後續如果有新的再加上去..
只有60萬左右預算真沒幾台可以選..希望可以順利換掉SC..
https://public.tableau.com/profile/wolf.wang#!/vizhome/StorageIOMeterat2019/sheet0

2019/09/17 更新