iT邦幫忙

0

請問36TB SSD的Synology/QNAP NAS適合做為高速計算用的儲存空間嗎?

大家好:

目前要規畫一套給高速運算主機(200核心)用的儲存空間,所有主機要能同時存取該空間。
計算內容是生物資訊計算:例如讀取 25 gb 的壓縮檔案,解壓縮後做字串(序列)比對

請廠商規畫後得到:
一、36個 1TB SSD + Synology/QNAP 的 NAS。
二、48 port 10Gbe Switch
三、22張 10Gbe 網卡
四、主機跟 nas 走 4x10Gbe 的連接方式
五、網站宣稱可以到 3800 MB/s Read, 2800 MB/s write, 400K IPOS

請問這樣的儲存空間,適合 200 個核心同時執行相同的程式(字串比對)嗎?
另外想請問還有其他更適合的方案可以達到更多空間跟更好的效能嗎?
經費約160萬。

感謝大家

圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中
0
yesongow
iT邦大師 1 級 ‧ 2015-02-06 12:22:20
最佳解答

儲存空間的經費共160萬
創見1TB SATA-3 SSD370固態硬碟,每顆16800元含稅,36顆約60萬4800元(哇,剩100萬)
雙電源的群暉Synology機架產品,有兩款
昂貴的機型,是RS3614xs+,已有雙電源,使用INTEL Xeon E3-1230 v2
便宜的機型,是RS3614RPxs,含雙電源,使用INTEL Core i3-4130
以上兩款皆為機架式,沒有搭配擴充櫃RX1214RP時,僅能安裝12顆
所以,還要再搭配兩套RX1214RP,這樣才能多24顆(共36顆)
以上設備皆不含10Gb網路卡
(以上設備預計30萬,剩下70萬)

所以,記得買41U的全高型機櫃,並安裝APC SUA2000VA RM 2U的UPS喔!
(以上預計5萬,剩下65萬)

所以65萬要買10Gb的網卡及交換器吧?

Cisco 4948 10G約150萬~180萬!
請問,您打算用哪牌子的Switch呀?

zyx007 iT邦新手 5 級 ‧ 2015-02-06 14:30:47 檢舉

Switch + 10GbE 網卡是:DELL N4046F + Intex X520 DP

zyx007 iT邦新手 5 級 ‧ 2015-02-06 14:32:42 檢舉

打錯了,是 N4064F

okra iT邦研究生 3 級 ‧ 2015-02-06 15:23:20 檢舉

Arista 7150 Series
http://www.arista.com/en/products/7150-series
CP值好过CISCO 10Gb Switch
是现下流行的1U 10Gb资料中心Switch
founder是Sun Microsystems的founder之一Andy Bechtolsheim
由前CISCO执行员Jayshree Ullal领军

0
cmwang
iT邦大師 1 級 ‧ 2015-02-05 13:24:10

這種等級的storage鵝實在很難跟Synology/QNAP聯想在一起,不過預算NT$1600K好像也只能這麼辦就是了臉紅臉紅....

okra iT邦研究生 3 級 ‧ 2015-02-05 14:21:40 檢舉

公司的生技客戶(蛋白質Proteomics,基因Genomics)
資訊計算花費和生技設備,LAB總投資比較只算是雞肋
沒聽過用Synology,QNAP NAS的倒

cmwang iT邦大師 1 級 ‧ 2015-02-06 07:35:43 檢舉

zyx007提到:
NGS計算通常是將檔案拆散,然後用所有CPU去計算。

檔案拆散用所有CPU去算會帶來其他問題,主要就是運算時IPC的須求大不大,如果很大的話,就算是10GbE其latency也會帶來很大的影響,另外假設用8C的server去兜這200C好了,那就須要25個node,每個node估吃200W就好(這是低估值偷笑),25台就要吃5KW(散熱會是個大問題,所以得估5KW的budget給空調偷笑),每小時要吃10度電,這跟一般家用PC是完全不一樣的狀況,不知您有沒有考慮到這些啊Orz....BTW,不知您的code實作了沒有,不然應該是用GPGPU去做這類高度平行化的運算會比較合理就是了疑惑疑惑....

okra iT邦研究生 3 級 ‧ 2015-02-06 13:20:28 檢舉

基因序列計算通常使用IBM Blue Gene
或者HP,ORACLE SUN Converged Server
或者客制Super Micro GPU Converged Server
现下趋向使用Hyperconvergence Server
iThome有推夯的厂商Nutanix, SimpliVity
2U per Rack:
IBM Blue Gene只有16 core, 2 10Gb nic
Nutanix(客制Super Micro )有20 core, 2 or 4 10Gb nic
有兴趣可以参考:
http://www.crn.com/news/data-center/300073165/gartner-converged-infrastructure-magic-quadrant-nutanix-top-visionary-vce-overall-leader.htm
http://premium.wikibon.com/the-next-phase-of-converged-infrastructure/

0
Ray
iT邦大神 1 級 ‧ 2015-02-05 14:04:50

請問: 主機跟 NAS 之間, 用甚麼樣的 Protocol 取檔案?

網路芳鄰的分享嗎? (SMB/Samba/CIFS)....那這些 10G 卡可能就浪費了...

看更多先前的回應...收起先前的回應...
zyx007 iT邦新手 5 級 ‧ 2015-02-05 14:12:38 檢舉

用 NFS V4

cmwang iT邦大師 1 級 ‧ 2015-02-05 14:33:49 檢舉

zyx007提到:
用 NFS V4

200個Core應該是歸類在HPC之類了,通常是用MPI或PVM實作的,很少看到用file based作IPC的疑惑疑惑....

Ray iT邦大神 1 級 ‧ 2015-02-05 17:15:02 檢舉

我如果組一台 NFS Server, 掛上 256G RAM 當 Cache, 是不是會比那一大堆 SSD 還快?

賽門 iT邦超人 1 級 ‧ 2015-02-05 17:55:56 檢舉

raytracy提到:
掛上 256G RAM 當 Cache

我覺得....
都花錢買200 Core的主機了,何不再多花點錢買正式的Storage?

cmwang iT邦大師 1 級 ‧ 2015-02-05 18:03:01 檢舉

simon581923提到:
都花錢買200 Core的主機了,何不再多花點錢買正式的Storage?

如果不一定要36顆1T的SSD,這個價錢其實可以買到NetApp了,不過一般HPC的重點應該是job dispatch和IPC,而不是storage吧疑惑疑惑....

okra iT邦研究生 3 級 ‧ 2015-02-05 20:20:22 檢舉

乙高端蛋白質結構或者基因序列解析設備85萬美金(list price)
一個生技LAB不會只有乙這樣子的設備
會使用Synology,QNAP NAS?講國際笑話~~

zyx007 iT邦新手 5 級 ‧ 2015-02-06 00:33:17 檢舉

就是因為把錢都投到NGS設備,所以就剩下的零頭

zyx007 iT邦新手 5 級 ‧ 2015-02-06 00:39:07 檢舉

NGS計算通常是將檔案拆散,然後用所有CPU去計算。
如果依這樣的需求,有何解決方案,預算該準備多少呢?請各位大大給個建議!
感謝!

我要發表回答

立即登入回答