[開箱] [分享] 我的運算巨塔 - 超低成本3D 聯合運算系統

本帖最後由 Wildblue 於 2014-10-16 00:41 編輯

各位師兄巴打,我離開左hkepc 幾個月了…

2012年,我第一次係依到出 post 講 雙路 Xeon E5 工作站,2年之間,
我一路擴張我公司所使用ge電腦運算系統…2014年 ge今日,我地又行前左一步了…

不過今次唔係用最新ge硬件,而係用大家眼中ge洋垃圾…

由2部雙路  Xeon X5650 + 11部 單路 Xeon E5430/E5450 合組而成ge 運算系統…68核心運算力…

unnamed.jpg
2014-10-9 15:22



更新於2014-10-14

小弟依種方法去裝機…其實係因為小弟本身雖然有5部E5係製作部,但係同事經常要用來畫圖…變左3D圖渲染的部分,由其需要長期運算的電腦動畫就無電腦去做。因應小弟使用3D 軟件同渲染引擎都支援分散式運算系統,所以我就試下用一個最平ge方法去補充返運算力,不致公司停工…

本身小弟係有做賣電腦的生意,
所以我同suppler 講起,
就知道大陸有廠做ge機箱同底板幾好,
我之後決定入左16部落來…先自用試試。
板係直接使用Xeon Socket 771 的G41/ P45板…
計落一部機只係需要$2000多少少就可以有3Ghz 4核運算力…可以有i5咁上下。
而箱就係全鋁的,只需要二百港紙到就有一個。

連埋本身係運算部個2部 雙X5650 工作站,最後我就起好左依座野…我叫佢做運算塔。

詳細config 都係標準:

控制及local render drive機(1):
X5650 X2
16GB DDR3-ECC REG RAM
128GB SSD
1TB HDD RAID 1
Geforce GTX 570


控制機(2):
X5650 X2
16GB DDR3-ECC REG RAM
128GB SSD
Geforce GTX 470

運算節點:
Intel Xeon E5430/E5450 共11顆
各機含4GB DDR3-1333
各機含1TB HDD
100M LAN

網絡結構:
1000M 8 Port Switch (控制機及連接Router 往主辦公室OpenVPN,256bit 加密)
100M 16 Port Switch (運算節點)
Linksys E4200 Router

10月10日更新完之後都等左幾日先有時間繼續開 post…

其他可能會有人問,點解唔用最新硬件…Xeon E5 V3 成18核…但係問題在於性價比…
動畫運算依一類長期運算,同普通我地靜態運算唔同在於時間性。
除非你好似Pixer 個類大型製作機構有幾千幾百部 Xeon E5 Server,動不動幾千個thread,
唔係都一定要計返一頭半個月的。
由其你係用到Vray之類擬真度高ge rendering engine。

作為香港本地薑ge我地,邊有本事用幾十萬入一台Server…而且咁做風險好大…一但一部機壞左,就會total lost,lost在運算的時間(一壞一整又無幾粒鐘/半日…)

所以,我地就諗可以用舊野做,其實我地主要都係要提高個threads量…因為3D production render 運算係好睇重有幾多threads去做平行運算…一日D rendering engine 未可以support CUDA做production render,一日依個都係一個大問題。

好了,講咁多,大家可以睇下下圖:
PRIMO L3 FLOW-01.jpg
2014-10-14 12:32


主要就係由2部Dual CPU X5650 機輪流做主控均連接VPN同靠VPN 交data 回Main office,
其中一部係有RAID 裝一render project folder 並SMB 做 network drive比 render node map,
每一個鐘同主office database 行VPN 同步,換言之個11部render node 只係連接 local network drive,減低VPN Server 壓力。另外個11部機都係4C4T的 Xeon E5430/5450,用佢地做長期運算,
因為set好曬自動 load program,hang機的話,如果無燒野,reset 後就可以歸隊繼續運算…

留名睇更新

但係師兄,你係7x24咁計定點?電費同冷卻都唔小野wor

TOP

要來計甚麼數?

TOP

ching,八掛問下點解5張11部 單路 Xeon ,用3至4部雙路XEON合併左佢

TOP

提示: 作者被禁止或刪除 內容自動屏蔽

TOP

勁呀,連cluster computing 都玩埋,我估樓主嗰D機係超平入番黎先會咁玩。

TOP

留名,想學多d野

TOP

留名學野

TOP

X5650 一d都唔垃圾
只不過計埋用電就真係輸新u好多....

TOP

睇落好似好勁, 師兄再繼續分享丫

TOP

相關文章