中國新超級電腦天河2 號

本帖最後由 albert_ma 於 2013-6-9 22:16 編輯

http://www.enet.com.cn/article/2013/0603/A20130603288413_4.shtml

在五月底在长沙举办的国际HPC大会上,国防科技大组员透露了天河2的详细信息。天河2将会被安置在广州的国家超算中心,为华南的教育和研究机构提供高性能计算服务。

直指超算TOP1 天河2号超级计算机解读

  天河2将会由16000个浪潮的节点组成,每个节点有2颗基于Ive Bridge-E Xeon E5 2692处理器和3个Xeon Phi,累计共有32000颗Ive Bridge处理器和48000个Xeon Phi,总计有312万个计算核心。

每个Xeon Phi使用其中的57个核心,而不是使用全部的61个,因为使用61个在运算周期协调方面会有问题,而使用57个核心能够加速4个执行线程,并且在每个线程单周期可以达成4flops的运算量,运行在1.1GHz的Xeon Phi可以生产1003 Tflops的双精度运算能力。如果考虑CPU,2 Ivy Bridge * 0.2112 Tflop/s + 3 Xeon Phi * 1.003 Tflop/s=3.431 Tflops,2个Ive Bridge+3个Xeon Phi单个节点可以有3.431 Tflops运算能力,16000个节点总计可达54.9PFlops性能。每个运算节点有64GB主存、而每个Xeon Phi板载8GB内存,因此每个节点共有88GB内存,总计16000个节点一共有1.404 PB内存,而外部存储器容量方面更是高达12.4PB。



  在每个主板上有2个计算节点,而每个框架则有16个主板,4个框架组成一个机柜,整个系统由125个机柜组成。



  每个计算节点主板分为两块,一块CPM一块APU,CPM上有4核Ive Bridge、内存和一个Xeon Phi,而APU基板上则承载着5个Xeon Phi。



  CPM和APU之间有5个水平插入的链接口,由Ive Bridge内置的PCI-E 2.0进行连接,虽然Ive Bridge内置为PCI Express 3.0接口,但Xeon Phi仅支持2.0,单个通路为10Gbps带宽。

计算节点的前端处理器为4096个FT-1500处理器, FT-1500处理器是由国防科技大学为天河1研发,其可以说是天河1项目的最大收获,其为16核心的Sparc V9架构处理器,在40nm工艺情况下运行频率为1.8Ghz,峰值性能为144 Fflops/s,功耗为65W,但相比英特尔22nm 12核 2.2GHz 211Gflops/s性能的Ive Bridge还是有明显差距。



  天河2互联方面采用自主研发的 Express-2 内部互联网络,其为有13个交换机,而每个交换机有576个端口。连接介质为光电混合。具体控制器是名为NRC的ASIC专用目的集成电路,其采用90nm工艺,核心尺寸为17.16x17.16 mm,共有2577引脚。单个NRC的吞吐能力为2.56Tbps。而在终端方面网络接口也采用类似结构的NIC,但规模稍小,为10.76x10.76 mm, 675 pin,其采用PCIE 2.0方式连接,传输速率为6.36GB/s。并且在在12000节点的情况下延迟也很低,仅为85us。

而在计算能力方面,使用14336个节点 总计50GB内存进行LINPACK测试,理论性能为49.19Pflops,而实际测试性能为30.65Pflops,效率为62.3%。这个效率并不算高,还有很大优化提升潜力。当然也可能是被Xeon phi仅支持PCI Express 2.0带宽不足限制。


  上面测试使用了16000个节点中的14336个,运用了90%的规模,基本可以代表天河2的整体性能表现。天河2的性能部件(处理器、内存、互联)整体功耗为17.6MW,而整体的运算能力为30.65PFlops,这样计算每瓦的性能为1.935Gflops,这个性能/功耗比可以拍在超算TOP500的前五,其整体性能/功耗比十分出色。


  系统的整体功耗为17.6 MW,并且这个功耗还不包括水冷这样的散热系统,如果考虑上整体功耗将高达24MW,广州国家超算中心将采用城市供水系统构建高散热效能的冷却系统,有能力可以提供80KW系统的散热能力。










32000 12核 Ivy-E + 48000 張Xeon Phi
~30PFlops,17.6 MW,~2Gflops/Watt

估唔到咁早就有Ivy-E用,可能用Xeon Phi做交換條件?

問題係效率幾多?!以中國人既軟實力,真係要咁高運算力?!

定係showoff?!

咁既食電怪放係廣州,廣東夏天停電機會大增........

TOP

問題係效率幾多?!以中國人既軟實力,真係要咁高運算力?!

定係showoff?!

咁既食電怪放係廣州,廣東夏天停電 ...
掃馬想機 發表於 2013-6-9 22:18

http://www.green500.org/lists/green201211
驚乜鬼效率
Green500 Rank 1未又係SB-EP + Xeon Phi

至於後面個半句,我真係唔知你諗乜

TOP

問題係效率幾多?!以中國人既軟實力,真係要咁高運算力?!

定係showoff?!

咁既食電怪放係廣州,廣東夏天停電 ...
掃馬想機 發表於 2013-6-9 22:18

同一個 project 用唔同精度去做, 運算時間已經幾何級數上升, scientific computation 係多多都唔夠用 (先唔講佢係未純做 scientific computation)

TOP

1 Tflops 要 500W
真是唔知多定少

TOP

幾時學某動畫咁將超級電腦送上太空?
唔驚過熱又唔阻頂

TOP

幾時學某動畫咁將超級電腦送上太空?
唔驚過熱又唔阻頂
ericheung 發表於 2013-6-9 22:50


電係一個問題, 除非你整埋個反應堆上去...

TOP

在五月底在长沙举办的国际HPC大会上,国防科技大组员透露了天河2的详细信息。天河2将会被安置在广州的国 ...
albert_ma 發表於 9-6-2013 10:05 PM


N 記慘了
無左張大單

TOP

幾時學某動畫咁將超級電腦送上太空?
唔驚過熱又唔阻頂
ericheung 發表於 2013-6-9 22:50

被人一炮打爆左

TOP

提示: 作者被禁止或刪除 內容自動屏蔽

TOP