Cray XT3 (ASCI Red Storm) とストレージ [06/01/10]

[06/10/30]
続き
Cray XT3関係エントリー・リンク, 2006-10-30
==========
[06/06/23]
"Cray to Offer QLogic PathScale Compiler Suite", Jun 20, 2006
　http://www.pathscale.com/ppr_062006.html
　"today announced that it will offer the QLogic® PathScale® Compiler Suite on its Cray XT3™ supercomputer."
今までは PGI toolsが標準だったと思います。

関連エントリー：
　Qlogicが PathScaleを買収, 2006-02-16
　Fortran Compiler Comparisons, Polyhedron Software, 2006-01-18
==========
[06/06/16]
Cray Signs $200 Million Contract to ORNL, 06/06/15, 2006-06-16
　[06/03/29]の報道が無事に契約されたようです。
==========
[06/06/10]
"The Cray XT3 - A Unique Resource at PSC", HPCwire, June 9, 2006
　http://www.hpcwire.com/hpc/686730.html
　"HPCwire recently got the opportunity to talk with the two PSC scientific co-directors, Michael Levine
　 and Ralph Roskies, and ask them about new developments at PSC and about what's in store for the
　 center's future. In part one of this two-part interview, Roskies and Levine discuss the significance of
　 PSC's Cray XT3 supercomputer."
==========
[06/03/29]
US ORNL to run Petascale computer, GCN, 06/03/29, 2006-03-31
==========
[06/02/24]
ORNL Cray XT3 Evaluation
　http://www.csm.ornl.gov/~dunigan/xt3/
==========
[06/02/16]
"Sandia's Red Storm Is First Computer to Exceed 1 Terabyte per Second on Important HPCC Benchmark Test", Feb 15, 2006
　http://investors.cray.com/phoenix.zhtml?c=98390&p=irol-newsArticle&ID=817290&highlight=
　"Red Storm posted 1.8 TB/sec (1.8 trillion bytes per second) on the PTRANS interconnect
　 bandwidth test that is part of the High Performance Computing Challenge (HPCC) test suite."

HPCC Benchmark Results (PTRANSでソート)
　http://icl.cs.utk.edu/hpcc/hpcc_results.cgi?orderby=TRS&sortorder=DESC
HPCC Benchmark
　http://icl.cs.utk.edu/hpcc/
　PTRANS (parallel matrix transpose) - exercises the communications where pairs of processors
　communicate with each other simultaneously. It is a useful test of the total communications
　capacity of the network.
==========
[06/01/10]
AMD Opteron採用のシステムとしては異才をはなつ Cray XT3のストレージ
を調べてみました(長くなったので、XD1は別エントリ－にしました)。

クレイ・ジャパン・インクの製品紹介ページ：
Cray 製品：
　http://www.cray.com/global_pages/products/index.html

Cray XT3スーパーコンピュータの特徴の一部：
　　ASCI Red Storm プロジェクトを製品化したシステム
　　30000プロセッサまでスケーラビリティのある超並列型スーパーコンピュータシステム
　　　何千もの CPUをクラスタ接続したシステムではない
　　Seastarシステムチップによる高速 3Dトーラスシステムインターコネクト
　　計算ノードは Catamount(MicrokernelLight Weight Kernel)を採用
　　　演算に特化した設計で Low-Latencyを実現
　　　BluGene/Lも演算ノードは軽量化した Linuxカーネルを採用しているはず
　　全てのノードに対してシングルルートファイルシステムを提供
　　障害に対する自動回復 (高可用性) 機能
　　☆キャビネットがとってもオシャレ！

ファイルシステムについてですが、Crayの Documentationセンター
　http://docs.cray.com/ ↓ XT3に限定
　http://docs.cray.com/cgi-bin/craydoc.cgi?q=&mode=Search&hw=%22Cray+XT3%22
"Cray XT3 System Overview", Nov 2005 (比較的頻繁にアップデートされています)
　http://docs.cray.com/books/S-2423-13/S-2423-13.pdf
にズバリ Luster File Systemの説明があります(これでスッキリ)。


以降は Red Storm関係の資料紹介です：

その前に、新生クレイの中野守社長へのインタビュー
日経 BP：ビジネススタイル：新社長を直撃！
　"クレイ・ジャパン・インク（1）～クレイの良さが再認識され始めている", (2005/06/28)
　　http://nikkeibp.jp/style/biz/person/president/050628_cray1/
　"クレイ・ジャパン・インク（2）～新しいクレイを創造する", (2005/06/30)
　　http://nikkeibp.jp/style/biz/person/president/050630_cray2/
　"クレイ・ジャパン・インク（3）～「クレイ復活にチャレンジしよう」の一言に意を決した", (2005/07/01)
　　http://nikkeibp.jp/style/biz/person/president/050701_cray3/

==========================================================================
まずは、GRAPE研究・開発で著名な東大 牧野教授の
"2. Cray XT3 --- MPPは復活するか？", 2005/12/6
　http://jun.artcompsci.org/articles/future_sc/note003.html#rdocsect2
を読んで下さい。是非とも全体も読んで下さい：
　"スーパーコンピューティングの将来", 牧野淳一郎, Janualy 5, 2006
　　http://jun.artcompsci.org/articles/future_sc/face.html


Sandia National Laboratories Red Storm Platform:
　http://www.cs.sandia.gov/platforms/RedStorm.html
Red Storm構築風景の写真：Red Storm Update
　http://www.sandia.gov/ASC/rsupdate.html

Red Storm概要として比較的新しいものは：
"Early Experience with Red Storm"、
　Kelly, Suzanne M, Robert A Ballance, Sandia,
　Salishan Conference on High Speed Computing, April 2005.
http://gaston.sandia.gov/cfupload/ccim_pubs_prod/SAND2005-2351C_RedStormEarlyExperiences.pdf


Seastarシステムチップ関係(下ほど最新)
　"Red Storm: A 10,000 node system with reliable, high bandwidth, low latency interconnect",
　 Bob Alverson, Cray Inc., HOT CHIPS 15, August 18, 2003
　 http://www.hotchips.org/archives/hc15/2_Mon/1.cray.pdf

　"Developing Custom Firmware for the Red Storm SeaStar Network Interface",
　 Pedretti, Kevin T., Trammell Hudson, Sandia, Cray User Group, May 2005.
　　http://gaston.sandia.gov/cfupload/ccim_pubs_prod/cfw.pdf

　"Initial Performance Evaluation of the Cray SeaStar Interconnect",
　 Ron Brightwell, Kevin Pedretti, Keith D. Underwood, Sandia,
　 13th Symposium on High Performance Interconnects (HOTI'05), August 17 - 19, 2005
http://csdl2.computer.org/persagen/DLAbsToc.jsp?resourcePath=/dl/proceedings/hoti/&toc=comp/proceedings/hoti/2005/2449/00/2449toc.xml&DOI=10.1109/CONECT.2005.24

　"An Analysis of HyperTransport and Seastar Data Rates on Red Storm",
　 Doerfler, Douglas W, Sandia, SANDIA Report, August 2005.
　　http://gaston.sandia.gov/cfupload/ccim_pubs_prod/sand2005-5262.pdf


RAS関係：
　"Towards a Specification for Measuring Red Storm Reliability, Availability, and Serviceability (RAS)",
　 Stearley, Jon R(Sandia), Cray Users Group, May 2005.
　　http://gaston.sandia.gov/cfupload/ccim_pubs_prod/redstorm.pdf


マイクロカーネル
　ASCI Red Storm：Catamount (ヤマネコ)
　　"Software Architecture of the Light Weight Kernel, Catamount",
　　 Kelly, Suzanne M, Ronald B Brightwell, Sandia, Cray User Group, May 2005.
　　　http://gaston.sandia.gov/cfupload/ccim_pubs_prod/CUG2005-CatamountArchitecture.pdf
　　　　　　　　　　　　↑↑↑
　ASCI Red：Cougar (アメリカライオン)
　　"A Performance Comparison of Linux and a Lightweight Kernel"
　　 Ron Brightwell, et al., Sandia,
　　 IEEE International Conference on Cluster Computing, December 2003.
　　　http://gaston.sandia.gov/cfupload/ccim_pubs_prod/lwk-vs-linux.pdf
　　"The Performance of the Intel Corp., TFLOPS Supercomputer"
　　 Timothy G. Mattson, et al., IntelIntel Technology Journal, Vol. 2 Issue 1 (1st Quarter 1998)
　　　ftp://download.intel.com/technology/itj/q11998/pdf/overview.pdf
　　　　　　　　　　　　↑↑↑
　ASCI TFLOP(Intel Paragon!!)：PUMA (ピューマ)
　　"PUMA: An Operating System for Massively Parallel Systems"
　　 Stephen R. Wheat, et al., Sandia,
　　 27th Hawaii International Conference on System Sciences(HICSS), 1994
　　　http://citeseer.ist.psu.edu/wheat94puma.html
　　 ↑から PDFファイルがダウンロードできます。
　　 ☆eBayに Paragonの CPUボードが何度も出品されるのですが、
　　　「日本からの入札は受け付けません」でとってもガッカリ・・・
　　　でも、もうすぐ Crayがお家にやってきます!!!。

関連エントリー
Cray XD1とストレージ [06/01/10], 2006-01-10