【文章內(nèi)容簡(jiǎn)介】 I/O 接口等 )以及系統(tǒng)架構(gòu)是否能夠充分發(fā)揮資源潛力為基礎(chǔ)的。 對(duì)于 XXXX 氣象局 的用戶而言， 只有從實(shí)際 (系統(tǒng)資源容量和架構(gòu) )出發(fā)，全面考察系統(tǒng)的基準(zhǔn)測(cè)試指標(biāo)， 充分考慮實(shí)際的應(yīng)用， 才能作出科學(xué)和客觀的評(píng)估，選擇最佳的服務(wù)器 。 高性能存儲(chǔ)系統(tǒng) 在高性能計(jì)算系統(tǒng)應(yīng)用中， 除了對(duì)高運(yùn)算能力的需求外 , 對(duì)存儲(chǔ)的需求也是必不可少。在高性能計(jì)算應(yīng)用中，經(jīng)常需要短時(shí)讀寫大批量的數(shù)據(jù) ,這對(duì)存儲(chǔ)系統(tǒng)的性能 ,尤其是多道并行作業(yè)同時(shí)存取大量數(shù)據(jù)時(shí)的 I/O 性 能 ,會(huì)提出很高要求 . 如果這一要求用在計(jì)算節(jié)點(diǎn)上直接連接大量的本地存儲(chǔ)磁盤子系統(tǒng)來(lái)滿足 ,那么 , 這樣會(huì)出現(xiàn)多臺(tái)計(jì)算節(jié)點(diǎn)之間產(chǎn)生多次數(shù)據(jù)傳輸和磁盤容量不均及大量冗余且不一致的文件等現(xiàn)象 , 而這些現(xiàn)象既耗用了大量的傳輸時(shí)間和計(jì)算節(jié)點(diǎn)寶貴的處理資源 ,又使得管理難度加大 ,降低了投資的使用率 , 從而使整個(gè)系統(tǒng)的性能也很難保證。 在當(dāng)前高性能計(jì)算系統(tǒng)中 , 越來(lái)越趨向于使用多臺(tái)獨(dú)立的高性能服務(wù)器和外部存儲(chǔ)陣列專門作為存儲(chǔ)服務(wù)系統(tǒng) , 高性能計(jì)算系統(tǒng)中的所有計(jì)算節(jié)點(diǎn)可同時(shí)存取數(shù)據(jù)文件 , 將來(lái)還可過(guò)渡到為其它系統(tǒng)提供信息存儲(chǔ) 服務(wù)。 系統(tǒng)設(shè)計(jì)原則 HP 公司為 XXXX 氣象局 高性能計(jì)算系統(tǒng) 設(shè)計(jì)方案的基本出發(fā)點(diǎn)：幫助用戶建立一套既能最大限度地滿足用戶實(shí)際需要且技術(shù)又處于領(lǐng)先地位的高性能計(jì)算環(huán)境。 HP 公司認(rèn)為， XXXX 氣象局 高性能計(jì)算系統(tǒng) 應(yīng)具有處理大規(guī)模的復(fù)雜運(yùn)算，尤其是浮點(diǎn)運(yùn)算的能力 。它將為 XXXX 氣象局 提供優(yōu)化工程設(shè)計(jì)、分析、驗(yàn)證的手段，最終實(shí)現(xiàn)提高設(shè)計(jì)質(zhì)量、縮短開發(fā)周期、降低開發(fā)成本。 中國(guó)惠普公司提供的解決方案是遵循以下原則設(shè)計(jì)的： 1．先進(jìn)性 本系統(tǒng)方案所采用的技術(shù)既要符合業(yè)界的發(fā)展方向 ,又要在未來(lái)幾年內(nèi)仍具有很高的技 術(shù)先進(jìn)性，保持在同類系統(tǒng)中的領(lǐng)先地位。這樣有利于提高整個(gè)系統(tǒng)的計(jì)算與處計(jì)算服務(wù)器方案建議書 中國(guó)惠普有限公司 第 8 頁(yè) 理能力 。 2. 優(yōu)越的性能 高性能計(jì)算系統(tǒng)應(yīng)具有優(yōu)秀的處理能力，它不僅具有符合要求的峰值性能 (Peak Performance)， 更重要的是應(yīng)具有穩(wěn)定的應(yīng)用性能（ sustained performance） 。各種復(fù)雜的研究課題在本系統(tǒng)中能夠得到準(zhǔn)確，快速的計(jì)算結(jié)果 。 3. 可擴(kuò)展性 系統(tǒng)應(yīng)具有很強(qiáng)的擴(kuò)展能力 。 隨著對(duì)計(jì)算機(jī)系統(tǒng)性能的要求不斷提高， 該計(jì)算機(jī)系統(tǒng)應(yīng)具有擴(kuò)展能力， 并且容易實(shí)現(xiàn) 。 4. 開放性和兼容性 本計(jì)算機(jī) 系統(tǒng)應(yīng)符合公認(rèn)的工業(yè)標(biāo)準(zhǔn)， 包括體系結(jié)構(gòu)，硬件， I/O, 網(wǎng)絡(luò)，操作系統(tǒng)，開發(fā)環(huán)境和開發(fā)工具等 。這樣，便于和其他平臺(tái)上的系統(tǒng)互操作 。 5．應(yīng)用軟件豐富 本系統(tǒng)的平臺(tái)上應(yīng)具有豐富的軟件資源， 能夠提供研究課題的解決方案和相應(yīng)的軟件系統(tǒng) 。 HP 公司與高性能計(jì)算方面的獨(dú)立軟件開發(fā)商緊密合作，例如：Fluent,ANSYS 等專業(yè)工程軟件商 ,Red Hat,Etnus,Pallas,Platform 等專業(yè)平臺(tái)軟件商 , 不僅提供處理節(jié)點(diǎn)間的協(xié)調(diào)和通信的中間件，使整個(gè)系統(tǒng)節(jié)點(diǎn)能夠真正實(shí)現(xiàn)合作，負(fù)載均衡，還能針對(duì)不同 應(yīng)用需求，提供一系列并行計(jì)算應(yīng)用。 6. 良好的技術(shù)支持 由于本系統(tǒng)是比較復(fù)雜的計(jì)算機(jī)環(huán)境， 在使用過(guò)程中不可避免的會(huì)遇到一些技術(shù)問(wèn)題。 當(dāng)遇到這些問(wèn)題時(shí)能夠得到有效的支持， 使問(wèn)題得以圓滿的解決 。 7．性能價(jià)格比優(yōu)越 由于本系統(tǒng)比較龐大，價(jià)格因素也比較重要。 本系統(tǒng)在性能價(jià)格比方面在同類系統(tǒng)中應(yīng)具有明顯的優(yōu)勢(shì)，對(duì)于 XXXX 氣象局 來(lái)說(shuō)在 采購(gòu)大型系統(tǒng)中應(yīng)該考慮的重要因素。 計(jì)算服務(wù)器方案建議書 中國(guó)惠普有限公司 第 9 頁(yè) 第三 章 總體方案建議 方案 技術(shù)概述 針對(duì) 高性能計(jì)算 應(yīng)用對(duì)高性能的需求， HP 在系統(tǒng)設(shè)計(jì)上允許通過(guò)使用不斷更新的IPF 系 列產(chǎn)品、采用先進(jìn)的芯片組支持交叉交換體系結(jié)構(gòu)、使用更高性能的基礎(chǔ)節(jié)點(diǎn)、支持更多的節(jié)點(diǎn)和提供更高的帶寬等多種途徑擴(kuò)展系統(tǒng)的規(guī)模，提供高性能和最大的性能擴(kuò)展空間，滿足當(dāng)前和 為適應(yīng)當(dāng)前飛速發(fā)展的計(jì)算需要 , 一個(gè)高性能計(jì)算的全新時(shí)代應(yīng)運(yùn)而生 , 而 HP 正是以其基于第二代 Itanium2 處理器的安騰服務(wù)器執(zhí)業(yè)界之牛耳。 未來(lái)各種高端應(yīng)用的需要。 具有革命意義的安騰處理器家族架構(gòu)由 HP 與 Intel 共同研制開發(fā) , 它基于全新的EPIC 體系結(jié)構(gòu) , 降低了平臺(tái)的成本 , 提高了其性能和可擴(kuò)展性 . 基于 Itanium2 的 HP系統(tǒng)的速 度比上一代產(chǎn)品快兩倍 , 輕松超越 IA32 和基于標(biāo)準(zhǔn) RSIC 的系統(tǒng)的性能 . 基于 Itanium2 的惠普服務(wù)器能夠提供更強(qiáng)大的功能 , 更多的應(yīng)用 , 附加的特性 , 以及更廣泛的解決方案 。 IA－ 64 體系結(jié)構(gòu)在吸收 RISC 體系結(jié)構(gòu)經(jīng)驗(yàn)教訓(xùn)基礎(chǔ)上另辟蹊徑，一開始就走開放性的道路，充分利用現(xiàn)代芯片制造工藝發(fā)展成果、提供足夠的資源；同時(shí)，通過(guò)成為新的高端工業(yè)標(biāo)準(zhǔn)、擴(kuò)大批量來(lái)降低成本。它的基本設(shè)計(jì)思想是：提供一種新的機(jī)制、充分利用硬軟件協(xié)同能力來(lái)提高指令并行度：一方面大力開發(fā)先進(jìn)的編譯程序，消除程序中的條件轉(zhuǎn)移指令、并基 于猜測(cè)機(jī)制越過(guò)轉(zhuǎn)移和存儲(chǔ)指令界限調(diào)度指令的執(zhí)行次序，把程序員利用串行語(yǔ)義編寫的源程序轉(zhuǎn)換成由可并行執(zhí)行指令段序列組成的目標(biāo)程序；另一方面使得處理器具有足夠資源和智能，來(lái)紀(jì)錄編譯程序所發(fā)現(xiàn)的程序中可并行執(zhí)行指令段之間的劃分信息，并保證在程序運(yùn)行過(guò)程中發(fā)現(xiàn)猜測(cè)和調(diào)度有錯(cuò)時(shí)仍然給出正確結(jié)果。對(duì) IA－ 64 體系結(jié)構(gòu)處理器來(lái)說(shuō)，所執(zhí)行的目標(biāo)程序中可并行執(zhí)行的指令段已經(jīng)由編譯程序顯性地標(biāo)識(shí)出來(lái)了、指令間的數(shù)據(jù)相關(guān)性和過(guò)程相關(guān)性也已經(jīng)由編譯程序消除了，使得處理器只需使用相對(duì)簡(jiǎn)單的邏輯來(lái)實(shí)現(xiàn)很高的指令級(jí)并行度（ ILP）。相反 ，傳統(tǒng)的 RISC 處理器沒(méi)有足夠的資源來(lái)紀(jì)錄編譯程序所產(chǎn)生許多有用的信息，也沒(méi)有充分利用現(xiàn)代編譯程序強(qiáng)大的對(duì)程序執(zhí)行過(guò)程的調(diào)度能力。雖然在RISC 體系結(jié)構(gòu)下，設(shè)計(jì)師們也使用編譯程序來(lái)優(yōu)化目標(biāo)程序、為處理器提高 ILP 創(chuàng)造條件。但是，處理器所執(zhí)行的基本上是隱性并行和包含大量相關(guān)性的目標(biāo)程序，發(fā)現(xiàn)并行、線路預(yù)測(cè)、動(dòng)態(tài)調(diào)度等提高 ILP 的無(wú)序執(zhí)行技術(shù)、完全是由處理器硬件利用復(fù)計(jì)算服務(wù)器方案建議書 中國(guó)惠普有限公司 第 10 頁(yè) 雜的芯片邏輯來(lái)實(shí)現(xiàn)的。盡管兩種體系結(jié)構(gòu)之間存在著許多差別，但是執(zhí)行顯性并行或者隱性并行目標(biāo)程序是其中最主要的本質(zhì)差別。所以最初發(fā)明這種新體系結(jié)構(gòu)的 惠普公司把它稱為顯性并行指令計(jì)算（ EPIC）體系結(jié)構(gòu)。 除了強(qiáng)有力的編譯程序外， IA－ 64 體系結(jié)構(gòu)微處理器必須提供足夠的資源來(lái)實(shí)現(xiàn)EPIC 設(shè)計(jì)思想、提高并行度和實(shí)現(xiàn)高性能，包括： 新穎的指令集：允許編譯程序產(chǎn)生由并行指令段組成的目標(biāo)程序，并紀(jì)錄指令段間的劃分； 大寄存器空間：為編譯程序通過(guò)寄存器換名等技術(shù)消除相關(guān)性、產(chǎn)生盡可能在寄存器中進(jìn)行運(yùn)算的優(yōu)質(zhì)目標(biāo)程序提供充分的余地； 具有足夠長(zhǎng)度的指令：便于在指令中訪問(wèn)大寄存器空間中多個(gè)寄存器和消除 程序中轉(zhuǎn)移指令； 足夠的指令發(fā)送端口和派送網(wǎng)絡(luò)：用于提高每個(gè)時(shí)鐘周期發(fā)送到指令數(shù)和提高發(fā)送到速度和效率； 多種類型的新型寄存器：允許編譯程序越過(guò)條件轉(zhuǎn)移和存儲(chǔ)指令的界限調(diào)度目標(biāo)程序中訪問(wèn)內(nèi)存指令的位置、消除相關(guān)性，并彌補(bǔ)調(diào)整位置所產(chǎn)生的錯(cuò)誤； 更多的浮點(diǎn)執(zhí)行部件：有利于處理器實(shí)現(xiàn)高并行度的浮點(diǎn)計(jì)算； 計(jì)算服務(wù)器方案建議書 中國(guó)惠普有限公司 第 11 頁(yè) 更多的整數(shù)和多媒體運(yùn)算執(zhí)行部件：有利于處理器實(shí)現(xiàn)高并行度的整數(shù)和多媒體信息處理； 更多的芯片上高速緩存：有利于提高緩存命中率、降低內(nèi)存延遲； EPIC 體系結(jié)構(gòu)處理器提供的寄存器資源 IA－ 64 的 EPIC 體系結(jié)構(gòu)是對(duì)傳統(tǒng) RISC 體系結(jié)構(gòu)的重大革新，許多方面突破了RISC 體系結(jié)構(gòu)的局限、發(fā)展了 RISC 體系結(jié)構(gòu)，為利用新制造工藝和技術(shù)、按照摩爾定律預(yù)示的速度提高處理器性能提供了可靠的保證。 HP 公司向 XXXX 氣象局 提出的以下高性能計(jì)算系統(tǒng)的解決方案正是以安騰 2 計(jì)算服務(wù)器方案建議書 中國(guó)惠普有限公司 第 12 頁(yè) (Itanium2Madison)關(guān)鍵技術(shù)為基礎(chǔ)的。 方案邏輯結(jié)構(gòu) 根據(jù) 惠普公司多年來(lái)氣象氣候領(lǐng)域的經(jīng)驗(yàn) ， 在 與 XXXX 氣象局 的 各位專家 進(jìn)行 交流之后 ，按照 系 統(tǒng)設(shè)計(jì)原則、基本的評(píng)價(jià)標(biāo)準(zhǔn)以及 各種應(yīng)用軟件的需求， HP 公司 推薦 了兩種高性能計(jì)算的解決方案。 一種是采用基于 ccNUMA 體系構(gòu)架的多處理器服務(wù)器為節(jié)點(diǎn)的大節(jié)點(diǎn)集群系統(tǒng)，采用基于線程的并行處理機(jī)制為主，基于消息傳輸?shù)牟⑿刑幚頇C(jī)制為輔，一種是基于 2 CPU 的 SMP 服務(wù)器為節(jié)點(diǎn)的分布式內(nèi)存體系構(gòu)架的集群系統(tǒng)，采用消息傳輸機(jī)制并行計(jì)算為主。 實(shí)際上早期的數(shù)字天氣預(yù)報(bào)應(yīng)用軟件（以 MM5 為主）主要運(yùn)行在共享內(nèi)存體系構(gòu)架或者 CRAY 的矢量機(jī)上，隨著機(jī)群技術(shù)的普及，主要的數(shù)字天氣預(yù)報(bào)軟件，比如 MM5都已經(jīng)針對(duì)集群系統(tǒng)進(jìn)行了并 行化處理，可以運(yùn)行在集群系統(tǒng)平臺(tái)上了。 ccNUMA體系構(gòu)架的多處理器服務(wù)器 方案一采用 1 臺(tái)惠普公司的 ccNUMA 體系構(gòu)架的 Superdome 服務(wù)器作為氣象服務(wù)器， Superdome 服務(wù)器運(yùn)行 安騰 2 CPU，最大配置 128 個(gè) CPU，但是考慮到美國(guó)的中國(guó)的出口限制，在本方案中，每臺(tái) Superdome 服務(wù)器配置 32 個(gè) 安騰處理器。 Superdome 服務(wù)器連接一臺(tái) MSA1000 磁盤柜，配置 7個(gè) 300GB磁盤，提供 2TB 的存儲(chǔ)，最大配置提供 6TB 存儲(chǔ)。 HP Integrity SuperDome 是 HP 公司最高端 UNIX 服務(wù)器 ， 它基于 Cell 板的模塊化高技術(shù)設(shè)計(jì) ， 最大可擴(kuò)充至 128 顆 CPU 及 1T 內(nèi)存和 192 個(gè) PCI 插槽 。 它具有卓越的體系機(jī)構(gòu)和性能 ， 是作為 XXXX氣象局 高性能計(jì)算系統(tǒng) 的理想平臺(tái) 。 HP Integrity 服務(wù)器可以提供更強(qiáng)勁的動(dòng)力、更多應(yīng)用、額外的特性、以及包括商用和技術(shù)計(jì)算在內(nèi)的更廣泛的解決方案，其超群表現(xiàn)讓競(jìng)爭(zhēng)對(duì)手同檔系統(tǒng)難以望其項(xiàng)背。憑借在與英特爾聯(lián)合開發(fā)安騰體系結(jié)構(gòu)中所取得的豐富經(jīng)驗(yàn)，惠普開發(fā)了 HP 超級(jí)可擴(kuò)展處理器芯片組 sx1000。 HP sx1000 芯片 組可以降低內(nèi)存延遲并提高內(nèi)存和 I/O吞吐量，進(jìn)而充分發(fā)揮英特爾 174。安騰 174。2 處理器的全部性能。從而使您獲得卓越的系統(tǒng)性能，以處理要求最苛刻的業(yè)務(wù)工作負(fù)載――并提供業(yè)界無(wú)與倫比的價(jià)值。 計(jì)算服務(wù)器方案建議書 中國(guó)惠普有限公司 第 13 頁(yè) SuperDome 支持硬件分區(qū)，可以定義成 16 個(gè)分區(qū)。分個(gè)分區(qū)都可以安裝、運(yùn)行單獨(dú)的操作系統(tǒng)，以適應(yīng)不同應(yīng)用對(duì)系統(tǒng)的不同要求。分區(qū)之間的資源可以調(diào)整，滿足不同應(yīng)用不同時(shí)段的資源要求。 SuperDome 采用 HP_UX 11i V2(現(xiàn)在成為唯一可支持安騰芯片的 64 位 UNIX 操作系統(tǒng) )操作系統(tǒng)提供高性能計(jì)算環(huán)境的基礎(chǔ) ,并配合相應(yīng)的系 統(tǒng)管理軟件、語(yǔ)言編譯器、并行模式、相關(guān)數(shù)學(xué)庫(kù) ,還可支持目前流行的各種第三方高性能計(jì)算商業(yè)軟件包和應(yīng)用軟件包 , 例如 Platform 的 LSF( 負(fù)載平衡軟件 ) 和 checkpoint,Etnus 的TotalView,Pallas 的 Vampir 及 Gaussian 等等 ,這些可由校方根據(jù)實(shí)際要求靈活配置 , 以運(yùn)行高性能計(jì)算應(yīng)用程序和商業(yè)軟件。 HP_UX11i 系統(tǒng)下的 C,C++和 Fortran 編譯器展示出卓越的實(shí)際應(yīng)用性能 , 操作系統(tǒng)庫(kù)充分利用了 Itanium2 架構(gòu)的先進(jìn)技術(shù) ,其中包括 : MLIB 一系列子 程序 , 為科學(xué)和技術(shù)計(jì)算提供了常用數(shù)學(xué)軟件 , 并針對(duì)Itanium2 架構(gòu)進(jìn)行了優(yōu)化 。 Libm 一種支持 C,C++和 Fortran90 的優(yōu)化的浮點(diǎn)數(shù)學(xué)庫(kù) ,其設(shè)