IBM近日宣布,IBM已獲得美國(guó)能源部?jī)r(jià)值3.25億美元的合同,為勞倫斯·利弗莫爾國(guó)家實(shí)驗(yàn)室和橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室開(kāi)發(fā)和部署全世界最先進(jìn)的“以數(shù)據(jù)為中心”超級(jí)計(jì)算機(jī)系統(tǒng),從而推動(dòng)科學(xué)、工程與國(guó)防安全領(lǐng)域的創(chuàng)新與研發(fā)。IBM的新系統(tǒng)采用“以數(shù)據(jù)為中心”的方法,使數(shù)據(jù)存在哪里計(jì)算能力就在哪里,從而使數(shù)據(jù)流動(dòng)和能耗降至最低。
在美國(guó)勞倫斯·利弗莫爾國(guó)家實(shí)驗(yàn)室和橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室,IBM和Mellanox的OpenPOWER技術(shù)配以全新NVIDIA GPU技術(shù)正在加速洞察,驅(qū)動(dòng)創(chuàng)新
應(yīng)該說(shuō),在大數(shù)據(jù)快速增長(zhǎng)的背景下,大數(shù)據(jù)管理的重要性日益提高,這提升了科學(xué)家獲得新發(fā)現(xiàn)的機(jī)會(huì),但同時(shí)也加劇了他們面臨的挑戰(zhàn)。全世界每天產(chǎn)生超過(guò)25億GB數(shù)據(jù)(相當(dāng)于2.5億個(gè)足球場(chǎng)容納的書(shū)籍所含的信息量),為此我們需要全新的超級(jí)計(jì)算的方法。
目前的計(jì)算方法通過(guò)在存儲(chǔ)器與處理器之間反復(fù)調(diào)動(dòng)數(shù)據(jù)來(lái)分析和獲得數(shù)據(jù)洞察。然而,隨著大數(shù)據(jù)極速增長(zhǎng),大規(guī)模且頻繁的數(shù)據(jù)移動(dòng)會(huì)耗費(fèi)極大量的時(shí)間和能源,這個(gè)方法因而變得不可維系。由于數(shù)據(jù)移動(dòng)和數(shù)據(jù)管理占據(jù)計(jì)算基礎(chǔ)架構(gòu)極大的空間,僅僅將設(shè)計(jì)重點(diǎn)放在更快的微處理器上的慣常做法也變得不再可行。
為解決這個(gè)問(wèn)題,IBM研究人員在過(guò)去五年里開(kāi)創(chuàng)了一種名為“以數(shù)據(jù)為中心”的全新方法。新架構(gòu)將計(jì)算能力嵌在系統(tǒng)里的數(shù)據(jù)所在地,充分考慮到分析、建模、可視化和模擬能力的融合,從而以令人難以置信的速度促進(jìn)新洞察的產(chǎn)生。
IBM OpenPOWER系統(tǒng)為兩個(gè)實(shí)驗(yàn)室提升速度和能源效益
在兩個(gè)實(shí)驗(yàn)室看來(lái),由于采用創(chuàng)新的“以數(shù)據(jù)為中心”方法,新的IBM超級(jí)計(jì)算機(jī)將成為速度最快和能效最高的系統(tǒng)之一。每個(gè)實(shí)驗(yàn)室系統(tǒng)在商業(yè)和高性能計(jì)算應(yīng)用方面的性能有望達(dá)到原系統(tǒng)的5-10倍,能源效率也將在原系統(tǒng)5倍以上。
這些基于OpenPOWER的系統(tǒng)將通過(guò)“以數(shù)據(jù)為中心”計(jì)算架構(gòu)來(lái)提供領(lǐng)先于業(yè)界、具有高成本效益的大數(shù)據(jù)建模、模擬、應(yīng)用和分析技術(shù)。部署于勞倫斯·利弗莫爾國(guó)家實(shí)驗(yàn)室的“山脈”(“Sierra”)超級(jí)計(jì)算機(jī)和部署于橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室的“山峰”(“Summit”)超級(jí)計(jì)算機(jī)的峰值性能都將遠(yuǎn)超100 petaflop(千萬(wàn)億次浮點(diǎn)運(yùn)算/秒)。此外,超過(guò)5PB的動(dòng)態(tài)內(nèi)存和閃存也將提升“以數(shù)據(jù)為中心”應(yīng)用的性能。如需要,這些系統(tǒng)可以以高于每秒17PB的速度(相當(dāng)于在一秒內(nèi)移動(dòng)Facebook上的1000億張照片)將數(shù)據(jù)移動(dòng)到處理器,從而提升獲得洞察的速度。
這兩個(gè)國(guó)家實(shí)驗(yàn)室允許來(lái)自學(xué)術(shù)界、政府和產(chǎn)業(yè)界的研究人員訪問(wèn)其開(kāi)放的計(jì)算機(jī),以克服科學(xué)和工程領(lǐng)域的重大挑戰(zhàn)。在以往,這些實(shí)驗(yàn)室計(jì)算機(jī)的優(yōu)化都是為了更好地利用建模和模擬技術(shù)解決科學(xué)問(wèn)題。但隨著研究進(jìn)程在醫(yī)療衛(wèi)生、基因組學(xué)、經(jīng)濟(jì)學(xué)、金融系統(tǒng)、社會(huì)行為、數(shù)據(jù)集可視化等領(lǐng)域的持續(xù)推進(jìn),研究人員對(duì)這些研究項(xiàng)目的技術(shù)需求越發(fā)提高。因此,為解決諸多世界難題,計(jì)算系統(tǒng)需要提供數(shù)據(jù)管理、數(shù)據(jù)分類(lèi)以及有用信息提取等服務(wù)。
IBM極具開(kāi)創(chuàng)性的“以數(shù)據(jù)為中心”架構(gòu)對(duì)科學(xué)、國(guó)防應(yīng)用以及醫(yī)療、制造、工程、石油、天然氣等行業(yè)具有革新意義。“山脈”和“山峰”系統(tǒng)在核心應(yīng)用上的運(yùn)用證明美國(guó)能源部將要開(kāi)啟百萬(wàn)兆級(jí)計(jì)算(Exascale)宏偉藍(lán)圖的另一個(gè)重要階段。
利用OpenPOWER技術(shù)的開(kāi)放方法
為了生成、訪問(wèn)、管理和操作無(wú)論在數(shù)量或種類(lèi)上都空前之多的數(shù)據(jù),我們需要改變傳統(tǒng)計(jì)算的屬性,使其建立在開(kāi)放的技術(shù)平臺(tái)之上。企業(yè)需要從系統(tǒng)設(shè)計(jì)到制定決策的整體過(guò)程中迎接數(shù)據(jù)所賦予的挑戰(zhàn)。這意味著企業(yè)要從數(shù)據(jù)“誕生”開(kāi)始審視數(shù)據(jù),經(jīng)過(guò)由方案驅(qū)動(dòng)的工作流以及形成洞察的整個(gè)周期。這需要企業(yè)從數(shù)據(jù)準(zhǔn)備開(kāi)始,經(jīng)歷數(shù)據(jù)處理和數(shù)據(jù)可視化的過(guò)程,并經(jīng)過(guò)多次反復(fù)。
將OpenPOWER技術(shù)融入模塊化集成系統(tǒng)的做法將幫助勞倫斯·利弗莫爾國(guó)家實(shí)驗(yàn)室和橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室根據(jù)其具體需要對(duì)“山脈”和“山峰”系統(tǒng)配置進(jìn)行定制。
NVIDIA與IBM合作,開(kāi)發(fā)了先進(jìn)的NVIDIA NVLink互連技術(shù),該技術(shù)將使CPU和GPU能夠以比現(xiàn)在快5-12倍的速度進(jìn)行數(shù)據(jù)交換。NVIDIA NVLink技術(shù)將應(yīng)用于IBM POWER CPU和下一代基于NVIDIA Volta?架構(gòu)的NVIDIA GPU,使“山脈”和“山峰”能夠達(dá)到前所未有的性能水平。此外,IBM正與Mellanox聯(lián)手研發(fā)一種非常先進(jìn)的包含內(nèi)置智能的互連技術(shù),從而提升數(shù)據(jù)處理能力。
IBM全球高級(jí)副總裁、系統(tǒng)與科技部總經(jīng)理Tom Rosamilia先生表示:“在數(shù)據(jù)量極速增長(zhǎng)的背景下,傳統(tǒng)超級(jí)計(jì)算的方法不再可行,今天的新聞發(fā)布標(biāo)志著這些傳統(tǒng)方法的重大轉(zhuǎn)變。IBM‘以數(shù)據(jù)為中心’的方法是一種全新的計(jì)算范例,它代表著開(kāi)放計(jì)算平臺(tái)的未來(lái),并能應(yīng)對(duì)數(shù)據(jù)量加快增長(zhǎng)的挑戰(zhàn)。IBM為勞倫斯利?弗莫爾和橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室開(kāi)發(fā)的系統(tǒng)具備卓越的性能,其核心技術(shù)目前可供不同行業(yè)各種規(guī)模的公司使用。”
IBM現(xiàn)在向客戶提供的“以數(shù)據(jù)為中心”技術(shù)包括IBM POWER8、IBM 彈性存儲(chǔ)服務(wù)器(IBM Elastic Storage Server)、IBM 彈性存儲(chǔ)軟件(基于GPFS技術(shù))和IBM Platform Computing軟件。
圍繞這些新系統(tǒng),IBM研究院將與勞倫斯?利弗莫爾國(guó)家實(shí)驗(yàn)室和橡樹(shù)嶺國(guó)家實(shí)驗(yàn)室開(kāi)展科學(xué)項(xiàng)目方面的合作,通過(guò)開(kāi)發(fā)相關(guān)工具和技術(shù)來(lái)優(yōu)化代碼,從而最大程度地開(kāi)發(fā)新系統(tǒng)的性能。
雖然利用Power Systems和OpenPOWER技術(shù)的計(jì)劃的編程工作已經(jīng)開(kāi)始,但這些新系統(tǒng)在上述國(guó)家實(shí)驗(yàn)室的部署和安裝工作預(yù)計(jì)要到2017-2018年才能完成。