Hadoop設(shè)備實(shí)際上屬于有待編排的超級計(jì)算機(jī)

責(zé)任編輯:editor007

作者:畢波

2016-06-12 15:20:38

摘自:ZD至頂網(wǎng)

藍(lán)色巨人認(rèn)為,工作負(fù)載部署與調(diào)度工具能夠幫助企業(yè)客戶有效降低采購及運(yùn)維的集群數(shù)量,且保證數(shù)據(jù)不會(huì)耗盡現(xiàn)有處理資源。藍(lán)色巨人將上述工具共同打包在軟件定義套件當(dāng)中,但并非面向主流工作負(fù)載。

IBM公司認(rèn)為Hadoop及Apache Spark等配置方案在本質(zhì)上其實(shí)屬于超級計(jì)算機(jī),而秉持著這一思路,藍(lán)色巨人開始調(diào)整自家超級計(jì)算機(jī)管理代碼以處理x86集群之上的各類應(yīng)用。

根據(jù)IBM公司軟件定義基礎(chǔ)設(shè)施副總裁Bernie Sprang的解釋,分布于集群上的應(yīng)用需要跨越各計(jì)算與存儲(chǔ)資源池進(jìn)行工作負(fù)載優(yōu)化,而提供相關(guān)模板不僅能夠簡化部署過程,同時(shí)也能夠擺脫對專有硬件的依賴。另外,Sprang強(qiáng)調(diào)稱,企業(yè)客戶中存在“集群蠕動(dòng)”現(xiàn)象,即組織內(nèi)共同建立計(jì)算集群并以共享而非獨(dú)占方式使用。

藍(lán)色巨人認(rèn)為,工作負(fù)載部署與調(diào)度工具能夠幫助企業(yè)客戶有效降低采購及運(yùn)維的集群數(shù)量,且保證數(shù)據(jù)不會(huì)耗盡現(xiàn)有處理資源。

而在新的IBM“Spectrum”工具當(dāng)中,包含有“Conductor”產(chǎn)品作為資源共享工具,能夠?qū)夯瘧?yīng)用進(jìn)行“模板化”調(diào)整。另外“Spectrum LSF”工具則負(fù)責(zé)工作負(fù)載調(diào)度。IBM公司還推出了Spectrum Storage,這套原本名為GPFS的文件系統(tǒng)能夠支持大規(guī)模工作負(fù)載。

藍(lán)色巨人將上述工具共同打包在軟件定義套件當(dāng)中,但并非面向主流工作負(fù)載。在IBM看來,此套件更適合用于云或者混合云分析方案,因?yàn)槠淠軌蜉p松跨越本地與公有云環(huán)境。

Sprang希望將Spectrum套件定義為類似于虛擬機(jī)管理程序的方案,因?yàn)槠渫瑯游挥诜?wù)器與工作負(fù)載之間。但二者的共通之處也僅此而已了:Spectrum主要面向集群化應(yīng)用,而藍(lán)色巨人希望借此將其高端技術(shù)成果引入目前的超大規(guī)模工作負(fù)載當(dāng)中。

鏈接已復(fù)制,快去分享吧

企業(yè)網(wǎng)版權(quán)所有?2010-2024 京ICP備09108050號-6京公網(wǎng)安備 11010502049343號