雖然相當(dāng)一部分企業(yè)還沒有找到更好的Hadoop使用方式，但這并不能阻止其不斷在這一領(lǐng)域加大投入。根據(jù)Gartner的初步估計(jì)，2016年Hadoop發(fā)行版支出達(dá)到8億美元，較2015年增長40%。遺憾的是，仍然只有14%的企業(yè)實(shí)際報(bào)告了Hadoop部署情況，僅稍高于上一年的10%。

一大亮點(diǎn)：Hadoop部署開始逐步轉(zhuǎn)移至云端，并在這里找到更大的成功機(jī)遇。

人人都愛Hadoop

也許有些人認(rèn)為Hadoop已經(jīng)被Spark或者其它大數(shù)據(jù)基礎(chǔ)設(shè)施所取代——實(shí)際上這一結(jié)論并不確切。

根據(jù)Gartner的定義，Hadoop概念涵蓋了全部“商業(yè)化打包及支持的開源Hadoop相關(guān)項(xiàng)目版本”。換言之，除了傳統(tǒng)的HDFS與MapReduce之外，Gartner還在其中融入了YARN、Pig、Hive、HBase、ZooKeeper、Avro、Flume、Kafka、Oozie、Parquet、Solr、Spark及Sqoop等項(xiàng)目。

事實(shí)上，正如Gartner分析師Merv Adrian所言，“這項(xiàng)調(diào)查主要面向各類大數(shù)據(jù)項(xiàng)目”。不過主流媒體給出的，各類大數(shù)據(jù)Hadoop項(xiàng)目都已經(jīng)得到廣泛接納的觀點(diǎn)則并不屬實(shí)。

正如Gartner所指出，企業(yè)似乎一直在對(duì)Hadoop進(jìn)行相關(guān)實(shí)驗(yàn)，但卻多數(shù)未能將其納入生產(chǎn)階段：

除了2016年年內(nèi)Hadoop部署量增長緩慢外，部署通道本身也呈現(xiàn)出下滑趨勢(shì)。即使從更為狹義的Hadoop概念角度進(jìn)行分析，大數(shù)據(jù)的實(shí)踐比例也仍然相當(dāng)有限：

　　總體而言，大數(shù)據(jù)技術(shù)確實(shí)引發(fā)了廣泛關(guān)注，但還沒能獲得全面成功。

走向云環(huán)境

當(dāng)然，大數(shù)據(jù)領(lǐng)域也不乏優(yōu)勝者。Hortonworks就迎來了強(qiáng)勁的季度表現(xiàn)，其營收同比增長39%。2016年，該公司的營收總額近2億美元，其中1.26億來自其Hadoop平臺(tái)的訂閱收益。

不過其之所以能夠獲得成功，很大程度上要得益于對(duì)云計(jì)算的積極接納。正如該公司在財(cái)報(bào)會(huì)議上所言，近25%的Hortonworks客戶正立足公有云運(yùn)行其軟件，而兩年前這一比例還僅為0%。

雖然這種云轉(zhuǎn)型趨勢(shì)可能夫給Amazon Web Services或者微軟Azure帶來更多收益，但作為一股強(qiáng)大的發(fā)展趨勢(shì)，這將給大數(shù)據(jù)行業(yè)中的每家從業(yè)廠商帶來推動(dòng)作用。

將Hadoop部署方案遷移至云端的主要驅(qū)動(dòng)因素之一，在于Hadoop自身的工作復(fù)雜性。考慮到用于補(bǔ)充及加速Hadoop創(chuàng)新的相關(guān)項(xiàng)目不斷涌現(xiàn)，主流企業(yè)根本不可能跟上這樣的節(jié)奏。因此除了谷歌這樣資產(chǎn)雄厚的企業(yè)之外，Gartner表示其它企業(yè)“經(jīng)常需要使用不成熟或者原本不受支持的軟件”方可實(shí)現(xiàn)最新最強(qiáng)大的數(shù)據(jù)流分析能力。

作為回應(yīng)，Gartner還表示，“基于云的交付模式允許企業(yè)更好地接納Hadoop生態(tài)系統(tǒng)中的各類組件(通常為Apache項(xiàng)目)，將始終存在的Hadoop組件升級(jí)工作留給云供應(yīng)商處理，這將使得存儲(chǔ)與計(jì)算的分離與管理工作更為輕松。”

坦率地講，云正是大數(shù)據(jù)項(xiàng)目的理想歸宿。正如AWS產(chǎn)品戰(zhàn)略負(fù)責(zé)人Matt Wood所提到，“那些樂于購買昂貴基礎(chǔ)設(shè)施的客戶已經(jīng)發(fā)現(xiàn)問題的影響范圍與出現(xiàn)領(lǐng)域存在極快的變化速度。在他們還在努力為原本的問題尋找答案時(shí)，新的業(yè)務(wù)問題已經(jīng)出現(xiàn)了。”換言之，云不僅能夠?yàn)榇髷?shù)據(jù)技術(shù)提供可管理性，更能夠幫助其真正實(shí)現(xiàn)生產(chǎn)能力。

不過如前文所述，這一波遷移浪潮可能并不會(huì)給傳統(tǒng)Hadoop供應(yīng)商帶來收益增值?？紤]到越來越多的數(shù)據(jù)開始駐留在Amazon、微軟與谷歌提供的云平臺(tái)上，也許未來企業(yè)將更傾向于直接使用這些平臺(tái)提供的原生Hadoop服務(wù)。