1 大數(shù)據(jù)發(fā)展概述
當今是一個數(shù)據(jù)爆發(fā)增長的時代。移動互聯(lián)網(wǎng)、移動終端和數(shù)據(jù)傳感器的出現(xiàn),使數(shù)據(jù)以超出人們想象的速度快速增長。據(jù)調(diào)查機構(gòu)估測,數(shù)據(jù)數(shù)量一直在快速增加,這個速度不僅是指數(shù)據(jù)流的增長,而且還包括全新的數(shù)據(jù)種類的增多。目前數(shù)據(jù)容量增長的速度,已經(jīng)大大超過了硬件技術(shù)的發(fā)展速度,并正在引發(fā)數(shù)據(jù)存儲和處理的危機。據(jù)統(tǒng)計,2013年全球產(chǎn)生的數(shù)據(jù)達到3.5澤字節(jié),到2020年產(chǎn)生的數(shù)量將增至44澤字節(jié)。
“大數(shù)據(jù)”一詞來自于未來學家托夫勒于1980年所著的《第三次浪潮》。最早開始對大數(shù)據(jù)進行應(yīng)用探索的是2005年雅虎公司的Hadoop項目。Hadoop其最初只是用來解決網(wǎng)頁搜索問題的一個項目,后被Apache Software Foundation公司引入并成為開源應(yīng)用。Hadoop是由多個軟件產(chǎn)品組成的一個生態(tài)系統(tǒng),這些軟件產(chǎn)品共同實現(xiàn)全面功能和靈活的大數(shù)據(jù)分析。
世界上許多國家都已經(jīng)認識到了大數(shù)據(jù)所蘊含的重要戰(zhàn)略意義,紛紛開始在國家層面進行戰(zhàn)略部署,以迎接大數(shù)據(jù)技術(shù)革命正在帶來的新的機遇和挑戰(zhàn)。以美國為代表的發(fā)達國家在推進大數(shù)據(jù)上已經(jīng)形成了從發(fā)展戰(zhàn)略、法律框架到行動計劃的完整布局。
2 全球各國大數(shù)據(jù)的發(fā)展現(xiàn)狀
美國在《大數(shù)據(jù)研究和發(fā)展倡議》中,提出將通過收集龐大而復(fù)雜的數(shù)字資料,從中獲得知識和洞見,以提升能力。并協(xié)助加速在科學、工程上發(fā)現(xiàn)的步伐,強化美國國土安全,轉(zhuǎn)變教育和學習模式。根據(jù)這一計劃,美國希望利用大數(shù)據(jù)技術(shù)實現(xiàn)在多個領(lǐng)域的突破,包括科研教學、環(huán)境保護、工程技術(shù)、國土安全、生物醫(yī)藥等。其中具體的研發(fā)計劃涉及了美國國家科學基金會、國家衛(wèi)生研究院、國防部、能源部、國防部高級研究局、地質(zhì)勘探局等6個聯(lián)邦部門和機構(gòu)。
擁有世界第二多人口的印度,近兩年也持續(xù)運用大數(shù)據(jù),期許打造出一個更便利、更親民的智慧城市。印度全國軟件與服務(wù)企業(yè)協(xié)會(Nasscom)預(yù)計,印度大數(shù)據(jù)行業(yè)規(guī)模在三年內(nèi)將快速增長,是當前規(guī)模的六倍,同時還是全球大數(shù)據(jù)行業(yè)平均增長速度的兩倍。對于印度的整個IT行業(yè)來說,大數(shù)據(jù)時代的到來會創(chuàng)造更多更新的機遇。
英國政府2012年時計劃在未來兩年內(nèi),在大數(shù)據(jù)和節(jié)能計算研究上投資1.89億英鎊,以帶動企業(yè)在該領(lǐng)域的投資。大數(shù)據(jù)被英國看作是自己的優(yōu)勢所在,且英國認為已在政府層面為大數(shù)據(jù)做好了準備。
法國政府在2013年投入近1150萬歐元,用于7個大數(shù)據(jù)市場研發(fā)項目。目的在于“通過發(fā)展創(chuàng)新性解決方案,并將其用于實踐,來促進法國在大數(shù)據(jù)領(lǐng)域的發(fā)展。”法國政府在《數(shù)字化路線圖》中列出了五項將大力支持的戰(zhàn)略性高新技術(shù),大數(shù)據(jù)就是其中一項。
日本在2012新一輪IT振興計劃中,將發(fā)展大數(shù)據(jù)作為國家戰(zhàn)略層面提出,重點關(guān)注大數(shù)據(jù)應(yīng)用技術(shù),如社會化媒體等智能技術(shù)的開發(fā)、新醫(yī)療技術(shù)的開發(fā)、以及交通擁堵治理等公共領(lǐng)域的應(yīng)用。
新加坡政府在大數(shù)據(jù)發(fā)展過程中充當了關(guān)鍵角色,抓住了大數(shù)據(jù)發(fā)展的五大關(guān)鍵要素:基礎(chǔ)設(shè)施、產(chǎn)業(yè)鏈、人才、技術(shù)和立法,彌補了企業(yè)的短板。新加坡政府很早就提出支持新加坡企業(yè)采用大數(shù)據(jù)技術(shù),利用大數(shù)據(jù)提升政府服務(wù)水平。
此外,澳大利亞、加拿大、新西蘭、德國和印度等國也在大數(shù)據(jù)領(lǐng)域進行了研究部署,還紛紛推出本國的公共數(shù)據(jù)開放網(wǎng)站,以使更多的人可以使用大數(shù)據(jù)資源,并從中獲得利益。目前,全球至少擁有大大小小的數(shù)據(jù)開放網(wǎng)站50余個。
2.1 歐盟大數(shù)據(jù)的發(fā)展
目前,歐盟及其成員國已經(jīng)明確制定大數(shù)據(jù)發(fā)展戰(zhàn)略,數(shù)據(jù)價值鏈不同階段產(chǎn)生的價值將成為未來知識經(jīng)濟的核心,利用好數(shù)據(jù)可以為運輸、健康或制造業(yè)等傳統(tǒng)行業(yè)帶來新的機遇。
歐盟在大數(shù)據(jù)方面的活動主要涉及四方面內(nèi)容:研究數(shù)據(jù)價值鏈戰(zhàn)略因素;資助“大數(shù)據(jù)”和“開放數(shù)據(jù)”領(lǐng)域的研究和創(chuàng)新活動;實施開放數(shù)據(jù)政策;促進公共資助科研實驗成果和數(shù)據(jù)的使用及再利用。
(1)數(shù)據(jù)價值鏈戰(zhàn)略計劃
歐盟委員會正在研究制定數(shù)據(jù)價值鏈戰(zhàn)略計劃,以實現(xiàn)數(shù)據(jù)的最大價值,重點是通過一個以數(shù)據(jù)為核心的連貫性歐盟生態(tài)體系,讓數(shù)據(jù)價值鏈的不同階段產(chǎn)生價值。數(shù)據(jù)價值鏈的概念為數(shù)據(jù)的生命周期,從數(shù)據(jù)產(chǎn)生、驗證以及進一步加工后,以新的創(chuàng)新產(chǎn)品和服務(wù)形式出現(xiàn)的利用和再利用。
數(shù)據(jù)價值鏈戰(zhàn)略計劃遵循的主要原則是:高質(zhì)量數(shù)據(jù)的廣泛獲得性,包括公共資助數(shù)據(jù)
的免費獲得;作為數(shù)字化單一市場一部分,歐盟內(nèi)數(shù)據(jù)的自由流動;尋求個人潛在隱私問題與其數(shù)據(jù)再利用潛力之間的適當平衡,同時賦予公民以其希望形式使用自己數(shù)據(jù)的權(quán)利。
這一計劃的重點是培育一個連貫的歐洲數(shù)據(jù)生態(tài)系統(tǒng),促進圍繞數(shù)據(jù)的研究和創(chuàng)新工作,采納數(shù)據(jù)服務(wù)及產(chǎn)品,采取具體行動,改善數(shù)據(jù)價值提取的框架條件,包括基礎(chǔ)能力、基礎(chǔ)設(shè)備、標準以及有利的政策和法規(guī)環(huán)境。目前正在單一戰(zhàn)略框架下制定一系列重點行動,解決數(shù)據(jù)價值鏈中與價值創(chuàng)造相關(guān)的大量交叉問題。
數(shù)據(jù)價值鏈戰(zhàn)略計劃包括開放數(shù)據(jù)、云計算、高性能計算和科學知識開放獲取四大戰(zhàn)略。
·數(shù)據(jù)開放戰(zhàn)略
歐盟認為,為加強創(chuàng)新潛力,應(yīng)盡可能的以最好的方式使用資源,這些創(chuàng)新資源就是數(shù)據(jù),開放數(shù)據(jù)將成為新的就業(yè)和經(jīng)濟增長的重要工具。為了應(yīng)對這一變革,2010年11月歐盟通信委員會向歐洲議會提交了“開放數(shù)據(jù):創(chuàng)新、增長和透明治理的引擎”的報告,報告以開放數(shù)據(jù)為核心,制定了應(yīng)對大數(shù)據(jù)挑戰(zhàn)的戰(zhàn)略。
·云計算戰(zhàn)略
2012年9月,歐委會通過公布了“釋放歐洲云計算服務(wù)潛力”戰(zhàn)略,戰(zhàn)略計劃通過兩年時間,把歐盟打造成云計算服務(wù)的強勢集團,為2014-2020年期間的歐盟云起飛(夯實基礎(chǔ)。歐盟云計算戰(zhàn)略及三大關(guān)鍵行動分別為:規(guī)范和簡化的云計算標準;云計算安全和公平的合同條款及條件;建設(shè)歐盟云計算伙伴關(guān)系,驅(qū)動創(chuàng)新和增長。其它的具體行動舉措還包括:數(shù)據(jù)保護、網(wǎng)絡(luò)安全、信任舉措、云計算互操作性、寬帶部署、在線服務(wù)、公共行業(yè)首先參與云計算和國際對話與合作等。目前歐盟已成立6個戰(zhàn)略實施工作小組,具體涉及云標準協(xié)調(diào)、服務(wù)標準協(xié)議、認證計劃、行為守則、專家研究小組和云伙伴關(guān)系。
·高性能計算戰(zhàn)略
在歐盟第七框架計劃和“地平線2020”計劃下的研究和創(chuàng)新支持可擴展的高性能計算系統(tǒng)。小型“數(shù)據(jù)中心式開箱”可以單獨部署或集中在嵌入式系統(tǒng)在汽車或電話交換機,或者可以在大規(guī)模地聚集成為一個云服務(wù)器——如處理單元(GPU)或者高性能計算(HPC)系統(tǒng)。
·科學知識開放獲取
科學知識開放獲取的目標是提高歐盟層面和成員國層面政府資助的科學研究的影響力,2012-2013年,歐盟委員會投入4500萬歐元建設(shè)支持開放共享和科學信息長期保存的基礎(chǔ)設(shè)施,并與各個相關(guān)利益團體就開放共享和數(shù)字信息保存工作進行對話,同時建議各成員國:制定本國的公共資助科研論文開放共享政策,探索科學數(shù)據(jù)開放共享和科學信息長期保存,支持相應(yīng)的基礎(chǔ)設(shè)施建設(shè)。2012年7月17日,歐盟委員會發(fā)布開放共享政策,宣布歐盟Horizon2020計劃所資助科研論文全部實行開放共享。2013年12月25日,歐盟委員會宣布啟動試點,開放公共資助研究數(shù)據(jù),2014-2015年,參與開放研究數(shù)據(jù)試點的關(guān)鍵領(lǐng)域的項目將獲得約30億歐元的經(jīng)費。
(2)資助“大數(shù)據(jù)”和“開放數(shù)據(jù)”領(lǐng)域的研究和創(chuàng)新活動
歐盟委員會在資助“大數(shù)據(jù)”和“開放數(shù)據(jù)”領(lǐng)域的研究和創(chuàng)新活動外,還啟動“連接歐洲設(shè)施”(CEF)計劃,采取權(quán)益和債務(wù)證券及補助相結(jié)合的形式促進數(shù)字基礎(chǔ)設(shè)施的建設(shè)。在2014年1月的信息和網(wǎng)絡(luò)日上,歐盟委員會確定了“地平線2020”連接歐洲設(shè)施計劃的2014-2015年工作內(nèi)容。
(3)實施開放數(shù)據(jù)政策
開放數(shù)據(jù)政策一方面制定公共信息再利用的法規(guī)和國家執(zhí)行規(guī)則以及歐盟委員會自身數(shù)據(jù)再利用規(guī)則;另一方面支持公共部門信息開放活動,此外還搭建開放數(shù)據(jù)平臺。
(4)促進公共資助科研實驗成果和數(shù)據(jù)的使用及再利用
促進公共資助科研試驗成果和數(shù)據(jù)的使用和再使用也稱科學知識開放獲取。
2.2亞洲大數(shù)據(jù)的發(fā)展
整體來說,相比歐洲,亞洲大數(shù)據(jù)發(fā)展相對落后,在大數(shù)據(jù)發(fā)展過程中,更多的還是探索及學習階段。目前,亞洲的很多大數(shù)據(jù)公司都在海外市場進行了相關(guān)市場探索。未來,亞洲市場將有望成為大數(shù)據(jù)業(yè)務(wù)的主戰(zhàn)場,因為世界總?cè)丝诘?0%都居住在亞洲,且亞洲上網(wǎng)人數(shù)在不斷上升。
3 全球大數(shù)據(jù)的市場與應(yīng)用
3.1 全球大數(shù)據(jù)交易現(xiàn)狀
對于海量并且瞬息萬變的大數(shù)據(jù)來說,存儲已然不是最終目標,如何從數(shù)據(jù)中獲得包括商業(yè)價值在內(nèi)的紅利,才是其真正的意義所在。全球各個行業(yè)的數(shù)據(jù)存儲量,每年都在以50%多的速度暴增。由于缺乏規(guī)范的數(shù)據(jù)共享和交易渠道,不同行業(yè)間很難形成數(shù)據(jù)互利共享,數(shù)據(jù)交易平臺乃至交易所也就成為了迫切需求。
美國Factual公司成立于2008年,不僅向大公司提供數(shù)據(jù),同時也面向規(guī)模較小的軟件開發(fā)商,每一條信息都有17到40條的相關(guān)描述。按浮動價格向公司和獨立軟件開發(fā)商出售數(shù)據(jù),小規(guī)模的數(shù)據(jù)提供是免費的,大型客戶需要支付的費用則會達到成百上千萬美元。包括Facebook、CitySearch、AT&T及其他一些公司都會使用Factual來獲取相關(guān)信息。
2013年4月,富士通公司也宣布建立自己的“大數(shù)據(jù)”交易市場“Dataplaza”,并將交易中介服務(wù)培育為主力業(yè)務(wù)之一,計劃在2016年之前將參與企業(yè)增加至千家左右。
對于數(shù)據(jù)安全方面的問題,大數(shù)據(jù)交易平臺也已經(jīng)有所準備。通過數(shù)據(jù)脫敏技術(shù),對數(shù)據(jù)源的屬性進行描述和標注,如果涉及到敏感數(shù)據(jù)的調(diào)用,將進行實時的數(shù)據(jù)清洗、技術(shù)屏蔽、審核處理,最終提供給需求方的數(shù)據(jù)也將在完成安全測試之后,再行提供。即使調(diào)用成功,也會在使用次數(shù)用盡或使用期限到期之后,對權(quán)限進行收回。這一系列流程,不僅避免了用戶敏感數(shù)據(jù)的流出,也照顧到了開發(fā)者在線交易的便捷性。
3.2 全球大數(shù)據(jù)市場規(guī)模
近兩年來,大數(shù)據(jù)發(fā)展浪潮席卷全球。隨著社會的進步和信息通信技術(shù)的發(fā)展,信息系統(tǒng)在各行業(yè)、各領(lǐng)域快速拓展。這些系統(tǒng)采集、處理、積累的數(shù)據(jù)越來越多,數(shù)據(jù)量增速越來越快,以至用“海量、爆炸性增長”等詞匯已無法形容數(shù)據(jù)的增長速度。
2014年,全球大數(shù)據(jù)市場規(guī)模達到約285億美元,實現(xiàn)53.23%的增長,比2013年57.63%的增速略有回落,但快速增長態(tài)勢不變,且呈現(xiàn)出應(yīng)用成為新增長動力、競爭態(tài)勢愈加激烈、融資并購成為市場熱點、產(chǎn)業(yè)生態(tài)不斷優(yōu)化和基礎(chǔ)設(shè)施建設(shè)更加合理等特點。
2015年,全球大數(shù)據(jù)總體加速發(fā)展趨勢不變,全球大數(shù)據(jù)市場規(guī)模將達到421億美元,預(yù)計2020年全球大數(shù)據(jù)市場規(guī)模將達到1263.21億美元,同比增長17.51%。
大數(shù)據(jù)成為全球IT支出新的增長點。數(shù)據(jù)顯示,2014年數(shù)據(jù)中心系統(tǒng)支出達1430億美元,比2013年增長2.30%。預(yù)計2015年大企業(yè)對與大數(shù)據(jù)有關(guān)的項目的平均開支將達到1800萬美元,目前,70%的大企業(yè)和56%的中小企業(yè)已經(jīng)部署或者正在計劃部署與大數(shù)據(jù)有關(guān)的項目和計劃。
3.3 全球大數(shù)據(jù)市場結(jié)構(gòu)及應(yīng)用領(lǐng)域
2014年,全球大數(shù)據(jù)市場結(jié)構(gòu)從壟斷競爭向完全競爭格局演化。企業(yè)數(shù)量迅速增多,產(chǎn)品和服務(wù)的差異度增大,技術(shù)門檻逐步降低,市場競爭越發(fā)激烈。
全球大數(shù)據(jù)市場中,行業(yè)解決方案、計算分析服務(wù)、存儲服務(wù)、數(shù)據(jù)庫服務(wù)和大數(shù)據(jù)應(yīng)用為市場份額排名最靠前的細分市場,分別占據(jù)35.40%、17.30%、14.70%、12.50%和7.90%的市場份額。云服務(wù)的市場份額為6.30%,基礎(chǔ)軟件占據(jù)3.90%的市場份額,網(wǎng)絡(luò)服務(wù)僅占據(jù)了2.00%的市場份額。
4 全球主要大數(shù)據(jù)公司介紹
目前全球大數(shù)據(jù)企業(yè)主要分為兩大陣營。一部分屬于單純以大數(shù)據(jù)技術(shù)為核心的創(chuàng)新型公司,希望為市場帶來創(chuàng)新方案并推動技術(shù)發(fā)展。另有一些則是以數(shù)據(jù)庫/數(shù)據(jù)倉儲業(yè)務(wù)為主的知名公司,利用自身資源與技術(shù)優(yōu)勢地位沖擊大數(shù)據(jù)領(lǐng)域。
(1)IBM
IBM(國際商業(yè)機器公司),總公司在紐約州阿蒙克市,1911年托馬斯·沃森創(chuàng)立于美國,是全球最大的信息技術(shù)和業(yè)務(wù)解決方案公司。根據(jù)Wikibon發(fā)布的報告,作為2013年大數(shù)據(jù)業(yè)務(wù)營收成績最好的公司,IBM2013年從大數(shù)據(jù)相關(guān)產(chǎn)品及服務(wù)中獲得了13.68億美元收益。其具體產(chǎn)品包括服務(wù)器與存儲硬件、數(shù)據(jù)庫軟件、分析應(yīng)用程序以及相關(guān)服務(wù)等。在IBM圍繞大數(shù)據(jù)開發(fā)出的產(chǎn)品中,DB2、Informix與InfoSphere數(shù)據(jù)庫平臺、Cognos與SPSS分析應(yīng)用可謂最為知名。IBM同時也為Hadoop開源數(shù)據(jù)分析平臺提供支持。
IBM定位于商業(yè)智能分析軟件,致力于為大型企業(yè)提供數(shù)據(jù)庫平臺和分析服務(wù)。因此IBM對于大型企業(yè)內(nèi)部數(shù)據(jù)具有深厚的積累和洞見。企業(yè)內(nèi)部數(shù)據(jù)價值之一在于通過分析企業(yè)內(nèi)部數(shù)據(jù),提高生產(chǎn)運營和管理效率。尤其是規(guī)模較大的大型集團,急需從過去的數(shù)據(jù)中尋找到規(guī)律,并進行預(yù)測。IBM的商業(yè)分析軟件正是滿足了這些企業(yè)的需求,也是IBM數(shù)據(jù)價值
所在。與初創(chuàng)型公司相比,IBM對的另一優(yōu)勢在于提供多個行業(yè)的解決方案,對于各行業(yè)的數(shù)據(jù)理解更為深刻。
(2)惠普公司
惠普總部位于美國加利福尼亞州的帕羅奧多,是一家全球性的資訊科技公司。惠普在2013年獲得的大數(shù)據(jù)營收總值為8.69億美元。這家供應(yīng)商還提供與之相關(guān)的硬件、軟件以及服務(wù),其最為知名的方案當數(shù)Vertica分析平臺。惠普的大數(shù)據(jù)解決方案包含策略、設(shè)計、實施、保護和合規(guī)性方案。
惠普的大數(shù)據(jù)服務(wù)主要包括大數(shù)據(jù)分析工具產(chǎn)品以及大數(shù)據(jù)解決方案。大數(shù)據(jù)分析工具可以幫助企業(yè)了解大數(shù)據(jù)分析的模式以及對現(xiàn)有數(shù)據(jù)進行更好的利用;解決方案主要包括數(shù)據(jù)保護、信息存檔、信息管理以及Haven大數(shù)據(jù)平臺,其中Haven可充分利用所有結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)進行決策和解決問題。Haven既可在內(nèi)部部署,也可在云中部署,以較快的速度和規(guī)模提供大數(shù)據(jù)分析和下一代應(yīng)用,同時,也對社區(qū)資源加以利用。
(3)Splunk公司
Splunk是大數(shù)據(jù)處理領(lǐng)域第一家上市公司,公司成立于2003年,是第一家大數(shù)據(jù)處理的上市公司,于2012年4月19日在納斯達克成功上市,并在首個交易日以109%的漲幅撐開了人們對大數(shù)據(jù)的想象空間。作為一家商業(yè)智能軟件提供商,其軟件平臺可以實時對任何APP、服務(wù)器或網(wǎng)絡(luò)設(shè)備的機器數(shù)據(jù)進行索引、監(jiān)控與分析,并將結(jié)果生成圖形化報表,在此基礎(chǔ)上幫助客戶避免服務(wù)性能降低或中斷。Splunk從2011年起,毛利率高達80%以上。2013年該公司營收總額為2.83億美元。
Splunk專注于商業(yè)智能軟件,除了積累企業(yè)服務(wù)器和網(wǎng)絡(luò)上的數(shù)據(jù),在數(shù)據(jù)可視化領(lǐng)域也具備技術(shù)優(yōu)勢。Splunk展開全球化策略后開拓了多個行業(yè)的客戶,也積累了一定的企業(yè)數(shù)據(jù)。相對于IBM這一類的巨頭,Splunk的積累仍處于起步階段。而可視化分析技術(shù)、數(shù)據(jù)挖掘技術(shù)可能為Splunk帶來數(shù)據(jù)應(yīng)用的機遇。
(4)戴爾公司
戴爾是一家總部位于美國德克薩斯州朗德羅克的世界五百強企業(yè),由邁克爾·戴爾于1984年創(chuàng)立。戴爾以生產(chǎn)、設(shè)計、銷售家用以及辦公室電腦而聞名,不過它同時也涉足高端電腦市場,生產(chǎn)與銷售服務(wù)器、數(shù)據(jù)儲存設(shè)備、網(wǎng)絡(luò)設(shè)備等。
DELL的大數(shù)據(jù)解決方案主要定位是對存儲基礎(chǔ)架構(gòu)應(yīng)需而變的要求,基于戴爾流動數(shù)據(jù)體系架構(gòu)的存儲解決方案,為客戶提供智能的端對端數(shù)據(jù)管理,重新定義數(shù)據(jù)經(jīng)濟:數(shù)據(jù)庫優(yōu)化解決方案,幫助國內(nèi)企業(yè)更加輕松地利用領(lǐng)先的數(shù)據(jù)庫開發(fā)與管理解決方案深耕細作,提升個人和開發(fā)團隊的工作效率;Toad,大幅提升數(shù)據(jù)庫管理效率,并實現(xiàn)數(shù)據(jù)庫開發(fā)和管理自動化;服務(wù)器端緩存解決方案,大幅加快應(yīng)用響應(yīng)速度、加強數(shù)據(jù)中心技術(shù)之間聯(lián)系并簡化IT運營,重新劃定IT邊界;存儲虛擬化解決方案,打造全方位數(shù)據(jù)存儲解決方案,高效實現(xiàn)容量擴展、文件交互共享,數(shù)據(jù)安全備份保護,迎接大數(shù)據(jù)時代;SharePlex,利用強大的復(fù)制和集成功能,確保數(shù)據(jù)庫的高可用性。
(5)Opower公司
Opower創(chuàng)立于2009年,是一家家庭能源數(shù)據(jù)分析公司,產(chǎn)品專注于能源軟件和數(shù)據(jù)。公司讓大數(shù)據(jù)變成有效營銷手段,以幫助電力公司向它的客戶推廣綠色能源。同時,Opower還可主動幫助客戶管理能源使用量。與來自8個國家的93個電氣公司合作,并幫助數(shù)千萬個家庭減少能源消費上的支出。
Opower最大的積累在于能耗數(shù)據(jù)。消費者用電量特征、電器能耗規(guī)律,這些數(shù)據(jù)可以服務(wù)多個群體:電力公司、家庭用戶,未來還可能服務(wù)工業(yè)用戶。能源大數(shù)據(jù)行業(yè)的進入壁壘在于技術(shù),Opower是全球領(lǐng)先的能源大數(shù)據(jù)公司,無論是數(shù)據(jù)積累還是大數(shù)據(jù)分析技術(shù),都將為能源行業(yè)帶來很大的應(yīng)用價值。
(6)Teradata公司
Teradata天睿公司,是美國前十大上市軟件公司之一。經(jīng)過逾30年的發(fā)展,Teradata天睿公司已經(jīng)成為全球最大的專注于大數(shù)據(jù)分析、數(shù)據(jù)倉庫和整合營銷管理解決方案的供應(yīng)商。Teradata憑借自家硬件平臺、數(shù)據(jù)庫以及分析軟件而聲名遠播。它同時針對零售及運輸行業(yè)推出了專門的分析工具。目前,Teradata天睿公司大中華區(qū)設(shè)有8個分支機構(gòu),逾1200名員工,涵蓋市場、研發(fā)、技術(shù)和解決方案推廣、銷售、咨詢服務(wù)、售后技術(shù)支持,以及在大連的全球咨詢中心等業(yè)務(wù)。
主營產(chǎn)品包含:企業(yè)級數(shù)據(jù)倉庫;動態(tài)數(shù)據(jù)倉庫、動態(tài)企業(yè)智能。主要的軟硬件產(chǎn)品包括:Teradata數(shù)據(jù)庫軟件;Teradata專用平臺系列;Teradata邏輯數(shù)據(jù)模型和Teradata分析應(yīng)用程序和服務(wù)。主要的服務(wù)包括,Teradata專業(yè)顧問服務(wù);Teradata客戶支持服務(wù)和培訓(xùn)服務(wù)。提供應(yīng)用的領(lǐng)域涉及商業(yè)和儲蓄銀行、通信運營商、航空公司、旅游及交通、零售商、醫(yī)療保健供應(yīng)商、制造業(yè)。
(7)Oracle公司
甲骨文總部位于美國加利福尼亞州的紅木灘。1989年正式進入中國市場。目前甲骨文已超越IBM,成為繼Microsoft后全球第二大軟件公司。甲骨文一直以其冠絕群雄的數(shù)據(jù)庫產(chǎn)品聞名,但事實上他們也是大數(shù)據(jù)領(lǐng)域的主要競逐者之一。
甲骨文大數(shù)據(jù)設(shè)備將英特爾服務(wù)器、ClouderaHadoop發(fā)行版以及甲骨文的NoSQL數(shù)據(jù)庫結(jié)合到了一起。Oracle大數(shù)據(jù)機與OracleExalogic中間件云服務(wù)器、OracleExadata數(shù)據(jù)庫云服務(wù)器以及OracleExalytics商務(wù)智能云服務(wù)器一起組成了Oracle最廣泛、高度集成化系統(tǒng)產(chǎn)品組合,為企業(yè)提供了一個端到端的大數(shù)據(jù)解決方案。Oracle提供了大數(shù)據(jù)軟硬一體優(yōu)化集成解決方案,其行業(yè)解決方案包括移動應(yīng)用用戶行為統(tǒng)計分析、基于日志和訪問內(nèi)容的用戶畫像、機頂盒用戶使用習慣和精準營銷、語義分析和搜索引擎實時處理、海量指紋識別以及人臉識別查詢系統(tǒng)、分布式大數(shù)據(jù)存儲和管理系統(tǒng)、海量歷史數(shù)據(jù)分析平臺、基于互聯(lián)網(wǎng)的輿情監(jiān)控系統(tǒng)等。
(8)微軟公司
微軟是一家總部位于美國的跨國電腦科技公司,由比爾·蓋茨與保羅·艾倫創(chuàng)辦于1975年,公司總部設(shè)立在華盛頓州的雷德蒙德市。以研發(fā)、制造、授權(quán)和提供廣泛的電腦軟件服務(wù)業(yè)務(wù)為主。微軟的大數(shù)據(jù)發(fā)展戰(zhàn)略可謂雄心勃勃,包括與Hortonworks建立合作關(guān)系、建立一家大數(shù)據(jù)新興企業(yè)以及推出基于Hortonworks數(shù)據(jù)平臺的HDInsights工具,微軟的SQLServer數(shù)據(jù)庫也頗具知名度。
微軟大數(shù)據(jù)方案--整合Hadoop和客戶的核心數(shù)據(jù)庫,并借助日常使用的辦公工具通過豐富的3D數(shù)據(jù)可視化技術(shù)將非結(jié)構(gòu)化數(shù)據(jù)和結(jié)構(gòu)化數(shù)據(jù)帶入現(xiàn)實。借助Microsoft的大數(shù)據(jù)解決方案,客戶可以使用用于SQLServer的相同技術(shù)部署一個Hadoop群集,并在數(shù)分鐘內(nèi)做好查詢與合并關(guān)系型和非關(guān)系型數(shù)據(jù)的準備。
(9)亞馬遜公司
亞馬遜是美國最大的一家網(wǎng)絡(luò)電子商務(wù)公司,位于華盛頓州的西雅圖。是網(wǎng)絡(luò)上最早開始經(jīng)營電子商務(wù)的公司之一,成立初期專注書籍銷售業(yè)務(wù),現(xiàn)在銷售范圍已相當廣泛,成為
全球商品品種最多的網(wǎng)上零售商和全球第二大互聯(lián)網(wǎng)企業(yè)。Amazon向來以企業(yè)云平臺聞名于世,但同時也推出過一系列大數(shù)據(jù)產(chǎn)品,其中包括基于Hadoop的ElasticMapReduce、DynamoDB大數(shù)據(jù)數(shù)據(jù)庫以及能夠與AmazonWebServices順利協(xié)作的Redshift規(guī)?;⑿袛?shù)據(jù)倉儲方案。
在亞馬遜近二十年的歷史中,自建物流不但是其發(fā)展過程中的關(guān)鍵環(huán)節(jié),同時也與大數(shù)據(jù)挖掘結(jié)合在一起,幫助亞馬遜在營銷方面實現(xiàn)更大的價值。由亞馬遜強大技術(shù)支持的智能物流系統(tǒng)是其價值鏈擴張的重要部分,使其在整條產(chǎn)業(yè)鏈上建立競爭優(yōu)勢。首先,亞馬遜經(jīng)由以云計算為依托的電商開放平臺,通過客戶數(shù)據(jù)收集、目標客戶甄選、營銷組合設(shè)計和營銷信息推送四個步驟來實現(xiàn)精準營銷。整個過程的核心在于對目標客戶的準確定位,從而在分析客戶偏好的基礎(chǔ)上有針對性地發(fā)布營銷信息。其次,有了數(shù)據(jù)分析系統(tǒng)的支撐,智能物流也得以發(fā)展。對于亞馬遜這樣一家秉承“客戶至上”的企業(yè)來說,其智能物流方面的創(chuàng)新是其他電商企業(yè)難以企及的物流的精準實現(xiàn)了更高層次的消費者體驗滿足。
(10)Google公司
谷歌是一家美國的跨國科技企業(yè),致力于互聯(lián)網(wǎng)搜索、云計算、廣告技術(shù)等領(lǐng)域,開發(fā)并提供大量基于互聯(lián)網(wǎng)的產(chǎn)品與服務(wù)。Google是第一個被公認為全球最大的搜索引擎,在全球范圍內(nèi)擁有無數(shù)的用戶谷歌公司推出的大數(shù)據(jù)產(chǎn)品包括BigQuery—一款基于云的大數(shù)據(jù)分析平臺。
谷歌通過搜索引擎積累大量的用戶搜索數(shù)據(jù),又通過三項開創(chuàng)性的大數(shù)據(jù)技術(shù)打造開源的大數(shù)據(jù)平臺,最終實現(xiàn)谷歌閉合的大數(shù)據(jù)生態(tài)圈。公司幾乎積累了互聯(lián)網(wǎng)各個環(huán)節(jié)的數(shù)據(jù),具有其他廠商不可替代的優(yōu)勢。這些數(shù)據(jù)通過廣告轉(zhuǎn)化成谷歌的銷售收入,也為企業(yè)實現(xiàn)了精準營銷的價值。
(11)SAP公司
SAP公司(紐交所代碼:SAP)成立于1972年,總部位于德國沃爾多夫市,擁有覆蓋全球的合作伙伴網(wǎng)絡(luò)。作為全球領(lǐng)先的企業(yè)管理軟件解決方案提供商,SAP幫助各行業(yè)不同規(guī)模的企業(yè)實現(xiàn)卓越運營。
SAP大數(shù)據(jù)解決方案已深入社會多個領(lǐng)域。目前提供的主要大數(shù)據(jù)類型及市場價值有:政府大數(shù)據(jù),降低政府基金的浪費和管理風險;醫(yī)療大數(shù)據(jù),甑別出帶有癌癥DNA需要治療
的病人,通過模型分析提升醫(yī)療診斷的效率;市場營銷,預(yù)測客戶購買意愿,降低開銷;利用自身存儲的數(shù)據(jù)倉庫,洞察客戶信號;分析客戶行為發(fā)現(xiàn)優(yōu)質(zhì)客戶,通過發(fā)掘合適的目標客戶提升投資回報率;更好的開辟新市場和新產(chǎn)品;預(yù)測潛在的設(shè)備質(zhì)量狀況;體育賽事分析,高度并發(fā),根據(jù)客戶需求高度自由的數(shù)據(jù)互動;電子商務(wù),通過分析模型預(yù)測進行推送,使網(wǎng)頁訪問量提升30%,跳轉(zhuǎn)訪問推送產(chǎn)品訪問量提升500%。
(12)EMC公司
易安信為一家美國信息存儲資訊科技公司,主要業(yè)務(wù)為信息存儲及管理產(chǎn)品、服務(wù)和解決方案。EMC公司創(chuàng)建于1979年,總部在馬薩諸塞州霍普金頓市。EMC一方面幫助客戶保存并分析大數(shù)據(jù),另外也充當著大數(shù)據(jù)分析智囊“營銷科學實驗室”的所在地——這家實驗室專門分析營銷類數(shù)據(jù)。EMC推出的最新爆炸性消息是與VMware及通用電氣一道支持Pivotal公司。Pivotal將對Hadoop與EMC的Greenplum數(shù)據(jù)庫與HAWQ查詢工具進行整合。EMC的主要產(chǎn)品為企業(yè)級服務(wù)器存儲硬件和軟件,以及與存儲相關(guān)的網(wǎng)絡(luò)產(chǎn)品。
5 大數(shù)據(jù)發(fā)展趨勢
(1)成為重要戰(zhàn)略資源
在未來一段時間內(nèi),大數(shù)據(jù)將成為企業(yè)、社會和國家層面重要的戰(zhàn)略資源。大數(shù)據(jù)將不斷成為各類機構(gòu),尤其是企業(yè)的重要資產(chǎn),成為提升機構(gòu)和公司競爭力的有力武器。企業(yè)將更加鐘情于用戶數(shù)據(jù),充分利用客戶與其在線產(chǎn)品或服務(wù)交互產(chǎn)生的數(shù)據(jù),并從中獲取價值。此外,在市場影響方面,大數(shù)據(jù)也將扮演重要角色——影響著廣告、產(chǎn)品推銷和消費者行為。
(2)數(shù)據(jù)隱私標準將出臺
大數(shù)據(jù)將面臨隱私保護的重大挑戰(zhàn),現(xiàn)有的隱私保護法規(guī)和技術(shù)手段難以適應(yīng)大數(shù)據(jù)環(huán)境,個人隱私越來越難以保護,有可能會出現(xiàn)有償隱私服務(wù),數(shù)據(jù)“面罩”將會流行。預(yù)計各國都將會有一系列關(guān)于數(shù)據(jù)隱私的標準和條例出臺。
(3)與云計算深度融合
大數(shù)據(jù)處理離不開云計算技術(shù),云計算為大數(shù)據(jù)提供彈性可擴展的基礎(chǔ)設(shè)施支撐環(huán)境以及數(shù)據(jù)服務(wù)的高效模式,大數(shù)據(jù)則為云計算提供了新的商業(yè)價值。總體而言,云計算、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)等新興計算形態(tài),既是產(chǎn)生大數(shù)據(jù)的地方,也是需要大數(shù)據(jù)分析方法的領(lǐng)域。
(4)分析方法發(fā)生變革
大數(shù)據(jù)分析將出現(xiàn)一系列重大變革。就像計算機和互聯(lián)網(wǎng)一樣,大數(shù)據(jù)可能是新一波的技術(shù)革命。基于大數(shù)據(jù)的數(shù)據(jù)挖掘、機器學習和人工智能可能會改變小數(shù)據(jù)里的很多算法和基礎(chǔ)理論,這方面很可能會產(chǎn)生理論級別的突破。
(5)網(wǎng)絡(luò)安全問題凸顯
大數(shù)據(jù)的安全令人擔憂,大數(shù)據(jù)的保護越來越重要。大數(shù)據(jù)的不斷增加,對數(shù)據(jù)存儲的物理安全性要求會越來越高,從而對數(shù)據(jù)的多副本與容災(zāi)機制提出更高的要求。網(wǎng)絡(luò)和數(shù)字化生活使得犯罪分子更容易獲得關(guān)于人的信息,也有了更多不易被追蹤和防范的犯罪手段,可能會出現(xiàn)更高明的騙局。
(6)以數(shù)據(jù)為中心的解決方案與應(yīng)用的興起
世界已經(jīng)不再將應(yīng)用作為獨有的優(yōu)勢,相反,數(shù)據(jù)則能夠帶來在B2B和B2C領(lǐng)域內(nèi)確立獨特優(yōu)勢的關(guān)鍵點。在數(shù)據(jù)管理中,以數(shù)據(jù)為中心的模式將會取代傳統(tǒng)以應(yīng)用為中心的模式。