商業(yè)營(yíng)銷、政府管理、公共交通、社交網(wǎng)絡(luò)、醫(yī)療健康……都打上了“大數(shù)據(jù)”的深深烙印。大數(shù)據(jù)時(shí)代已然到來(lái),并以迅雷不及掩耳之勢(shì)顛覆著我們的傳統(tǒng)思維。什么是大數(shù)據(jù)?大數(shù)據(jù)能為我們帶來(lái)什么?本報(bào)為您科普一下“大數(shù)據(jù)”那些事兒。
什么是大數(shù)據(jù)?
最早提出“大數(shù)據(jù)”的是全球知名咨詢公司麥肯錫。麥肯錫在其研究報(bào)告中指出,“數(shù)據(jù)已經(jīng)滲透到每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域,逐漸成為重要的生產(chǎn)因素;而人們對(duì)于海量數(shù)據(jù)的運(yùn)用將預(yù)示著新一波生產(chǎn)率增長(zhǎng)和消費(fèi)者盈余浪潮的到來(lái)。”
大數(shù)據(jù)(Big data),又稱巨量資料,是指數(shù)據(jù)規(guī)模極其巨大,以致很難通過(guò)一般軟件工具加以擷取、管理、處理并整理成為有用資訊的海量數(shù)據(jù)。目前業(yè)界公認(rèn)大數(shù)據(jù)的特點(diǎn)有以下4個(gè)V:即Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價(jià)值)。
第一,數(shù)據(jù)體量巨大。大數(shù)據(jù)的起始計(jì)量單位至少是P(1000個(gè)T,1T=1000G)、E(100萬(wàn)個(gè)T)或Z(10億個(gè)T);第二,數(shù)據(jù)類型繁多。網(wǎng)絡(luò)日志、視頻、圖片、地理位置信息等等。第三,價(jià)值密度低,商業(yè)價(jià)值高。在數(shù)以萬(wàn)計(jì)的信息中,能用的可能僅僅有幾個(gè)。第四,處理速度快,要在秒級(jí)時(shí)間范圍內(nèi)出分析結(jié)果,時(shí)間太長(zhǎng)就失去價(jià)值了。速度要求是大數(shù)據(jù)處理技術(shù)和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)最大的區(qū)別。
大數(shù)據(jù)從何而來(lái)?
僅以互聯(lián)網(wǎng)為例,一天之中,互聯(lián)網(wǎng)產(chǎn)生的全部?jī)?nèi)容可以刻滿1.68億張DVD;發(fā)出的郵件有2940億封之多;發(fā)出的社區(qū)帖子達(dá)200萬(wàn)個(gè),相當(dāng)于《時(shí)代》雜志770年的文字量……
根據(jù)相關(guān)統(tǒng)計(jì),互聯(lián)網(wǎng)上的數(shù)據(jù)每年將增長(zhǎng)50%,每?jī)赡瓯銓⒎环?目前世界上90%以上的數(shù)據(jù)是最近幾年才產(chǎn)生的。全世界的工業(yè)設(shè)備、汽車、電表上有著無(wú)數(shù)的數(shù)碼傳感器,隨時(shí)測(cè)量和傳遞著有關(guān)位置、運(yùn)動(dòng)、震動(dòng)、溫度、濕度乃至空氣中化學(xué)物質(zhì)的變化,也產(chǎn)生了海量的數(shù)據(jù)信息。
物聯(lián)網(wǎng)、云計(jì)算、移動(dòng)互聯(lián)網(wǎng)、車聯(lián)網(wǎng)、手機(jī)、平板電腦、PC以及各種各樣的傳感器,無(wú)一不是大數(shù)據(jù)來(lái)源或者承載的方式。
大數(shù)據(jù)如何使用?
但是,巨量資料本身其實(shí)并無(wú)多大用處。我們一般講“大數(shù)據(jù)”的時(shí)候,指的是大數(shù)據(jù)的處理和分析,大數(shù)據(jù)經(jīng)過(guò)的處理分析過(guò)濾提取以及可視化后才變得“有用”。
大數(shù)據(jù)如何使用并沒(méi)有“模式”可言?,F(xiàn)在大數(shù)據(jù)的影響并不僅僅限于技術(shù)層面,它顛覆了傳統(tǒng)上我們看待世界的思維方法。海量的數(shù)據(jù)資源讓各領(lǐng)域開(kāi)始了量化,決策行為由過(guò)去更多憑借經(jīng)驗(yàn)和直覺(jué)做出,變成了基于數(shù)據(jù)分析做出。這就是“大數(shù)據(jù)思維”,一方面樣本來(lái)源從抽樣變成了“全部數(shù)據(jù)”樣本,另一方面是關(guān)注效率和趨勢(shì)而不是精確度,關(guān)注相關(guān)性而不是因果關(guān)系。
擁有大數(shù)據(jù)思維的人,可以將大數(shù)據(jù)的潛在價(jià)值轉(zhuǎn)化為實(shí)際利益。大數(shù)據(jù)的真正價(jià)值在于創(chuàng)造,在于填補(bǔ)無(wú)數(shù)個(gè)還未實(shí)現(xiàn)過(guò)的空白。
本稿件所含文字、圖片和音視頻資料,版權(quán)均屬齊魯晚報(bào)所有,任何媒體、網(wǎng)站或個(gè)人未經(jīng)授權(quán)不得轉(zhuǎn)載,違者將依法追究責(zé)任。