數(shù)據(jù)之王:Dataminr如何利用數(shù)十億條公共推文監(jiān)控整個(gè)世界

責(zé)任編輯:editor004

2017-03-07 11:39:42

摘自:E安全

利用獨(dú)特的數(shù)據(jù)科學(xué)方法,Dataminr正在推動(dòng)行業(yè)轉(zhuǎn)型并協(xié)助政府機(jī)構(gòu)。而隨著物聯(lián)網(wǎng)技術(shù)正逐漸以勢不可擋的姿態(tài)快速滲透整個(gè)世界,彼得·貝利表示這一技術(shù)很可能將在公司的未來發(fā)展中扮演關(guān)鍵性角色。

數(shù)據(jù)之王:Dataminr如何利用數(shù)十億條公共推文監(jiān)控整個(gè)世界-E安全

利用獨(dú)特的數(shù)據(jù)科學(xué)方法,Dataminr正在推動(dòng)行業(yè)轉(zhuǎn)型并協(xié)助政府機(jī)構(gòu)。

3月7日訊 如果信息就是力量,那么Dataminr無疑擁有著至高無上的力量。通過實(shí)時(shí)訪問每一條公開發(fā)布的推文,這家總部位于美國的企業(yè)能夠在真正緊急的情況之下為客戶提供實(shí)時(shí)突發(fā)性新聞警報(bào)——從恐怖襲擊到校園槍擊再到金融崩潰無所不包。

Dataminr公司首席戰(zhàn)略官(簡稱CSO)彼得·貝利在接受國外媒體采訪時(shí)表示,“在考量社交媒體的出現(xiàn)及其對于整個(gè)世界的意義時(shí),答案無疑是其徹底改變了人們之間溝通以及發(fā)布消息的方式。”通常在紐約工作的彼得·貝利此次前往英國倫敦是為了參加3月1日召開的IBTimes/Newsweek AI與數(shù)據(jù)科學(xué)大會。而在大會之外,彼得·貝利亦分享了該公司對于數(shù)據(jù)科學(xué)方法以及未來發(fā)展的見解。

他在主題演講之后的說明中表示,“我們身處實(shí)時(shí)信息業(yè)務(wù)領(lǐng)域之內(nèi)。這一行業(yè)的核心在于探討如何表達(dá)并檢測這些信息,并將其進(jìn)行轉(zhuǎn)換以交付給專家、運(yùn)營商以及其他能夠借此實(shí)現(xiàn)關(guān)鍵性功能的各方。”

為了更為明確地解釋該公司的運(yùn)營覆蓋范圍,他表示Dataminr每天需要提取5億到10億條公眾推文。其與該社交媒體平臺擁有密切聯(lián)系(Twitter持有Dataminr公司約5%的股權(quán)),而彼得·貝利表示正是這一點(diǎn)令該公司得以脫穎而出——至少就目前而言是如此。

他解釋稱,“我們使用大量不同的數(shù)據(jù)集,但Twitter在其中扮演著不可或缺的角色,因?yàn)槲覀兊暮诵挠美徽且訲witter為基礎(chǔ)告知世界我們觀察到的狀況。”

“在著眼于全球社交媒體用戶這一龐大社區(qū)時(shí),信息確實(shí)可能首先出現(xiàn)在Facebook或者YouTube乃至其它平臺之上。但只要信息內(nèi)容確實(shí)能夠引發(fā)關(guān)注,那么其幾乎將即時(shí)出現(xiàn)在Twitter當(dāng)中。”

“Twitter真的可算作是龐大的真實(shí)世界的直接代表。”  

數(shù)據(jù)之王:Dataminr如何利用數(shù)十億條公共推文監(jiān)控整個(gè)世界-E安全

Dataminr成立于2009年,總部位于紐約,為政府部門和金融行業(yè)提供信息.

彼得·貝利解釋稱,該公司的客戶主要分為四大類:金融、政府、大型企業(yè)以及媒體。Dataminr公司負(fù)責(zé)為這些客戶打開Twitter世界的廈門并提供緊急警報(bào)以幫助其搶在新聞發(fā)布之前作出行動(dòng)。

他表示,“我們所做的大部分工作在于告知專業(yè)投資人士以及交易者關(guān)于可能對市場狀況產(chǎn)生影響的各類事件的發(fā)生。”他同時(shí)補(bǔ)充稱,這可能意味著“任何意想不到但卻會給行業(yè)、市場或者證券產(chǎn)生影響的因素。”

他進(jìn)一步指出,“我們還在向那些在全球范圍內(nèi)擁有業(yè)務(wù)的企業(yè)提供服務(wù)。大家可以設(shè)想一家大型能源或者零售企業(yè),其擁有一整套極為復(fù)雜的供應(yīng)鏈、數(shù)千家商店、基礎(chǔ)設(shè)施以及業(yè)務(wù)通道,這一切不同類型的對象都需要加以監(jiān)控。”

“而我們同時(shí)亦面向新聞媒體。我們擁有超過1萬2千名記者客戶使用我們的產(chǎn)品,這是一項(xiàng)令人非常興奮的成就。我們警報(bào)功能的出色之處,在于其能夠真正解讀一條推文背后的意義。我們會實(shí)時(shí)發(fā)現(xiàn)某位學(xué)生發(fā)出的‘我的天,有個(gè)帶槍的人闖進(jìn)來了’這類推文,因此記者在收到通知后會很快意識到‘發(fā)生了校園槍擊事件’。”

作為一家建立于2009年的企業(yè),Dataminr公司在紐約市、華盛頓特區(qū)、倫敦、西雅圖以及蒙大拿設(shè)有辦事處。與眾多數(shù)據(jù)挖掘公司一樣,據(jù)報(bào)道Dataminr也曾經(jīng)得到過中央情報(bào)局(簡稱CIA)旗下投資機(jī)構(gòu)In-Q-Tel的資助。

彼得·貝利指出,“在金融業(yè)務(wù)之外,我們還與包括政府機(jī)構(gòu)在內(nèi)的各公共部門開展合作。他們正在學(xué)習(xí)如何快速發(fā)現(xiàn)緊急事件并趕赴現(xiàn)場,從而努力管理并緩解由此引發(fā)的后果。因此,當(dāng)人們的生命財(cái)產(chǎn)面臨威脅時(shí),響應(yīng)人員越早開展行動(dòng),所起到的保護(hù)效果也就越好。”

去年10月,一家名為Geofeedia的公司激起了人們對于數(shù)據(jù)挖掘業(yè)務(wù)的關(guān)注——由于共涉嫌利用社交媒體數(shù)據(jù)支持政府監(jiān)控行為,Twitter公司根據(jù)內(nèi)部政策而決定取消其對數(shù)據(jù)的訪問能力。但Bailey強(qiáng)調(diào)稱,Dataminr公司的作法并非如此。

他解釋稱,“我們對于同政府以及安全客戶間的合作關(guān)系抱有熱情。我們贊賞Twitter公司所采取的對用戶加以保護(hù)的方式,我認(rèn)為社交網(wǎng)絡(luò)確實(shí)應(yīng)當(dāng)始終將用戶利益放在第一位。”

“這與我們的作法非常相似,而且我們已經(jīng)與Twitter方面保持了很長時(shí)間的合作關(guān)系。”

“Twitter方面很了解我們在做些什么,我們不會對用戶進(jìn)行監(jiān)視,而只是在發(fā)布各類警告性主題。因此,如果您需要了解‘自然災(zāi)害’方面的內(nèi)容,則可選擇‘自然災(zāi)害’選項(xiàng),我們即會發(fā)送與此主題相關(guān)的信息——但客戶并不能利用我們的產(chǎn)品實(shí)施任何監(jiān)控。”

數(shù)據(jù)挖掘無疑是個(gè)迷人的行業(yè),也是個(gè)必然存在大量競爭甚至是爆炸式對抗的行業(yè),因?yàn)楦鲝臉I(yè)企業(yè)都擁有著自己的獨(dú)特潛力。不過彼得·貝利認(rèn)為,他所在的公司完全有能力繼續(xù)在該領(lǐng)域扮演領(lǐng)導(dǎo)者。

他指出,“我們一直在引入全部推文消息,是的,包括所有公開發(fā)布的推文,并以實(shí)時(shí)方式將其交付至我們的后端。多年以來,我們一直在處理這些數(shù)據(jù)。我們已經(jīng)建立起一種非常獨(dú)特的數(shù)據(jù)科學(xué)體系。”

“隨著時(shí)間的推移以及資源的積累乃至數(shù)據(jù)訪問推進(jìn),其它企業(yè)也將能夠?qū)崿F(xiàn)同樣的能力。然而截至目前還沒有其它廠商做到這一點(diǎn),所以我們在數(shù)據(jù)挖掘能力方面仍具備優(yōu)勢。我們面臨的最大壓力在于如何將這種優(yōu)勢轉(zhuǎn)化為產(chǎn)品并成為行業(yè)中的領(lǐng)導(dǎo)者。”

彼得·貝利在接受國外媒體采訪時(shí)表示,Twitter是一類理想的信息來源。

數(shù)據(jù)之王:Dataminr如何利用數(shù)十億條公共推文監(jiān)控整個(gè)世界-E安全

而隨著物聯(lián)網(wǎng)技術(shù)正逐漸以勢不可擋的姿態(tài)快速滲透整個(gè)世界,彼得·貝利表示這一技術(shù)很可能將在公司的未來發(fā)展中扮演關(guān)鍵性角色。

他解釋稱,“如果大家將社交媒體的出現(xiàn)及其無比強(qiáng)大的能力視為一種信號,而我們的客戶則迫切需要利用這種信號,則可以肯定的是社交媒體正作為其它各類數(shù)據(jù)的前門存在——這些看似互無關(guān)聯(lián)的數(shù)據(jù)將能夠通過社交媒體聯(lián)系起來。”

他進(jìn)一步補(bǔ)充稱,“這里我以化工廠爆炸作為例子。一旦發(fā)生爆炸,那么天空中即會產(chǎn)生濃重的煙霧。人們目睹這樣的狀況,將其發(fā)送在推文當(dāng)中,而我們則快速意識到這一事故。”

“如果我們將這第一手消息遞交給負(fù)責(zé)管理并應(yīng)對此類狀況的工作人員處,則對方的第一反應(yīng)很可能是‘到底有哪些物質(zhì)散發(fā)到了大氣當(dāng)中?’社交媒體無法回答這個(gè)問題,但其它大數(shù)據(jù)集則能夠回答——具體包括天氣數(shù)據(jù)、衛(wèi)星數(shù)據(jù)、物聯(lián)網(wǎng)數(shù)據(jù)乃至其它同樣龐大且呈指數(shù)級增長的各類數(shù)據(jù)集。”

從這個(gè)角度來看,我們的未來將以數(shù)據(jù)為基礎(chǔ)。

鏈接已復(fù)制,快去分享吧

企業(yè)網(wǎng)版權(quán)所有?2010-2024 京ICP備09108050號-6京公網(wǎng)安備 11010502049343號