日前,在河北省計(jì)算機(jī)學(xué)會(huì)舉辦的“自主可控的網(wǎng)絡(luò)與信息安全研討會(huì)”上,國(guó)內(nèi)知名數(shù)據(jù)庫廠商達(dá)夢(mèng)數(shù)據(jù)庫有限公受邀參會(huì),達(dá)夢(mèng)公司董事長(zhǎng)馮玉才在會(huì)上提出了達(dá)夢(mèng)數(shù)據(jù)庫在大數(shù)據(jù)時(shí)代下的五大挑戰(zhàn)與對(duì)策。馮玉才表示,目前大數(shù)據(jù)面臨數(shù)據(jù)量巨大,傳統(tǒng)的IT架構(gòu)已無法適應(yīng)、數(shù)據(jù)類型復(fù)雜、信息安全等多項(xiàng)挑戰(zhàn),如何解決大數(shù)據(jù)存儲(chǔ)、性能瓶頸等問題,已成為擺在數(shù)據(jù)庫廠商面前一道嚴(yán)峻的考驗(yàn),而達(dá)夢(mèng)數(shù)據(jù)庫率先提出的大數(shù)據(jù)完整解決方案則可對(duì)上述問題進(jìn)行有效智能的架構(gòu)分析。
挑戰(zhàn)一:數(shù)據(jù)量巨大,傳統(tǒng)的IT架構(gòu)已經(jīng)無法適應(yīng)
據(jù)悉,目前互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)量達(dá)到了1000PB;在能源行業(yè),僅中國(guó)國(guó)家電網(wǎng)智能電表數(shù)據(jù)就達(dá)數(shù)十PB;在醫(yī)療行業(yè),一個(gè)大型城市的居民健康檔案一年可達(dá)5PB;氣象領(lǐng)域,氣象衛(wèi)星及天氣雷達(dá),每日可形成TB級(jí)觀測(cè)數(shù)據(jù)。據(jù)統(tǒng)計(jì),2013年中國(guó)產(chǎn)生的數(shù)據(jù)總量超過了0.8ZB,是2012年的兩倍。我們已經(jīng)進(jìn)入了信息爆炸的時(shí)代,數(shù)據(jù)量呈幾何級(jí)增長(zhǎng),各行業(yè)已經(jīng)進(jìn)入大數(shù)據(jù)時(shí)代。
數(shù)據(jù)量的巨大,直接導(dǎo)致了傳統(tǒng)的存儲(chǔ)設(shè)備難以適應(yīng),需要購置新的存儲(chǔ)設(shè)備,成本居高不下;由于數(shù)據(jù)量巨大也帶來了檢索、裝載、備份等性能上的問題,傳統(tǒng)的IT架構(gòu)已經(jīng)無法滿足時(shí)代需求。
挑戰(zhàn)二:數(shù)據(jù)類型復(fù)雜,如何實(shí)現(xiàn)數(shù)據(jù)價(jià)值最大化成難題
GPS數(shù)據(jù)、WEB文本、交易數(shù)據(jù)、呼叫數(shù)據(jù)、傳感器數(shù)據(jù)、海量音頻視頻……當(dāng)前結(jié)構(gòu)化數(shù)據(jù)只占5%,半結(jié)構(gòu)化數(shù)據(jù)占10%,非結(jié)構(gòu)化數(shù)據(jù)占85%,這些紛繁復(fù)雜的數(shù)據(jù)類型使得數(shù)據(jù)整合、管理、分析,實(shí)現(xiàn)數(shù)據(jù)價(jià)值最大化成為一大難題。
挑戰(zhàn)三:信息孤島,異構(gòu)系統(tǒng)數(shù)據(jù)難以共享
數(shù)據(jù)共享的過程中,由于數(shù)據(jù)庫系統(tǒng)之間存在硬件平臺(tái)、操作系統(tǒng)、網(wǎng)絡(luò)協(xié)議、數(shù)據(jù)庫類型、語義表示等多方面的差異,形成了一個(gè)個(gè)的“信息孤島”,嚴(yán)重阻礙了數(shù)據(jù)的共享和流通。如何實(shí)現(xiàn)異構(gòu)數(shù)據(jù)庫間的數(shù)據(jù)整合與共享成為亟待解決的問題。
挑戰(zhàn)四:傳統(tǒng)也許模式受到挑戰(zhàn)
隨著傳統(tǒng)行業(yè)逐步進(jìn)入大數(shù)據(jù)時(shí)代,電商化、社交化、智能化,數(shù)據(jù)挖掘需求日益突出,OLTP與OLAP業(yè)務(wù)交互發(fā)生,如何應(yīng)對(duì)OLTP與OLAP混合型負(fù)載?
挑戰(zhàn)五:信息安全問題
馮玉才認(rèn)為,信息安全是云計(jì)算資源共享的最大挑戰(zhàn)。云計(jì)算數(shù)據(jù)的處理和存儲(chǔ)都在云平臺(tái)上進(jìn)行,計(jì)算資源的擁有者與使用者相分離已成為云計(jì)算模式的固有特點(diǎn),由此而產(chǎn)生的用戶對(duì)自己數(shù)據(jù)的安全存儲(chǔ)和隱私性的擔(dān)憂是不可避免的。
達(dá)夢(mèng)大數(shù)據(jù)解決對(duì)策
馮玉才強(qiáng)調(diào)在大數(shù)據(jù)和云計(jì)算時(shí)代更應(yīng)堅(jiān)持自主創(chuàng)新,只有這樣才能抓住大數(shù)據(jù)和云計(jì)算帶來的機(jī)遇,打造能夠與國(guó)際數(shù)據(jù)庫巨頭相匹敵的,滿足時(shí)代需求和用戶需要的可用、好用、可信、可靠的新一代數(shù)據(jù)庫產(chǎn)品。達(dá)夢(mèng)公司針對(duì)分析領(lǐng)域TB/PB級(jí)海量數(shù)據(jù)、多核、高并發(fā)等特征需求,專門推出了達(dá)夢(mèng)大數(shù)據(jù)高性能分析組件(DMHPA)。DMHPA的設(shè)計(jì)融入了列存儲(chǔ)、智能索引、數(shù)據(jù)壓縮、MPP分布式存儲(chǔ)、MPP并行查詢、并行裝載等專為海量數(shù)據(jù)分析的頂尖技術(shù)。這些技術(shù)分別從IO效率、CPU 緩存效率、表達(dá)式計(jì)算及高性能并行計(jì)算等方面提升系統(tǒng)性能,為用戶在通用硬件上構(gòu)建海量數(shù)據(jù)分析平臺(tái)提供了一個(gè)高性能、低成本的解決方案。用戶可以根據(jù)需求,在達(dá)夢(mèng)數(shù)據(jù)庫管理系統(tǒng)DM7上面安裝該組件,使DM7成為穩(wěn)定、高效的大數(shù)據(jù)高性能分析數(shù)據(jù)庫。
DM7是達(dá)夢(mèng)公司原始創(chuàng)新、自主研發(fā)的具有完全自主知識(shí)產(chǎn)權(quán)的高安全數(shù)據(jù)庫管理系統(tǒng),已經(jīng)通過公安部安全四級(jí)評(píng)測(cè),是國(guó)內(nèi)唯一獲得“信息技術(shù)產(chǎn)品自主原創(chuàng)測(cè)評(píng)證書”的數(shù)據(jù)庫安全產(chǎn)品,也是目前國(guó)內(nèi)安全等級(jí)最高的商業(yè)數(shù)據(jù)庫之一。
目前,達(dá)夢(mèng)公司的產(chǎn)品已成功應(yīng)用于公安、電力、鐵路、航空、審計(jì)、通信、金融、海關(guān)、國(guó)土資源等20多個(gè)行業(yè)領(lǐng)域,并連續(xù)5年國(guó)產(chǎn)數(shù)據(jù)庫市場(chǎng)占有率第一。達(dá)夢(mèng)公司市場(chǎng)觸角已經(jīng)延伸到國(guó)際市場(chǎng),2013年基于DM7的事務(wù)型和分析型海外項(xiàng)目陸續(xù)在泰國(guó)和印尼成功上線并穩(wěn)定運(yùn)行,達(dá)夢(mèng)數(shù)據(jù)庫也成為中國(guó)數(shù)據(jù)庫自主品牌挺進(jìn)國(guó)際市場(chǎng)的標(biāo)桿。