漫步云端 我國(guó)掀起大數(shù)據(jù)革新浪潮

責(zé)任編輯:editor006

作者:闞麗麗

2016-05-20 17:31:20

摘自:中國(guó)產(chǎn)經(jīng)新聞

隨著便捷、按需且管理成本低廉的云計(jì)算模式不斷升級(jí),全球云產(chǎn)業(yè)已進(jìn)入高速發(fā)展期。據(jù)了解,為應(yīng)對(duì)海量數(shù)據(jù)的讀寫(xiě)與存儲(chǔ),國(guó)內(nèi)一些主流云服務(wù)數(shù)據(jù)庫(kù)正紛紛涉足開(kāi)發(fā)Redis云服務(wù)數(shù)據(jù)庫(kù)。

隨著便捷、按需且管理成本低廉的云計(jì)算模式不斷升級(jí),全球云產(chǎn)業(yè)已進(jìn)入高速發(fā)展期。

蘋(píng)果公司通過(guò)云平臺(tái)的構(gòu)建實(shí)現(xiàn)了移動(dòng)端從硬件向軟件的完美轉(zhuǎn)身,谷歌公司用云計(jì)算成就了最好的搜索引擎,云用戶(hù)以幾何級(jí)數(shù)增長(zhǎng),參與形式日趨多樣化和深入化。

聚焦國(guó)內(nèi),我國(guó)的云數(shù)據(jù)產(chǎn)業(yè)近幾年來(lái)也呈現(xiàn)出蓬勃發(fā)展的趨勢(shì),如阿里巴巴、中國(guó)電信、萬(wàn)國(guó)數(shù)據(jù)(GDS)等紛紛布局云數(shù)據(jù)業(yè)務(wù)。

云數(shù)據(jù)受互聯(lián)網(wǎng)追捧

隨著海量數(shù)據(jù)信息的不斷涌現(xiàn),例如氣象信息、網(wǎng)絡(luò)檢索信息、股票信息等,這些龐大的數(shù)據(jù)信息是普通的管理方式無(wú)法承載的。

云數(shù)據(jù)管理技術(shù)的出現(xiàn)和發(fā)展極大地提升了數(shù)據(jù)信息管理的能力,促使數(shù)據(jù)信息得到有效的整合與分類(lèi)。不僅如此,還簡(jiǎn)化了數(shù)據(jù)的調(diào)動(dòng)與獲取,極大地提升了數(shù)據(jù)的存儲(chǔ)和應(yīng)用能力,提高數(shù)據(jù)信息的利用率。

“互聯(lián)網(wǎng)企業(yè)需要云數(shù)據(jù)中心的基礎(chǔ)設(shè)備更加規(guī)模化和標(biāo)準(zhǔn)化。”易觀(guān)智庫(kù)大數(shù)據(jù)研究總監(jiān)任偉巍向《中國(guó)產(chǎn)經(jīng)新聞》記者表示。

記者了解到,淘寶網(wǎng)日均4億次網(wǎng)頁(yè)訪(fǎng)問(wèn)量、日均交易額達(dá)到7億元、全年交易額達(dá)2000億元,成為互聯(lián)網(wǎng)巨頭,其業(yè)務(wù)背后是遍布全國(guó)的8個(gè)數(shù)據(jù)中心、上萬(wàn)臺(tái)服務(wù)器、幾千臺(tái)交換機(jī)、海量存儲(chǔ)等,如此大容量的設(shè)備基于統(tǒng)一的IP標(biāo)準(zhǔn)協(xié)同集中工作,這是傳統(tǒng)數(shù)據(jù)中心不能比擬的。

據(jù)了解,淘寶的各種新業(yè)務(wù)劃分很細(xì),比如秒殺、競(jìng)價(jià)等業(yè)務(wù),僅目前的業(yè)務(wù)種類(lèi)就有幾百個(gè)之多。并且每天還在不斷推出新的業(yè)務(wù),而每上一個(gè)新業(yè)務(wù),不可能新增太多的服務(wù)器等系統(tǒng)資源。

對(duì)此,任偉巍認(rèn)為,采取在原有的資源池中增加業(yè)務(wù),這就對(duì)虛擬化管理提出了新挑戰(zhàn),而云數(shù)據(jù)中心的各種虛擬化技術(shù)能夠幫助解決這一問(wèn)題。

另外,任偉巍介紹,在云數(shù)據(jù)中心,當(dāng)業(yè)務(wù)需要遷移,設(shè)備需要統(tǒng)一配置,故障需要及時(shí)檢查和排除,流程需要跟蹤時(shí),需要通過(guò)自動(dòng)化的手段來(lái)高效管理海量的設(shè)備和應(yīng)用。

以騰訊網(wǎng)為例,一次上架就要配置上千臺(tái)交換機(jī),在人力資源有限時(shí),為保證在短時(shí)間內(nèi)完成工作,確保配置錯(cuò)誤能恢復(fù)到原有狀態(tài),并實(shí)時(shí)地進(jìn)行跟蹤和審計(jì),這些都需要通過(guò)自動(dòng)化的管理技術(shù)來(lái)實(shí)現(xiàn)。

伴隨著經(jīng)濟(jì)社會(huì)的不斷發(fā)展,人們對(duì)于計(jì)算機(jī)和網(wǎng)絡(luò)的要求逐步提升,進(jìn)一步推動(dòng)了數(shù)據(jù)信息技術(shù)的發(fā)展與進(jìn)步。“物聯(lián)網(wǎng)”、“三網(wǎng)融合”、“智能電網(wǎng)”等應(yīng)用成為了現(xiàn)代計(jì)算機(jī)發(fā)展的前沿產(chǎn)物,同時(shí),這些應(yīng)用的出現(xiàn)對(duì)于數(shù)據(jù)管理以及系統(tǒng)都提出了更高的要求。

Redis保證系統(tǒng)數(shù)據(jù)穩(wěn)定運(yùn)行

用戶(hù)需要用云計(jì)算處理、分析大量分布的數(shù)據(jù),這就要求云數(shù)據(jù)管理技術(shù)能夠及時(shí)、高效地對(duì)海量數(shù)據(jù)進(jìn)行管理和分析。云計(jì)算處理數(shù)據(jù)的不確定性、海量性使得有效數(shù)據(jù)管理技術(shù)開(kāi)發(fā)刻不容緩。

但是,傳統(tǒng)的關(guān)系數(shù)據(jù)庫(kù)SQL在超大規(guī)模和高并發(fā)的社會(huì)性軟件類(lèi)型的動(dòng)態(tài)網(wǎng)站暴露了很多難以克服的問(wèn)題,如對(duì)數(shù)據(jù)庫(kù)高并發(fā)的讀寫(xiě)需求;對(duì)海量數(shù)據(jù)的該效率存儲(chǔ)和訪(fǎng)問(wèn)的需求;對(duì)數(shù)據(jù)庫(kù)的高可擴(kuò)展性和高可用性需求。

在此背景之下,可以說(shuō)市場(chǎng)需求打破了云數(shù)據(jù)技術(shù)壁壘。Redis作為一個(gè)高性能的key-value數(shù)據(jù)庫(kù),以其高效的讀寫(xiě)速度,豐富的數(shù)據(jù)類(lèi)型,緩存的安全性,在提高網(wǎng)絡(luò)數(shù)據(jù)庫(kù)的冗余、保證系統(tǒng)數(shù)據(jù)的穩(wěn)定運(yùn)行、提高信息快速采集和縮短系統(tǒng)響應(yīng)時(shí)間具有重要意義。

據(jù)了解,為應(yīng)對(duì)海量數(shù)據(jù)的讀寫(xiě)與存儲(chǔ),國(guó)內(nèi)一些主流云服務(wù)數(shù)據(jù)庫(kù)正紛紛涉足開(kāi)發(fā)Redis云服務(wù)數(shù)據(jù)庫(kù)。

例如,新浪微博用戶(hù)頻繁發(fā)海量信息,每天以百萬(wàn)級(jí)、千萬(wàn)級(jí)的數(shù)據(jù)量增加。如果以增加服務(wù)器來(lái)解決新增數(shù)據(jù),意味著昂貴的運(yùn)營(yíng)和維護(hù)費(fèi)用。而采用Redis技術(shù)來(lái)存儲(chǔ)用戶(hù)關(guān)系和計(jì)數(shù),便可以解決新增數(shù)據(jù)而無(wú)需付出昂貴代價(jià)。

阿里云自2015年7月份就已經(jīng)正式開(kāi)放Redis商用,并主要采用了較為穩(wěn)定的Redis2.8.19版本,同時(shí)進(jìn)行了內(nèi)核優(yōu)化和命令閹割來(lái)保證業(yè)務(wù)系統(tǒng)的安全性。整個(gè)系統(tǒng)采用了Master-Slave主從結(jié)構(gòu),支持AOF持久化,支持彈性擴(kuò)容,自動(dòng)切換,可視化資源管理,集群和Sharding等功能。

助力管理模式創(chuàng)新

然而,還需關(guān)注的是,在互聯(lián)網(wǎng)+的浪潮以及“國(guó)家大數(shù)據(jù)戰(zhàn)略”趨勢(shì)下,傳統(tǒng)的金融產(chǎn)業(yè)與制造業(yè)都在轉(zhuǎn)型中面臨挑戰(zhàn),云端數(shù)據(jù)技術(shù)在改進(jìn)升級(jí)的同時(shí),還需迎合企業(yè)自身發(fā)展特性,助力傳統(tǒng)企業(yè),加速落地大數(shù)據(jù)技術(shù)。

金融與制造業(yè)的一個(gè)特點(diǎn)是數(shù)據(jù)體量龐大,且基礎(chǔ)設(shè)施建設(shè)比較龐雜。一方面,電力和冷卻等方面的高投入無(wú)法滿(mǎn)足新一代高密度服務(wù)器和存儲(chǔ)設(shè)備的需要;另一方面,IT基礎(chǔ)設(shè)施的容量增長(zhǎng)受到場(chǎng)地、空間的嚴(yán)重制約。

對(duì)于企業(yè)而言,任偉巍認(rèn)為:“如何讓數(shù)據(jù)中心變得更加靈活,同時(shí)降低能耗與運(yùn)營(yíng)成本,已經(jīng)變成了發(fā)展過(guò)程中面臨的重大難題。”

阿里云數(shù)據(jù)庫(kù)NoSQL產(chǎn)品總負(fù)責(zé)人王義成向《中國(guó)產(chǎn)經(jīng)新聞》記者表示,根據(jù)各個(gè)行業(yè)的特性,貼合每個(gè)行業(yè)對(duì)于數(shù)據(jù)庫(kù)的需求,是定制數(shù)據(jù)庫(kù)功能的依據(jù)。

鏈接已復(fù)制,快去分享吧

企業(yè)網(wǎng)版權(quán)所有?2010-2024 京ICP備09108050號(hào)-6京公網(wǎng)安備 11010502049343號(hào)