存儲(chǔ)經(jīng)過(guò)多年的發(fā)展,存儲(chǔ)性能和數(shù)據(jù)管理是不可回避的兩大話題。存儲(chǔ)性能問(wèn)題隨著閃存在存儲(chǔ)系統(tǒng)中得到使用而逐漸得以解決,不過(guò)數(shù)據(jù)管理依然是橫跨在廣大用戶(hù)面前的難題。尤其是隨著閃存技術(shù)日漸開(kāi)始走向普及,用戶(hù)數(shù)據(jù)中心的存儲(chǔ)環(huán)境變得更加復(fù)雜,異構(gòu)存儲(chǔ)、混合存儲(chǔ)、數(shù)據(jù)備份等問(wèn)題持續(xù)困擾著用戶(hù),數(shù)據(jù)走向智能化和流動(dòng)化的方向已經(jīng)勢(shì)在必行,這也是存儲(chǔ)廠商們多年來(lái)一致努力的方向。華為新一代融合存儲(chǔ)OceanStor V3自推出以來(lái),主打的理念就是讓數(shù)據(jù)自動(dòng)流動(dòng)起來(lái),通過(guò)閃存與硬盤(pán)的融合讓數(shù)據(jù)能夠更具應(yīng)用需求來(lái)回自由移動(dòng);而主存儲(chǔ)與備份的融合則讓用戶(hù)大幅簡(jiǎn)化過(guò)去傳統(tǒng)的備份體系結(jié)構(gòu),實(shí)現(xiàn)了數(shù)據(jù)從主存儲(chǔ)到備份系統(tǒng)的自動(dòng)化流動(dòng);異構(gòu)存儲(chǔ)管理功能則完美簡(jiǎn)化了數(shù)據(jù)中心異構(gòu)存儲(chǔ)之間的互通難題,實(shí)現(xiàn)了數(shù)據(jù)在異構(gòu)存儲(chǔ)之間的管理與流動(dòng)。用戶(hù)通過(guò)華為OceanStor V3可以在數(shù)據(jù)中心描繪出一副數(shù)據(jù)自動(dòng)流動(dòng)的優(yōu)美畫(huà)卷。
自動(dòng)分級(jí)讓數(shù)據(jù)自由流動(dòng)
毫無(wú)疑問(wèn),隨著閃存在存儲(chǔ)系統(tǒng)中得到越來(lái)越廣泛的應(yīng)用,閃存與傳統(tǒng)機(jī)械磁盤(pán)之間的數(shù)據(jù)移動(dòng)成為存儲(chǔ)系統(tǒng)中技術(shù)含量較高的領(lǐng)域。當(dāng)前閃存成本仍然處于較高水平,全閃存陣列這類(lèi)型的產(chǎn)品仍然是少數(shù)用戶(hù)的“專(zhuān)屬”,混合陣列仍然是廣大用戶(hù)的首要選擇。因此,在混合陣列中的不同存儲(chǔ)介質(zhì)之間的數(shù)據(jù)來(lái)回流動(dòng)就顯得非常重要。因?yàn)?,用?hù)應(yīng)用隨時(shí)都是在變化的,所以不同類(lèi)型應(yīng)用的數(shù)據(jù)隨著時(shí)間變化它的熱度也會(huì)產(chǎn)生一系列的變化,只有通過(guò)自動(dòng)分層技術(shù)根據(jù)數(shù)據(jù)的熱度而合理的分布在不同的介質(zhì)上,才能發(fā)揮在性能和成本直接達(dá)到最佳的效果。
事實(shí)上,自動(dòng)分級(jí)的存儲(chǔ)技術(shù)也已經(jīng)出現(xiàn)多年,市場(chǎng)上的技術(shù)也是良莠不齊,在目前來(lái)看,自動(dòng)分級(jí)技術(shù)是否出色主要體現(xiàn)出對(duì)數(shù)據(jù)熱點(diǎn)的判斷、數(shù)據(jù)遷移顆粒度大小、數(shù)據(jù)遷移模式等。華為OceanStor V3系列存儲(chǔ)的自動(dòng)數(shù)據(jù)分級(jí)功能SmartTier是對(duì)存儲(chǔ)系統(tǒng)LUN級(jí)別的智能數(shù)據(jù)分級(jí),數(shù)據(jù)遷移顆粒度達(dá)到了512K-64M,SmartTier自動(dòng)分級(jí)功能主要分為性能統(tǒng)計(jì)、性能分析以及數(shù)據(jù)遷移三個(gè)階段。
圖一:華為SmartTier處理數(shù)據(jù)的三個(gè)階段。
V3存儲(chǔ)系統(tǒng)的性能由存儲(chǔ)系統(tǒng)的IO監(jiān)控模塊完成。SmartTier允許自定義IO監(jiān)控的時(shí)間段。而性能分析則是由V3存儲(chǔ)系統(tǒng)的數(shù)據(jù)排布模塊完成,性能分析階段使用性能統(tǒng)計(jì)數(shù)據(jù)進(jìn)行性能分析,分析結(jié)果會(huì)對(duì)存儲(chǔ)池中的每個(gè)遷移顆粒排名, _排名由高至低,從同一個(gè)存儲(chǔ)池中的最熱顆粒開(kāi)始,直到最冷顆粒(排名僅在同一個(gè)存儲(chǔ)池中進(jìn)行),最終生成數(shù)據(jù)遷移方案。
數(shù)據(jù)遷移則是由V3存儲(chǔ)系統(tǒng)的遷移模塊完成,SmartTier擁有兩種遷移模式::手動(dòng)觸發(fā)遷移模式和定時(shí)觸發(fā)遷移模式。手動(dòng)觸發(fā)的優(yōu)先級(jí)高于自動(dòng)遷移。手動(dòng)觸發(fā)遷移模式可以根據(jù)需要立即觸發(fā)遷移,定時(shí)觸發(fā)遷移模式是根據(jù)事先設(shè)定好的遷移開(kāi)始時(shí)間和持續(xù)遷移時(shí)段來(lái)自動(dòng)觸發(fā)遷移,可以事先設(shè)置每周的哪些天的什么時(shí)間開(kāi)始觸發(fā)遷移及遷移允許持續(xù)的時(shí)長(zhǎng)。此外,SmartTier 可設(shè)置高中低三檔遷移速度,進(jìn)行遷移的動(dòng)態(tài)控速。其中,低檔遷移速度上限為10MB/S,中檔遷移速度上限為20MB/S,高檔遷移速度上限為100MB/S。 _
V3存儲(chǔ)系統(tǒng)的自動(dòng)分級(jí)技術(shù)非常符合當(dāng)前數(shù)據(jù)存儲(chǔ)的需求,尤其是閃存與傳統(tǒng)硬盤(pán)融合的趨勢(shì)下,V3很好地滿(mǎn)足了對(duì)于數(shù)據(jù)分級(jí)的自動(dòng)化、顆粒度細(xì)化、智能化的要求,已經(jīng)成為當(dāng)前市場(chǎng)有著很強(qiáng)競(jìng)爭(zhēng)力的存儲(chǔ)優(yōu)化技術(shù)。
主存儲(chǔ)與備份融合:實(shí)現(xiàn)數(shù)據(jù)備份自動(dòng)化
數(shù)據(jù)保護(hù)與數(shù)據(jù)備份在數(shù)據(jù)中心中是不可或缺的一環(huán),而在傳統(tǒng)數(shù)據(jù)中心架構(gòu)中,備份服務(wù)器、備份軟件以及備份存儲(chǔ)組成的傳統(tǒng)備份網(wǎng)絡(luò)體系往往是復(fù)雜和昂貴的。改變過(guò)去復(fù)雜備份體系架構(gòu)已經(jīng)是大勢(shì)所趨,我們也可以看到從2014年開(kāi)始,主流存儲(chǔ)廠商的存儲(chǔ)系統(tǒng)產(chǎn)品中都加強(qiáng)了與備份系統(tǒng)的直接聯(lián)系,主存儲(chǔ)與備份的融合被認(rèn)為是解決傳統(tǒng)備份過(guò)于復(fù)雜的辦法之一。在華為OceanStor V3存儲(chǔ)系統(tǒng)中我們也看到了這種趨勢(shì)。
圖二:OceanStor V3實(shí)現(xiàn)了從主存儲(chǔ)直接將數(shù)據(jù)備份到備份系統(tǒng)。
眾所周知,隨著數(shù)據(jù)增長(zhǎng)呈現(xiàn)出爆炸性的增長(zhǎng),傳統(tǒng)存儲(chǔ)備份體系架構(gòu)的壓力也是越來(lái)越大,備份路徑和備份窗口時(shí)間過(guò)長(zhǎng)使得傳統(tǒng)備份體系架構(gòu)在當(dāng)前備受詬病。華為OceanStor V3存儲(chǔ)系統(tǒng)跳過(guò)傳統(tǒng)備份體系架構(gòu),通過(guò)主存儲(chǔ)操作系統(tǒng)OceanStor OS中的備份模塊直接以快照的形式將數(shù)據(jù)備份到備份存儲(chǔ)中,實(shí)現(xiàn)了從備份數(shù)據(jù)的自動(dòng)化,大幅降低了數(shù)據(jù)備份與保護(hù)的復(fù)雜度以及成本,很好地實(shí)現(xiàn)了從主存儲(chǔ)到備份存儲(chǔ)的數(shù)據(jù)流動(dòng)。
異構(gòu)存儲(chǔ)管理:讓異構(gòu)環(huán)境下的數(shù)據(jù)自由流動(dòng)起來(lái)
在存儲(chǔ)管理中另外一大難題就是對(duì)于異構(gòu)存儲(chǔ)的管理,不同存儲(chǔ)廠商的存儲(chǔ)系統(tǒng)對(duì)于SCSI協(xié)議理解和遵從都不一樣,造成了異構(gòu)存儲(chǔ)在兼容性和數(shù)據(jù)管理方面具有巨大挑戰(zhàn)。甚至同一廠商,由于高中低段存儲(chǔ)產(chǎn)品線不是同一套操作系統(tǒng)而也會(huì)出現(xiàn)不兼容的情況。而且,用戶(hù)數(shù)據(jù)中心不可能只存在某一家存儲(chǔ)廠商的產(chǎn)品,異構(gòu)環(huán)境是用戶(hù)們的普遍狀態(tài)。因此,讓異構(gòu)環(huán)境下的數(shù)據(jù)管理能夠自由化、智能化就成為當(dāng)前存儲(chǔ)系統(tǒng)的發(fā)展趨勢(shì)。
華為OceanStor V3異構(gòu)虛擬化技術(shù)通過(guò)針對(duì)不同的陣列做兼容性的差異化處理,能很好的識(shí)別和處理與異構(gòu)設(shè)備間的各種兼容性問(wèn)題,如及時(shí)識(shí)別和處理異構(gòu)設(shè)備的LUN PATH 故障,以此達(dá)到與異構(gòu)陣列間高可靠的兼容。異構(gòu)虛擬化技術(shù)通過(guò)后端多路徑軟件支持以多路徑冗余方式連接異構(gòu)陣列,防止與異構(gòu)陣列間的物理鏈路連接出現(xiàn)因?yàn)閱蝹€(gè)鏈路故障而導(dǎo)致業(yè)務(wù)中斷。
圖三:典型的異構(gòu)存儲(chǔ)環(huán)境。
目前來(lái)看異構(gòu)存儲(chǔ)環(huán)境下的數(shù)據(jù)管理非常有必要。首先,用戶(hù)通過(guò)長(zhǎng)期的數(shù)據(jù)中心建設(shè),存在著大量不同品牌的存儲(chǔ)系統(tǒng),利用好這些異構(gòu)存儲(chǔ)系統(tǒng)資源勢(shì)在必行,如果不能很好地實(shí)現(xiàn)異構(gòu)存儲(chǔ)管理的話,則不能夠讓數(shù)據(jù)中心存儲(chǔ)資源得到有效使用;其次,隨著存儲(chǔ)系統(tǒng)服役時(shí)間的推移,在某個(gè)時(shí)間點(diǎn)可能不能再滿(mǎn)足業(yè)務(wù)發(fā)展的需求,異構(gòu)存儲(chǔ)系統(tǒng)之間的數(shù)據(jù)搬遷就成為首要問(wèn)題,華為OceanStor V3可利用異構(gòu)虛擬化LUN在線遷移功能實(shí)現(xiàn)異構(gòu)存儲(chǔ)系統(tǒng)之間的LUN數(shù)據(jù)遷移;第三,用戶(hù)數(shù)據(jù)中心可能由于數(shù)據(jù)站點(diǎn)的陣列來(lái)自于不同的異構(gòu)廠商,導(dǎo)致異構(gòu)陣列間的數(shù)據(jù)無(wú)法做到互為備份。華為OceanStor V3的異構(gòu)虛擬化提供的異構(gòu)同步和異步復(fù)制功能,可以使異構(gòu)陣列間的LUN 數(shù)據(jù)做到互相備份,做到站點(diǎn)間的數(shù)據(jù)容災(zāi);第四,異構(gòu)陣列可能存在LUN被病毒或者其他原因造成的數(shù)據(jù)損壞情況,華為OceanStor V3異構(gòu)虛擬化能夠提供異構(gòu)快照技術(shù),可以為異構(gòu)存儲(chǔ)系統(tǒng)提供快照備份,實(shí)現(xiàn)異構(gòu)環(huán)境的數(shù)據(jù)保護(hù)。
總體而言,華為OceanStor V3系列存儲(chǔ)系統(tǒng)在數(shù)據(jù)管理方面代表著當(dāng)前主流存儲(chǔ)系統(tǒng)發(fā)展的方向,通過(guò)融合閃存與硬盤(pán)、主存儲(chǔ)與備份、異構(gòu)存儲(chǔ)等,實(shí)現(xiàn)數(shù)據(jù)中心存儲(chǔ)層的數(shù)據(jù)管理高效化與簡(jiǎn)單化,用戶(hù)能夠?qū)崿F(xiàn)數(shù)據(jù)的自由流動(dòng)以及IT架構(gòu)的簡(jiǎn)化,可以說(shuō)以華為OceanStor V3為代表的存儲(chǔ)系統(tǒng)將來(lái)會(huì)給整個(gè)數(shù)據(jù)中心的數(shù)據(jù)管理帶來(lái)革命性的變革。