華為分布式存儲(chǔ)來勢兇猛IPFS還有機(jī)會(huì)嗎?
什么是分布式存儲(chǔ)?
分布式存儲(chǔ)簡單的來說,就是將數(shù)據(jù)分散存儲(chǔ)到多個(gè)存儲(chǔ)服務(wù)器上,并將這些分散的存儲(chǔ)資源構(gòu)成一個(gè)虛擬的存儲(chǔ)設(shè)備,實(shí)際上數(shù)據(jù)分散的存儲(chǔ)在企業(yè)的各個(gè)角落。
比如:假如你要存儲(chǔ)10PB的一個(gè)視頻文件,自己一個(gè)人的電腦存儲(chǔ)不了,需要存儲(chǔ)在多個(gè)服務(wù)器上,每一個(gè)服務(wù)器就是一個(gè)datanode,當(dāng)你需要獲取文件時(shí),逐一訪問效率太低,可以找一個(gè)中間人來存放文件在哪臺(tái)服務(wù)器的信息,通過信息可以快速的找到文件。這個(gè)中間人就是namenode,存儲(chǔ)的有關(guān)文件的信息就是元數(shù)據(jù)。為了數(shù)據(jù)安全,每一個(gè)小的視頻(存儲(chǔ)單元)復(fù)制一份存放到不同服務(wù)器上,當(dāng)有服務(wù)器停止運(yùn)行時(shí),可以通過訪問備份來尋找到自己想要的數(shù)據(jù),這種存儲(chǔ)方式叫做分布式存儲(chǔ)。
分布式存儲(chǔ)架構(gòu)由三個(gè)部分組成:客戶端、元數(shù)據(jù)服務(wù)器和數(shù)據(jù)服務(wù)器。
客戶端負(fù)責(zé)發(fā)送讀寫請求,緩存文件元數(shù)據(jù)和文件數(shù)據(jù)。
元數(shù)據(jù)服務(wù)器負(fù)責(zé)管理元數(shù)據(jù)和處理客戶端的請求,是整個(gè)系統(tǒng)的核心組件。
數(shù)據(jù)服務(wù)器負(fù)責(zé)存放文件數(shù)據(jù),保證數(shù)據(jù)的可用性和完整性。該架構(gòu)的好處是性能和容量能夠同時(shí)拓展,系統(tǒng)規(guī)模具有很強(qiáng)的伸縮性。
IPFS全稱是Inter Planetary File System,直接翻譯的話叫做“星際文件系統(tǒng)”,它由Protocol Lab提出,是一種點(diǎn)對點(diǎn)(P2P)的分布式文件系統(tǒng)。不過雖然說它是文件系統(tǒng),是一種用來存儲(chǔ)數(shù)據(jù)的技術(shù),但更確切的說IPFS是一種傳輸協(xié)議。
日前,在2019年世界移動(dòng)大會(huì)(MWC)上,華為發(fā)布新一代數(shù)據(jù)中心級(jí)融合分布式存儲(chǔ)FusionStorage 8.0。
華為IT產(chǎn)品線智能存儲(chǔ)與數(shù)據(jù)管理領(lǐng)域總裁孟廣斌發(fā)布FusionStorage 8.0
面向紛繁復(fù)雜的云環(huán)境,華為FusionStorage 8.0實(shí)現(xiàn)了一套存儲(chǔ)系統(tǒng)同時(shí)支持塊、文件、對象、HDFS、數(shù)據(jù)庫協(xié)議,適用于全業(yè)務(wù)場景混合負(fù)載,以一套設(shè)備支持?jǐn)?shù)據(jù)的生產(chǎn)、災(zāi)備、分析、歸檔等全生命周期場景,滿足云上云下數(shù)據(jù)流動(dòng)并保障一致性體驗(yàn)。
據(jù)悉,華為FusionStorage 8.0是業(yè)界首個(gè)支持企業(yè)關(guān)鍵業(yè)務(wù)的分布式存儲(chǔ)系統(tǒng)。單集群橫向擴(kuò)展達(dá)到4096個(gè)節(jié)點(diǎn),支持千萬級(jí)IOPS,借助華為企業(yè)級(jí)存儲(chǔ)成熟的芯片和FlashLink加速技術(shù),節(jié)點(diǎn)與SSD盤之間協(xié)同更高效,時(shí)延響應(yīng)低至0.5毫秒。
同時(shí),基于華為企業(yè)存儲(chǔ)產(chǎn)品久經(jīng)驗(yàn)證的HyperMetro雙活方案,華為FusionStorage 8.0可提供99.9999%的方案級(jí)可靠性,適用于虛擬化及數(shù)據(jù)庫等多應(yīng)用場景,保障關(guān)鍵業(yè)務(wù)不中斷,提供支持秒級(jí)RPO(恢復(fù)點(diǎn)目標(biāo))的異步復(fù)制技術(shù)。憑借獨(dú)有的自適應(yīng)重復(fù)數(shù)據(jù)刪除與數(shù)據(jù)壓縮能力,即使在VDI(桌面虛擬化)應(yīng)用場景中也能達(dá)到5:1的數(shù)據(jù)縮減比。
此外,華為FusionStorage 8.0通過協(xié)議融合、關(guān)鍵業(yè)務(wù)融合、場景融合、多云融合、管理融合五大創(chuàng)下融合特征,華為FusionStorage 8.0可幫助用戶實(shí)現(xiàn)"一個(gè)數(shù)據(jù)中心一套存儲(chǔ)"的終極目標(biāo)。
作為華為FusionStorage的用戶,中國移動(dòng)通信集團(tuán)遼寧有限公司累計(jì)部署容量超過10PB,到目前已穩(wěn)定運(yùn)行超過4年,數(shù)據(jù)庫系統(tǒng)性能大幅提升,100TB經(jīng)營分析數(shù)據(jù)處理時(shí)長由之前的超過10小時(shí)縮短至2小時(shí),保障業(yè)務(wù)7x24小時(shí)在線。
華為IT產(chǎn)品線智能存儲(chǔ)與數(shù)據(jù)管理領(lǐng)域總裁孟廣斌表示:"在數(shù)據(jù)中心從傳統(tǒng)孤島向云架構(gòu)演進(jìn)的趨勢下,華為全新一代分布式存儲(chǔ)FusionStorage 8.0通過創(chuàng)新的五大融合,打通企業(yè)數(shù)據(jù)壁壘,在業(yè)界首個(gè)支持關(guān)鍵業(yè)務(wù),真正實(shí)現(xiàn)一個(gè)數(shù)據(jù)中心一套存儲(chǔ),助力行業(yè)客戶數(shù)字化轉(zhuǎn)型。華為FusionStorage已經(jīng)為全球數(shù)千家企業(yè)用戶持續(xù)提供數(shù)據(jù)存儲(chǔ)服務(wù)"。
伴隨5G、IoT、云、人工智能等新興技術(shù)快速發(fā)展,傳統(tǒng)集中式存儲(chǔ)煙囪式部署的擴(kuò)展性和管理難題日益凸顯,越來越多的用戶期望有一種新的形式,可以打破不同類型存儲(chǔ)間的數(shù)據(jù)孤島,讓各類業(yè)務(wù)以統(tǒng)一的方式進(jìn)行存儲(chǔ)和管理,同時(shí)降低TCO、提升數(shù)字化平臺(tái)服務(wù)效率。
中心化的網(wǎng)絡(luò)就像一座城堡,而華為是里面的改革家。IPFS這樣的新興技術(shù),就像是外來的革新者。城堡只能從內(nèi)部攻破還是從外部摧毀?又或都會(huì)有之?
分布式存儲(chǔ)領(lǐng)域,華為的FusionStorage正以“智能”來重新定義。面向全球客戶,讓企業(yè)真正實(shí)現(xiàn)一個(gè)數(shù)據(jù)中心一套存儲(chǔ),釋放更大數(shù)據(jù)潛能。而依托于底層協(xié)議和區(qū)塊鏈技術(shù)的IPFS Filecoin網(wǎng)絡(luò),在功能上都還有開發(fā)完善和技術(shù)改進(jìn)的空間,暫時(shí)無法滿足大規(guī)模商用的需求。Filecoin主網(wǎng)上線,開發(fā)者將會(huì)將它定義為面向企業(yè)的商業(yè)存儲(chǔ)(就像Storj一樣)還是面向用戶的C端市場,做一個(gè)去中心化的“百度網(wǎng)盤”?又或者Filecoin網(wǎng)絡(luò)上線后又淪為炒幣人士的下一盤菜肴?將怎樣發(fā)展,只有后面才能驗(yàn)證。
盡管如此,F(xiàn)ilecoin和傳統(tǒng)的集中式存儲(chǔ)不同。Filecoin是去中心化、加密、分布式,數(shù)據(jù)的所有權(quán)在用戶手中。在筆者看來,這是最優(yōu)秀的特質(zhì),也是新一代互聯(lián)網(wǎng)所需要的基因。