北京2020年11月27日 /美通社/ -- 存儲領(lǐng)域的極簡架構(gòu)指的是一個存儲平臺,一個數(shù)據(jù)中心。它的含義很豐富,如:一套軟件棧支持多種介質(zhì),或者一套軟件棧支持多種存儲服務(wù)接口,例如文件、塊、對象、大數(shù)據(jù)。
為什么出現(xiàn)越來越多的多合一?主要是因為速度、便利、成本等原因。其中的關(guān)鍵是,大多數(shù)人需要的是一個方便易用、成本節(jié)省的通用平臺。這篇文章是浪潮近日看到新華社報道電影《金剛川》啟發(fā)的。
《金剛川》電影,5000人如何協(xié)同工作
《金剛川》劇組只有3個月制作周期,三位導(dǎo)演、三個團(tuán)隊,他們是如何帶領(lǐng)全劇組5000人完成了這份“多合一”的工作呢?
新華網(wǎng)2020年10月24日有篇文章《金剛川“多合一”導(dǎo)演團(tuán)隊如何分工》有詳盡的介紹。
看得出來,這個任務(wù)極其艱巨,每個導(dǎo)演的價值觀、敘事方式、拍攝風(fēng)格、偏好等都不一樣,如何讓電影呈現(xiàn)為一個整體,并且盡可能順暢、無違和感,其中大量的溝通工作,妥協(xié)、權(quán)衡,相互補(bǔ)充和成就是必不可少的。
類似這種,為了快速上線,或者宏大敘事下單個導(dǎo)演或單個劇組力有不逮的情況下,將來可能會有越來越多的電影、電視的創(chuàng)作采用這種方式,甚至形成工業(yè)流水線的模式。
多合一 成為產(chǎn)業(yè)趨勢
如下圖所示,分別是便攜式播放器、專業(yè)相機(jī)或攝像機(jī),以及手提電話。以往我們外出,如果我們有這三種需求,恐怕需要背包來專門伺候它們。因為便利,它們合成了手機(jī),而且手機(jī)還有很多的其他功能合成進(jìn)來,錢包、計算器、鬧鐘、時鐘、閱讀、娛樂、交友等。現(xiàn)在除了對音質(zhì)、影像、通訊等有著嚴(yán)苛要求的專業(yè)人士還在分別購買各個設(shè)備,大部分人都一部手機(jī)走天下了。
當(dāng)這種多合一同時兼具便攜、成本方面的巨大優(yōu)勢,而且性能還不錯時,對于以往的產(chǎn)品是顛覆性的變革,例如蘋果手機(jī) vs. 諾基亞手機(jī)。
數(shù)據(jù)存儲領(lǐng)域的“多合一”趨勢
隨著企業(yè)數(shù)字化轉(zhuǎn)型帶來數(shù)據(jù)爆炸式增長,多樣化數(shù)據(jù)推動存儲朝著多合一架構(gòu)方向不斷演進(jìn)。在集中式存儲和分布式存儲兩大存儲主流領(lǐng)域,多合一架構(gòu)得到了快速的發(fā)展。
其一,集中式存儲 SAN和NAS的統(tǒng)一。
我們先來看集中式存儲,2007年,EMC為了阻擊NetApp的增長,在市場策略、組織架構(gòu)都做了調(diào)整,基于中端存儲CLARiiON系列的基礎(chǔ)上,推出了統(tǒng)一存儲Celerra NS 產(chǎn)品線,集成了NAS(網(wǎng)絡(luò)附加存儲)、iSCSI和光纖通道連接的存儲服務(wù)。其實就是CLARiiON存儲+ Data?Mover(NAS網(wǎng)關(guān)) +?Control?Station(控制終端)的松耦合架構(gòu),和舊的Celerra沒有太多的不同。不過,大約在2009年后,EMC推出了Virtual Data?Mover(簡稱VDM),虛擬機(jī)版本的NAS網(wǎng)關(guān),之后又有了容器版本的VDM。
之后,SAN+NAS這種統(tǒng)一存儲的方式,成了集中式存儲的標(biāo)配,幾家大的存儲公司都有相關(guān)的產(chǎn)品。
支持統(tǒng)一存儲SAN+NAS方式的,還有浪潮存儲的全閃HF系列,AS系列,如HF5000G5,HF6000G5,AS5600等。
其二,集中式存儲領(lǐng)域混閃和全閃的統(tǒng)一。
2010年~2013年,是閃存陣列初創(chuàng)廠商大放異彩的時候,例如Violin Memory、Pure Storage、Nimble Storage、SolidFire、Texas Memory Systems(簡稱TMS)、XtremIO。
回顧這些閃存公司,或許對我們有所啟發(fā):
2012年5月,EMC收購XtremIO(成立于2009年) 。EMC公司總裁ChadSakac聲稱,XtremIO將成為EMC發(fā)展歷史上最快突破年銷售額10億美元大關(guān)的產(chǎn)品。
2012年8月,IBM收購TMS,產(chǎn)品系列改名為FlashSystem。
Violin Memory成立于2005年,2013年上市,2016年宣布破產(chǎn),技術(shù)上可能緣于它的性能很好,但傳統(tǒng)陣列的基礎(chǔ)功能和高級功能,它實現(xiàn)得較為緩慢。
而成立于2009年P(guān)ure Storage在功能完善上迭代較快,后來居上,2015年上市。
SolidFire成立于2010年,2017年8月被NetApp收購。
然而,耐人尋味的是,越來越多的大廠,更多地采用其原有的產(chǎn)品架構(gòu),通過替換為閃存介質(zhì),并針對閃存進(jìn)行性能優(yōu)化。
出現(xiàn)這種混閃和全閃統(tǒng)一的趨勢,可能的原因如下:介質(zhì)發(fā)展、軟件棧優(yōu)化使得原有架構(gòu)得以老樹發(fā)新花,在保持原有豐富功能的前提下,性能大幅提升,逼近甚至超越專門的全閃存;另外,經(jīng)過多年市場的磨合、驗證、優(yōu)化,穩(wěn)定性、可靠性、使用習(xí)慣、服務(wù)和運(yùn)維習(xí)慣、包括與原有系統(tǒng)的兼容(例如跨代容災(zāi))等諸多因素也成為用戶逐漸青睞采用與混閃同一軟件棧的全閃存存儲。
浪潮的集中式存儲HF/AS系列,便是一套軟件棧來支持混閃存儲、全閃存儲,包括HF5000G5、HF6000G5。
其三,分布式存儲 文件、塊和對象等存儲服務(wù)的統(tǒng)一。
比較典型的是VMware vSAN。2020年,VMware和NetApp先后發(fā)布了三合一的新特性或路標(biāo)。例如,VMware vSAN 7.0提供了原生的NAS服務(wù)– Virtual Distributed File System,這一新特性其實也并不意外。
早在2015年8月28日,VMware存儲和可用性業(yè)務(wù)部門的CTO Christos Karamanolis就在其文章《VMware and theFuture of Storage and Availability》中表明了VMware vSAN的野心:要打造融合存儲平臺,不只是支持vSphere的塊,還要支持容器、文件,甚至對象(如Rest API)。
分布式存儲領(lǐng)域的“多合一”典型代表還有其他廠商,但絕大多數(shù)只是二合一。
浪潮分布式存儲從五、六年前,就堅定地走多合一的道路,沒有走彎路。這套分布式存儲就是AS13000分布式存儲,能夠在分布式存儲集群最小節(jié)點數(shù)(也即3個)的情況下,同時支持文件、塊和對象的接口。如下圖所示:
隨著三合一、多合一的趨勢被更多的認(rèn)可,越來越多的存儲廠商也在往這個方向前進(jìn)。不過,需要注意的是,有些廠商支持的所謂三合一或多合一,其文件接口并非原生的NAS,而是對象網(wǎng)關(guān),或者HDFS方式,的簡單文件接口,缺乏主流NAS的功能,如權(quán)限管理、限額管理、快照等基本功能。
為什么企業(yè)級存儲服務(wù)要多合一?
具體而言,為什么企業(yè)級存儲服務(wù)要多合一?有如下四個優(yōu)勢:
其一,節(jié)省成本,方便運(yùn)維。數(shù)據(jù)猛增,用戶的運(yùn)維復(fù)雜度越來越大。一個平臺支持多種服務(wù),可以減少因不同存儲孤島而增加的運(yùn)維工作量。另外,還能在數(shù)據(jù)共享上提高效率,減少數(shù)據(jù)流動。例如,浪潮的分布式存儲AS13000能夠在不增加數(shù)據(jù)副本的情況下,支持多協(xié)議下同一數(shù)據(jù)源的不同協(xié)議的訪問,極大地提高了數(shù)據(jù)共享的效率,為客戶多維度利用數(shù)據(jù)產(chǎn)生了便利。。
其二,硬件發(fā)展迅猛,減少了多合一帶來的不利影響。多合一要發(fā)揮好,需要做一些平衡。隨著介質(zhì)、硬件的發(fā)展,包括閃存盤、網(wǎng)絡(luò)如RDMA和NVMe Over Fabric等的發(fā)展,能夠抹平因平衡帶來的影響。
其三,符合數(shù)據(jù)中心的云化、容器化趨勢。用戶本地數(shù)據(jù)中心私有云化、容器化,已經(jīng)成為一個不爭的事實,這迫使一個存儲平臺必須支持多種業(yè)務(wù)、多種場景,而不同的場景所需要的服務(wù)接口是不一樣的。
其四,滿足智能化的趨勢的需求。存儲的管理越來越智能化,存儲系統(tǒng)逐漸可以在內(nèi)部根據(jù)業(yè)務(wù)動態(tài)需求做資源的調(diào)度,更好的發(fā)揮不同介質(zhì),不同接口下存儲使用的效率。
未來存儲趨勢探討
隨著新應(yīng)用、新場景不斷推陳出新,會對存儲產(chǎn)生新的挑戰(zhàn),在某些細(xì)分場景,可能會催生出專有的存儲。不過,主流存儲平臺的發(fā)展方向,浪潮認(rèn)為仍是多合一。
未來集中式存儲和分布式存儲會統(tǒng)一嗎?有這種可能,例如集中式和分布式殊途同歸,共同邁向分布式全閃存 。但走向統(tǒng)一還需要一段時間,技術(shù)上需要類似高速網(wǎng)絡(luò)且低延遲的技術(shù)如RDMA、NVMe Over Fabric等大規(guī)模普及(包括成本降低),技術(shù)之外,還有其他多種因素,例如生態(tài)成熟、用戶使用習(xí)慣的順利遷移等等。
拋磚引玉,歡迎大家指正。感謝李錚鋆、李華偉等提供的建議。
本篇文章的一些索引:
1、新華網(wǎng)《金剛川“三合一”導(dǎo)演團(tuán)隊如何分工》
http://www.xinhuanet.com/ent/2020-10/24/c_1126651006.htm
2、Christos文章網(wǎng)址如下
https://blogs.vmware.com/virtualblocks/2015/08/28/the-software-defined-storage-platform-of-the-future/
3、DELL EMC PowerScale和PowerStore
https://www.delltechnologies.com/lv/storage/powerscale.htm#share
https://dl.dell.com/topicspdf/pwrstr-hcg_en-us.pdf
4、樂生活與愛IT 《面向未來的軟件定義存儲平臺》
https://mp.weixin.qq.com/s/3WYCKCFS8mzOj-pGuOt_Ig
5、浪潮存儲
https://www.inspur.com/lcjtww/2526546/index.html