云存儲:華為的創(chuàng)新與演進之路
物聯(lián)網(wǎng)、大數(shù)據(jù)、云計算及移動社交網(wǎng)絡……這些強大的信息產(chǎn)業(yè)狂潮正以無法忽視的態(tài)勢影響著現(xiàn)代企業(yè)的業(yè)務發(fā)展方向。
物聯(lián)網(wǎng)不僅讓信息通過網(wǎng)絡實現(xiàn)無處不在的傳遞,也使人們與身邊的萬物發(fā)生最直接的聯(lián)接;而移動化、社交化使這種全球性的聯(lián)接變得更加緊密,并滲透到人們的衣食住行;大數(shù)據(jù)分析與數(shù)據(jù)挖掘使海量信息的匯聚變得更有價值,支持企業(yè)更有針對性的創(chuàng)新發(fā)展。
而以平臺化、資源共享、彈性按需為特征的云計算,作為信息產(chǎn)業(yè)創(chuàng)新的關鍵支撐者,不僅能為萬物互聯(lián)提供必需的資源與平臺支持,更讓企業(yè)、個人能以更優(yōu)的性價比,更方便地使用強大的計算能力、幾乎***的存儲空間、更敏捷的網(wǎng)絡資源以及更開放的生態(tài)環(huán)境兼容能力。
因此基于“全面云化”的應用創(chuàng)新,已然成為企業(yè)“數(shù)字化轉(zhuǎn)型”的必然選擇。在云計算時代,計算、存儲等能力以服務的方式按需提供給企業(yè),企業(yè)只需關注自身業(yè)務應用,那么未來的企業(yè)基礎架構(gòu)要如何演進,以快速響應云時代的需求?
在2013年,Gartner曾對企業(yè)基礎架構(gòu)提出了“軟件定義一切”的未來趨勢,現(xiàn)在看來,這個預言正在成為現(xiàn)實。
從2002年投入存儲技術與產(chǎn)品研發(fā)以來,華為對于云架構(gòu)下的分布式存儲系統(tǒng)構(gòu)建早已形成自有思路,并在產(chǎn)品技術創(chuàng)新上不斷探索。
分布式文件存儲標桿
華為2009年發(fā)布***款分布式文件存儲,是較早使用分布式集群架構(gòu)進行海量非結(jié)構(gòu)化數(shù)據(jù)存取的產(chǎn)品之一,其文件系統(tǒng)CFS成為***個正式商用的日志文件系統(tǒng),***支持24節(jié)點擴展,專門面向大規(guī)模文件數(shù)據(jù)處理需求。
2013年5月,在美國國際IT信息技術展覽會(Interop)上,華為發(fā)布新一代分布式文件存儲系統(tǒng)。產(chǎn)品不僅采用全對稱橫向擴展架構(gòu),實現(xiàn)了存儲性能與容量的跨越式提升;同時在數(shù)據(jù)存儲基礎上疊加了對大數(shù)據(jù)分析的支持,成為了業(yè)界***融合“存儲、分析和歸檔”的存儲產(chǎn)品。通過免除跨設備數(shù)據(jù)裝載、遷移,在提升大數(shù)據(jù)處理全流程效率的同時,降低整體擁有成本;同年9月,在標準性能評估機構(gòu)SPEC的SPEC sfs2008基準測試中,產(chǎn)品以500萬OPS的成績再次刷新文件存儲性能紀錄,領先同類產(chǎn)品3倍多。
一直以來,“聚焦客戶業(yè)務場景的產(chǎn)品設計”成為***華為存儲產(chǎn)品創(chuàng)新設計的基準原則,華為在分布式存儲開發(fā)道路上不斷刷新成績。在2015年,華為分布式文件存儲憑借獨有的InfoTurbo性能優(yōu)化技術,成為業(yè)內(nèi)***滿足6層4K超高清視頻節(jié)目制作的NAS存儲系統(tǒng)。同年9月,華為聯(lián)合QLogic將25Gb以太網(wǎng)技術應用于其分布式文件存儲系統(tǒng),率先實現(xiàn)這一技術從標準到產(chǎn)品的轉(zhuǎn)化,并為100Gb以太網(wǎng)技術的落地打下基礎。
華為分布式文件存儲
隨著云計算技術興起,華為分布式文件存儲的發(fā)展開始向軟件定義方向延伸,硬件平臺也從專有硬件向通用硬件方向發(fā)展。通過在平臺架構(gòu)、性能、擴展性、大數(shù)據(jù)等方向持續(xù)的技術創(chuàng)新,華為分布式文件存儲在媒體廣電、高性能計算、視頻監(jiān)控等場景不斷贏得客戶信賴,例如在深圳廣電部署的業(yè)界***媒體云融合新聞中心分布式文件存儲池,在韓國落地的業(yè)界***4層4K超高清視頻制作分布式存儲池,與權(quán)威基因研究機構(gòu)華大基因構(gòu)建的HPC分布式存儲池。
軟件定義塊存儲新勢力
基于在傳統(tǒng)SAN存儲領域數(shù)十年的雄厚技術積累,華為在2012年發(fā)布了***款基于軟件定義的分布式塊存儲系統(tǒng),包含純軟件產(chǎn)品FusionStorage Block及超融合一體機產(chǎn)品FusionCube兩種形態(tài),采用分布式哈希數(shù)據(jù)路由、分布式緩存、全局負載均衡及多重數(shù)據(jù)保護等諸多存儲技術,專門針對云計算基礎設施對塊數(shù)據(jù)存儲需求而設計。DHT分布式路由算法實現(xiàn)數(shù)據(jù)的高效尋址和存儲,消除了傳統(tǒng)集中式元數(shù)據(jù)管理方式帶來的系統(tǒng)性能瓶頸問題,使得在系統(tǒng)大規(guī)模橫向擴展的情況下,仍然能提供線性增長的強大數(shù)據(jù)吞吐能力。
2013年,華為支撐自身運營的全球化信息中心云存儲平臺開始切換到FusionStorage Block上,截至目前,已經(jīng)部署超過1.4萬個標準x86服務器節(jié)點,超過600PB容量,高效支撐超過45萬虛擬機和數(shù)十套數(shù)據(jù)庫系統(tǒng)應用,覆蓋產(chǎn)品研發(fā)、財務、銷售運作等云開發(fā)、云運營場景。
2014年,浙江電信攜手華為實現(xiàn)基于FusionStorage Block的國內(nèi)運營商***PB級SDS項目落地,2015年,華為FusionStorage Block在某全球500強商業(yè)銀行開發(fā)測試云環(huán)境中部署超過4PB容量的大規(guī)模SDS集群;同時,華為FusionStorage Block支撐香港Infocast證券交易機構(gòu)、德國電信、西班牙電信等海內(nèi)外客戶,構(gòu)建基于云架構(gòu)的分布式存儲平臺。截止目前,華為FusionStorage Block已獲得超過200家典型行業(yè)客戶的認可。
海量對象存儲利器
在對象存儲領域,華為在2012年云計算大會(HCC)上發(fā)布全分布式對象存儲系統(tǒng),成為***支持EB級擴展的海量存儲解決方案,基于ARM架構(gòu)的低功耗、高密存儲節(jié)點,領先的P2P分布式存儲引擎技術,以及業(yè)界首創(chuàng)面向海量數(shù)據(jù)存儲的SmartDisk智能硬盤技術支撐構(gòu)建海量對象存儲平臺,對外提供S3、NFS和CIFS等多種訪問接口,支撐企業(yè)海量對象資源池、云網(wǎng)盤、云備份及公有云對象存儲應用服務。
憑借多項業(yè)界領先的創(chuàng)新技術,華為對象存儲獲得2014年東京Interop“數(shù)據(jù)中心和存儲類特別大獎”,目前,華為對象存儲已服務于歐洲核子研究中心CERN、Vodafone、西班牙電信、新加坡StarHub以及鳳凰衛(wèi)視等行業(yè)客戶,支撐客戶全球化云運營與數(shù)字化轉(zhuǎn)型。
下一步 軟件定義云存儲
云計算的核心理念與***價值在于“軟件定義”,同樣,***的挑戰(zhàn)也在“軟件定義”,它強調(diào)企業(yè)以全新的模式管理數(shù)據(jù)中心存儲、計算與網(wǎng)絡等基礎架構(gòu)資源。這種模式摒棄了傳統(tǒng)基礎架構(gòu)煙囪式的系統(tǒng)構(gòu)建方式,看重資源的集約共享、彈性按需使用,更強調(diào)以最經(jīng)濟的投資***化應用和數(shù)據(jù)價值。
對于數(shù)據(jù)存取的載體——存儲系統(tǒng)而言,更是如此,可是企業(yè)上層應用紛繁復雜,往往導致數(shù)據(jù)存取問題與需求多種多樣:
數(shù)據(jù)類型的復雜多樣,例如結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)共存,傳統(tǒng)塊存儲、文件存儲和對象存儲煙囪式、孤島化構(gòu)建方式導致資源利用不均衡;
數(shù)據(jù)存取效率需求多樣與不確定,例如熱數(shù)據(jù)、冷數(shù)據(jù)如何更有效管理;
數(shù)據(jù)的階段性存儲需求量不確定,需要存儲系統(tǒng)能在考慮經(jīng)濟性的情況下,滿足數(shù)據(jù)爆發(fā)式增長的資源需求。
同時,不同企業(yè)的“云轉(zhuǎn)型”策略與演進步調(diào)也不盡相同,這體現(xiàn)在是該選擇私有云、混合云還是公有云架構(gòu),作為其起點平臺,實現(xiàn)企業(yè)“華麗轉(zhuǎn)身”,所謂“華麗轉(zhuǎn)身”,要由傳統(tǒng)基礎架構(gòu)“平滑”演進到云。
存儲系統(tǒng)作為數(shù)據(jù)載體,如何支撐企業(yè)向云的演進呢?以滿足數(shù)據(jù)敏捷存儲需求為特征的軟件定義存儲,成為企業(yè)管理新型云應用以及龐大數(shù)據(jù)的不二之選。
軟件定義存儲是未來存儲的方向,“消除資源孤島、極簡化硬件平臺、自動化資源管理、業(yè)務驅(qū)動的彈性資源供給”——是“全面云化”基礎架構(gòu)對敏捷存儲系統(tǒng)的新訴求,無疑也是華為存儲下一步的演進方向。
在基于分布式架構(gòu)的塊存儲、文件存儲及對象存儲領域,華為存儲持續(xù)技術積累并保持創(chuàng)新能力,其天然具備的“海量、彈性”等云技術基因,為其產(chǎn)品解決方案下一步跨越式演進作好了充分準備。8月31日至9月2日,HUAWEI CONNECT 2016將正式召開,華為將在大會上發(fā)布云存儲領域的全新產(chǎn)品,讓我們一起拭目以待吧!