大數(shù)據(jù)時代到來

隨著信息化技術(shù)的不斷發(fā)展，數(shù)字化現(xiàn)在已經(jīng)深深的滲透進了我們生活中的點點滴滴。生活在Web 2.0 時代的我們，已經(jīng)不僅僅是一個信息的被動接受者，同時還是一個信息的創(chuàng)造者。全球每秒鐘發(fā)送290萬封電子郵件;Twitter上每天發(fā)布5千萬條消息;每天亞馬遜上將產(chǎn)生630萬筆訂單;每個月網(wǎng)民在Facebook 上要花費7 千億分鐘;一個8Mbps(兆比特每秒)的攝像頭一小時能產(chǎn)生3.6GB數(shù)據(jù)，一個城市若安裝幾十萬個交通和安防攝像頭，每月產(chǎn)生的數(shù)據(jù)量將達(dá)幾十PB;一個病人的CT影像數(shù)據(jù)量達(dá)幾十GB，而全國每年門診人數(shù)以數(shù)十億計，并且他們的信息需要長時間保存?？傊髷?shù)據(jù)存在于各行各業(yè)，一個大數(shù)據(jù)時代正在到來。

由于數(shù)據(jù)產(chǎn)生成本急速下降，人類產(chǎn)生的數(shù)據(jù)量正在呈指數(shù)級增長，而大量新數(shù)據(jù)源的出現(xiàn)則導(dǎo)致了非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)爆發(fā)式的增長，數(shù)據(jù)的結(jié)構(gòu)正在日趨復(fù)雜。全球在2010年正式進入ZB時代，根據(jù)IDC監(jiān)測，全球數(shù)據(jù)量大約每兩年翻一番，預(yù)計到2020年，全球?qū)⒖偣矒碛?0ZB的數(shù)據(jù)量，相較于2009年，數(shù)據(jù)量將增長近50倍。我們正處于大數(shù)據(jù)時代的邊緣。

CIO們遇到的挑戰(zhàn)

1) 新生代客戶群的需求推動企業(yè)業(yè)務(wù)面臨轉(zhuǎn)型挑戰(zhàn)，驅(qū)動企業(yè)IT基礎(chǔ)設(shè)施變革適應(yīng)大數(shù)據(jù)時代要求。影響企業(yè)命脈的，永遠(yuǎn)都是客戶需求。新生代客戶手持Post-PC，除了工資以外使用各種投資方式積累財富，每天關(guān)注微博，在社交網(wǎng)站中維系人際關(guān)系，青睞網(wǎng)購，要求享受自由的、共享的、娛樂的、完美的信息生活。這個過程將產(chǎn)生大量數(shù)據(jù)，這些ZB級的數(shù)據(jù)管理和數(shù)據(jù)分析，將不是傳統(tǒng)的IT服務(wù)器、磁帶、縱向擴展設(shè)備能夠承載的。

2) 世界經(jīng)濟形勢趨緊，高額的IT預(yù)算，究竟應(yīng)該在哪里投入?據(jù)調(diào)查，企業(yè)目前73%的預(yù)算都用在基本業(yè)務(wù)運轉(zhuǎn)上，剩下的27%才對商業(yè)運營有支撐作用。CIO的難處在于IT設(shè)施不斷的膨脹，僅僅是因為業(yè)務(wù)的數(shù)量漲了，但是沒有給企業(yè)經(jīng)營帶來真正的增值。值得注意的，未來一到兩年，70%的客戶都將部署私有云，當(dāng)大數(shù)據(jù)遇到云，會同時對私有云架構(gòu)提出要求和挑戰(zhàn)。同時公有云會繼續(xù)擴張和蔓延，催生新型企業(yè)和新型業(yè)務(wù)。另外值得探討的是，為了應(yīng)對“大數(shù)據(jù)”浪潮，很多企業(yè)在具備一定結(jié)構(gòu)化處理能力的基礎(chǔ)上，將85%以上非結(jié)構(gòu)化數(shù)據(jù)依托給了Hadoop，隨著對Hadoop的深入探索，有投資人給出這樣的感受——使用Hadoop構(gòu)建分析性查詢，會變成類似用錘子來建造房屋的活動，不是不可能，但是會帶來不必要的痛苦和可笑的低效成本。主要的痛點在于：

Hadoop適合處理流水線任務(wù)，但是對于特定的數(shù)據(jù)模式分析任務(wù)性能極低;

Hadoop的前期投入低廉，但是后期開發(fā)成本和維護成本非常昂貴;

Hadoop導(dǎo)致企業(yè)信息孤島;

Hadoop的數(shù)據(jù)容易產(chǎn)生單點故障。

華為大數(shù)據(jù)解決之道：應(yīng)需而變，融易致遠(yuǎn)

大數(shù)據(jù)時代，華為推出了“三位一體”的大數(shù)據(jù)解決方案：N9000存儲系統(tǒng)。N9000以“應(yīng)需而變，融易致遠(yuǎn)”的理念幫助客戶從容應(yīng)對大數(shù)據(jù)的挑戰(zhàn)。

圖1：“三位一體”示意圖

N9000是在一個系統(tǒng)內(nèi)融合數(shù)據(jù)存儲、數(shù)據(jù)分析和數(shù)據(jù)歸檔，三種功能集于一體。具有以下特點：它能解決信息孤島，用統(tǒng)一的并行任務(wù)調(diào)度框架支撐結(jié)構(gòu)化、非結(jié)構(gòu)化海量數(shù)據(jù)清洗、數(shù)據(jù)分析;通過對海量數(shù)據(jù)的生命周期管理，支持歷史數(shù)據(jù)的歸檔、壓縮、下電策略;基于海量非結(jié)構(gòu)化數(shù)據(jù)的內(nèi)容感知(元數(shù)據(jù)管理)，建立海量非結(jié)構(gòu)化數(shù)據(jù)的搜索引擎，加速熱點數(shù)據(jù)的快速訪問;并且其彈性空間能夠支持初始低配置，隨著客戶業(yè)務(wù)的發(fā)展，容量和性能可以隨需擴展，并實現(xiàn)性能線性增長，保護客戶初始投資，降低TCO。

華為憑借性能、大規(guī)模橫向擴展能力和超大單一文件系統(tǒng)為用戶提供結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)共享資源池、基于數(shù)據(jù)全生命周期管理的存儲與歸檔解決方案，充分切合廣電媒體、高性能計算、地質(zhì)能源、數(shù)據(jù)中心存儲、互聯(lián)網(wǎng)運營等多種大數(shù)據(jù)業(yè)務(wù)應(yīng)用的需求，幫助客戶輕松應(yīng)對大數(shù)據(jù)挑戰(zhàn)。