軟件初創(chuàng)廠商AtScale公司去年年底發(fā)布了其年度大數(shù)據(jù)成熟度調(diào)查報(bào)告(以前稱為“Hadoop成熟度調(diào)查”)，顯示商業(yè)智能大數(shù)據(jù)是首要任務(wù)，并正處于云計(jì)算的快速發(fā)展階段，數(shù)據(jù)治理越來越受到關(guān)注。

該報(bào)告及其結(jié)果在最近ODPi用戶顧問委員會(huì)(UAB)的會(huì)議上成為了一個(gè)主要的討論話題，ODPi用戶顧問委員會(huì)(UAB)是由來自汽車，技術(shù)和娛樂行業(yè)等使用Apache Hadoop和其他大數(shù)據(jù)技術(shù)的大型企業(yè)的代表組成。ODPi UAB十分認(rèn)同報(bào)告中所提出的日益增長(zhǎng)的數(shù)據(jù)治理問題。自助服務(wù)訪問大數(shù)據(jù)和這種自助服務(wù)的治理確實(shí)觸動(dòng)了人們的心弦。行業(yè)專家討論了讓人們幫助推動(dòng)自助服務(wù)訪問政策的概念，這反映出越來越多的數(shù)據(jù)科學(xué)家是業(yè)務(wù)部門的一部分，而不是IT部門。該小組一致認(rèn)為，僅持有治理和安全控制的IT目前的狀態(tài)是不具成本效益的，而自治可能是一種幫助規(guī)模使用的策略。

關(guān)于云計(jì)算中大數(shù)據(jù)的主題，ODPi UAB在混合云模型中看到了他們的未來。雖然他們認(rèn)為人們將在未來三年內(nèi)看到云計(jì)算更多的應(yīng)用，但他們將會(huì)在現(xiàn)有投資的基礎(chǔ)上開展，而不是完全取代現(xiàn)有的投資。此外，ODPi UAB認(rèn)為現(xiàn)有的中央處理與本地處理節(jié)點(diǎn)相輔相成，以幫助擴(kuò)大需求，更好地遵守法規(guī)。目前，UAB成員看到全面擴(kuò)展到云計(jì)算成本過高，但隨著物聯(lián)網(wǎng)數(shù)據(jù)本身運(yùn)行的用例開始增長(zhǎng)，云計(jì)算將變得更加有趣。

[[207721]]

在ODPiUAB闡述之后，然后回到企業(yè)自己的使用模式。在本文中將介紹這些使用模式，ODPiUAB提供的見解以及云計(jì)算在Hadoop和大數(shù)據(jù)中的作用的體驗(yàn)。預(yù)生產(chǎn)和生產(chǎn)Hadoop之間有明顯的區(qū)別。

表1概述了隨著企業(yè)使用情況的變化，運(yùn)營(yíng)Hadoop的核心差異。

AtScale公司的報(bào)告指出，73%的受訪者在使用生產(chǎn)，與2015年同期相比增長(zhǎng)了8%。調(diào)研機(jī)構(gòu)Gartner公司的業(yè)務(wù)調(diào)查報(bào)告為15%以上。由于在數(shù)量上有如此大的差異，很明顯在行業(yè)中部署階段的基線定義并不明確。UAB和ODPi成員在這里已經(jīng)提出了這個(gè)詳細(xì)的部署，認(rèn)為它們與市場(chǎng)準(zhǔn)確匹配。

企業(yè)Hadoop部署連續(xù)性

繪制出適合于連續(xù)性的位置，可以更客觀地看待生產(chǎn)使用情況。

分析大數(shù)據(jù)的云計(jì)算

雖然72%的受訪者表示計(jì)劃在云端實(shí)施大數(shù)據(jù)，但更深入的分析可能會(huì)顯示出一些重要的細(xì)微差別。UAB成員希捷技術(shù)公司企業(yè)分析總監(jiān)Nicholas Berg表示：“要進(jìn)行深入研究，人們還會(huì)問：企業(yè)的應(yīng)用程序和IT在本地部署數(shù)據(jù)中心和云計(jì)算中的比例是多少?企業(yè)的大數(shù)據(jù)在本地部署數(shù)據(jù)中心和云計(jì)算中的比例是多少?最后，企業(yè)在云中的實(shí)際生產(chǎn)有多少?我敢打賭這個(gè)百分比要小得多。”

另一個(gè)ODPiUAB成員評(píng)論說：“我認(rèn)為很多公司只是在云中進(jìn)行概念驗(yàn)證(POC)測(cè)試，但仍然在內(nèi)部數(shù)據(jù)中心進(jìn)行生產(chǎn)部署。”UAB認(rèn)為，這里的主要驅(qū)動(dòng)力是人們認(rèn)識(shí)到IT需要最大限度地降低風(fēng)險(xiǎn)和成本。

這引出了云計(jì)算中最大的沒有解決的問題：成本。多年來，云計(jì)算供應(yīng)商一直在推動(dòng)“降低成本和復(fù)雜性-走向云”的敘述，“避免服務(wù)器采購的資本支出-只是利用云”等等。然而，ODPiUAB明確的一個(gè)因素是，當(dāng)企業(yè)擴(kuò)大規(guī)模時(shí)，云計(jì)算將變得更昂貴。

ODPi UAB一位成員談到自己的經(jīng)驗(yàn)，并表示，“最近，我們已經(jīng)對(duì)數(shù)字不起作用做了一些成本分析，而不是當(dāng)人們談?wù)撊肟诨虺隹跀?shù)據(jù)量時(shí)重新考慮。這就是云供應(yīng)商的成本真正開始飛漲的地方，因此，當(dāng)企業(yè)完全轉(zhuǎn)向云端時(shí)數(shù)字不起作用。所以我們?nèi)匀辉诳紤]實(shí)驗(yàn)的目的，但是沒有看到人們?nèi)绾瓮耆苿?dòng)到云端，甚至考慮把大量的系統(tǒng)移到那里。我發(fā)現(xiàn)云端工作適用于小規(guī)模的子集，如果企業(yè)愿意，這可能是一種聚合，但是一旦試圖進(jìn)行長(zhǎng)期的存儲(chǔ)，它將使成本增加的非?？焖佟?rdquo;

這是否意味著ODPi UAB成員感覺到Hadoop和云中的大數(shù)據(jù)是注定失敗的，除非成本下降?當(dāng)然不是。對(duì)他們來說，問題在于云計(jì)算的敘述，而在場(chǎng)景上，不斷被認(rèn)為是““非此即彼”的討論，而不是“兩者兼用”的討論。

云計(jì)算：物聯(lián)網(wǎng)數(shù)據(jù)的用例

ODPi UAB的一位成員分享了一個(gè)物聯(lián)網(wǎng)數(shù)據(jù)的使用情況，“當(dāng)企業(yè)正在考慮解決某些問題時(shí)，將不同區(qū)域的數(shù)據(jù)轉(zhuǎn)移到云計(jì)算中處理，云計(jì)算開始變得更有意義。當(dāng)人們開始談?wù)撐锫?lián)網(wǎng)時(shí)尤其如此，企業(yè)難道真的想在自己的數(shù)據(jù)中心運(yùn)行所有的物聯(lián)網(wǎng)數(shù)據(jù)嗎?人們查看一下描述的用例，就會(huì)發(fā)現(xiàn)所有的數(shù)據(jù)在自己的數(shù)據(jù)中心將面臨一些問題，無論是在數(shù)量上還是在法律上。例如德國(guó)等一些國(guó)家，除非要在這些國(guó)家建立數(shù)據(jù)中心。”而其他專家也贊同這種看法。他說：”我們認(rèn)為云平臺(tái)的存在也是一個(gè)挑戰(zhàn)，特別是作為一家在全球各地設(shè)有辦事處的全球性公司，如果不想在每個(gè)國(guó)家和地我建立數(shù)據(jù)中心，那么采用云計(jì)算是一個(gè)很好的選擇。”

從上述所有ODPi UAB反饋意見來看，很明顯，云計(jì)算將繼續(xù)成為Hadoop和大數(shù)據(jù)的一個(gè)組成部分，但與組織的成本和效率需求保持一致。換句話說，就像其他技術(shù)轉(zhuǎn)向云端一樣，最現(xiàn)實(shí)的答案往往在某種形式的混合中。Nicholas Berg說，“我想隨著時(shí)間的推移，Hadoop將在云中的應(yīng)用更加廣泛，希望其成本結(jié)構(gòu)變得更加合理，事情就會(huì)開始轉(zhuǎn)變。我認(rèn)為這是會(huì)發(fā)生的，只是時(shí)間問題。我們可能總是有某種混合部署，隨著經(jīng)濟(jì)和用例更好地隨著時(shí)間的推移，云計(jì)算的使用率可能會(huì)更高。”

下一件大事

人們生活在行業(yè)中，坦率地說是一個(gè)世界中-而尋求下一件大事情，將會(huì)激發(fā)行業(yè)人士成長(zhǎng)和發(fā)展的愿望。行業(yè)先鋒經(jīng)常拒絕接受現(xiàn)狀，認(rèn)識(shí)到完美從未實(shí)現(xiàn)，并總是不斷追求。正如Vince Lombardi曾經(jīng)說過，“完美是無法實(shí)現(xiàn)的，但如果我們追求完美，那么我們可以實(shí)現(xiàn)卓越。”

話雖如此，有一件很少有成果的事情就是強(qiáng)化創(chuàng)新。順應(yīng)技術(shù)潮流，應(yīng)對(duì)現(xiàn)代生活的挑戰(zhàn)和機(jī)遇，如果你聽過專業(yè)運(yùn)動(dòng)員的采訪，他們總是會(huì)說下一步要達(dá)到什么目標(biāo)，技術(shù)也是如此，但規(guī)模更大，人們對(duì)此并不總是很清楚。