如今，大數(shù)據(jù)和分析正在進入更加成熟的部署階段。這對于那些正在部署這些技術(shù)的中小型企業(yè)來說是一個好消息，他們一直在努力為他們的公司定義一個大數(shù)據(jù)架構(gòu)。

關(guān)于如何定義大數(shù)據(jù)和分析的總體架構(gòu)的不確定性是中小企業(yè)在大數(shù)據(jù)和分析部署方面落后的原因之一。在很多情況下，對于混合計算、數(shù)據(jù)集市、主數(shù)據(jù)庫等趨勢發(fā)展情況，以及對安全和治理的控制將如何發(fā)揮，他們正在等待和觀望。

[[212534]]

最后，將會提供一個大家都可以遵循的新興的最佳實踐數(shù)據(jù)架構(gòu)。在這個架構(gòu)中：云計算服務(wù)正被用于存儲和處理大數(shù)據(jù)，而內(nèi)部部署數(shù)據(jù)中心用于在企業(yè)開發(fā)本地數(shù)據(jù)集市。

以下來仔細看看這個大數(shù)據(jù)和分析架構(gòu)背后的原因：

云計算的作用

如果企業(yè)規(guī)模較小，那么購買在數(shù)據(jù)中心并行處理大數(shù)據(jù)的服務(wù)器集群是很昂貴的，更不用說雇傭或培訓(xùn)那些知道如何優(yōu)化、升級和維護并行處理環(huán)境的非常昂貴的專業(yè)人員了。選擇現(xiàn)場處理和存儲數(shù)據(jù)的企業(yè)也對硬件、軟件和存儲設(shè)備進行了大量投資。而采購大數(shù)據(jù)硬件和軟件，以及將計算處理和存儲外包給云端，所有這些都將花費大量的費用。

內(nèi)部部署計算

數(shù)據(jù)治理(例如，安全和合規(guī)性問題)是企業(yè)不愿將所有任務(wù)關(guān)鍵型數(shù)據(jù)交付給云計算的原因之一，因為這些云計算數(shù)據(jù)的管理更加困難。因此，一旦數(shù)據(jù)在云端處理完畢，許多企業(yè)選擇將數(shù)據(jù)遷移到自己的內(nèi)部數(shù)據(jù)中心。

許多企業(yè)選擇使用他們的數(shù)據(jù)中心還有另一個原因：關(guān)注開發(fā)這些數(shù)據(jù)的專有應(yīng)用程序和算法，因為許多云計算提供商的政策是客戶在云端開發(fā)的任何應(yīng)用程序可能會與其他客戶共享。

通過將應(yīng)用程序保留在內(nèi)部部署的數(shù)據(jù)中心，并開發(fā)一個可以將較小的數(shù)據(jù)集市從中分離出來的本地主數(shù)據(jù)集，企業(yè)可以直接控制其數(shù)據(jù)和應(yīng)用程序。

分析管理者需要什么?

(1)企業(yè)應(yīng)該了解并同意其云計算提供商處理和保護自己的數(shù)據(jù)

例如，如果企業(yè)需要對數(shù)據(jù)進行匿名化處理，則應(yīng)該將其實施的過程記錄下來，并與其云計算提供商達成一致，因為云計算提供商將進行匿名化處理。如果企業(yè)想清理自己的數(shù)據(jù)，其清理的過程也應(yīng)該向其云計算提供商提供詳細的書面說明。例如，企業(yè)是否只希望將美國所有州的縮寫進行統(tǒng)一(例如，“Tenn”和“Tennessee”=“TN”)還是要對數(shù)據(jù)進行其他編輯，以便統(tǒng)一且易于處理?最后，無論企業(yè)的業(yè)務(wù)是運行在云計算服務(wù)提供商的專用租戶還是多租戶環(huán)境中，云計算提供商都應(yīng)該能夠保證企業(yè)的數(shù)據(jù)永遠不會與其他客戶共享。

(2)企業(yè)的本地大數(shù)據(jù)和分析架構(gòu)應(yīng)該記錄符合大數(shù)據(jù)需求的新政策和程序

企業(yè)的許多IT部門完全錯過了這個任務(wù)。他們只是開始實施大數(shù)據(jù)項目，卻忘記現(xiàn)有的應(yīng)用程序開發(fā)政策和程序來自交易的應(yīng)用領(lǐng)域。企業(yè)不要犯這個錯誤。與其相反，企業(yè)需要在與大數(shù)據(jù)交互的可能性較高的領(lǐng)域(如存儲、數(shù)據(jù)庫管理、應(yīng)用程序)中修改政策和程序。

(3)災(zāi)難恢復(fù)計劃應(yīng)在內(nèi)部部署和云端部署時更新和測試大數(shù)據(jù)

在進行基于云端的災(zāi)難恢復(fù)(DR)測試的情況下，企業(yè)應(yīng)該在合同中包含用于記錄和執(zhí)行災(zāi)難恢復(fù)(DR)的規(guī)定。災(zāi)難恢復(fù)(DR)計劃(側(cè)重于事務(wù)數(shù)據(jù)和系統(tǒng))也應(yīng)該及時更新，并包括大數(shù)據(jù)和分析的恢復(fù)和測試腳本的恢復(fù)。