實時分析面臨的12道坎
譯文【51CTO.com快譯】“實時”分析對你和你公司來說意味著什么?
多年來,業(yè)務(wù)用戶一直要求IT部門提供實時分析功能,可是并非提出要求的每個用戶都果真需要,有的甚至不知道實時分析意味著什么。改用實時分析的高昂成本確實有必要嗎?雖然內(nèi)存、存儲和帶寬的價格都不斷下降,但是技術(shù)整合問題、流程問題和文化問題都需要考慮。
更讓人一頭霧水的是,“實時”方面缺乏標準化定義。“實時”可能指亞秒,也可能指24小時以上的一段時間,這取決于你問的是誰。
像內(nèi)存計算、Hadoop和Spark這些技術(shù)創(chuàng)新都旨在滿足對速度永無止境的要求。可是,許多老大難問題讓公司無法像業(yè)務(wù)領(lǐng)導人希望的那樣迅速前進。
格雷厄姆·克拉克(Graham Clark)是全球IT解決方案服務(wù)提供商NIIT Technologies的數(shù)字化服務(wù)主管,他在接受采訪時說:“IT部門常常沒有部署用來收集、管理和響應實時數(shù)據(jù)的平臺。這意味著試圖做出實時[動作]的任何做法都是有缺陷的,甚至是危險的。此外,創(chuàng)建和使用實時分析平臺需要實時的業(yè)務(wù)理念,這種理念需要滲透到整個企業(yè)。”
杰夫·維斯(Jeff Veis)是惠普企業(yè)(HPE)旗下惠普企業(yè)軟件部門主管大數(shù)據(jù)平臺營銷的副總裁,他在接受采訪時表示,公司應考慮使用場合作為所有項目的目標,而不是專注于實時分析。“畢竟,它在很大程度上取決于你需要答案有多快,如果業(yè)務(wù)部門能等待這種洞察力的話,要付出什么樣的代價。”
越來越多的公司在考慮不實施實時分析的成本。如今,響應時間被認為是一種競爭武器;一些觀察人士認為,由于物聯(lián)網(wǎng)設(shè)備數(shù)量激增,這個趨勢會變得更加明顯。然而,加快業(yè)務(wù)流程帶來了風險,我們考慮潛在好處時也要權(quán)衡這些風險。
NYC Data Science Academy的創(chuàng)始人兼***技術(shù)官薇薇安·張(Vivian Zhang)在接受采訪時說:“人們可能會走極端,要求實時收集和使用所有的可用數(shù)據(jù),但并非所有數(shù)據(jù)都同等重要。一些數(shù)據(jù)很重要,一些數(shù)據(jù)不重要。如果你把太多的干擾或無關(guān)信息放入到數(shù)據(jù)管道,它可能毫無幫助,可能會對公司里面發(fā)生的一切產(chǎn)生錯覺。”
簡而言之,別低估了做好實時分析所需要的前提,因為這個過程中許多方面可能會出錯。下面是成功道路上面臨的幾個最常見的障礙。
1. 沒人知道實時的真正含義。
廠商們吹噓實時分析軟件有多好,沒有種種的IT頭痛問題和策略,結(jié)果業(yè)務(wù)主管信以為真。實時分析似乎很簡單。無論誰購買和實施實時分析功能,明白用戶對于實時的認識很明智,因為他們的定義有可能相差懸殊。
NIIT的格雷厄姆·克拉克說:“實時意味著即時,但我們認為實時是盡快。最重要的是,它是客戶需要的那種實時。一家金融服務(wù)交易公司可能迷戀于微秒和納秒級響應,尋找廉價機票的顧客可能有兩個月的窗口期。從客戶需求開始入手,再作相應打算。”
2. 業(yè)務(wù)和IT有分歧。
集中式IT常常成為阻礙進步的瓶頸。同時,影子IT現(xiàn)象引起了碎片化,影子IT是指業(yè)務(wù)部門不有勞IT部門,就能夠自行做出軟件采購方面的一些決策。因而帶來的問題解決起來可能難度大、成本高、耗時久,牽涉面大。
大數(shù)據(jù)分析平臺廠商Datameer的市場戰(zhàn)略和情報部門高級主管安德魯·布魯斯特(Andrew Brust)在接受采訪時說:“面臨一道微妙平衡的難題,可能很難解決這個問題。業(yè)務(wù)部門需要自主權(quán),以便能完成工作,而這種自主權(quán)惠及IT部門,因為減少了積壓的工作量。”
“但IT部門必須參與其中,能夠了解和監(jiān)控業(yè)務(wù)部門所做的工作,并確認數(shù)據(jù)和分析的有效性。公司往往發(fā)現(xiàn)自己沒有做好這種平衡,不是業(yè)務(wù)部門的做法不受約束,就是IT部門成為阻礙進步的一大瓶頸。”
3. 事后才想到數(shù)據(jù)治理。
在合理的治理控制措施沒到位的情況下移動數(shù)據(jù)會讓貴企業(yè)面臨不必要的風險。影子IT常常是罪魁禍首。
商業(yè)智能和分析軟件廠商TARGIT的***技術(shù)官烏爾里克·佩德森(Ulrik Pedersen)在接受采訪時說:“與任何數(shù)據(jù)治理策略一樣,數(shù)據(jù)在進入到整個商業(yè)智能實踐之前,必須加以測試和驗證。”
“就實時數(shù)據(jù)而言,這很難做到,因為在數(shù)據(jù)送到用戶之前沒時間來清理數(shù)據(jù)。這就是為什么編寫能夠處理諸多數(shù)據(jù)問題的查詢至關(guān)重要,比如缺失值、缺失記錄、其他數(shù)據(jù)錄入錯誤,為什么編寫足夠智能化、可處理異常情況的計算方法至關(guān)重要。”
4. 迅速獲得洞察力后,迅速行動沒跟上。
你認為需要實時數(shù)據(jù)。但貴企業(yè)到底多久之后才根據(jù)提供的洞察力采取行動?當然,一些實時系統(tǒng)包括自動化決策機制。但是在決策支持場景下,人類應對實時信息的能力表明,真正的實時功能并不是那么實用。
數(shù)字化體驗公司76Design的總裁馬塞洛·伯茲斯泰恩(Marcelo Burzstein)說:“在我看來,這酷似‘皇帝的新裝’。大多數(shù)時候似乎了解情況,而不是響應實際要求。實際上,我發(fā)現(xiàn)人們越是了解實時分析和預測方法,比如線性回歸及其他機器學習算法,就越認識到實時分析可能并不是最適合其使用場合的模式。”
5. 技術(shù)和文化沒有齊頭并進。
技術(shù)創(chuàng)新的步伐總是比企業(yè)文化來得快?,F(xiàn)有的基礎(chǔ)設(shè)施和需要快速移動有時不一致,不是減慢了數(shù)據(jù)流動,就是帶來了將來會出現(xiàn)的棘手問題。
分析軟件廠商LatentView Analytics的創(chuàng)新和技術(shù)主管拉梅什·哈里哈蘭(Ramesh Hariharan)在接受采訪時說:“IT部門已在傳統(tǒng)的數(shù)據(jù)倉庫和商業(yè)智能系統(tǒng)方面投入了巨資,這些系統(tǒng)并不總是支持實時使用場合。另一個原因是用來交付這些功能的流程。企業(yè)更關(guān)注敏捷性,可能會犧牲擴展性和企業(yè)層面的其他考慮因素。”
6. 價值主張轉(zhuǎn)變。
移動和物聯(lián)網(wǎng)需要更快的響應時間,這取決于業(yè)務(wù)場景。比如說,物聯(lián)網(wǎng)分析涉及邊緣的自動化決策,以便降低成本、縮短響應時間。
內(nèi)存計算平臺廠商ScaleOut軟件公司的***執(zhí)行官兼創(chuàng)始人威廉·貝恩(Willian Bain)在接受采訪時說:“獲取實時分析的價值需要IT和業(yè)務(wù)部門的采購員重新考慮分析技術(shù)如何整合到關(guān)鍵任務(wù)型系統(tǒng)。不是將這項技術(shù)局限于數(shù)據(jù)倉庫,作為獨立的實體加以管理,現(xiàn)在它可以直接整合到關(guān)鍵任務(wù)型系統(tǒng),比如生產(chǎn)線、物聯(lián)網(wǎng)遙測路徑和電子商務(wù)網(wǎng)站。”
7. 短視策略。
實時分析僅僅是另一個IT項目,還是說它是一項重要的企業(yè)能力?從長遠來看,把它視作需要處理的另一個項目危害很大。不要一開始就搞成本高昂的大項目,需要兩三年時間來實施。需求會不斷變化。
NIIT Technologies的格雷厄姆·克拉克說:“運營實時分析驅(qū)動的商業(yè)模式,以提供實時預測和實時方案,這是一種全新的思路。普遍的觀念是,可以通過一個項目獲得實時分析的結(jié)果,而我們的經(jīng)驗表明,成功的實時分析是個初始項目,一套長期永遠優(yōu)化的流程需要跟上。”
8. 高層管理班子沒搞懂。
高層管理班子的任務(wù)就是,明白解決了哪些具體的問題,在獲得哪些具體的業(yè)務(wù)機會,以及那些項目的可量化結(jié)果。遺憾的是,高層管理班子常常對于需要什么來實現(xiàn)實時分析抱有不切實際的期望。
LatentView Analytics的拉梅什·哈里哈蘭在接受采訪時說: “高層管理班子應該明白,實時分析不是一蹴而就的,而是建立在整個企業(yè)投入于良好的數(shù)據(jù)基礎(chǔ)設(shè)施上。實時分析建立在實時數(shù)據(jù)收集和數(shù)據(jù)移動(相當于ETL)的基礎(chǔ)上。手頭有沒有技術(shù)通常不是障礙??创褪褂眉夹g(shù)的方式才是真正的障礙。”
9. 技術(shù)復雜性延長了響應時間。
提供實時信息面臨許多障礙。內(nèi)存技術(shù)廠商在解決響應時間。經(jīng)過改進的API有助于處理集成問題。 Hadoop和云在解決容量問題。這些是最適合實時分析使用場合的選擇嗎?
惠普企業(yè)的杰夫·維斯說:“業(yè)務(wù)用戶對于實時分析可能抱有的***的不切實際的期望就是,規(guī)模以及實時系統(tǒng)的開放功能。由于實時分析必須按準確的時間間隔來執(zhí)行,為系統(tǒng)引入新的數(shù)據(jù)源、更多數(shù)據(jù)或者新的分析工具都會干擾這種時序。公司別指望實時分析有***的規(guī)模,也別指望它可以支持***的用戶或***的數(shù)據(jù)量。”
10.價值沒有得到理解。
任何技術(shù)項目要是沒有與某種投資回報率(成本/效益分析)和度量指標聯(lián)系起來,注定要失敗。說到實時分析,IT部門往往關(guān)注成本,而業(yè)務(wù)部門往往關(guān)注機會。常常忽視了機會成本,即不采取行動的成本。
Datameer的安德魯·布魯斯特說:“高層管理班子應明白,如果等待響應業(yè)務(wù)現(xiàn)象時間較長,會蒙受多大的損失。對場景進行一番分析,看看更早行動會不會給賬本底線帶來重大的積極影響。如果響應過快有風險,那些同樣應考慮在內(nèi)。這有助于設(shè)定期望和需求,切實地了解項目預算和超支容許范圍。”
11.高層管理班子錯失機會。
實時分析有助于帶來新的商業(yè)模式。公司和整個行業(yè)正受到創(chuàng)新者的顛覆,他們在使用包括實時分析在內(nèi)的功能,改變傳統(tǒng)行業(yè)的規(guī)則。
企業(yè)商業(yè)智能軟件公司Information Builders的CIO雷多·科托洛夫(Rado Kotorov)說:“許多高層管理人員錯過了Uber革命,這就是為什么他們沒有辦法從概念上思考實時設(shè)計支持要求。他們要考慮哪些種類的實時決策可以帶來更多業(yè)務(wù)。”
12. 明明及時可以,非要實時。
篩查實時系統(tǒng)請求時,IT部門不得不考慮業(yè)務(wù)部門及客戶的實際時間要求、實施成本和投資回報率。如果實時顯然很重要,比如說可能會瞬間損失數(shù)百萬美元或性命,那么決定很顯然。而在不太重要的情況下,要不要實時大有爭論的余地。
惠普企業(yè)的維斯說:“決定改用實時分析的關(guān)鍵完全取決于業(yè)務(wù)使用場合。”比如說,如果公司想要一個開放的系統(tǒng),一個項目能承受不太精確的服務(wù)級別,“一種不同的‘及時’分析系統(tǒng)反而比實時分析系統(tǒng)來得更靈活、更省錢。”
【51CTO譯稿,合作站點轉(zhuǎn)載請注明原文譯者和出處為51CTO.com】




























