從數(shù)據(jù)倉庫到數(shù)據(jù)飛輪,看傳統(tǒng)服務(wù)行業(yè)的數(shù)字化轉(zhuǎn)型進(jìn)化
背景:
數(shù)字經(jīng)濟(jì)時(shí)代,隨著5G,物聯(lián)網(wǎng),大數(shù)據(jù),云計(jì)算,區(qū)塊鏈等技術(shù)的應(yīng)用,企業(yè)由原來單純的重視產(chǎn)品為中心,
發(fā)展到產(chǎn)品本身和產(chǎn)品服務(wù)并重,客戶服務(wù)成為企業(yè)運(yùn)營的生命線,數(shù)字經(jīng)濟(jì)時(shí)代呼喚客戶數(shù)字化服務(wù)轉(zhuǎn)型,重塑數(shù)字化服務(wù)新體系,數(shù)字化服務(wù)呈現(xiàn)在線化,
平臺(tái)化,智慧化,透明化等特點(diǎn)。數(shù)字化服務(wù)轉(zhuǎn)型策略為:服務(wù)意識的數(shù)字化轉(zhuǎn)型,由被動(dòng)服務(wù)向合作共贏的服務(wù)生態(tài)轉(zhuǎn)變;
服務(wù)能力的數(shù)字化轉(zhuǎn)型,由傳統(tǒng)后置服務(wù)向個(gè)性化智慧服務(wù)轉(zhuǎn)變;服務(wù)體驗(yàn)的數(shù)字化轉(zhuǎn)型,由結(jié)果管理向全程體驗(yàn)管理轉(zhuǎn)變;服務(wù)價(jià)值的數(shù)字化轉(zhuǎn)型,由單純服務(wù)向創(chuàng)造價(jià)值服務(wù)轉(zhuǎn)變。
作為一名大數(shù)據(jù)工程師,深入?yún)⑴c了服務(wù)行業(yè)企業(yè)的數(shù)字化轉(zhuǎn)型,從最早期的Excel表格,到后來企業(yè)級數(shù)據(jù)庫的建立,發(fā)展到云計(jì)算,數(shù)據(jù)倉庫技術(shù),開始建設(shè)大一統(tǒng)數(shù)據(jù)中臺(tái),
積累了豐富的數(shù)據(jù)資源,再到數(shù)據(jù)資源的消費(fèi)轉(zhuǎn)化。每一次技術(shù)革新都見證了服務(wù)行業(yè)對數(shù)據(jù)價(jià)值認(rèn)知的深化和利用能力的提升。
數(shù)據(jù)革命進(jìn)化論:
1.數(shù)據(jù)倉庫:原始積累-數(shù)據(jù)本能的思考
企業(yè)發(fā)展到一定規(guī)模,企業(yè)積累了大量的原始數(shù)據(jù),為了更好的管理和利用數(shù)據(jù),打破數(shù)據(jù)孤島,以支持決策制定,業(yè)務(wù)分析和業(yè)務(wù)報(bào)告等,企業(yè)需要定期將冷數(shù)據(jù)從業(yè)務(wù)數(shù)據(jù)庫中轉(zhuǎn)移出來存儲(chǔ)到一個(gè)專門存放歷史數(shù)據(jù)的倉庫里面,各部門可以根據(jù)自身業(yè)務(wù)特性對外提供統(tǒng)一的數(shù)據(jù)服務(wù),這個(gè)倉庫就是數(shù)據(jù)倉庫。
數(shù)據(jù)倉庫(Data Warehoese)的特點(diǎn):面向主題的、集成的、穩(wěn)定的、反映歷史數(shù)據(jù)變化的。
面向主題的:數(shù)據(jù)倉庫是用來分析特點(diǎn)主題域的,所以說數(shù)據(jù)倉庫是面向主題的。例如,電商行業(yè)的主題域通常分為交易域、會(huì)員域、商品域等。
集成的:數(shù)據(jù)倉庫集成了多個(gè)數(shù)據(jù)源,同一主題或產(chǎn)品相關(guān)數(shù)據(jù)可能來自不同的系統(tǒng)不同類型的數(shù)據(jù)庫,日志文件等。
穩(wěn)定的:數(shù)據(jù)一旦進(jìn)入數(shù)據(jù)倉庫,則不可改變。數(shù)據(jù)倉庫的歷史數(shù)據(jù)是不應(yīng)該被更新的,同時(shí)存儲(chǔ)穩(wěn)定性較強(qiáng)
反映歷史數(shù)據(jù)變化的:數(shù)據(jù)倉庫保存了長期的歷史數(shù)據(jù),這點(diǎn)相對OLTP的數(shù)據(jù)庫而言。因?yàn)樾阅芸紤]后者統(tǒng)籌保存近期的熱數(shù)據(jù)。
從數(shù)據(jù)倉庫到數(shù)據(jù)飛輪,看傳統(tǒng)服務(wù)行業(yè)的數(shù)字化轉(zhuǎn)型進(jìn)化_數(shù)據(jù)飛輪
數(shù)據(jù)倉庫采用分層結(jié)構(gòu)。
ODS(Operational Data Store):定義為存儲(chǔ)層,僅以技術(shù)手段(存儲(chǔ)快照形式)保留歷史數(shù)據(jù),不作任何轉(zhuǎn)換,與業(yè)務(wù)側(cè)db實(shí)體保持同構(gòu)。
DWD(Data Warehouse Detail):定義為明細(xì)層,對數(shù)據(jù)進(jìn)行規(guī)范化(編碼轉(zhuǎn)換、清洗、統(tǒng)一格式、脫敏等),不做橫向整合。
DWS(Data Warehouse Service):定義為主題匯聚寬表層,對DWD各信息進(jìn)行聯(lián)合整合。
TDM (標(biāo)簽層):
ADS:定義為應(yīng)用層,面向業(yè)務(wù)需求進(jìn)行定制開發(fā)。
服務(wù)行業(yè)數(shù)字化轉(zhuǎn)型時(shí)間比較晚,但也積累了大量的業(yè)務(wù)數(shù)據(jù),作為下一步更新迭代的原始積累,隨著數(shù)據(jù)量的進(jìn)一步爆炸和業(yè)務(wù)需求的多樣化,數(shù)據(jù)倉庫逐漸顯露出其局限性。它雖然能夠存儲(chǔ)和管理大量數(shù)據(jù),但在數(shù)據(jù)處理的實(shí)時(shí)性、靈活性和效率方面難以滿足日益增長的需求。
2.數(shù)據(jù)中臺(tái):價(jià)值挖掘-數(shù)據(jù)組織的誕生
數(shù)據(jù)資源有了,但卻分散在數(shù)據(jù)倉庫中,并沒有形成資源整合,為了解決這個(gè)問題,數(shù)據(jù)中臺(tái)一度登上熱搜榜,數(shù)據(jù)中臺(tái)進(jìn)行資源整合,減少重復(fù)造輪子的問題,實(shí)現(xiàn)了數(shù)據(jù)和業(yè)務(wù)的聯(lián)系,使得各個(gè)業(yè)務(wù)部門直接共享數(shù)據(jù)資產(chǎn),并且以數(shù)據(jù)為驅(qū)動(dòng),自上而下設(shè)計(jì)加速企業(yè)從數(shù)據(jù)到業(yè)務(wù)價(jià)值的轉(zhuǎn)變過程。
下圖為數(shù)據(jù)中臺(tái)架構(gòu)圖,數(shù)據(jù)中臺(tái)的總體目標(biāo)是使數(shù)據(jù)產(chǎn)生業(yè)務(wù)價(jià)值。具體來說,企業(yè)可以通過建設(shè)數(shù)據(jù)中臺(tái)構(gòu)建各項(xiàng)能力,彌合數(shù)據(jù)供需鴻溝,使數(shù)據(jù)能夠驅(qū)動(dòng)企業(yè)提升經(jīng)營效率、實(shí)現(xiàn)業(yè)務(wù)價(jià)值。 這一目標(biāo)具體拆解開來包括快速響應(yīng)數(shù)據(jù)需求、建設(shè)統(tǒng)一數(shù)據(jù)平臺(tái)、打通企業(yè)數(shù)據(jù)資產(chǎn)、提供統(tǒng)一數(shù)據(jù)服務(wù)、數(shù)據(jù)直接參與業(yè)務(wù)、產(chǎn)生包括客戶價(jià)值在內(nèi)的企業(yè)價(jià)值等。
從數(shù)據(jù)倉庫到數(shù)據(jù)飛輪,看傳統(tǒng)服務(wù)行業(yè)的數(shù)字化轉(zhuǎn)型進(jìn)化_數(shù)據(jù)_02
傳統(tǒng)服務(wù)行業(yè)正式在這樣的基礎(chǔ)下,建立了這樣的數(shù)據(jù)組織,為企業(yè)提供更多更高效的數(shù)據(jù)應(yīng)用,打開了數(shù)據(jù)應(yīng)用場景在傳統(tǒng)行業(yè)的落地。
3.數(shù)據(jù)飛輪:進(jìn)化循環(huán)-數(shù)據(jù)資產(chǎn)消費(fèi)
有了好的平臺(tái),如何能讓價(jià)值循環(huán)起來,收益更大的價(jià)值?!帮w輪效應(yīng)”這個(gè)詞來源于亞馬遜,是指只要能夠利用客戶數(shù)據(jù)為第三方開發(fā)出增值服務(wù),就能支持公司持續(xù)地、免費(fèi)地為客戶提供更多的服務(wù),而更多的服務(wù)會(huì)產(chǎn)生更多的客戶行為數(shù)據(jù)。 同樣,利用這些新產(chǎn)生的數(shù)據(jù)又能為第三方提供新的增值服務(wù)。在近段時(shí)間的大模型帶動(dòng)下,數(shù)據(jù)飛輪也被越來越多的業(yè)內(nèi)人士所關(guān)注。
數(shù)據(jù)飛輪通過戰(zhàn)略性地使用數(shù)據(jù)來加速增加產(chǎn)品或流程的勢頭。飛輪在旋轉(zhuǎn)到自給自足的程度時(shí)會(huì)積聚能量。它使用信息來創(chuàng)建一個(gè)良性循環(huán),在這種循環(huán)中,更多的數(shù)據(jù)會(huì)帶來更快的學(xué)習(xí)曲線、更好的產(chǎn)品和更高的客戶獲取/保留率。有效的數(shù)據(jù)飛輪策略可以激發(fā)新產(chǎn)品創(chuàng)新、增加收入并提高利潤。
它是一個(gè)自我維持的系統(tǒng),專為數(shù)據(jù)驅(qū)動(dòng)型企業(yè)設(shè)計(jì),以利用數(shù)據(jù)收集、數(shù)據(jù)分析和行動(dòng)之間的相互作用。作為第一步,企業(yè)從各種來源收集數(shù)據(jù)。然后分析這些數(shù)據(jù)以提取有價(jià)值的見解,用于做出明智的決策。這些操作的結(jié)果會(huì)產(chǎn)生更多數(shù)據(jù),這些數(shù)據(jù)會(huì)反饋到飛輪中,使其加速。隨著時(shí)間的推移,數(shù)據(jù)飛輪可以幫助企業(yè)改進(jìn)他們的產(chǎn)品、增強(qiáng)他們的服務(wù)、個(gè)性化的客戶體驗(yàn)或優(yōu)化他們的運(yùn)營,逐漸創(chuàng)造競爭優(yōu)勢。
從數(shù)據(jù)倉庫到數(shù)據(jù)飛輪,看傳統(tǒng)服務(wù)行業(yè)的數(shù)字化轉(zhuǎn)型進(jìn)化_數(shù)據(jù)中臺(tái)_03
傳統(tǒng)行業(yè)的技術(shù)更新迭代沒有那么快,但我所從事的服務(wù)行業(yè)已經(jīng)意識到數(shù)據(jù)資產(chǎn)的重要性,也希望盡快能實(shí)現(xiàn)數(shù)據(jù)飛輪的落地,數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù),業(yè)務(wù)反哺數(shù)據(jù)循環(huán)起來的數(shù)據(jù)資產(chǎn)將為企業(yè)帶來更長足的發(fā)展。