對于當今的企業(yè)來說，如何精細化運營來降本增效是其面臨的最為重要的問題，而深度挖掘數(shù)據(jù)、充分利用數(shù)據(jù)的價值是企業(yè)精細化運營必不可少的一環(huán)。相關(guān)數(shù)據(jù)顯示，72%的企業(yè)首選大數(shù)據(jù)應(yīng)用需求是基于客戶行為分析的大數(shù)據(jù)營銷,其次產(chǎn)品創(chuàng)新、風險預測、供應(yīng)鏈管理、客戶服務(wù)等也是企業(yè)優(yōu)先考慮的大數(shù)據(jù)應(yīng)用。

在過去的 20 年中，大數(shù)據(jù)的架構(gòu)發(fā)生了翻天覆地的變化。隨著企業(yè)數(shù)據(jù)量的爆發(fā)式增長，而單機數(shù)據(jù)庫或者本地數(shù)倉僅支持縱向拓展，這就造成了高成本，難度大的困境，因此水平拓展的“彈性”方案呼之欲出。Hadoop開創(chuàng)性的使用分布式文件系統(tǒng)、分布式計算架構(gòu)，將大型數(shù)據(jù)的運算過程進行拆分，以計算的分布式替代數(shù)據(jù)本身的搬遷，一時間成為了最主流的技術(shù)架構(gòu)。

隨著云計算的興起，數(shù)據(jù)行業(yè)開始向云原生的架構(gòu)演化。隨之而來的混合多云的環(huán)境、數(shù)據(jù)安全的加強、數(shù)據(jù)管理的分布式轉(zhuǎn)變等需求，都使得數(shù)據(jù)使用的門檻大大提高，為此，Kyligence較早前就推出“智能數(shù)據(jù)云”平臺，在做強分析能力的基礎(chǔ)上增強了數(shù)據(jù)管理能力，以人工智能進一步替代人工工作，以云原生進一步替代基于 Hadoop 的基礎(chǔ)架構(gòu)，讓數(shù)據(jù)服務(wù)與管理發(fā)揮核心作用，幫助企業(yè)智能管理最有價值數(shù)據(jù)，支持企業(yè)全面數(shù)字化轉(zhuǎn)型。

在近日召開的Kyligence 2022 春季線上論壇上，Kyligence重點介紹了 “OLAP on 數(shù)據(jù)湖”企業(yè)級OLAP解決方案、產(chǎn)品運營新模式“云上數(shù)據(jù)分析代運營”、企業(yè)級指標中臺等服務(wù)，旨在給與企業(yè)更加專業(yè)的數(shù)據(jù)治理，更好地提升企業(yè)內(nèi)部的決策運行效率，最終在企業(yè)內(nèi)外打造良好的數(shù)據(jù)生態(tài)閉環(huán)。

OLAP on 數(shù)據(jù)湖

Kyligence 提供基于云上數(shù)據(jù)湖的企業(yè)級 OLAP 能力。

在整體云的架構(gòu)下， Kyligence 只依賴云的存儲和計算資源。只要把數(shù)據(jù)部署到類似 S3 這樣的云數(shù)據(jù)的存儲上，再將服務(wù)應(yīng)用起來，就擁有了SQL on S3 的能力。用戶可以直接使用各種各樣的 BI 工具，包括 Excel 等。同時，Kyligence還提供相應(yīng)的能力來降低中間的存儲成本、計算成本和數(shù)據(jù)使用成本。通過標準的 SQL 對接各種各樣的前端數(shù)據(jù)工具，通過企業(yè)級的管控，更好、更安全地管理客戶數(shù)據(jù)。

通過統(tǒng)一的語義層，Kyligence 為客戶在云上構(gòu)建了多維的數(shù)據(jù)集市。業(yè)務(wù)用戶只需消費這樣的數(shù)據(jù)集市，而無需關(guān)心這些是數(shù)據(jù)的來源（Oracle、Hadoop、Snowflake、Kafka）。通過 Kyligence 批流一體的能力，呈現(xiàn)給客戶的就是業(yè)務(wù)數(shù)據(jù)的語義。

Kyligence 提供整個云上統(tǒng)一數(shù)據(jù)的訪問入口，通過 Smart Pushdown 智能查詢下壓的能力，可以將 ANSI SQL 翻譯成其他數(shù)據(jù)源。即使用戶的數(shù)據(jù)集市沒有被管理起來，也可以訪問原始的數(shù)據(jù)源，將相應(yīng)的 SQL 下壓過去，拿到相應(yīng)的記錄返回給客戶端。

此外，Kyligence 統(tǒng)一的數(shù)據(jù)集市層能夠更好地為業(yè)務(wù)部門去使用，“一次定義，多次使用”。企業(yè)定義了一個統(tǒng)一的語義層，可以用到 Excel、Power BI、Tableau 以及其他更多的 BI 和數(shù)據(jù)消費工具中，用戶通過標準的 SQL 語句都可以訪問。

在這個過程中，Kyligence為客戶提供了統(tǒng)一管控能力?？蛻羲袛?shù)據(jù)的定義、安全管理、審計，都可以被管理起來，避免了像在 Excel 的場景中，將數(shù)據(jù)大量導出來之后，各處不受控地分發(fā)，幫助客戶更好地做內(nèi)部的數(shù)據(jù)合規(guī)工作。

在降低云端數(shù)據(jù)分析的總體擁有成本方面，用戶可以將數(shù)據(jù)刷到 AWS S3，或者 Azure Blob Storage 上，Kyligence 直接提供 SQL 能力。Kyligence提供的彈性伸縮能力，可以根據(jù)集群的使用量在高峰期拿更多的數(shù)據(jù)資源出來，在消費的低谷釋放出來，更經(jīng)濟地利用好集群。定時的啟停集群功能則進一步降低了資源消耗。

總之，在數(shù)據(jù)湖上提供數(shù)據(jù)分析、自動化構(gòu)建、自動化推薦等能力的大趨勢下， Kyligence 通過統(tǒng)一語義層，將企業(yè)內(nèi)部和外部所有的數(shù)據(jù)看作一個更大的數(shù)倉或數(shù)據(jù)湖，在其上面構(gòu)建的整體能力，能夠連接相應(yīng)的數(shù)據(jù)。OLAP 的引擎則為特定的業(yè)務(wù)場景構(gòu)建了相應(yīng)的數(shù)據(jù)集市和索引，從而確保下游在訪問數(shù)據(jù)的時候夠快、夠安全。

云上數(shù)據(jù)分析代運營

Kyligence 此次正式推出的云上數(shù)據(jù)分析代運營服務(wù)，以遠程的方式幫助企業(yè)高效安全地運維 Kyligence 產(chǎn)品，并在現(xiàn)有的標準技術(shù)支持體系之上，額外提供集監(jiān)控告警、定期服務(wù)健康檢查、TCO 優(yōu)化建議三位一體的增值服務(wù)，通過 7x24x365 不間斷的主動的、預防式的、自動化運維的遠程服務(wù)，保障客戶業(yè)務(wù)的穩(wěn)定運行。

關(guān)于安全性問題，Kyligence聯(lián)合創(chuàng)始人兼CTO李揚表示，Kyligence云上數(shù)據(jù)分析代運營通常運行在用戶自己的云賬戶下面。在應(yīng)用級別，Kyligence的運維人員沒有權(quán)限訪問用戶數(shù)據(jù)，只能幫用戶做日常的IT運營。并且，Kyligence還有云上的各種安全管控資質(zhì)認證，擁有SOC2 Type 1、ISO27001等證書。

企業(yè)級中臺指標

對于大部分企業(yè)而言，數(shù)據(jù)賦能業(yè)務(wù)的關(guān)鍵在于“降低用戶使用數(shù)據(jù)的門檻”。企業(yè)希望通過從技術(shù)語言到管理語言的抽象，讓數(shù)據(jù)成為企業(yè)管理的有效抓手。這樣一層平臺經(jīng)過多年的發(fā)展落地成了“以指標的統(tǒng)一管理和分析為核心”的指標中臺。然而企業(yè)搭建指標中臺的過程中，內(nèi)部膨脹的ETL任務(wù)和中間表消耗大量資源，Kyligence多維數(shù)據(jù)庫將是企業(yè)級指標中臺的最佳技術(shù)底座。

Kyligence企業(yè)級指標中臺產(chǎn)品技術(shù)解決方案，借助AI 增強的智能指標引擎，可以實現(xiàn)指標的智能建模、自動加工計算，大幅降低指標 ETL 開發(fā)工作量，加快指標開發(fā)與上線效率。李揚介紹說，指標中臺一般分成原子指標和偏業(yè)務(wù)向的衍生和派生指標兩部分。原子指標是公司集中管理的是統(tǒng)一口徑的基礎(chǔ)，不是每個業(yè)務(wù)人員可以隨意自己改造的，而衍生和派生指標是業(yè)務(wù)創(chuàng)新的空間。他認為，每一個一線業(yè)務(wù)員都能夠用一些數(shù)字化的方法來優(yōu)化自己的工作，而這對于企業(yè)就意味著一個很有力的創(chuàng)新賦能，從而打造很完美的方案。

關(guān)于企業(yè)級指標中臺具體落地時遇到的困難和挑戰(zhàn)，Kyligence聯(lián)合創(chuàng)始人兼CEO韓卿表示，當前客戶的技術(shù)棧千變?nèi)f化，例如生產(chǎn)制造企業(yè)在落地指標中臺時會出現(xiàn)生產(chǎn)流水線調(diào)整不到位、生產(chǎn)工藝不現(xiàn)代化等問題，這都給指標中臺的落地造成了一定困難。

李揚表示，企業(yè)在落地指標中臺時，還需要提升數(shù)字化管理思維。Kyligence提供的技術(shù)能力非常適合在大數(shù)據(jù)分析和管理方面幫助企業(yè)打破技術(shù)能力的瓶頸。

結(jié)語

隨著數(shù)據(jù)分析和管理需求的不斷發(fā)展，企業(yè)的數(shù)據(jù)架構(gòu)也在不斷地迭代和完善。Kyligence 作為領(lǐng)先的企業(yè)級數(shù)據(jù)服務(wù)和管理廠商，將繼續(xù)發(fā)揮自己的技術(shù)和服務(wù)優(yōu)勢，助力全球客戶在云原生時代實現(xiàn)面向未來的數(shù)字化轉(zhuǎn)型。