阿里巴巴云上數(shù)據(jù)中臺負責人:數(shù)據(jù)中臺建設(shè)是長線過程
隨著電子商務、物聯(lián)網(wǎng)、社會化網(wǎng)絡(luò)的持續(xù)發(fā)展,企業(yè)的業(yè)務模式和數(shù)據(jù)體系愈加復雜,對大多數(shù)企業(yè)而言,數(shù)智化轉(zhuǎn)型不再是一道選擇題,而是一道關(guān)乎未來發(fā)展的生存題。
在10月21日舉辦的2021云棲大會·數(shù)據(jù)中臺專場論壇上,阿里巴巴云上數(shù)據(jù)中臺負責人王賽透露,作為國內(nèi)率先提出數(shù)據(jù)中臺概念的阿里巴巴,過去幾年將自身數(shù)據(jù)中臺建設(shè)能力通過阿里云對外輸出,而承載其滿足不同行業(yè)、不同企業(yè)、不同場景需求的“Dataphin+Quick系列”產(chǎn)品,已被包括麥當勞、財通證券、聯(lián)合利華、海底撈等在內(nèi)的幾千家企業(yè)所用,并沉淀出體量豐富的實踐經(jīng)驗。
“數(shù)據(jù)產(chǎn)品的服務,一定不只是單向的能力輸出,”王賽說道,“我們會在不斷地實踐探索中,去吸收不同企業(yè)的個性化訴求,尋找共通性,并總結(jié)提煉去反哺我們的產(chǎn)品能力拓展。”
同時他強調(diào),數(shù)據(jù)中臺建設(shè)是一個長線過程,企業(yè)也許比較難在短時間內(nèi)看到整體效果,“但一旦建設(shè)完成,對企業(yè)來說不論是人力成本還是時間成本,降本提效就會變得顯而易見。”而針對企業(yè)在業(yè)務層面追求立竿見影效果的訴求,他表示目前阿里云數(shù)據(jù)中臺也能夠以產(chǎn)品組合及行業(yè)解決方案的形式進入到企業(yè)具體業(yè)務場景,給予針對性問題解決,“從當前企業(yè)反饋來看,場景級部署戰(zhàn)略的效果都還不錯。”
Dataphin+Quick系列,從自身實踐沉淀出的產(chǎn)品矩陣
2015年,阿里巴巴正式提出數(shù)據(jù)中臺戰(zhàn)略,這也是數(shù)據(jù)中臺這一概念在國內(nèi)首次亮相——但在更早之前,阿里巴巴其實就有動作。
王賽表示,早在2012年,阿里巴巴集團就面臨兩個基礎(chǔ)卻又不失挑戰(zhàn)的難題——即服務于內(nèi)部管理層的數(shù)據(jù)報表時效性問題,以及面向淘系平臺商家的服務一致性問題。
也正是在探索這兩個問題解決方法的過程中,阿里數(shù)據(jù)建設(shè)方法論開始萌芽,這也成為后來Dataphin產(chǎn)品的核心思想。而隨著阿里巴巴集團多業(yè)務并向開展以及數(shù)據(jù)量再度累積提升,阿里數(shù)據(jù)建設(shè)方法論在2014年完成升級,同時啟動Dataphin產(chǎn)品化。
2016年,在阿里巴巴集團內(nèi)部經(jīng)過充分實踐,解決包括多業(yè)務數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、需求響應等多項數(shù)據(jù)建設(shè)問題的基礎(chǔ)上,Dataphin正式上線阿里云,開始服務外部企業(yè)之路。
在王賽看來,阿里云數(shù)據(jù)中臺產(chǎn)品的商業(yè)化輸出絕非一簇而就,而是先經(jīng)過阿里巴巴集團自身內(nèi)部多復雜場景實踐的成果,“在阿里巴巴集團早前發(fā)展的過程當中,我們的確在數(shù)據(jù)建設(shè)層面遇到了這些問題,并竭盡全力去解決它們,那么在這個過程中我們摒棄失敗的部分,萃取其中成功并可復用的經(jīng)驗,去沉淀我們的方法論,并最終以產(chǎn)品化的姿態(tài)對外輸出,去更好地服務企業(yè)。”
無獨有偶,Quick BI從早先服務于阿里巴巴集團內(nèi)部到如今穩(wěn)坐國內(nèi)商業(yè)分析行業(yè)TOP位置,也已走了11年歷程。
2010年,為能及時滿足包括淘系平臺在內(nèi)的多條業(yè)務線臨時取數(shù)需求,阿里巴巴集團開始著手自研BI產(chǎn)品,并完成內(nèi)部BI產(chǎn)品FBI的打造,在隨后的6年發(fā)展中,F(xiàn)BI為適應不同業(yè)務及崗位員工需求,新增包括可視化“儀表盤”、在線電子表格等功能,進一步解決了降低數(shù)據(jù)分析門檻,只是業(yè)態(tài)擴展以及保障數(shù)據(jù)安全等需求。
2016年,F(xiàn)BI以“Quick BI”為產(chǎn)品名開始對外商業(yè)化,并迅速受到市場認可,并于2019年成為中國首個且唯一入選Gartner ABI魔力象限的數(shù)據(jù)產(chǎn)品。
截至目前,Quick BI已經(jīng)上萬家企業(yè),幫助產(chǎn)出幾十萬張數(shù)據(jù)報表。
通過阿里云全面輸出數(shù)據(jù)中臺能力
如今,阿里云數(shù)據(jù)中臺已經(jīng)形成以Dataphin、Quick BI、Quick Audience等產(chǎn)品為主的核心產(chǎn)品矩陣。
作為阿里巴巴集團數(shù)據(jù)治理方法論基于內(nèi)部實踐的產(chǎn)品化輸出,Dataphin可以為企業(yè)提供一站式數(shù)據(jù)采、建、管、用全生命周期管理的能力,以助力企業(yè)顯著提升數(shù)據(jù)治理水平,構(gòu)建質(zhì)量可靠、消費便捷、生產(chǎn)安全經(jīng)濟的企業(yè)級數(shù)據(jù)中臺。
其核心能力在于全域數(shù)據(jù)集成匯聚、數(shù)據(jù)規(guī)范定義、統(tǒng)一數(shù)據(jù)調(diào)度運維和兼容自由的數(shù)據(jù)開發(fā)。
此外,Dataphin還具備業(yè)界唯一“設(shè)計即文檔、設(shè)計即開發(fā)”能力及專利,同時,它提供多種計算引擎支持及可拓展的開放能力,可以適應各行各業(yè)的平臺技術(shù)架構(gòu)和個性化訴求。
以金融行業(yè)為例,作為數(shù)字化起步較早的行業(yè),銀行、證券、保險等行業(yè)數(shù)據(jù)平臺的建設(shè)周期和歷史不比互聯(lián)網(wǎng)行業(yè)時間短,對于數(shù)據(jù)使用積累了一定的經(jīng)驗,然而依舊難以避免數(shù)智轉(zhuǎn)型地陣痛。
核心體現(xiàn)在數(shù)據(jù)標準問題、數(shù)據(jù)質(zhì)量問題、需求相應問題、成本資源問題四方面:
數(shù)據(jù)標準問題:煙囪式開發(fā)及局部業(yè)務服務支撐,導致指標同名不同口徑問題頻發(fā);歷史上不同業(yè)務系統(tǒng)逐步迭代上線,相同對象屬性編碼不一致等問題突出;
數(shù)據(jù)質(zhì)量問題:重復建設(shè)導致任務鏈冗長、任務繁多,計算資源緊張,數(shù)據(jù)時效性不好;口徑梳理定義的文檔沉淀到開發(fā)代碼實現(xiàn)之間存在脫節(jié),數(shù)據(jù)準確性保障風險高;
需求響應問題:煙囪式開發(fā)周期長、效率低,面向應用的服務化不足,導致業(yè)務響應速度慢,業(yè)務不滿意的同時技術(shù)又覺得沒有沉淀與成長;既懂業(yè)務又懂數(shù)據(jù)的人才不足,需求理解到開發(fā)實現(xiàn)涉及大量溝通,服務效率較差;
成本資源問題:煙囪式開發(fā)的重復建設(shè)浪費技術(shù)資源;上線難下線更難,源系統(tǒng)或業(yè)務變更不能及時反映到數(shù)據(jù)上,加之數(shù)據(jù)不標準,研發(fā)維護難上加難的同時,大量無用計算和存儲造成資源浪費。
這也和阿里巴巴數(shù)據(jù)中臺建設(shè)時期所面臨的難點不謀而合。
阿里巴巴通過實踐經(jīng)驗提出的數(shù)據(jù)治理方法論,能夠幫助企業(yè)捋清了數(shù)據(jù)全生命周期的管理思路,更將其植入到產(chǎn)品Dataphin(智能數(shù)據(jù)構(gòu)建與管理)中,通過阿里云為企業(yè)提供服務。
正因如此,Dataphin除了大數(shù)據(jù)處理全鏈路涉及到的數(shù)據(jù)集成、開發(fā)、發(fā)布、調(diào)度、運維能力,同時還將為企業(yè)提供數(shù)據(jù)規(guī)范定義、邏輯模型定義、代碼自動化生成、數(shù)據(jù)主題式服務能力,高效地完成好數(shù)據(jù)的構(gòu)建。
也正是基于Dataphin產(chǎn)品的能力,財通證券打通既有多個系統(tǒng)數(shù)據(jù),實現(xiàn)數(shù)據(jù)及時接入及標準統(tǒng)一,整合加工處理后,基于市場形態(tài)完成包括“金融屬性”“產(chǎn)品類型”等在內(nèi)的300多個數(shù)據(jù)標簽。
數(shù)禾科技也在長達7個月的共創(chuàng)共建后,完成傳統(tǒng)數(shù)倉體系地重構(gòu)升級,統(tǒng)一數(shù)據(jù)資產(chǎn)管理平臺,同時借助項目全面梳理了公司核心業(yè)務流程,將所有的業(yè)務過程及背后對應的數(shù)據(jù)串聯(lián)起來,統(tǒng)一一套信息系統(tǒng),每個業(yè)務過程在信息化平臺都能看到具體的數(shù)倉表、指標、指標當前的值、環(huán)比同比等信息,一旦這些指標出現(xiàn)異常,就可以快速自動化歸因,定位問題環(huán)節(jié),創(chuàng)新性建立了數(shù)據(jù)運營模式。
數(shù)禾科技大數(shù)據(jù)負責人萬鵬說道:“阿里云數(shù)據(jù)中臺自帶One Service數(shù)據(jù)接口服務,之前我們自研的數(shù)據(jù)平臺,面向線上業(yè)務提供數(shù)據(jù)接口的鏈路太長太復雜,目前通過阿里云數(shù)據(jù)中臺產(chǎn)品Dataphin構(gòu)建數(shù)據(jù)輸入輸出的鏈路既通暢又迅速,產(chǎn)品本身自帶集成通道。”
除了金融行業(yè),Dataphin服務的企業(yè)還遍布零售、餐飲、運營商、航空等多個行業(yè)。
目前,阿里云數(shù)據(jù)中臺除了Dataphin(智能數(shù)據(jù)構(gòu)建及管理)、Quick BI(數(shù)據(jù)可視化分析平臺)之外,還推出了Quick Audience(全域消費者運營平臺)、Quick Tracking(全域行為洞察分型平臺)、Quick Decision(決策分析平臺)和DataTrust(隱私增強計算)等多個面向企業(yè)不同業(yè)務場景的產(chǎn)品。
“我們也在不斷豐富產(chǎn)品矩陣,”王賽說道,“我們的產(chǎn)品在服務企業(yè)的過程中也會洞察到新的需求,這是我們阿里云數(shù)據(jù)中臺產(chǎn)品發(fā)展的新機會。”
而阿里云數(shù)據(jù)中臺顯然也愿意把更多新機會共享,在會上阿里巴巴數(shù)據(jù)服務生態(tài)負責人甄日新發(fā)布“阿里巴巴萬樹數(shù)據(jù)服務生態(tài)”合作計劃,旨在以阿里云數(shù)據(jù)中臺能力為基礎(chǔ),引入更多合作服務商踐行幫助企業(yè)數(shù)智化轉(zhuǎn)型。
“產(chǎn)品能力到位之后,我們需要更多優(yōu)秀服務商幫我們一起把這項能力帶給更多企業(yè),這是一件我們、企業(yè)和生態(tài)伙伴三方共贏的有意義的事。”甄日新如是說道。
發(fā)表評論
登錄 | 注冊