2004年,張建鋒(行癲)加入阿里巴巴。

當時阿里巴巴還非常小,“我是淘寶網80號員工,負責阿里巴巴的技術平臺。”

那時的他估計也沒有想到,自己由此見證了整個互聯網特別是電子商務從無到有、從小到大到超級大的發展歷程;也見證了一個用PHP寫的非常小的系統,發展到今天一個超大規模的互聯網平臺的整個過程。

他可能也不會想到,有一天阿里巴巴會成立專門提供技術服務的阿里云公司,并且推出了很多影響業界發展的創新理念和技術。

中臺就是其中之一。

在杭州舉行的2021阿里云金融數據智能峰會上,已是阿里云智能總裁的行癲,和9位高管共同回顧了阿里巴巴數據中臺的演變歷史。

阿里云智能總裁張建鋒(行癲)

不一樣的定位

行癲說,20年前,在阿里做軟件開發,有兩個重要的工作,“畫數據流程圖,另一個就是畫業務流程圖。”

阿里逐漸提出中臺理念也與此息息相關。

提起中臺,很多人可能都會想起一個段子。2015年,馬老師帶領一眾高管訪問芬蘭游戲公司Supercell,看到這家公司把公共通用的素材和算法做了沉淀,匯聚成平臺,所以可以很快的開發出游戲。在琢磨透這家機構的模式之后,阿里很快啟動了“中臺”戰略。

如今,中臺理念已是業內共知,但是如果聽了行癲和阿里高管們對中臺,尤其數據中臺的介紹之后,你會很容易得出一個結論,業內對于真正中臺的認知還存在很大誤區。

其中首當其沖的是,對阿里中臺定位的認知不對。

據行癲介紹,在阿里巴巴集團,中臺不是一個重要的IT項目,也不是一個重要的應用系統。它擁有更高的定位,是整個集團數據管理、數據治理戰略的落地支撐,也是整個集團創新戰略的實施路徑,是一個完完全全的業務戰略。

因此,行癲認為,中臺的價值也不僅僅提高業務效率,而是在四個方面發揮著重要價值,即數據治理、業務智能、組織提效和成本控制,是一個關乎整個集團的業務、組織、生態等發發展的、全局性的價值。

更進一步,中臺是阿里巴巴數字商業操作系統的核心支撐,也是阿里云為企業提供數字化轉型升級助力的重要組成部分。

所以,行癲在會上強調——阿里云推出中臺,并不是賣產品賣概念,而是真正對外輸出阿里10多年來發展的經驗。

10年前的分拆

對此,阿里巴巴云上數據中臺負責人王賽有著深切的體會。

2009年,王賽加入阿里巴巴,加盟B2B業務的數據倉庫團隊。“我們這個數據倉庫團隊做了兩年,從20多號人快速增長到100多號人。“

阿里巴巴云上數據中臺負責人王賽

客觀上說,這是一個非常有實力的數倉團隊了。放眼當時的國內,也就是幾大行能有這樣的規模和實力。

但是,王賽說,這個團隊在2011年被拆分掉了,所有團隊成員被拆分到了1688等各個業務線的技術團隊之中。

為什么要拆分?是因為阿里發現,雖然數倉團隊做了大量工作,構建了大量分析報表,但這些工作只是滿足了業務的臨時要求,沒有形成可持續、可預期、可敏捷交付的工作機制。更進一步,業務方對數據服務的滿意度在急劇下降。

在這個時候,業務方提出要掌控數據分析技術團隊,以得到更加敏捷高效的響應,從而跟上電商行業白熱化的競爭需要。

技術是為業務服務的,既然業務有要求,那就按需求執行。

但拆分對于團隊的影響是非常大的。“我們到了業務部門,到底有哪些東西需要改善?面向阿里巴巴集團,面向數據的未來,我們要走到哪里?我們要做哪些事情?”

這些關鍵問題,王賽和整個團隊都沒有答案。他們走向了一個充滿不可知、不確定性的未來。這對于技術人員來說,接受這些是一個巨大的挑戰,也需要巨大的勇氣。

不過,再痛苦的過往,成功之后都會被賦予特別的意義。王賽在其《十年磨一劍:阿里巴巴數據中臺的破與立》的主題演講中,就將這次分拆其看成是阿里數據中臺建設的前奏——重新啟程。

正是這個拆分,才最終促使阿里在數據治理、數據平臺建設方向邁出了全新的步伐,也促進了中臺的誕生。

從OneModel開始

據王賽介紹,數倉團隊在與業務部門深度綁定之后,2012年,阿里技術團隊在對底層和大量的數據指標進行分析的過程中,抽象了一套方法體系,也即OneData體系。

當時,這套體系建立的初心是,在整個集團實現一套數據資產管理與構建的方法與體系,包括涉及數據各方面的標準和定義,統一所有數據的對接和計算口徑,并為業務提供統一的元數據、分析模型等。阿里稱之為OneModel。

這是阿里巴巴整個集團統一數據平臺的關鍵一步,也是后來建設數據中臺項目的重要基礎。它解決了整個集團數據口徑統一的問題。這使整個集團的幾十個BU有了統一的計算口徑。

不僅如此,OneModel還將系統所要維護的數據指標,從之前的幾萬個變成了幾千個指標,效率大大提高。

OneModel體系在1688事業部逐步的實踐和摸索過程中,獲得了非常好的效果。王賽他們在數據效率問題得到解決完之后,也開始關注數據怎么樣更好地服務業務。

非常有意思的是,當時整個團隊也沒有清晰的業務場景,不知道這些數據可以為業務提供什么有價值的服務。“但是有一件事情我們深知,數據必須先要提供給業務去使用,并且不是僅僅給他們提供BI工具和報表分析。”

后來,他們發現,雖然不知道可以為業務提供什么服務,但有一件事情是肯定要做的,即做一個API接口平臺。

阿里的系統繁多,需要有很多API和接口進行數據的交互,但過去做一個API和接口可能三四周才上線,很麻煩。“如果我們搭建一個平臺和體系,讓數據服務的配置變得在一個星期內就可以完成和上線,并且還能夠保證質量和穩定性。這會讓業務部門的創新應用變得更加容易。”

由此,2013年,阿里開始重點關注數據服務,并在這一年推出了OneService。它為業務部門提供了跨數據源的“一般查詢+OLAP分析+在線服務”等統一但多樣化的數據服務,還能提供各種主題式數據服務。

王賽認為,有了OneModel、OneService、OneID,他們初步構建了一套完整的數據體系——OneData,能夠比較好的服務于垂直業務BU。

在此基礎上,2014年,阿里巴巴提出了更深層次的技術變革——平臺統一計劃。其標志便是實現了統一數據平臺、實現了數據服務化,并開始全面使用MaxCompute,作為數據中臺的統一底座。(注:MaxCompute是阿里云自研的云原生、高效能的SaaS模式企業級數據倉庫,2013年8月15日,阿里云MaxCompute歷史性地突破了同一個集群內5000臺服務器同時計算的局限。當時阿里云內部有云梯1、云梯2兩個團隊競爭研發,這個平臺的進化史也很有意思。詳見另外報道。)

有意思的是,隨著整個數據體系的完善,阿里的數據服務也開始有了新的突破。據王賽介紹,他們研發了“生意參謀”這樣的數據產品,為阿里巴巴電商平臺上面的商家服務。通過“生意參謀”,可以商家們不需要做任何的技術開發,只需要開通一個帳號,就能夠享受比過去數據倉庫、BI分析、報表工具等更好、更快、更全的數據分析和能力。

確立中臺戰略

令王賽驚喜的是,此后阿里數據服務的進化突然有了更高層級的飛躍。

2015年,阿里巴巴集團宣布啟動“中臺戰略”,并開始構建符合DT時代的、更靈活的“大中臺,小前臺”組織機制和業務機制。與此對應,阿里正式啟動數據中臺建設。

王賽回憶說,在當時啟動的時候,集團對中臺也沒有一個明確的定義。“但是我們知道,阿里巴巴集團多樣的業務,需要建起一個統一的平臺,迅速支撐的業務變化與創新。”

他們意識到,不管中臺怎么定義,數據統一將是其中的關鍵。在前面OneModel、OneService的基礎上,阿里在2016年推進了全域數據體系的建設。

通過全域數據,阿里將收購的業務,如優酷、土豆、UC瀏覽器等,也用同樣的方法和體系將數據統一起來。有了統一的數據之后,阿里同年啟動了數據萃取項目,深度挖掘這些數據資產的價值,并想方設法再反饋、應用到業務之中。

隨后的兩三年,阿里巴巴數據中臺進入攻堅和發展階段,開始把之前形成的一套方法論和體系要應用到更大規模的業務之中。

可以說,也正是這兩年,形成了阿里數據中臺的雛形。

2017年之后,阿里開始了數據中臺不斷迭代和升級的過程。期間,他們對OneModel進行了大的升級,推出了Dataphin數據管理平臺,其核心價值在于數據規范定義,完全消除數據的二義性,保證業務數據標準化、規范化生產。有了它,面向云上客戶,面向內部客戶,都能夠更好的自動化實現數據中臺的方法論和體系。

另一方面,面向業務側,王賽又帶領團隊推出了策略中心、云上數據中臺等新的產品和服務,豐富了阿里數據中臺的體系。

現在,阿里每個運營小二都可以基于數據制定覆蓋用戶生命周期的數據化運營策略,支持更多的業務走向實時化、數據化。

王賽認為,到了2019年,阿里數據中臺已基本成熟。

實踐出來的中臺方法論

但阿里的中臺進化并沒有結束。

過去十年的發展演化,阿里不僅對中臺產品技術上的有創新進展,對于中臺建設的方法論更是有值得借鑒之處。

無論是對于甲方還是乙方,這或許都比產品技術本身更有價值。

行癲說,阿里巴巴數據治理方法論有三個統一,即技術統一、數據統一、文化統一。

技術統一是指整個集團的平臺建設要從分散到統一,從技術架構上要實現從煙囪式架構轉向分布式架構,最終實現共享式架構;

數據統一是指數據管理要實現數據從資源到資產的轉變,拉通數據標準、權限、口徑,以實現全業務、全組織的共享;

文化統一是指確立中臺戰略,實現“大中臺、小前臺”,確保自上而下的戰略認同,以及支撐組織架構變革。

王賽也嘗試總結了阿里中臺建設的方法論。這可能是迄今為止最為本質、最為重要、最為全面的中臺方法論框架。

這個方法論基本包括中臺建設的六大核心問題,即數據質量與安全、數據價值、產品/工具沉淀、成本管控、組織與運營、度量與考核。

數據質量與安全的核心是,如何保障幾十個BU的統一計算口徑,以及這些數據能夠安全流通?數據價值的核心是,如何讓數據成為業務環節的關鍵要素?產品/工具沉淀的核心是,如何收斂需求并進行規?;??成本管控的核心是,如何讓數據成本增長低于業務增長速度?組織與運營的核心是,如何建立數據驅動的組織,以及建立上下游的信任?度量與考核的核心是,如何讓中臺的價值顯現化表達,怎么評估團隊做的績效?

這些問題如果想清楚,中臺建設就可以立項了。否則,中臺項目在建設過程中就容易出現問題,會掉進各種“坑”。

當然,這六大問題需要中臺建設者們根據不同的企業境況給出自己的答案。但王賽強調了數據質量與安全問題。這是數據中臺的基礎,也是建設中臺的一個共性問題。

關乎數據質量的四大問題

王賽重點講述了數據質量與安全的四個子問題。

首先是數據的一致性問題。例如,在阿里巴巴,之前就存在多種數據不一致的情況:商家投訴數據口徑不一致,UV的計算方式不相同,雙11離線和實時的計算口徑不統一……這些問題不解決,無法實現數據中臺。這可以通過數據指標標準化定義、指標自動化構建等方法和手段解決。

其次是數據資產深度問題。例如,如何利用優惠券拉新促活?大促活動,運營小二如何大規模招商?數據產品的價值與質量如何評估?這需要建立一套數據融通與萃取的體系。包括全渠道數據采集、精準識別、立體刻畫、全方位分析、精準運營與應用,實現從垂直系統數據采集,形成公共數據,最后實現高價值的萃取數據。

第三是數據及時性問題。例如,如何保證早上8點領導要能看見關鍵業務KPI的進展情況?數據異動怎樣能被及時發現?這需要建立一套數據運維基線管理,并且與移動辦公實時協同。

最后是數據的安全流通問題。例如,隱私數據怎么全量安全標識?如何做到上萬數據權限智能審批?這需要建立一套數據安全等級系統,以及相應數據智能審批系統。

這四個子問題是建設數據中臺時需要重點關注的。在王賽看來,阿里的做法對想要建設中臺的企業會有很好的借鑒作用。

“這一天我等了兩年“

阿里中臺的發展史、方法論、關鍵問題,是中臺市場發展的關鍵一環。”這是因為阿里自己就是中臺最重要的實踐者、創新者。“

這正是阿里云智能新金融&互聯網事業部總經理劉偉光的切身體會。他之所以這么強調,是因為中臺市場在經歷高光時刻之后,正面臨一個新的變局。

阿里云智能新金融&互聯網事業部總經理劉偉光

例如,有人在否認中臺的價值,有人在質疑中臺項目的成功率……

這位曾經是Pivotal中國、EMC大中國區、甲骨文中國公司高管,對大數據、數據分析有豐富經驗和深刻洞察的企業級市場資深專業人士對此并不認同。

“作為一個在阿里工作的員工,我每天切實的感受到中臺對我工作的支持。我也感受到中臺在阿里的強大。所以我內心一直有一個很大的沖動,想辦一場會,真正把中臺講透,真正和大家分享阿里為什么建中臺,以及在建設中臺所跨越的困難。“劉偉光想讓大家真正認識中臺的價值,以及中臺到底應該如何建設。

他在會議的開場中致辭中說,“這一天我等了兩年”。他特地把這次會議的主題定為“破解中臺“。這都是要正面回應外界對于中臺的質疑。

劉偉光認為,對于很多機構和組織,中臺不是要不要建的問題,而是如何建設的問題。例如,在金融行業,用好數據已成為各級領導最為重視的戰略問題。而數據中臺就是金融機構在數字經濟時代建立差異化競爭優勢的重要武器。

行癲提出,阿里云要做厚中臺,目的就是要把中臺向各行各業推廣,并把中臺與AI等深度融合,實現智能中臺。

在劉偉光看來,這些都是中臺的下一步發展動向。他也相信,再過五年,中臺會像信息化時代的ERP一樣,成為數字化企業的核心部分。而阿里云中臺,也還會隨著數字化、智能化的深入而繼續進化。

上世紀80年代,在財政部一機部和中國會計協會的支持下,中國人民大學和第一汽車制造廠在長春召開了“財務、會計、成本應用電子計算機專題討論會”,在這次會上提出了“會計電算化”的概念,并以此催生了中國財務軟件領域的用友、金蝶、浪潮等企業。而今天阿里提出“中臺”概念,很可能也會延續同樣的產業規律,在中國催生新一批以“中臺”為核心解決方案的科技企業。

目前,中臺市場已經顯露廣闊的市場前景。海比研究院最新發布的《2021中國中臺市場研究報告》認為,未來五年,中臺市場是我國企業數字化中的熱點市場,年均復合增長率達到60%,2025年將達到944.8億元。

一場中臺浪潮已經襲來。