如何建設(shè)數(shù)字化企業(yè)?數(shù)據(jù)、業(yè)務(wù)、技術(shù)缺一不可
史凱
2022-09-01
來(lái)源:InfoQ
數(shù)據(jù)是企業(yè)數(shù)字化轉(zhuǎn)型的核心要素和生產(chǎn)資料,它是一種“可再生”資源,取之不盡,用之不竭,而數(shù)字技術(shù)則是企業(yè)數(shù)字化轉(zhuǎn)型的直接手段。數(shù)字技術(shù)的產(chǎn)生讓企業(yè)從傳統(tǒng)業(yè)務(wù)出發(fā)被動(dòng)地錄入數(shù)據(jù),到如今利用各種各樣的開(kāi)發(fā)工具不斷地去生產(chǎn)數(shù)據(jù)、分析數(shù)據(jù)、使用數(shù)據(jù),從而利用數(shù)據(jù)來(lái)賦能業(yè)務(wù)。然而,數(shù)字化并不是一項(xiàng)獨(dú)立的工作,企業(yè)不要詢問(wèn)“數(shù)字化轉(zhuǎn)型要做什么”,更是需要將數(shù)據(jù)能力放到整體組織的業(yè)務(wù)戰(zhàn)略的大藍(lán)圖下,以業(yè)務(wù)目標(biāo)為錨點(diǎn),找到業(yè)務(wù)的痛點(diǎn)和價(jià)值場(chǎng)景,然后利用數(shù)據(jù)和數(shù)字技術(shù)去解決這些問(wèn)題,整個(gè)過(guò)程都需要企業(yè)持續(xù)建立自身的數(shù)據(jù)能力。
極客邦科技雙數(shù)研究院的特聘專(zhuān)家、精益數(shù)據(jù)方法論創(chuàng)始人史凱,在 8 月 18 日舉辦的ArchSummit全球架構(gòu)師峰會(huì)發(fā)表了《數(shù)據(jù)驅(qū)動(dòng)的組織和文化》的演講。史凱有著二十多年的企業(yè)信息化和數(shù)字化轉(zhuǎn)型經(jīng)驗(yàn),曾為眾多大型企業(yè)做過(guò)數(shù)字化轉(zhuǎn)型規(guī)劃和實(shí)施,總結(jié)了精益數(shù)據(jù)方法論幫助企業(yè)打造數(shù)字化企業(yè)。史凱的本次演講聚焦于數(shù)據(jù)驅(qū)動(dòng)企業(yè)組織文化。
演講要點(diǎn):
1. “數(shù)字化轉(zhuǎn)型不是一個(gè)單獨(dú)的項(xiàng)目,而是因?yàn)槠髽I(yè)外部環(huán)境的變化,給企業(yè)帶來(lái)了新的挑戰(zhàn),企業(yè)需要利用新的技術(shù)和生產(chǎn)資料來(lái)應(yīng)對(duì)這些挑戰(zhàn)。”不要問(wèn)數(shù)字化轉(zhuǎn)型要做什么,而是要理解什么是數(shù)字化轉(zhuǎn)型。
2. “現(xiàn)在企業(yè)的架構(gòu),已經(jīng)逐漸地從原來(lái)以流程為核心驅(qū)動(dòng),走向以數(shù)據(jù)為核心驅(qū)動(dòng),形成流程和數(shù)據(jù)相結(jié)合的模式。”
3. “企業(yè)數(shù)字化轉(zhuǎn)型的本質(zhì)是建立數(shù)據(jù)的能力,從而充分利用數(shù)據(jù),獲得更先進(jìn)的生產(chǎn)力。”
4. “未來(lái)的企業(yè)都是生產(chǎn)、加工數(shù)據(jù)的企業(yè),數(shù)據(jù)中臺(tái)就是核心,承載端到端的數(shù)據(jù)的生產(chǎn)利用等全鏈路功能。”
5. “企業(yè)的數(shù)字化轉(zhuǎn)型是一個(gè)非常體系化的工作,要從戰(zhàn)略,組織,流程,業(yè)務(wù),技術(shù)等全方位,系統(tǒng)化推進(jìn),其中最重要的就是要充分利用數(shù)據(jù)的力量。”
以下是演講整理,以饗讀者。
充分利用數(shù)據(jù),獲得先進(jìn)數(shù)據(jù)生產(chǎn)力
大家好,我是史凱,是精益數(shù)據(jù)的創(chuàng)始人,同時(shí)也是極客邦的雙數(shù)研究院的特聘專(zhuān)家。20 多年以來(lái),我一直從事如何把數(shù)字技術(shù)應(yīng)用到企業(yè)的業(yè)務(wù)轉(zhuǎn)型當(dāng)中。我的核心觀點(diǎn),如果技術(shù)不能夠給業(yè)務(wù)帶來(lái)價(jià)值,那么不論這個(gè)技術(shù)多么先進(jìn),都不是企業(yè)所需要的,所有的技術(shù)都會(huì)得到市場(chǎng)的檢驗(yàn)。
自從三年前我寫(xiě)的關(guān)于數(shù)據(jù)中臺(tái)的文章獲得了 10 萬(wàn)+的閱讀量后,我一直在思考一個(gè)問(wèn)題:數(shù)據(jù)領(lǐng)域本身是一個(gè)非常成熟的領(lǐng)域,但是在數(shù)據(jù)中臺(tái)一詞出現(xiàn)時(shí),為什么會(huì)得到那么多業(yè)務(wù)方、技術(shù)方的追捧和認(rèn)可?其背后反映的現(xiàn)象與底層邏輯又是什么?
于是,我做了一個(gè)關(guān)于數(shù)據(jù)中臺(tái)的調(diào)研,獲得了 1700 多條有效問(wèn)卷。基于這個(gè)調(diào)研問(wèn)卷的結(jié)果,結(jié)合今天的主題,我將從企業(yè)轉(zhuǎn)型跟數(shù)據(jù)的關(guān)系、數(shù)字化轉(zhuǎn)型跟數(shù)據(jù)中臺(tái)的關(guān)系、企業(yè)需要什么樣的數(shù)據(jù)中臺(tái)以及如何打造一個(gè)數(shù)據(jù)驅(qū)動(dòng)的企業(yè)這四個(gè)方面,跟大家匯報(bào)過(guò)去幾年的研究發(fā)現(xiàn)。
第一、企業(yè)轉(zhuǎn)型與數(shù)據(jù)的關(guān)系,歸根到底就是要解釋什么是數(shù)字化轉(zhuǎn)型。
無(wú)論是具體的業(yè)務(wù)人員、技術(shù)人員,還是每個(gè)企業(yè)的領(lǐng)導(dǎo)人,都在焦慮一個(gè)問(wèn)題:數(shù)字化轉(zhuǎn)型要做什么?
其實(shí),這不是一個(gè)正確的問(wèn)題。首先,我們要理解什么是數(shù)字化轉(zhuǎn)型。
我將企業(yè)數(shù)字化轉(zhuǎn)型總結(jié)為:企業(yè)進(jìn)入到了數(shù)字經(jīng)濟(jì)時(shí)代的整體轉(zhuǎn)型,數(shù)字化轉(zhuǎn)型不是一個(gè)單獨(dú)的項(xiàng)目,而是因?yàn)槠髽I(yè)外部環(huán)境的變化,給企業(yè)帶來(lái)了新的挑戰(zhàn),企業(yè)需要利用新的技術(shù)和生產(chǎn)資料來(lái)應(yīng)對(duì)這些挑戰(zhàn)。所以,企業(yè)數(shù)字化轉(zhuǎn)型不僅是技術(shù)的工作,更不是獨(dú)立于業(yè)務(wù)之外的事情,而是一項(xiàng)包括企業(yè)業(yè)務(wù),組織等在內(nèi)的整體轉(zhuǎn)型。
為什么這么說(shuō)?或許我們可以從信息化開(kāi)始來(lái)理解數(shù)字化。
十幾年前,信息化時(shí)期大部分業(yè)務(wù)的處理流程還是在線下實(shí)體世界中進(jìn)行,只有一些局部的環(huán)節(jié)需要信息系統(tǒng)支持。比如,我們可以從計(jì)算機(jī)軟件技術(shù)應(yīng)用于企業(yè)的歷史中發(fā)現(xiàn)一定的規(guī)律,比如最早的軟件是應(yīng)用于企業(yè)的庫(kù)存管理領(lǐng)域的,因?yàn)閹?kù)存管理(Inventory Control)連接著生產(chǎn)和供給,是保障企業(yè)穩(wěn)定運(yùn)營(yíng)的關(guān)鍵集成點(diǎn)。隨著信息化的發(fā)展,從庫(kù)存管理走到 MRP 再走到 MRP-II,再到后來(lái)的ERP,整個(gè)過(guò)程就是不斷地把線下,以人工流程為主的業(yè)務(wù)搬到線上,通過(guò)數(shù)字技術(shù),不斷地去完善信息化系統(tǒng)。
隨著大量信息化系統(tǒng)的出現(xiàn),相對(duì)成熟的企業(yè)大部分業(yè)務(wù)已經(jīng)有了獨(dú)立的系統(tǒng),于是,它們從信息化逐漸走向了數(shù)字化,也就是大部分業(yè)務(wù)都已經(jīng)數(shù)據(jù)化了。
數(shù)據(jù)是業(yè)務(wù)的數(shù)字化存在形式。在消費(fèi)互聯(lián)網(wǎng)時(shí)代,大家的吃穿住用行,第一件事便是先在數(shù)字化世界里去找數(shù)據(jù)、找評(píng)價(jià),然后通過(guò)這些數(shù)據(jù),指導(dǎo)現(xiàn)實(shí)中去哪里、做什么。再比如,我們現(xiàn)在看到的新的產(chǎn)業(yè)互聯(lián)網(wǎng)的趨勢(shì),智慧工廠、無(wú)人工廠、無(wú)人零售店,也都是通過(guò)數(shù)據(jù)來(lái)優(yōu)化和指導(dǎo)業(yè)務(wù)的進(jìn)行。
軟件技術(shù)的進(jìn)步和發(fā)展,實(shí)際上都是在把實(shí)體世界的業(yè)務(wù)流程搬到了數(shù)字化世界。我們現(xiàn)在提到的原生數(shù)字化企業(yè)、數(shù)字經(jīng)濟(jì),最后就是利用數(shù)據(jù)的全局優(yōu)化能力、計(jì)算能力、把最優(yōu)的路徑?jīng)Q策設(shè)計(jì)好,然后去指導(dǎo)線下的人或者設(shè)備進(jìn)行生產(chǎn)。
簡(jiǎn)言之,傳統(tǒng)的信息化是把實(shí)體世界的業(yè)務(wù)轉(zhuǎn)變成數(shù)字化形式,一切業(yè)務(wù)數(shù)據(jù)化,數(shù)字化轉(zhuǎn)型則是通過(guò)數(shù)據(jù)指導(dǎo)實(shí)體業(yè)務(wù),這就是兩者最大的區(qū)別,本質(zhì)上數(shù)據(jù)已經(jīng)是業(yè)務(wù)的數(shù)字化存在形式。
第二,企業(yè)的架構(gòu)方法也在發(fā)生變化。在十幾年前,我們有一套給企業(yè)做信息化規(guī)劃架構(gòu)的實(shí)施方法論。首先要做業(yè)務(wù)架構(gòu),然后做應(yīng)用架構(gòu),最后才是數(shù)據(jù)架構(gòu)。但是,隨著企業(yè)業(yè)務(wù)的快速變化,數(shù)據(jù)變成了業(yè)務(wù)在數(shù)字化時(shí)代中一種永遠(yuǎn)的存在。
這種情況下,傳統(tǒng)的架構(gòu)方法、企業(yè)應(yīng)用規(guī)劃方法也在發(fā)生變化:從 Application First 到 Data First,首先要考慮的是“數(shù)據(jù)”,這里的“數(shù)據(jù)”指的是業(yè)務(wù)在數(shù)字化時(shí)代的一個(gè)映射,是企業(yè)業(yè)務(wù)的整體藍(lán)圖。
第三,我發(fā)現(xiàn)了一個(gè)新的趨勢(shì),流數(shù)融合。
近一兩年有非常多的聲音在談?wù)摿鞒獭C總€(gè)企業(yè)都有流程,但是流程的本質(zhì)是什么?
實(shí)際上,流程就是用人的經(jīng)驗(yàn)、用梳理流程的方式去做業(yè)務(wù)建模。現(xiàn)在企業(yè)的架構(gòu),已經(jīng)逐漸地從原來(lái)以流程為核心驅(qū)動(dòng),走向以數(shù)據(jù)為核心驅(qū)動(dòng),形成流程和數(shù)據(jù)相結(jié)合的模式。
原來(lái)在物理世界里,無(wú)論是營(yíng)銷(xiāo)還是生產(chǎn),大部分工作都是以人為核心的流程。大家在一起討論一個(gè)工作的流程,究竟應(yīng)該怎么工作,這個(gè)叫做業(yè)務(wù)流程再造(BPR),把這些業(yè)務(wù)經(jīng)過(guò)梳理,優(yōu)化變成流程,一個(gè)上百人、上千人的工廠企業(yè)就可以有效地組織起來(lái),不至于一團(tuán)亂麻,這也是企業(yè)里大家所公認(rèn)并且遵守的一套有效協(xié)作生產(chǎn)的計(jì)劃。
隨著信息量的不斷增長(zhǎng),業(yè)務(wù)復(fù)雜度導(dǎo)致的溝通效率的降低,企業(yè)逐漸選擇通過(guò)軟件進(jìn)行高效溝通,所以就有了 IC、MRP、MRP-II、ERP 這樣的軟件系統(tǒng)。
再后來(lái),進(jìn)入到了電商、供應(yīng)鏈時(shí)代,企業(yè)內(nèi)部的管理軟件已經(jīng)不足以支持蓬勃發(fā)展的業(yè)務(wù)需求,于是企業(yè)把內(nèi)部、外部全部連接起來(lái),這就到了應(yīng)用時(shí)代,逐漸地,這些應(yīng)用全部沉淀成了數(shù)據(jù)。
最后,當(dāng)我們把一個(gè)企業(yè)所有的業(yè)務(wù)或者大部分的業(yè)務(wù),全部通過(guò)各種系統(tǒng)沉淀成數(shù)據(jù)時(shí),那么,數(shù)據(jù)便可以將該企業(yè)的業(yè)務(wù)完整、真實(shí)的呈現(xiàn)出來(lái),這個(gè)時(shí)候?qū)τ跀?shù)據(jù)的利用就很關(guān)鍵。
BI 時(shí)代,企業(yè)通過(guò)開(kāi)發(fā)報(bào)表的形式去利用數(shù)據(jù)。業(yè)務(wù)人員會(huì)查看報(bào)表,根據(jù)他所得到的這些信息,在人為的優(yōu)化流程,然后向技術(shù)部門(mén)提需求,繼而技術(shù)部門(mén)再去改系統(tǒng),這是現(xiàn)在多數(shù)企業(yè)的現(xiàn)狀。
當(dāng)所有的業(yè)務(wù)全部數(shù)據(jù)化以后,企業(yè)全部的業(yè)務(wù)和流程融為了一體,用軟件的形式展現(xiàn)出來(lái)。無(wú)論是 DDD 也好,企業(yè)架構(gòu)也罷,其實(shí)都是把現(xiàn)實(shí)世界業(yè)務(wù)建模成軟件的一種方式。
當(dāng)企業(yè)的業(yè)務(wù)和流程已經(jīng)全部呈現(xiàn)在軟件系統(tǒng)中時(shí),這些軟件和系統(tǒng)就是企業(yè)的業(yè)務(wù)的承載。而數(shù)據(jù)則是最終業(yè)務(wù)最全面,最本質(zhì)的呈現(xiàn)。
最近數(shù)據(jù)領(lǐng)域有一個(gè)技術(shù)趨勢(shì),叫湖倉(cāng)一體。湖倉(cāng)一體背后的邏輯是原來(lái)的 OLTP 和 OLAP 架構(gòu)的融合。OLTP 是在線交易處理,OLAP 是在線分析。OLTP 是產(chǎn)生數(shù)據(jù),OLAP 匯聚數(shù)據(jù)、分析數(shù)據(jù),分析完數(shù)據(jù)變成報(bào)表給人看。但是現(xiàn)在我們會(huì)發(fā)現(xiàn)企業(yè)業(yè)務(wù)對(duì)數(shù)據(jù)的需求是如何讓數(shù)據(jù)更實(shí)時(shí),更直接地指導(dǎo)業(yè)務(wù),而不是說(shuō)數(shù)據(jù)團(tuán)隊(duì)給業(yè)務(wù)人員開(kāi)發(fā)個(gè)報(bào)表,業(yè)務(wù)人員晚上看一遍,第二天再去調(diào)產(chǎn)品價(jià)格。
因此,要將數(shù)據(jù)直接變成 API,變成服務(wù)去驅(qū)動(dòng)企業(yè)的業(yè)務(wù)流程。
十幾年前,數(shù)據(jù)團(tuán)隊(duì)在企業(yè)里的角色定位和現(xiàn)在相比是截然不同的。那個(gè)時(shí)候 OLAP 沒(méi)有特別強(qiáng)的實(shí)時(shí)性要求,數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)宕機(jī)了就宕機(jī)了,帶來(lái)的后果只不過(guò)是業(yè)務(wù)人員晚兩天看報(bào)表而已,也不需要高級(jí)別 SLA 的保障。
回到我們的第一個(gè)話題,企業(yè)為什么要做數(shù)字化轉(zhuǎn)型?企業(yè)和數(shù)據(jù)的關(guān)系是什么?
企業(yè)的數(shù)字化轉(zhuǎn)型就是在數(shù)字化時(shí)代的背景下,必須要做的企業(yè)真題轉(zhuǎn)型。
企業(yè)數(shù)字化轉(zhuǎn)型的本質(zhì)是建立數(shù)據(jù)的能力,從而充分利用數(shù)據(jù),獲得更先進(jìn)的生產(chǎn)力。
建設(shè)數(shù)據(jù)中臺(tái),滿足端對(duì)端數(shù)據(jù)需求
任何一個(gè)名詞的出現(xiàn),都有著它們特定的時(shí)代背景和意義。為什么數(shù)據(jù)中臺(tái)的概念能夠備受認(rèn)同?
現(xiàn)在企業(yè)都面臨著數(shù)據(jù)的問(wèn)題,不僅僅是 IT 所講的數(shù)據(jù)質(zhì)量的問(wèn)題,而且還有當(dāng)企業(yè)的業(yè)務(wù)需要做決策時(shí),得不到統(tǒng)一的指標(biāo),拿不到統(tǒng)一的口徑,幾個(gè)部門(mén)出的報(bào)表都不一致的數(shù)據(jù)價(jià)值的問(wèn)題。
經(jīng)過(guò)研究分析,我發(fā)現(xiàn),企業(yè)所有的數(shù)據(jù)問(wèn)題的本質(zhì)是業(yè)務(wù)對(duì)于數(shù)據(jù)生產(chǎn)的需求與其有限的、碎片化的數(shù)據(jù)生產(chǎn)力供給之間的矛盾。
怎么理解這個(gè)矛盾呢?
在十幾年前,業(yè)務(wù)部門(mén)做業(yè)務(wù)決策時(shí),并不需要太多的數(shù)據(jù)。因?yàn)闃I(yè)務(wù)量有限,外界變化也不大,業(yè)務(wù)人員根據(jù)自己的經(jīng)驗(yàn)就可以了解、全盤(pán)掌握所需要的信息,并且做出決策。
但是在現(xiàn)在的環(huán)境下,業(yè)務(wù)越來(lái)越復(fù)雜、市場(chǎng)變動(dòng)得越來(lái)越快、競(jìng)爭(zhēng)也越來(lái)越激烈,業(yè)務(wù)人員或者業(yè)務(wù)部門(mén)依靠自己的經(jīng)驗(yàn),已經(jīng)不足以全面掌握他所需要的業(yè)務(wù)動(dòng)態(tài)信息。在此情況下,他們就需要借助數(shù)據(jù)獲得更多的洞察、更多的現(xiàn)狀、更多的預(yù)測(cè)。所以,他們對(duì)數(shù)據(jù)的生產(chǎn)、加工、利用都會(huì)有非常多的需求。比如,一到月底,數(shù)據(jù)部門(mén)的需求量就會(huì)爆增,有財(cái)務(wù)的、物料的、設(shè)備的、生產(chǎn)的各種部門(mén)都要求產(chǎn)出報(bào)表。
目前大部分企業(yè)的數(shù)據(jù)的生產(chǎn)和利用都是由 IT 部門(mén)負(fù)責(zé)的。而 IT 部門(mén)現(xiàn)有的資源能力不足以滿足整個(gè)企業(yè)業(yè)務(wù)對(duì)于數(shù)據(jù)的需求,所以出現(xiàn)了,需求排期太長(zhǎng),響應(yīng)不及時(shí)的情況。于是,就有很多業(yè)務(wù)部門(mén)自己去想辦法,自己找資源,自己整理表格、自己開(kāi)發(fā)數(shù)據(jù)系統(tǒng),這樣就出現(xiàn)了非常多的重復(fù)、浪費(fèi)、堆疊的新的數(shù)據(jù)孤島。
我見(jiàn)過(guò)有的集團(tuán),數(shù)據(jù)中臺(tái)就有七、八套,這也是造成數(shù)據(jù)質(zhì)量問(wèn)題、產(chǎn)生數(shù)據(jù)治理各種問(wèn)題的原因。
在這種情況下,企業(yè)應(yīng)該怎么做?
我研究了很多國(guó)內(nèi)外先進(jìn)企業(yè)的案例,比如:字節(jié)跳動(dòng)和 Netflix 等。我們會(huì)發(fā)現(xiàn)這種原生數(shù)字化企業(yè),對(duì)數(shù)據(jù)治理這個(gè)詞提的并不多。
為什么它們不經(jīng)常去提數(shù)據(jù)治理?因?yàn)椋鼈儽旧砭褪峭ㄟ^(guò)生產(chǎn)、加工數(shù)據(jù),然后將數(shù)據(jù)變成產(chǎn)品,再去銷(xiāo)售,從而帶來(lái)收益的企業(yè)。所以,數(shù)據(jù)的質(zhì)量和各種問(wèn)題在生產(chǎn)過(guò)程中是必須被管理好的,是一個(gè)生產(chǎn)問(wèn)題,而不是一個(gè)管理問(wèn)題,因此,它們不會(huì)經(jīng)常提數(shù)據(jù)治理。
每個(gè)這樣的企業(yè),它們都有幾個(gè)共性:
1. 統(tǒng)一性:無(wú)論企業(yè)的技術(shù)架構(gòu)如何、物理部署如何,它們都有一套平臺(tái)(可以稱(chēng)作“數(shù)據(jù)中臺(tái)”),從邏輯上來(lái)看,這套平臺(tái)是企業(yè)整體的一部分,和企業(yè)具有統(tǒng)一性。所有的數(shù)據(jù)都是同源的,技術(shù)的出口也是同源的。
2. 標(biāo)準(zhǔn)化:企業(yè)所有用戶使用的開(kāi)發(fā)語(yǔ)言、開(kāi)發(fā)工具、開(kāi)發(fā)過(guò)程都是標(biāo)準(zhǔn)化的、共通的。
3. 易用性:不同層次的數(shù)據(jù)開(kāi)發(fā)者、數(shù)據(jù)消費(fèi)者都可以使用企業(yè)的工具、技術(shù)。比如說(shuō)業(yè)務(wù)人員不會(huì)使用 Python,企業(yè)可以給他們 Excel;數(shù)據(jù)分析師不會(huì)寫(xiě)代碼,企業(yè)也可以給到其他的替代工具。
4. 自服務(wù):在這個(gè)平臺(tái)上,不同的數(shù)據(jù)加工用戶都可以找到相應(yīng)的數(shù)據(jù)生產(chǎn)、使用工具。無(wú)論采用何種工具,最后大家開(kāi)發(fā)的結(jié)果都是標(biāo)準(zhǔn)化的、都是互通的。這個(gè)“自服務(wù)”可以讓用戶利用自己現(xiàn)有的知識(shí)去加工、生產(chǎn)數(shù)據(jù)。
在如今的企業(yè)中,也存在很多數(shù)據(jù)能力的問(wèn)題,比如:開(kāi)發(fā)人員想取個(gè)數(shù),找不到在哪里,即使找到了,但是口徑也不一定對(duì),因?yàn)檫@個(gè)數(shù)據(jù)結(jié)構(gòu)不一定就是他自己建的。此外,也有很多數(shù)據(jù)需求,從決策層到管理層,再到業(yè)務(wù)人員、業(yè)務(wù)分析人員,他們都需要不同的數(shù)據(jù)報(bào)表;從軟件工程師到開(kāi)發(fā)工程師,他們做軟件的時(shí)候也需要不同的數(shù)據(jù) API。
總之,通過(guò)這樣一套平臺(tái)可以把企業(yè)的數(shù)據(jù)分析、數(shù)據(jù)加工、數(shù)據(jù)利用等全鏈路的數(shù)據(jù)能力聚集起來(lái),這個(gè)平臺(tái)也能夠端到端的把統(tǒng)一的數(shù)據(jù)和統(tǒng)一的數(shù)據(jù)能力提供給數(shù)據(jù)生產(chǎn)、消費(fèi)者,這也是企業(yè)對(duì)“數(shù)據(jù)中臺(tái)”這四個(gè)字所期望的能力。只有數(shù)據(jù)中臺(tái)擁有這種能力,才能夠讓企業(yè)所有的數(shù)據(jù)發(fā)展成為全員的數(shù)據(jù)能力,這就是數(shù)字化轉(zhuǎn)型跟數(shù)據(jù)中臺(tái)的關(guān)系。
企業(yè)終極期望,數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)價(jià)值
未來(lái)的企業(yè)都是生產(chǎn)、加工數(shù)據(jù)的企業(yè),數(shù)據(jù)中臺(tái)就是核心,承載端到端的數(shù)據(jù)的生產(chǎn)利用等全鏈路功能。
那么,企業(yè)需要什么樣的數(shù)據(jù)中臺(tái)?
調(diào)研報(bào)告顯示,企業(yè)不同角色對(duì)于數(shù)據(jù)中臺(tái)的業(yè)務(wù)訴求不盡相同。很多人把數(shù)據(jù)中臺(tái)泛化,把營(yíng)銷(xiāo)、業(yè)務(wù)的語(yǔ)言、業(yè)務(wù)的需求都放到數(shù)據(jù)中臺(tái)里。比如,把 CDP 放到數(shù)據(jù)中臺(tái)。
基于 1700 多份調(diào)研問(wèn)卷的分析,我總結(jié)了用戶對(duì)于數(shù)據(jù)中臺(tái)的五大期待。
第一,直接參與業(yè)務(wù)。無(wú)論是架構(gòu)師、IT 人員還是數(shù)據(jù)人員,大家都面臨著領(lǐng)導(dǎo)的挑戰(zhàn):你開(kāi)發(fā)數(shù)據(jù)的業(yè)務(wù)價(jià)值是什么?企業(yè)希望數(shù)據(jù)中臺(tái)所代表的數(shù)據(jù)能力,不僅僅是完成一個(gè)報(bào)表,而是要提升業(yè)務(wù)效率,直接給企業(yè)帶來(lái)價(jià)值。
第二,產(chǎn)生客戶價(jià)值。企業(yè)希望通過(guò)數(shù)據(jù)中臺(tái)可以給企業(yè)帶來(lái)收入。數(shù)據(jù)中臺(tái)可以解釋什么是客戶價(jià)值?用什么東西最能度量客戶價(jià)值?企業(yè)數(shù)據(jù)洞察給到的建議,客戶愿意去付錢(qián)、去購(gòu)買(mǎi)嗎?
第三,快速響應(yīng)需求。以前經(jīng)常會(huì)聽(tīng)到很多業(yè)務(wù)部門(mén)跟數(shù)據(jù)部門(mén)、技術(shù)部門(mén)的溝通:“我這個(gè)報(bào)表什么時(shí)候能開(kāi)發(fā)出來(lái)?”“我要的數(shù)據(jù)什么時(shí)候可以給我?”。要想解決上述問(wèn)題,就需要 IT 人員的排期,企業(yè)希望數(shù)據(jù)中臺(tái)能夠提升開(kāi)發(fā)效率。用戶可以立刻得到想要的數(shù)據(jù),無(wú)論是 API,是寬表,還是其他的數(shù)據(jù)形式,數(shù)據(jù)中臺(tái)都能快速響應(yīng)需求。
第四,統(tǒng)一數(shù)據(jù)服務(wù)。這里的統(tǒng)一并不是所有的形式要都一致,而是數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)要一致。很多企業(yè),無(wú)論是數(shù)據(jù)表、寬表還是報(bào)表,有很多數(shù)據(jù)是重復(fù)的。企業(yè)希望各個(gè)業(yè)務(wù)、技術(shù)部門(mén)都可以清楚地從一個(gè)平臺(tái)上看到全線范圍之內(nèi)的數(shù)據(jù)服務(wù)。
第五,打通數(shù)據(jù)資產(chǎn)。通過(guò)數(shù)據(jù)資產(chǎn)整體的技術(shù)去打通整個(gè)企業(yè)的數(shù)據(jù)資產(chǎn),對(duì)數(shù)據(jù)進(jìn)行統(tǒng)一采集、存儲(chǔ),進(jìn)行統(tǒng)一的資產(chǎn)管理、數(shù)據(jù)治理。而這里的數(shù)據(jù)資產(chǎn)不僅指的原數(shù)據(jù),還包括二次開(kāi)發(fā)的數(shù)據(jù)表。
基于以上的用戶的期待以及行業(yè)里的先進(jìn)實(shí)踐,我總結(jié)了數(shù)據(jù)中臺(tái)的定義:數(shù)據(jù)中臺(tái)是為企業(yè)或者組織提供有業(yè)務(wù)價(jià)值服務(wù)的、統(tǒng)一的、端對(duì)端的數(shù)據(jù)生產(chǎn)平臺(tái)。
Netflix 就是一個(gè)典型的案例,在 Netflix 的話語(yǔ)體系里的數(shù)據(jù)中臺(tái)就是大數(shù)據(jù)門(mén)戶,這是一個(gè)一站式的數(shù)據(jù)生態(tài)平臺(tái),實(shí)現(xiàn)了端到端的全鏈路數(shù)據(jù)加工生產(chǎn)。
研究了用戶的需求以及行業(yè)的實(shí)踐之后,我基于 DDD 把數(shù)據(jù)中臺(tái)抽象和建模,將企業(yè)數(shù)據(jù)中臺(tái)的能力分成兩個(gè)領(lǐng)域:
生產(chǎn)領(lǐng)域——數(shù)據(jù)中臺(tái)的核心能力。假設(shè)企業(yè)的數(shù)據(jù)中臺(tái)主要是采集數(shù)據(jù)、加工數(shù)據(jù)、生產(chǎn)成數(shù)據(jù)服務(wù)、數(shù)據(jù)產(chǎn)品的話,那么企業(yè)就相當(dāng)于是一個(gè)工廠,而工廠最核心的能力便是生產(chǎn)能力。換句話說(shuō),就是買(mǎi)原材料、研發(fā)產(chǎn)品、生產(chǎn)產(chǎn)品、加工產(chǎn)品、銷(xiāo)售運(yùn)營(yíng)等一系列能力。這些生產(chǎn)能力是支撐企業(yè)生存、獲得利潤(rùn)的核心,這也是數(shù)據(jù)中臺(tái)必須具備的核心能力。
管理領(lǐng)域——數(shù)據(jù)中臺(tái)的支撐能力。當(dāng)企業(yè)具有一定規(guī)模后,就需要一些管理性的、輔助性的、可以提高生產(chǎn)效率、提升用戶體驗(yàn)、提高系統(tǒng)安全性的能力。
仔細(xì)來(lái)看,我們又可以根據(jù)數(shù)據(jù)中臺(tái)分別在生產(chǎn)、管理領(lǐng)域的不同應(yīng)用,將數(shù)據(jù)中臺(tái)的能力分為四大核心能力以及三大支撐能力。
數(shù)據(jù)中臺(tái)的四大核心能力具體包括數(shù)據(jù)資產(chǎn)的采集和存儲(chǔ)能力、業(yè)務(wù)價(jià)值的探索和創(chuàng)新能力、數(shù)據(jù)產(chǎn)品的開(kāi)發(fā)和運(yùn)營(yíng)能力、數(shù)據(jù)的加工和測(cè)試能力。其實(shí),我們談及到的各種技術(shù)體系和產(chǎn)品都是服務(wù)于這些核心能力的。
現(xiàn)在企業(yè)有大量新的技術(shù)、軟件都是服務(wù)于數(shù)據(jù)采集、存儲(chǔ)、加工、測(cè)試等方面的。而關(guān)于業(yè)務(wù)的價(jià)值探索和創(chuàng)新,是需要讓業(yè)務(wù)人員能夠快速地看到企業(yè)的數(shù)據(jù)資產(chǎn),讓他們能夠隨心所欲使用數(shù)據(jù),目前企業(yè)數(shù)據(jù)中臺(tái)的這個(gè)能力還是不足的。關(guān)于數(shù)據(jù)產(chǎn)品的開(kāi)發(fā)和運(yùn)營(yíng),實(shí)際上包括 DevOps、包括埋點(diǎn)、包括如何在產(chǎn)品上線后,把產(chǎn)品運(yùn)營(yíng)得更好,這些都是數(shù)據(jù)中臺(tái)需要的核心能力。
另一方面,數(shù)據(jù)中臺(tái)三大支撐能力是為了讓數(shù)據(jù)更快、更好、更安全的產(chǎn)生價(jià)值,具體包括數(shù)據(jù)的協(xié)同與共享能力、數(shù)據(jù)的管理與治理能力、數(shù)據(jù)的運(yùn)維與安全能力。
在整個(gè)數(shù)據(jù)加工的全生命周期鏈路里,有非常多的協(xié)作者,從數(shù)據(jù)需求的提出者到數(shù)據(jù)獲取、數(shù)據(jù)生產(chǎn),數(shù)據(jù)開(kāi)發(fā)、測(cè)試、上線、運(yùn)維等階段,全鏈路的用戶都需要通過(guò)數(shù)據(jù)中臺(tái)進(jìn)行協(xié)作。其實(shí),目前有很多企業(yè)因?yàn)椴粯?biāo)準(zhǔn)、不一致的協(xié)作機(jī)制,把大量的時(shí)間浪費(fèi)在了這個(gè)環(huán)節(jié),所以數(shù)據(jù)中臺(tái)必須需要協(xié)作和共享的能力。
同時(shí),數(shù)據(jù)中心還需要管理和治理的能力,哪些數(shù)據(jù)能訪問(wèn)?誰(shuí)能訪問(wèn)?當(dāng)數(shù)據(jù)服務(wù)發(fā)布以后,什么時(shí)間點(diǎn)它應(yīng)該自動(dòng)的下線?哪些數(shù)據(jù)可以重復(fù)構(gòu)建?哪些數(shù)據(jù)要在本地做存儲(chǔ),哪些數(shù)據(jù)應(yīng)該全部統(tǒng)一上云?這都是數(shù)據(jù)資產(chǎn)的管理和治理的范疇。
最后,數(shù)據(jù)中臺(tái)離不開(kāi)運(yùn)維和安全,這是保障數(shù)據(jù)中臺(tái)良好運(yùn)營(yíng)的前提。
所以企業(yè)的數(shù)據(jù)中臺(tái)是否是完備的,能否支撐企業(yè)的數(shù)字化轉(zhuǎn)型,可以參考這七大能力模型。我即將出版的新書(shū)《精益數(shù)據(jù)方法論-數(shù)據(jù)驅(qū)動(dòng)的數(shù)字化轉(zhuǎn)型》里,有這七大能力模型的詳細(xì)解釋以及成熟度評(píng)估模型。
數(shù)據(jù)、技術(shù)雙融合,打造數(shù)字化企業(yè)
既然數(shù)字化轉(zhuǎn)型指的是企業(yè)在數(shù)字時(shí)代的整體轉(zhuǎn)型,那么如何打造數(shù)字化企業(yè)?如何讓數(shù)據(jù)驅(qū)動(dòng)企業(yè)?
當(dāng)所有的企業(yè)都從生產(chǎn)、加工數(shù)據(jù)中獲得價(jià)值的時(shí)候,我們就可以把這個(gè)企業(yè)類(lèi)比于制造業(yè)。制造業(yè)是有非常成熟的方法論的,那就是精益思想。我將精益思想和數(shù)字化轉(zhuǎn)型結(jié)合,形成了精益數(shù)據(jù)方法論,其中有一個(gè)精益花瓣模型,就能夠比較清楚的說(shuō)明企業(yè)數(shù)字化轉(zhuǎn)型的過(guò)程。
企業(yè)的業(yè)務(wù)、數(shù)據(jù)和技術(shù)看做是三個(gè)圓,隨著企業(yè)數(shù)字化轉(zhuǎn)型的深入,這三個(gè)圓慢慢融合成一個(gè)圈,也就成為了數(shù)字化企業(yè)。
精益數(shù)據(jù)花瓣模型還包含了企業(yè)數(shù)字化轉(zhuǎn)型的路徑,換句話說(shuō),就是企業(yè)要怎樣去識(shí)別價(jià)值場(chǎng)景。目前,令很多企業(yè)領(lǐng)導(dǎo)頭疼的是:企業(yè)有這么多數(shù)據(jù),但是看上去現(xiàn)在數(shù)據(jù)沒(méi)有發(fā)揮價(jià)值,除了給我?guī)?lái)成本之外。如何讓數(shù)據(jù)發(fā)揮價(jià)值,如何去識(shí)別場(chǎng)景,如何去構(gòu)建符合企業(yè)的技術(shù)能力。
前面提到,精益思想帶來(lái)了制造業(yè)的飛速發(fā)展,同樣,數(shù)據(jù)領(lǐng)域也可以采用精益思想的四大原則:
Value:數(shù)據(jù)要產(chǎn)生業(yè)務(wù)價(jià)值。
Flow:高速數(shù)據(jù)價(jià)值流。當(dāng)企業(yè)找到業(yè)務(wù)價(jià)值以后,從原材料到產(chǎn)品之間需要構(gòu)建一條通道,讓這個(gè)通道快速地流轉(zhuǎn)起來(lái),才能實(shí)現(xiàn)業(yè)務(wù)價(jià)值。比如,不論是 DataOps,還是 AiOps,都是為了讓數(shù)據(jù)產(chǎn)品的生命周期流動(dòng)更快。
Pull:按需生產(chǎn)。不要在用戶不需要的時(shí)候生產(chǎn)數(shù)據(jù),很多報(bào)表放在那里,用戶不使用就是浪費(fèi)資源。
Perfection:持續(xù)改進(jìn)。
在數(shù)字化轉(zhuǎn)型模型的基礎(chǔ)之上我總結(jié)了一套方法論,叫精益數(shù)據(jù)方法論,主要是針對(duì)如何打造數(shù)據(jù)驅(qū)動(dòng)企業(yè)的。其中包括精益數(shù)據(jù)戰(zhàn)略、精益數(shù)據(jù)治理、精益數(shù)據(jù)協(xié)同、精益數(shù)據(jù)產(chǎn)品以及數(shù)據(jù)中臺(tái)和數(shù)據(jù)驅(qū)動(dòng)的組織文化,持續(xù)改進(jìn)。
最后的企業(yè)數(shù)字化轉(zhuǎn)型的核心還是要落到組織文化上,因?yàn)樘嵘龜?shù)字化的素養(yǎng)和能力是打造數(shù)據(jù)驅(qū)動(dòng)企業(yè)的必備能力。
企業(yè)的數(shù)字化轉(zhuǎn)型是一個(gè)非常體系化的工作,要從戰(zhàn)略,組織,流程,業(yè)務(wù),技術(shù)等全方位,系統(tǒng)化推進(jìn),其中最重要的就是要充分利用數(shù)據(jù)的力量。而利用數(shù)據(jù)的核心是要產(chǎn)生價(jià)值,和消除浪費(fèi)也就是提質(zhì)增效,大家可以關(guān)注一下我即將出版的新書(shū)《精益數(shù)據(jù)方法論-數(shù)據(jù)驅(qū)動(dòng)的數(shù)字化轉(zhuǎn)型》。
- 推薦
- 新聞
- 觀點(diǎn)
- IT/互聯(lián)網(wǎng)
- CIO
- CDO
- IT
推薦
-
11月28日-30日,中國(guó)數(shù)字化年會(huì)將于成都正式開(kāi)幕,本屆年會(huì)以數(shù)智萬(wàn)象 無(wú)界新生”為主題,設(shè)置2場(chǎng)主論壇、1場(chǎng)高峰論壇、5場(chǎng)專(zhuān)題論壇、4項(xiàng)特色活動(dòng)、2場(chǎng)頒獎(jiǎng)典禮等14項(xiàng)活動(dòng),以及2天數(shù)字化轉(zhuǎn)型供需對(duì)接展。
-
零次方科技發(fā)布了其首款人形機(jī)器人,可以在多種不規(guī)則路面、復(fù)雜地形中長(zhǎng)時(shí)間穩(wěn)定行走,且具備優(yōu)秀的抗干擾性能,即使受到各方向的強(qiáng)沖擊也能保持穩(wěn)定站立。
-
近日,第四屆“青年科學(xué)家502論壇”在南方科技大學(xué)舉行,美國(guó)國(guó)家工程院外籍院士沈向洋做了《通用人工智能時(shí)代,我們應(yīng)該怎樣思考大模型》的主題演講,并給出了他對(duì)大模型的10個(gè)思考。
-
深度解析Meta Reality Labs的生態(tài)布局
-
TeleAI 李學(xué)龍團(tuán)隊(duì)提出具身世界模型
-
2024 年 10 月 14 日,第 44 屆中東海灣信息技術(shù)展(GITEX Global)在阿聯(lián)酋迪拜開(kāi)幕。紫光股份旗下新華三集團(tuán)重磅亮相展會(huì),以"精耕務(wù)實(shí),為時(shí)代賦智慧"為主題,全面展示了公司"云-網(wǎng)-安-算-存-端"的全棧技術(shù)能力與國(guó)際生態(tài)合作成果。
-
中關(guān)村大數(shù)據(jù)產(chǎn)業(yè)聯(lián)盟 顏陽(yáng)-元宇宙產(chǎn)業(yè)的商業(yè)邏輯與技術(shù)壁壘研究
顏陽(yáng) 中關(guān)村大數(shù)據(jù)產(chǎn)業(yè)聯(lián)盟副秘書(shū)長(zhǎng) ¥9.90 金錦囊免費(fèi)
-
《數(shù)智化敏捷組織》重構(gòu)、升級(jí)與進(jìn)化
肖利華 前阿里巴巴集團(tuán)副總裁、阿里云研究院 院長(zhǎng) 清華大學(xué)博士后、中科院管理學(xué)博士、教授 ¥9.90 金錦囊免費(fèi)
史凱
精益數(shù)據(jù)方法論作者
數(shù)字產(chǎn)業(yè)創(chuàng)新研究中心副主席
精益數(shù)據(jù)方法論作者 數(shù)字產(chǎn)業(yè)創(chuàng)新研究中心副主席
精益數(shù)據(jù)方法論發(fā)明人、作者、數(shù)字產(chǎn)業(yè)創(chuàng)新研究中心副主席、中國(guó)軟件協(xié)會(huì)CIO分會(huì)特聘專(zhuān)家、中關(guān)村天使投資聯(lián)盟研究中心特聘專(zhuān)家
我要評(píng)論