【數(shù)據(jù)猿導(dǎo)讀】數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型是一個(gè)體系化工作，需要從理論體系、平臺工具、數(shù)據(jù)、組織、機(jī)制五個(gè)方面，著手，建一個(gè)企業(yè)級的數(shù)據(jù)資產(chǎn)平臺，梳理清晰整個(gè)集團(tuán)的數(shù)據(jù)資產(chǎn)，并借助數(shù)據(jù)和智能的算法，在數(shù)據(jù)資產(chǎn)中發(fā)現(xiàn)新的業(yè)務(wù)價(jià)值點(diǎn)，創(chuàng)新產(chǎn)品和服務(wù)，從而構(gòu)建數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型
作者 | 史凱
官網(wǎng) | www.datayuan.cn
微信公眾號ID | datayuancn
數(shù)據(jù)驅(qū)動的創(chuàng)新(DDI)已經(jīng)成為了傳統(tǒng)企業(yè)數(shù)字化轉(zhuǎn)型的核心動力，從流程定義的轉(zhuǎn)型模態(tài)化到現(xiàn)在數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型。
現(xiàn)代的企業(yè)是由數(shù)據(jù)構(gòu)成的一個(gè)有機(jī)生態(tài)，在數(shù)據(jù)的金礦中結(jié)合智能技術(shù)中尋找新的商業(yè)模式、創(chuàng)新產(chǎn)品和服務(wù)。但是具體如何去做，會面臨哪些問題和挑戰(zhàn)，應(yīng)該如何去應(yīng)對呢？全球領(lǐng)先的數(shù)字化轉(zhuǎn)型咨詢和交付服務(wù)商ThoughtWorks在2017年和某多業(yè)態(tài)物流集團(tuán)客戶一起協(xié)作，利用創(chuàng)新精益的實(shí)施理論，結(jié)合大數(shù)據(jù)和智能算法，開辟了一條數(shù)據(jù)驅(qū)動的企業(yè)數(shù)字化轉(zhuǎn)型之旅。
客戶名稱
某超大型多業(yè)態(tài)物流集團(tuán)
所屬分類
物流.新零售.航空.貨運(yùn).貿(mào)易
案例背景
該客戶是一個(gè)多業(yè)態(tài)的物流集團(tuán)，包括航空貨運(yùn)、物流、零售、機(jī)場、跨境電商等多形態(tài)業(yè)務(wù)，集團(tuán)總部希望打通各業(yè)態(tài)的用戶、訂單、支付、產(chǎn)品、服務(wù)數(shù)據(jù)，利用數(shù)據(jù)產(chǎn)生業(yè)務(wù)洞察，打造創(chuàng)新產(chǎn)品和服務(wù)。該集團(tuán)是重組后的新生兒，所以業(yè)務(wù)不協(xié)同，數(shù)據(jù)不共享是與生俱來的現(xiàn)狀，這個(gè)痛點(diǎn)導(dǎo)致集團(tuán)的打造數(shù)字化智慧物流網(wǎng)絡(luò)的戰(zhàn)略愿景的實(shí)現(xiàn)舉步維艱。
如何能夠打破組織結(jié)構(gòu)的壁壘，將上百個(gè)業(yè)務(wù)系統(tǒng)的業(yè)務(wù)數(shù)據(jù)匯聚在一起，通過數(shù)據(jù)去產(chǎn)生新洞察，發(fā)現(xiàn)新業(yè)務(wù)，打造新產(chǎn)品，驗(yàn)證新想法，從而驅(qū)動業(yè)務(wù)的快速迭代，是這個(gè)項(xiàng)目的目標(biāo)和愿景。而這個(gè)項(xiàng)目的特點(diǎn)是，該集團(tuán)的高層很清晰的知道多板塊的融合協(xié)同，產(chǎn)生新的產(chǎn)品和服務(wù)的目標(biāo)是建立在數(shù)據(jù)的打通，數(shù)據(jù)驅(qū)動基礎(chǔ)上的，所以一開始就成立了集團(tuán)的數(shù)字化公司，并且由這個(gè)數(shù)字化公司來推動整個(gè)數(shù)字化轉(zhuǎn)型。
實(shí)施時(shí)間
2017年5月啟動項(xiàng)目調(diào)研
2017年6月完成整體規(guī)劃
2017年11月數(shù)據(jù)資產(chǎn)創(chuàng)新平臺初步完成
2017年12月，接入一個(gè)多個(gè)質(zhì)量較好的數(shù)據(jù)資產(chǎn)，并開始進(jìn)行價(jià)值挖掘。
2018年5月，完成數(shù)據(jù)資產(chǎn)創(chuàng)新平臺第一版的建設(shè)，并且持續(xù)在數(shù)據(jù)中找到了多個(gè)業(yè)務(wù)價(jià)值創(chuàng)新點(diǎn)。獲得了多個(gè)業(yè)務(wù)放的認(rèn)可。
實(shí)施步驟
整個(gè)項(xiàng)目的目標(biāo)是構(gòu)建一個(gè)企業(yè)級的數(shù)據(jù)資產(chǎn)平臺，梳理清晰整個(gè)集團(tuán)的數(shù)據(jù)資產(chǎn)，并借助數(shù)據(jù)和智能的算法，在數(shù)據(jù)資產(chǎn)中發(fā)現(xiàn)新的業(yè)務(wù)價(jià)值點(diǎn)，創(chuàng)新產(chǎn)品和服務(wù)，從而構(gòu)建數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型。
數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型是一個(gè)體系化的工作，從理論體系、平臺工具、數(shù)據(jù)、組織、機(jī)制五個(gè)方面，進(jìn)行了以下的工作：
1、梳理企業(yè)級數(shù)據(jù)資產(chǎn)(EDF)
基于L-DAMF（Lean Data Asset Innovation Methodology)框架，識別、定位、梳理出集團(tuán)的數(shù)據(jù)資產(chǎn)目錄，清晰，有體系的組織利用企業(yè)的數(shù)據(jù)。
2、制定精益數(shù)據(jù)級數(shù)據(jù)治理體系（Lean Data Governance)
總結(jié)管理職責(zé)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量、挖掘利用、安全規(guī)范、數(shù)據(jù)集成各方面的痛點(diǎn)，現(xiàn)狀，打造組織、管理、技術(shù)和執(zhí)行四個(gè)維度的精益數(shù)據(jù)治理體系，建立持續(xù)的數(shù)據(jù)資產(chǎn)保障機(jī)制。
3、打造企業(yè)數(shù)據(jù)資產(chǎn)平臺(EDP)
分階段，分步驟，快速迭代，打造企業(yè)數(shù)據(jù)資產(chǎn)平臺，實(shí)現(xiàn)數(shù)據(jù)的獲取、存儲、探索、分析、利用全生命周期價(jià)值。為企業(yè)的各角色提供對應(yīng)的數(shù)據(jù)服務(wù)。
4、建立數(shù)據(jù)分析團(tuán)隊(duì)
建立業(yè)務(wù)分析師、數(shù)據(jù)分析師和數(shù)據(jù)工程師為核心的數(shù)據(jù)組織，持續(xù)的挖掘、產(chǎn)生數(shù)據(jù)洞察。
5、建立數(shù)據(jù)驅(qū)動的創(chuàng)新孵化機(jī)制
結(jié)合集團(tuán)的創(chuàng)新孵化投資體系，建立數(shù)據(jù)驅(qū)動的創(chuàng)新孵化機(jī)制。
本項(xiàng)目是按照L-DAIM的框架作為指導(dǎo)的。精益數(shù)據(jù)資產(chǎn)管理的遠(yuǎn)期目標(biāo)是構(gòu)建一個(gè)高質(zhì)量、開放、協(xié)作的數(shù)據(jù)價(jià)值生態(tài)，讓企業(yè)的生態(tài)相關(guān)方都可以在這個(gè)價(jià)值生態(tài)中獲取、貢獻(xiàn)數(shù)據(jù)，利用數(shù)據(jù)探索業(yè)務(wù)創(chuàng)新，將業(yè)務(wù)創(chuàng)新落地成服務(wù)產(chǎn)生收益，而企業(yè)數(shù)據(jù)資產(chǎn)平臺則是這個(gè)目標(biāo)的技術(shù)支撐和實(shí)現(xiàn)。
精益企業(yè)數(shù)據(jù)資產(chǎn)管理框架(L-DAIM)的實(shí)踐能夠幫助企業(yè)體系化管理企業(yè)的數(shù)據(jù)，并且構(gòu)建可持續(xù)的數(shù)據(jù)資產(chǎn)治理機(jī)制，從而產(chǎn)生持續(xù)的數(shù)據(jù)創(chuàng)新：
1、數(shù)據(jù)資產(chǎn)的識別和治理
數(shù)據(jù)資產(chǎn)評估模型，幫助企業(yè)從業(yè)務(wù)價(jià)值、數(shù)據(jù)成熟度的角度評估和識別哪些數(shù)據(jù)是企業(yè)的數(shù)據(jù)資產(chǎn)，他們的成熟度、價(jià)值、安全級別是怎樣的。
整理企業(yè)的數(shù)據(jù)資產(chǎn)目錄，并且對應(yīng)到這些數(shù)據(jù)資產(chǎn)目前的源系統(tǒng)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)所有者、利用情況等維度，構(gòu)建企業(yè)數(shù)據(jù)資產(chǎn)全景圖。
建立數(shù)據(jù)資產(chǎn)的治理體系，從數(shù)據(jù)質(zhì)量、數(shù)據(jù)集成、數(shù)據(jù)管理、數(shù)據(jù)利用的角度，構(gòu)建對應(yīng)的組織、技術(shù)、管理和制度體系，來保證數(shù)據(jù)資產(chǎn)本身可利用、可挖掘、可審計(jì)、可集成。
2、數(shù)據(jù)資產(chǎn)的獲取和存儲
構(gòu)建企業(yè)級數(shù)據(jù)湖，根據(jù)企業(yè)數(shù)據(jù)資產(chǎn)目錄，將識別出的數(shù)據(jù)利用對應(yīng)的數(shù)字化技術(shù)獲取并接入到數(shù)據(jù)湖，進(jìn)行安全、高效的存儲和監(jiān)控管理。
3、數(shù)據(jù)資產(chǎn)的共享和協(xié)作
當(dāng)數(shù)據(jù)已經(jīng)按照數(shù)據(jù)目錄的結(jié)構(gòu)存儲到數(shù)據(jù)湖中，如何將這些數(shù)據(jù)有效的共享分發(fā)提供給需要的角色和組織去使用，這是數(shù)據(jù)資產(chǎn)管理的重要內(nèi)容。
企業(yè)的數(shù)據(jù)使用方應(yīng)該能夠全面的掌握企業(yè)有哪些數(shù)據(jù)資產(chǎn)，然后可以根據(jù)權(quán)限高效便捷的獲取到這些數(shù)據(jù)資產(chǎn)和服務(wù)，數(shù)據(jù)資產(chǎn)的使用、分發(fā)、下載、都是需要被記錄，可追蹤，可審計(jì)的。數(shù)據(jù)資產(chǎn)管理框架致力于打造一個(gè)安全、開放、共享的數(shù)據(jù)資產(chǎn)協(xié)作體系。
4、數(shù)據(jù)創(chuàng)新的挖掘和探索
數(shù)據(jù)創(chuàng)新非常依賴于團(tuán)隊(duì)的協(xié)作和技術(shù)工具，企業(yè)數(shù)據(jù)資產(chǎn)從數(shù)據(jù)到價(jià)值，重要的能力就是如何分析和挖掘這些數(shù)據(jù)。L-DAIM提供了一套數(shù)據(jù)價(jià)值探索的方法論和實(shí)踐準(zhǔn)則，輔助以數(shù)據(jù)工程、數(shù)據(jù)科學(xué)的協(xié)作平臺工具，讓數(shù)據(jù)分析師、數(shù)據(jù)工程師、數(shù)據(jù)科學(xué)家能夠在一個(gè)工作臺上搜索數(shù)據(jù)、分析數(shù)據(jù)、挖掘數(shù)據(jù)，產(chǎn)生數(shù)據(jù)洞察。一個(gè)業(yè)務(wù)創(chuàng)新價(jià)值，是需要多角色的協(xié)作，快速迭代和驗(yàn)證的。L-DAIM通過Data Discovery-Inception的方法，輔助以一套分享、討論、協(xié)作、甄選的創(chuàng)新論壇，幫助企業(yè)去識別數(shù)據(jù)洞察的價(jià)值、可行性、優(yōu)先級，讓用戶、業(yè)務(wù)人員、數(shù)據(jù)分析師、數(shù)據(jù)工程師和數(shù)據(jù)科學(xué)家通力協(xié)作，產(chǎn)生可以落地的業(yè)務(wù)價(jià)值和產(chǎn)品創(chuàng)新。
5、數(shù)據(jù)服務(wù)的構(gòu)建和管理
數(shù)據(jù)集、算法、模型和可視化報(bào)表等都會以服務(wù)的方式提供出來，在統(tǒng)一的服務(wù)市場里進(jìn)行管理，用戶可以搜索、獲取使用這些服務(wù)，并且給這些服務(wù)予以反饋、點(diǎn)評，從而識別出優(yōu)質(zhì)的服務(wù)。
6、資產(chǎn)和服務(wù)的交易和管理
最終，數(shù)據(jù)資產(chǎn)和服務(wù)，都是可以被交易的，所有的交易是被監(jiān)控，被管理的。這個(gè)體系里的每一個(gè)角色，都能夠通過提供數(shù)據(jù)、提供技術(shù)工具、提供分析服務(wù)等手段獲得對應(yīng)的價(jià)值回報(bào)，從而形成協(xié)作，共贏的數(shù)據(jù)價(jià)值生態(tài)，促進(jìn)企業(yè)的持續(xù)數(shù)據(jù)創(chuàng)新。
精益數(shù)據(jù)資產(chǎn)管理體系如何能夠在企業(yè)中發(fā)揮作用，是需要一個(gè)數(shù)字化平臺來支撐的。而本項(xiàng)目的目標(biāo)就是在精益數(shù)據(jù)資產(chǎn)創(chuàng)新體系基礎(chǔ)上構(gòu)建一個(gè)支持持續(xù)數(shù)據(jù)資產(chǎn)創(chuàng)新的平臺。
系統(tǒng)架構(gòu)
本項(xiàng)目采用的架構(gòu)如下圖所示：
整個(gè)架構(gòu)是按照數(shù)據(jù)工廠(Data Factory）的思路來構(gòu)建的：
每一個(gè)企業(yè)未來都是數(shù)據(jù)驅(qū)動的企業(yè)，所有的決策，產(chǎn)品的設(shè)計(jì)、研發(fā)、生產(chǎn)、銷售都會基于數(shù)據(jù)來進(jìn)行。那么每一個(gè)企業(yè)可以類比城一個(gè)數(shù)據(jù)工廠。
這個(gè)工廠有原材料那就是內(nèi)外部的源數(shù)據(jù)，源數(shù)據(jù)通過運(yùn)輸隊(duì)，也就是數(shù)據(jù)采集通道獲取到原材料倉庫中，這里的原材料倉庫就是數(shù)據(jù)湖，數(shù)據(jù)湖是用來存儲原始數(shù)據(jù)。在原材料的基礎(chǔ)上，企業(yè)需要一個(gè)數(shù)據(jù)的實(shí)驗(yàn)室，在這里，利用數(shù)據(jù)探索、數(shù)據(jù)分析等方法，企業(yè)的數(shù)據(jù)科學(xué)家和算法工程師與業(yè)務(wù)人員一起，嘗試各種新產(chǎn)品、新服務(wù)，進(jìn)行各種實(shí)驗(yàn)。如果實(shí)驗(yàn)成功，那么這就變成一個(gè)產(chǎn)品的設(shè)計(jì)方案，進(jìn)入到車間流水線中量產(chǎn)成一個(gè)個(gè)的產(chǎn)品，也就是數(shù)據(jù)服務(wù)和應(yīng)用。這些數(shù)據(jù)服務(wù)和應(yīng)用是具有業(yè)務(wù)價(jià)值的，是直接能夠解決一個(gè)或多個(gè)業(yè)務(wù)場景的問題的。
這樣的服務(wù)和應(yīng)用就會被放置到企業(yè)的服務(wù)/應(yīng)用商店中，供內(nèi)外部用戶所調(diào)用。
這個(gè)這個(gè)過程，都會由辦公室來進(jìn)行整體的監(jiān)控和管理，這里的辦公室就是數(shù)據(jù)的治理，來確保數(shù)據(jù)的質(zhì)量，產(chǎn)品的生產(chǎn)過程，最終服務(wù)和應(yīng)用的交付質(zhì)量。
在商店里，哪些數(shù)據(jù)的服務(wù)和應(yīng)用被調(diào)用比較多，在大部分情況下，那么這些數(shù)據(jù)的價(jià)值就會比較高。
有了這樣一個(gè)數(shù)據(jù)資產(chǎn)創(chuàng)新平臺，企業(yè)的業(yè)務(wù)用戶、技術(shù)人員、數(shù)據(jù)分析師，數(shù)據(jù)提供者，數(shù)據(jù)使用者，都可以在這個(gè)平臺上開放、共享的協(xié)作。
商業(yè)收益
在這個(gè)項(xiàng)目中，我們幫助客戶構(gòu)建了數(shù)據(jù)價(jià)值的生態(tài)：
以業(yè)務(wù)為目標(biāo)，以算法模型為工具，在數(shù)據(jù)的礦山中，識別出了以下種類的業(yè)務(wù)價(jià)值：
打通了過去的數(shù)據(jù)壁壘，解決了不知道企業(yè)有什么數(shù)據(jù)，存在哪里，如何獲取的共享協(xié)作問題，構(gòu)建了適合于這個(gè)行業(yè)的業(yè)務(wù)人員的易用的數(shù)據(jù)挖掘分析工具平臺。以下是核心的系統(tǒng)截圖：
案例投遞企業(yè)與作者
ThoughtWorks是全球領(lǐng)先的數(shù)字化轉(zhuǎn)型技術(shù)服務(wù)商，是一群極有天分的軟件精英，滿懷激情的匯聚在一起，以引導(dǎo)軟件創(chuàng)新、設(shè)計(jì)和交付的革命為己任，助推全球社會變革。我們不僅僅是一家軟件公司，同時(shí)也是一個(gè)社區(qū)：我們匯集滿懷激情的軟件精英，通過技術(shù)和客戶共同應(yīng)對最艱巨的挑戰(zhàn)。同時(shí)我們尋求IT行業(yè)的革新，并致力于對社會產(chǎn)生積極的影響力。
史凱（凱哥）是ThoughtWorks數(shù)據(jù)和人工智能業(yè)務(wù)負(fù)責(zé)人。超過15年企業(yè)戰(zhàn)略咨詢及架構(gòu)實(shí)施經(jīng)驗(yàn)，曾為眾多大型企業(yè)提供流程再造、IT規(guī)劃、ERP系統(tǒng)實(shí)施、云計(jì)算、大數(shù)據(jù)平臺架構(gòu)實(shí)施服務(wù)?！哆B接-數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型》的作者，數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型的倡導(dǎo)者，精益數(shù)據(jù)資產(chǎn)創(chuàng)新體的提出者，專注利用數(shù)據(jù)和智能等數(shù)字化技術(shù)為傳統(tǒng)企業(yè)提供數(shù)字化轉(zhuǎn)型服務(wù)。
