从招行数据架构调整,详解企业急需的数据中台与5大数字化转型
隨著企業(yè)對于數(shù)據(jù)重要性的認知越來越深刻,很多大型企業(yè)都已經(jīng)有了數(shù)據(jù)管理部門,初衷是希望通過數(shù)據(jù)管理部來構(gòu)建企業(yè)級的數(shù)據(jù)管理體系,組織,標(biāo)準(zhǔn),系統(tǒng),來解決數(shù)據(jù)一致性的問題,更好的利用數(shù)據(jù),但是,近兩年經(jīng)過觀察和與多個數(shù)據(jù)管理部負責(zé)人的溝通,我們發(fā)現(xiàn)不少數(shù)據(jù)管理部的工作步履蹣跚,收效不大。
而在近期,招商銀行,中國銀行,廣發(fā)銀行這樣的大型金融企業(yè),都將數(shù)據(jù)資產(chǎn)部門單列,將數(shù)據(jù)資產(chǎn)的應(yīng)用,價值的挖掘作為數(shù)據(jù)資產(chǎn)部門的目標(biāo)。
這兩者對比來看,我們發(fā)現(xiàn)傳統(tǒng)數(shù)據(jù)管理部門正在面臨著巨大的挑戰(zhàn),急需整體的轉(zhuǎn)型。
?
?
?
?傳統(tǒng)數(shù)據(jù)管理部的定位和職責(zé)
傳統(tǒng)企業(yè)的數(shù)據(jù)管理部的定位是統(tǒng)一管理數(shù)據(jù)標(biāo)準(zhǔn)。
一般來講,傳統(tǒng)數(shù)據(jù)管理部門的主要職責(zé)如下:
- 數(shù)據(jù)標(biāo)準(zhǔn)制定
- 主數(shù)據(jù)管理
- 數(shù)據(jù)統(tǒng)計與分析(數(shù)據(jù)倉庫或者BI系統(tǒng)建設(shè))
- 數(shù)據(jù)安全管理
傳統(tǒng)的數(shù)據(jù)管理部們主要以數(shù)據(jù)管理員,數(shù)據(jù)工程師,ETL工程師為主,是一個主要目標(biāo)是將數(shù)據(jù)質(zhì)量和安全管理好,距離業(yè)務(wù)比較遠,服務(wù)于應(yīng)用開發(fā)部門二級支撐部門。
數(shù)字化時代數(shù)據(jù)管理部的挑戰(zhàn)
目前企業(yè)數(shù)字化轉(zhuǎn)型已經(jīng)進入智能化時代,企業(yè)都希望借助數(shù)據(jù)來驅(qū)動和賦能傳統(tǒng)業(yè)務(wù),而這樣一來對傳統(tǒng)的數(shù)據(jù)管理部門的要求就提高了很多,定位發(fā)生了本質(zhì)的變化。而這對于數(shù)據(jù)管理部門來講,挑戰(zhàn)是巨大的,主要體現(xiàn)在:
1、定位和考核挑戰(zhàn)
數(shù)據(jù)從企業(yè)經(jīng)營管理的副產(chǎn)品變成了企業(yè)和核心戰(zhàn)略資產(chǎn),所有的業(yè)務(wù)都會從流程驅(qū)動轉(zhuǎn)向數(shù)據(jù)驅(qū)動。
企業(yè)對于數(shù)據(jù)管理部門的要求,從管理數(shù)據(jù)本身變成了挖掘,創(chuàng)造,管理和運營數(shù)據(jù)服務(wù),為業(yè)務(wù)提供數(shù)據(jù)價值。
這樣一來,數(shù)據(jù)管理部門的定位和考核指標(biāo)就發(fā)生了本質(zhì)的變化,主要體現(xiàn)在:
- 服務(wù)對象的變化
傳統(tǒng)的數(shù)據(jù)管理部門,服務(wù)的對象是數(shù)據(jù)開發(fā)部門。而數(shù)據(jù)資產(chǎn)管理和開發(fā)部門,服務(wù)的對象是企業(yè)的業(yè)務(wù)部門和業(yè)務(wù)價值的開發(fā)部門。前者的輸出產(chǎn)品是數(shù)據(jù),而后者的輸出產(chǎn)品的本質(zhì)是服務(wù)于業(yè)務(wù)的數(shù)據(jù)價值。
- 部門定位的變化
傳統(tǒng)的數(shù)據(jù)管理部門的定位是管理,是從上至下的企業(yè)數(shù)據(jù)管理,是總部機關(guān)職能。而現(xiàn)在的數(shù)據(jù)資產(chǎn)的定位是服務(wù)于業(yè)務(wù)價值的,是為業(yè)務(wù)服務(wù)的部門。
- 績效度量的變化
傳統(tǒng)的數(shù)據(jù)管理部門的績效是是否制定出了統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn),是否規(guī)范了數(shù)據(jù)利用的過程和,是從企業(yè)管理視角來度量價值。而新的數(shù)據(jù)資產(chǎn)的開發(fā)和利用部門的度量則是是否為業(yè)務(wù)產(chǎn)生了價值,是否利用數(shù)據(jù)資產(chǎn)產(chǎn)生了新的增值。
2、數(shù)據(jù)質(zhì)量的挑戰(zhàn)
過去信息化時代,企業(yè)的研發(fā),生產(chǎn)和經(jīng)營相對是穩(wěn)定的,所以,企業(yè)的組織結(jié)構(gòu),產(chǎn)品組合,用戶信息等結(jié)構(gòu)相對變化不大,所以數(shù)據(jù)質(zhì)量問題,更多的是不同源,重復(fù)生產(chǎn)加工,數(shù)據(jù)孤島帶來的問題,所以希望通過數(shù)據(jù)管理部門的統(tǒng)籌管理,通過以上而下控制的手段來制定標(biāo)準(zhǔn),來強行解決一致性的問題。
但是,到了數(shù)字化時代,我們發(fā)現(xiàn),市場變化快帶來了對于業(yè)務(wù)的高速響應(yīng)的要求,而業(yè)務(wù)高速響應(yīng)的體現(xiàn)很多時候是產(chǎn)品不斷創(chuàng)新,前端作戰(zhàn)團隊的組織形式不斷變化,從而拉動了對于中后端的高速變化,但是這些變化的速度是不一致的。
比如,今天市場團隊創(chuàng)建了一種新的市場活動模板,并且立刻線下推廣,而軟件系統(tǒng)里這個活動還沒有創(chuàng)建出來,這樣一來,數(shù)據(jù)就不一致了,出現(xiàn)了線上線下兩套數(shù)據(jù)。但是,在短期內(nèi),這樣的現(xiàn)狀是很難改變的。
因為業(yè)務(wù)的發(fā)展和創(chuàng)新帶來的就是系統(tǒng)里數(shù)據(jù)的多樣性和延遲性。
所以,我們要正視數(shù)據(jù)與業(yè)務(wù)的不一致性帶來的數(shù)據(jù)質(zhì)量問題是客觀存在的
?
3、外部數(shù)據(jù)的挑戰(zhàn)
同時,傳統(tǒng)企業(yè)管理的數(shù)據(jù)大部分都是自己的軟件產(chǎn)生的,而數(shù)字化時代,企業(yè)管理和利用的數(shù)據(jù)很大部分是外部產(chǎn)生的,源頭不在企業(yè)內(nèi)部。比如供應(yīng)鏈上下游的交易數(shù)據(jù),采集的用戶社交媒體數(shù)據(jù),外部市場數(shù)據(jù),外部公開數(shù)據(jù)等,這種情況下,這些數(shù)據(jù)的格式,規(guī)格和數(shù)量是動態(tài)的,這些數(shù)據(jù)對于企業(yè)來講的價值越來越高,這種情況下企業(yè)根本無法控制和管理這些數(shù)據(jù)的質(zhì)量。
4、業(yè)務(wù)能力的挑戰(zhàn)
傳統(tǒng)數(shù)據(jù)管理部門是不需要很懂業(yè)務(wù)的,他們面對的是一堆存在數(shù)據(jù)庫里的字節(jié),他們是從數(shù)據(jù)專家的視角,從數(shù)據(jù)建模的視角,利用數(shù)據(jù)處理的工具和技能來根據(jù)需求部門對于數(shù)據(jù)的要求來加工數(shù)據(jù),然后將數(shù)據(jù)給到需求部門。傳統(tǒng)的數(shù)據(jù)管理部門只需要對數(shù)據(jù)本身負責(zé),不需要對于數(shù)據(jù)加工后的產(chǎn)品和價值負責(zé)。
企業(yè)對于數(shù)據(jù)資產(chǎn)開發(fā)和運營部門的期待是挖掘出業(yè)務(wù)價值,為業(yè)務(wù)產(chǎn)生直接的貢獻。這就需要數(shù)據(jù)管理部門必須具備一定的業(yè)務(wù)能力,比如要識別出數(shù)據(jù)資產(chǎn)的業(yè)務(wù)價值密度,要能夠與業(yè)務(wù)部門溝通的能力,距離業(yè)務(wù)更近一些。
5、技術(shù)能力的挑戰(zhàn)
數(shù)據(jù)管理部門主要的技術(shù)能力是在數(shù)據(jù)倉庫,ETL領(lǐng)域,但是隨著前端業(yè)務(wù)的高速響應(yīng)的要求,傳統(tǒng)厚重的,套裝軟件,工具類的數(shù)據(jù)技術(shù)已經(jīng)不能滿足和支撐這樣多元化,實時性的需求。
主要體現(xiàn)在以下橫向和縱向兩個維度:
橫向,對技術(shù)的需求從局部的數(shù)據(jù)處理到端到端的數(shù)據(jù)價值的探索,挖掘和運營。
縱向,從傳統(tǒng)數(shù)倉,數(shù)據(jù)存儲,處理為主,到云計算,數(shù)據(jù)服務(wù)構(gòu)建,微服務(wù),DevOps的縱向拉通。
所以,數(shù)據(jù)資產(chǎn)部門的技術(shù)需要現(xiàn)代化的變革(Data Modernization)。
新時代的數(shù)據(jù)管理部門的使命和愿景
從近兩年,一些創(chuàng)新型企業(yè)陸續(xù)成立數(shù)據(jù)資產(chǎn)部門,基于他們對于數(shù)據(jù)資產(chǎn)部門的期待,我們可以總結(jié)一下新時代的數(shù)據(jù)管理部門的使命和愿景:
構(gòu)建和利用企業(yè)數(shù)據(jù)資產(chǎn),挖掘產(chǎn)生業(yè)務(wù)價值
?
?
?
數(shù)據(jù)管理部需要的五個轉(zhuǎn)型
在以上的五大挑戰(zhàn)背景下,結(jié)合新時代的數(shù)據(jù)管理部門的使命和愿景,傳統(tǒng)的數(shù)據(jù)管理部門亟需完成以下的五個轉(zhuǎn)型:
轉(zhuǎn)型一、從數(shù)據(jù)到價值
首先是使命和愿景的轉(zhuǎn)型,從交付數(shù)據(jù)到交付價值的轉(zhuǎn)型。
數(shù)據(jù)部門要將自己的輸出成果,從輸出一個數(shù)據(jù)集,數(shù)據(jù)平臺,到輸出對業(yè)務(wù)有價值的數(shù)據(jù)產(chǎn)品和服務(wù)。從關(guān)注數(shù)據(jù)向前延展到關(guān)注價值。
這個轉(zhuǎn)型是最本質(zhì)的變化,數(shù)據(jù)管理部從機構(gòu)的劃分,崗位職責(zé)的設(shè)定,績效考核,協(xié)作流程等方面要全方位,體系化圍繞這個本質(zhì)進行調(diào)整。
轉(zhuǎn)型二、從控制到運營
其次,是數(shù)據(jù)管理部門的心態(tài)的轉(zhuǎn)型,從總部偏控制的角色轉(zhuǎn)型到運營數(shù)據(jù)資產(chǎn),產(chǎn)生業(yè)務(wù)價值的角色,通俗一點,一個是坐機關(guān)的,一個是做業(yè)務(wù)的。
轉(zhuǎn)型三、從管理到賦能
第三點,數(shù)據(jù)管理部門在組織里的職責(zé)從以管理為核心,變成多元化的職責(zé),其中很重要的一個點,就是賦能。
將數(shù)據(jù)和智能的能力賦予到企業(yè)的所有業(yè)務(wù)部門,從而讓企業(yè)的業(yè)務(wù)人員能夠理解數(shù)據(jù)的價值,掌握數(shù)據(jù)和智能能夠給業(yè)務(wù)帶來的場景從而能夠讓他們在解決問題和業(yè)務(wù)創(chuàng)新的時候,有新的武器和工具。
轉(zhuǎn)型四、從支撐到創(chuàng)新
第四點,原來的數(shù)據(jù)管理部門更多的是第二線的支撐部門,距離業(yè)務(wù)創(chuàng)新較遠。而在新的愿景和使命下,數(shù)據(jù)資產(chǎn)部門要承載數(shù)據(jù)創(chuàng)新的探索,挖掘的職責(zé)。
在一定程度上,要從支撐型被動響應(yīng)轉(zhuǎn)型為牽引型的主動創(chuàng)新。
轉(zhuǎn)型五、從后臺到中臺
第五點,數(shù)據(jù)管理部門要從企業(yè)的后臺數(shù)據(jù)部門轉(zhuǎn)型為企業(yè)的數(shù)據(jù)中臺部門,成為探索,挖掘,生產(chǎn)數(shù)據(jù)服務(wù),運營數(shù)據(jù)服務(wù)產(chǎn)生價值的企業(yè)中臺部門,從而直接服務(wù)于客戶或者是業(yè)務(wù)體系。
總結(jié)
數(shù)據(jù)管理部門轉(zhuǎn)型最重要的挑戰(zhàn)是一個心態(tài)的變化,從支撐部門,沒有直接的業(yè)務(wù)指標(biāo)壓力轉(zhuǎn)型到直接面向業(yè)務(wù),服務(wù)客戶價值,承擔(dān)業(yè)務(wù)指標(biāo)的變化。
這是一個必然的趨勢,但是也是一個很有挑戰(zhàn)的轉(zhuǎn)型,比如,如何實現(xiàn)對數(shù)據(jù)系統(tǒng)從T+N到T+0的業(yè)務(wù)系統(tǒng)實施需求響應(yīng)?
總結(jié)
以上是生活随笔為你收集整理的从招行数据架构调整,详解企业急需的数据中台与5大数字化转型的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 从BI到OLAP,数据仓库最终到底能干什
- 下一篇: 2013年,6月20日,今天非常无聊啊。