关于主数据管理
主數據(Master Data)是具有共享性的基礎數據,可以在企業內跨越各個業務部門被重復使用的,因此通常長期存在且應用于多個系統。由于主數據是企業基準數據,數據來源單一、準確、權威,具有較高的業務價值,因此是企業執行業務操作和決策分析的數據標準。
企業主數據是用來描述企業核心業務實體的數據,比如客戶、合作伙伴、員工、產品、物料單、賬戶等;它是具有高業務價值的、可以在企業內跨越各個業務部門被重復使用的數據,并且存在于多個異構的應用系統中。
企業主數據可以包括很多方面,除了常見的客戶主數據之外,不同行業的客戶還可能擁有其他各種類型的主數據,例如:對于電信行業客戶而言,電信運營商提供的各種服務可以形成其產品主數據;對于航空業客戶而言,航線、航班是其企業主數據的一種。對于某一個企業的不同業務部門,其主數據也不同,例如市場銷售部門關心客戶信息,產品研發部門關心產品編號、產品分類等產品信息,人事部門關心員工機構,部門層次關系等信息。
企業數據管理的內容及范疇通常包括交易數據、主數據以及元數據
交易數據:用于紀錄業務事件,如客戶的訂單,投訴記錄,客服申請等,它往往用于描述在某一個時間點上業務系統發生的行為。
主數據:主數據則定義企業核心業務對象,如客戶、產品、地址等,與交易流水信息不同,主數據一旦被記錄到數據庫中,需要經常對其進行維護,從而確保其時效性和準確性;主數據還包括關系數據,用以描述主數據之間的關系,如客戶與產品的關系、產品與地域的關系、客戶與客戶的關系、產品與產品的關系等。
元數據:即關于數據的數據,用以描述數據及其環境的結構化信息,便于查找、理解、使用和管理數據。
主數據管理是指一整套的用于生成和維護企業主數據的規范、技術和方案,以保證主數據的完整性、一致性和準確性。
主數據具備3個主要特征:
①高價值:主數據是所有業務處理都離不開的實體數據,與大數據相比價值密度非常高。
②高共享:主數據是跨部門、跨系統高度共享的數據。
③相對穩定:與交易數據相比主數據是相對穩定的,變化頻率較低。變化頻率較低并不意味著一成不變,例如:客商更名會引起客商主數據的變動、人員調動會引起人員主數據的變動等等。
主數據的4個超越:即超越業務,超越部門、超越系統、超越技術。
①超越業務:主數據是跨越了業務界限,在多個業務領域中被廣泛使用的數據,其核心屬性也是來自業務。例如:物料主數據,它有自身的自然屬性,如:規格、材質,也有業務賦予的核心屬性,如:設計參數、工藝參數、采購、庫存要求、計量要求、財務要求等。同時,物料主數據也要服務于業務,可謂是———從業務中來到業務中去。
②超越部門,主數據是組織范圍內共享的、跨部門的數據,不歸屬某一特定的部門,是企業的核心數據資產。
③超越系統,主數據是多個系統之間的共享數據,是應用系統建設的基礎,同時也是數據分析系統重要的分析對象。
④超越技術,主數據是要解決不同異構系統之間的核心數據共享問題,從來不會局限于一種特定的技術。在不同環境、不同場景下,主數據的技術是可以靈活應對的。主數據的集成架構是多樣的,如:總線型結構、星型結構、端到端結構;集成技術也是多樣的,如:webservice、REST、ETL、MQ、kafka等;不論是架構還是技術,沒有最好的只有更合適的。企業在做技術選型的時候,要充分考慮企業的核心業務需求和未來的發展要求去構建自身的主數據技術體系。
企業主數據管理經常遇到的問題:
數據入口多,重復錄入、一物多碼、多碼一物
數據分類、數據編碼不統一、不一致
關鍵數據項為空或填寫錯誤、填寫不規范
領導不重視,沒有相應的管理辦法,主數據的質量不高
存在數據孤島,異構系統數據沒有打通
主數據管理的意義
集成、共享、數據質量、數據治理是主數據管理的四大要素,主數據管理要做的就是從企業的多個業務系統中整合最核心的、最需要共享的數據(主數據),集中進行數據的清洗和豐富,并且以服務的方式把統一的、完整的、準確的、具有權威性的主數據分發給全企業范圍內需要使用這些數據的操作型應用和分析型應用,包括各個業務系統、業務流程和決策支持系統等。
主數據管理使得企業能夠集中化管理數據,在分散的系統間保證主數據的一致性,改進數據合規性、快速部署新應用、充分了解客戶、加速推出新產品的速度。從 IT 建設的角度,主數據管理可以增強 IT 結構的靈活性,構建覆蓋整個企業范圍內的數據管理基礎和相應規范,并且更靈活地適應企業業務需求的變化。
以客戶主數據為例,客戶主數據是目前企業級客戶普遍面臨的一個問題,在大多數企業中,客戶信息通常分散于 CRM 等各個業務系統中,而每個業務系統中都只有客戶信息的片斷,即不完整的客戶信息,但卻缺乏企業級的完整、統一的單一客戶視圖,結果導致企業不能完全了解客戶,無法協調統一的市場行為,導致客戶滿意度下降,市場份額減少。因此,建立客戶主數據系統的目的在于:
整合并存儲所有業務系統和渠道的客戶及潛在客戶的信息:一方面從相關系統中抽取客戶信息,并完成客戶信息的清洗和整合工作,建立企業級的客戶統一視圖;另一方面,客戶主數據管理系統將形成的統一客戶信息以廣播的形式同步到其他各個系統,從而確保客戶信息的一致;
為相關的應用系統提供聯機交易支持,提供客戶信息的唯一訪問入口點,為所有應用系統提供及時和全面的客戶信息;服務于 OCRM 系統,充分利用數據的價值,在所有客戶接觸點上提供更多具有附加價值的服務;
實現 SOA 的體系結構:建立客戶主數據系統之前,數據被鎖定在每一個應用系統和流程中,建立主數據管理系統之后,數據從應用系統中被釋放出來,并且被處理成為一組可重用的服務,被各個應用系統調用。
主數據管理系統與數據倉庫系統的關系
主數據管理系統與數據倉庫系統是相輔相成的兩個系統,但二者絕不是重復的,也不是互斥的。它們有很多共同之處:
首先二者對企業都具有相同的價值,可以減少數據冗余和不一致性、提升對數據的洞察力,二者都是跨部門的集中式系統;
其次二者都依賴很多相同的技術手段,都會涉及到 ETL 技術、都需要元數據管理、都強調數據質量;
第三就是二者建設手段類似,都需要數據治理的規范作為指導、都需要不同系統、不同部門的協作、需要統一的安全策略。
但是,主數據管理系統和數據倉庫 / 決策支持系統二者之間也存在很多不同:
處理類型不同:主數據管理 (MDM) 系統是偏交易型的系統,它為各個業務系統提供聯機交易服務,系統的服務對象是呼叫中心、B2C、CRM 等業務系統;而數據倉庫是屬于分析型的系統,面向的是分析型的應用,是在大量歷史交易數據的基礎上進行多維分析,系統的使用對象是各層領導和業務分析、市場銷售預測人員等;
實時性不同:與傳統的數據倉庫方案的批量 ETL 方式不同,主數據管理系統在數據初始加載階段要使用 ETL,但在后續運行中要大量依賴實時整合的方式來進行主數據的集成和同步;
數據量不同:數據倉庫存儲的是大量的歷史數據和各個維度的匯總數據,可能會是海量的,而 MDM 存儲的僅僅是客戶和產品等信息。
雖然主數據管理系統和數據倉庫系統異同共存,但是二者卻有著緊密的聯系,并且可以互為促進、互為補充。舉例而言,數據倉庫系統的分析結果可以作為衍生數據輸入到 MDM 系統,從而使 MDM 系統能夠更好地為操作型 CRM 系統服務。
數據倉庫會將各個業務系統的數據集中在一起再進行業務的分析,并且保存經過清洗的數據;主數據管理系統不會把所有數據都管理起來,只是把需要在各個系統間共享的主數據進行采集和發布。
數據倉庫是單向集成的;主數據管理注重將主數據的變化同步發布到各個關聯的業務系統中。主數據系統是雙向的,不但需要從各個系統中獲取、加工,還包括了最終數據的分發。
總結
- 上一篇: 请确保dx环境安装正常后进行开播_dx环
- 下一篇: 嵌入式linux 控制台 驱动,控制台驱