一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

如果在大數據“拼圖”中遺忘了數據治理,可能再多的技術投入也是一種徒勞。因爲沒有數據治理這一環節,其帶來後果往往是:隨處可見的數據不統一,難以提升的數據質量,難以完成的模型梳理,難以保障的數據安全等等。

源源不斷的基礎性數據問題會進一步產生,進而導致數據建設難以真正發揮其價值,數字化轉型也就無從提起了。

1、找症狀,明確目標

任何企業實施數據治理都不是爲了治理數據而治理數據,其背後都是管理和業務目標的驅動。企業中普遍存在的數據質量問題有:數據不一致、數據重複、數據不準確、數據不完整、數據關係混亂、數據不及時等。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

由於這些數據問題的存在對業務的開展和業務部門之間的溝通造成了較大的困擾,產生了很大的成本;各異構的系統中數據不一致,導致業務系統之間的應用集成無法開展;數據質量差無法支撐數據分析,分析結果與實際偏差較大。然而要實現數據驅動管理、數據驅動業務的目標,沒有高質量的數據支撐是行不通的。

目標:企業實施數據治理的第一步,就是要明確數據治理的目標,理清數據治理的關鍵點。

技術工具:實地調研、高層訪談、組織架構圖。

輸入:企業數據戰略規劃,亟待解決的業務問題,經營發展需求,業務需求等;

輸出:數據治理的初步溝通方案,項目任務書,工作計劃表;

2、理數據,現狀分析

針對企業數據治理所處的內外部環境,從組織、人員、流程、數據四個方面入手,進行數據治理現狀的分析。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

某企業數據治理痛點分析

組織方面:是否有專業的數據治理組織,是否明確崗位職責和分工。

人員方面:數據人才的資源配置情況,包括數據標準化人員、數據建模人員,數據分析人員,數據開發人員等,以及數據人才的佔比情況。

流程方面:數據管理的現狀,是否有歸口管理部門,是否有數據管理的流程、流程各環節的數據控制情況等;

數據方面:梳理數據質量問題列表,例如:數據不一致問題,數據不完整,數據不準確、數據不真實、數據不及時、數據關係混亂,以及數據的隱私與安全問題等。

目標:分析企業數據管理和數據質量的現狀,確定初步數據治理成熟度評估方案。

技術工具:實地訪談、調研表、數據質量問題評議表、關鍵數據識別方法論(例如:主數據特徵識別法);

輸入:需求及現狀調研表、訪談記錄、數據樣本、數據架構、數據管理制度和流程文件;

輸出:數據問題列表、數據U/C矩陣、數據治理現狀分析報告、數據治理評估方案;

3、數據治理成熟度評估

數據治理成熟度反映了組織進行數據治理所具備的條件和水平,包括元數據管理、數據質量管理、業務流程整合、主數據管理和信息生命週期管理。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

CMMI DMM數據管理能力成熟度評估模型

數據治理成熟度評估是利用標準的成熟度評估工具結合行業最佳實踐,針對企業的數據治理現狀進行的客觀評價和打分,找到企業數據治理的短板,以便制定切實可行的行動方案。數據治理成熟度結束後形成初步的行動方案,一般包括數據治理戰略,數據治理指標,數據治理規則,數據治理權責。數據治理願景和使命是數據治理的整體目標;數據治理指標定義了數據治理目標的衡量方法;數據治理規則和定義包括與數據相關的政策、標準、合規要求、業務規則和數據定義等;權利和職責規定了由誰來負責制訂數據相關的決策、何時實施、如何實施,以及組織和個人在數據治理策略中該做什麼。

目標:結合業界標準的數據治理成熟度模型,根據企業管理和業務需求進行數據治理成熟的評估,形成初步的數據治理策略和行動路線。

技術工具:數據治理評估模型,例如:DCMM,CMMI DMM,IBM數據治理成熟度評估模型等;

輸入:第2步的輸入以及數據治理評估模型、數據治理評估工具(評估指標、打分表等);

輸出:數據治理評估結果,數據治理策略,初步的行動方案;

4、數據質量問題根因分析

數據治理的目的是解決數據質量問題提升數據質量,從而爲數據驅動的數字化企業提供源動力,而提到數據質量問題,做過BI、數倉的同學一定知道,這是一個技術和業務“經常打架”相互推諉的問題。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

某企業數據問題根因分析魚骨圖

產生數據質量問題的原因有很多,有業務方面的、有管理方面的、也有技術方面的,按照80/20法則,80%的問題是由20%的原因造成起的。所以,如果能夠解決這20%的問題,就能得到80%的改進。

目標:分析並找到數據質量問題產生的根本原因,制定行之有效的解決方案;

技術工具:頭腦風暴、5W1H、SWOT、因果(魚刺)圖、帕拉圖等;

輸入:數據問題列表、數據U/C矩陣、數據治理現狀分析報告、數據治理評估結果;

輸出:數據質量評估結果、對業務的潛在影響和根本原因。

5、業務影響及實施優先級評估

通過數據治理成熟度評估,從組織、流程、制度、人員、技術等方面找到企業在數據治理的待提升的領域和環節,再通過數據質量根因分析找到數據質量問題發生的根本原因,進一步明確了數據治理的目標和內容。再接下來,就需要確定數據治理策略,定義數據治理的實施優先級。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

某企業主數據治理實施優先級評估

不同的數據治理領域解決的是不同的問題,而數據治理的每個領域都有它的實施難點,對企業來說,需要從業務的影響程度,問題的緊急程度、實施的難易程度等多個維度進行分析和權衡,從而找到符合企業需求並滿足企業發展的方案。

目標:確定數據治理核心領域和支撐體系的建設/實施優先級;

技術工具:四象限法則(分別從業務影響程度/實施難以程度,問題重要程度/問題緊急程度繪製優先級矩陣)、KANO模型

輸入:數據治理成熟度能力評估結果、數據質量問題根因分析結果;

輸出:數據治理實施優先級策略

6、制定數據治理行動路線和計劃

路線圖是使用特定技術方案幫助達到短期或者長期目標的計劃,用於新產品、項目或技術領域的開發,是指應用簡潔的圖形、表格、文字等形式描述技術變化的步驟或技術相關環節之間的邏輯關係。路線圖是一種目標計劃,就是把未來計劃要做的事列出來,直至達到某一個目標,就好像沿着地圖路線一步一步找到終點一樣,故稱路線圖。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

某企業數據治理實施路線圖

企業數據治理的實施路線圖的制定是以企業數據戰略——願景和使命爲綱領,以急用優先爲原則,以分步實施爲策略進行了整體設計和規劃。實施路線圖主要包含的內容:分幾個階段實施,每個階段的目標、工作內容、時間節點要求、環境條件等。筆者觀點:任何一個企業的數據治理都不是一蹴而就,一步到位的,需要循序漸進、持續優化!實施路線圖就是基於此產生的,因此說數據治理實施路線圖也是說服利益相關者支持的一個重要手段。

目標:確定數據治理的階段以及每個階段的目標;

技術工具:路線圖法

輸入:數據治理成熟度能力評估結果、業務影響及實施優先級評估結果;

輸出:數據治理實施路線圖或稱階段目標計劃

7、制定數據治理詳細實施方案

數據治理詳細實施方案是用於指導主數據的各項實施工作,一般包括:數據治理核心領域、數據治理支撐體系、數據治理項目管理三個方面。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

數據治理總體框架圖

數據治理核心領域包括:數據架構、數據服務、元數據管理、數據質量管理、數據標準管理、主數據管理、數據安全管理、數據生命週期管理。

數據治理支撐體系包括:組織(組織架構、組織層次、崗位職責)、制度(管控模式、規章制度、考覈機制)、流程(歸口部門、管理流程、流程任務等)、技術(數據集成、數據清洗、數據開發、數據應用、數據運營、支撐平臺、實施方案等)。

數據治理項目管理方案包括:項目組隊、項目計劃、質量保證計劃、配置管理計劃、培訓和售後等。

關於數據治理的核心領域,詳見筆者之前分享的數據治理框架解讀系列文章。

關於數據治理的支撐體系,詳見筆者之前分享的數據治理成功關鍵要素系列文章。

目標:基於數據質量根因分析、業務影響和實施優先級評估結果,制定詳細實施方案;

輸入:業務影響及實施優先級評估結果,行動路線和計劃;

輸出:數據治理詳細實施方案。

8、數據治理實施過程控制

數據治理實施過程控制是對數據治理項目的範圍控制、進度控制、質量控制和成本控制,通過對企業的各項資源的合理協調與利用,而達成的數據治理目標的各種措施。從項目管理的角度來講也是項目管理的黃金三角:範圍、時間、質量、成本。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

任何項目的質量和進度是需要良好的項目管理來保證的,數據治理也一樣。與傳統的軟件工程項目不同,數據治理項目有着範圍邊界模糊、影響範圍廣、短期難見效、實施週期長等特點:

①範圍邊界模糊,數據治理涉及到的關鍵領域如元數據管理、數據質量管理、數據標準管理、主數據管理等很多是存在交叉的,邊界很難界定,例如:實施數據質量管理項目,會涉及元數據管理、數據標準管理等,同樣一個元數據管理項目也會涉及數據標準和數據質量。

②影響範圍廣,數據治理的實施不是一個部門能夠完成的,是需要從高級管理層、到各業務部門、信息部門通力協作,共同完成的;

③短期難見效,數據治理項目實施完成後,其數據治理的效果被每個業務點滴操作所“稀釋”,並不像其他項目,例如BI,那樣明顯的體現出來,所以主導數據治理的部門會經常遭到質疑。

④實施週期長,在沒有清晰的數據治理目標和範圍約定的情況下,數據治理是一個“無底洞”。所以,在實施數據治理項目之前制定好實施路線圖和詳細的實施方案就顯得格外重要(第6、7步)。

目標:通過對數據治理項目實施過程的進度控制、質量控制和成本控制以實現數據治理的目標;

技術工具:PP(項目計劃)、PMC(項目控制)、IPM(集成項目管理)、RSKM(風險管理)——CMMI過程域;

輸入:6-7步的輸出:數據治理實施路線圖,數據治理詳細實施方案;

輸出:各項項目控制措施,例如:項目計劃、SOW、項目風險列表、項目報告、項目總結等;

9、監控評估數據治理實施效果

隨着大數據技術的不斷髮展,應當從企業的全局數據治理環境的角度,明確數據治理關鍵技術運用及其標準規範,構建成效評估指標體系,進行治理效果評價;並運用數據治理能力成熟度模型再次評估,界定數據管理層次,從而使得跨系統、跨業務、跨部門的數據治理體系的建設與實施能夠通過各方協作順利進行,實現卓越數據治理,進而通過數據驅動業務、數據驅動管理和運營以實現企業的降本、增效、提質、創新。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

某企業數據治理看板(數據已脫敏)

數據治理成效評估指標體系應根據企業及數據治理項目的實際情況制定,一般包括:時間性、數量性、完整性、準確性四個維度。

①時間性即數據的及時性。該維度主要通過源業務系統數據接入的上報及時性、接入及時性等方面進行覈對。通過分析月指標、周指標、日指標的數據及時率,得出在規定時間和頻度週期內接入系統的比例,以此反映數據接入及時性。

②數量性。該維度是從數據存量,數據增量,數據訪問量,數據交換量、數據使用量等指標反映數據的使用情況,可以分爲月度指標、周指標、日指標、時分指標等。

③準確性。這個維度主要由各類數據中邏輯的準確性、數據值的準確性、數據頻段和字段之間的準確性以及數據的精度等內容組成。該準確率同樣包括:月度、每週、每日等準確率指標。

④完整性。此維度主要以單元維度完整性、數據業務維度組合完整性、索引值完整性等不同方面進行覈對,是驗證數據質量完整性的主要組成部分,包括月度指標、周指標、日指標數據的完整性等內容。

目標:檢驗各項數據治理指標的落實情況,查漏補缺,夯實數據治理效果;

技術工具:數據治理效果的評價指標體系、各種數據圖表工具;

輸入:數據治理效果評估指標;

輸出:數據治理評估的月報、週報、日報等;

10、數據治理持續改進

數據治理模式應業務化、常態化,不應是一個項目、“一陣風”的模式。

一流企業都在做數據治理,還用百萬年薪招人,想做的無非這10點

 

圖片源自互聯網

數據治理工作應向企業生產、銷售業務一樣作爲一項重點的業務工作來開展,構建專業的數據治理組織,設置合適的崗位權責,建立相應的管理流程和制度,讓數據標準貫徹到每個業務環節,形成一種常態的工作。

在筆者看來,在數據源頭加強企業數據的治理,讓常態化治理成爲日常業務,才能從根本上徹底解決企業數據質量的各種問題,讓數據真正轉化爲企業資產,以實現數據驅動流程優化、數據驅動業務創新、數據驅動管理決策的目標。

歡迎關注我的公衆號“商業智能研究”,私信回覆“資料包”,即可領取大數據、數據中臺、商業智能、數據倉庫等6G精華資料

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章