數據資產盤點及治理的路徑與方法01數據資產管理背景02數據資產管理體系03數據資產管理平臺04數據資產管理案例05數據資產管理總結數據資產管理背景數字經濟數字文明數字經濟實現2030碳達峰、2060碳中和，并實現2035遠景目實現2030碳達峰、2060碳中和，并實現2035遠景目標和第二個一百年目標，數據經濟是唯一的選擇，數字文明是必然的形態人類認知客觀世界三要素：物質、能量、信息。數據是信息要素的基礎載體和呈現合作全球數字發展道路創新發展機制，盤活五大要素數字中國建設布局資源肆始贅理以數據要素為核心，促進要素間的融合，線上線下相互融合以數據要素為核心，促進要素間的融合，線上線下相互融合構建數據產權制度，構建數據基礎建設，促進數據開放交換(2022.12.19《數據基礎制度》)國外現狀：各國的工業、制造業大數據發展戰略都是一個龐大復雜的系統工程，既要構建工業大數據采集、匯聚、流通、分析18世紀60年代，第一次工業革命18世紀60年代，第一次工業革命農業文明進入工業文明19世紀70年代，第二次工業工業革命發電機的問世，影響了世界政治、經濟秩序20世紀40年代，第三次工業工業革命原子能、航天、電子計算機技術突破美國“再工業化”日本“工業智能化”美國2009年，開通政府數據網站，要求各聯邦機構依法公開數據，實現政府信2009年，開通政府數據網站，要求各聯邦機構依法公開數據，實現政府信息的集中、開放和共享。2019年，《聯邦數據戰略合和2020年行動計劃》,描繪政府十年數據愿景、關鍵行動計劃，涵蓋一系列支持美國工業大數據的舉業，各類企事業單位、研究機構、供應商。歐盟數據能重塑生產、消費和生活方式。2020年發布了《數據能重塑生產、消費和生活方式。2020年發布了《歐洲數據戰略》,積力，在工業金融行政交通等領域的應用，在新一輪的數日本2019年，強調“經濟增長的動力不再是汽油，而是數字數據”提出建立針內部管理層面--數字化轉型過程中的諸多難點認知不夠找不到價值切入點業務流程固化信息化存在短板內部數據管理--數字化轉型過程中的諸多難點數據孤島依然普遍存在，對海量數據的管理缺乏健全的診斷問題成本高、解決問數據質量難保障，數據產出難把控，影響戰略決策分析數據資產管理體系數據治理、數據資產相關概念定義是組織中涉及數據使用的一整套管理行為，由企業數據治理部門發起并推行。它主要關注如何制定和實施針對整個企業內部數據的商業應用和技術管理的一系列政策和流程。數據治理的目標是提升數據的價值，并確保數據在整個企業中得到有效的使用和管理。是指企業或個人在運作中累積的各類數據記錄，包括但不限于客戶記錄、銷售數據、人事信息、采購記錄、財務報表及庫存數據等。這些數據是原始的、未經加工的，但卻蘊含了大量的信息和潛在價值。是指由個人或企業擁有或控制的，能夠為企業帶來未來經濟利益的，以物理或電子方式記錄的數據資源。它是網絡空間中的數據集，具有數據權屬(如勘探權、使用權、所有權),具有價值、可計量、可讀取。近年來，隨著數據經濟的發展和技術的進步，數據資產的價值逐漸被認可。數據資源被視為一種資產納入企業財務報表，這為企業利用數據資產提供了更多的機會和方式。國際數據管理協會國際數據管理協會(DAMA)提出《《DAMA數據管理知識體系指南》一書給出的定義：數據治理(DataGovernance)是對數據資產管理行使權力和控制的活動集合。數據治理職能指導其他數據管理職能如何執行，右圖說明了數據治理與其他幾個數據管理職能的關系。國際數據治理研究所國際數據治理研究所(DGI)指出數據治理是指數據相關事務的決策和權限的行使。國外對于數據治理概念的關鍵要素包括：國外對于數據治理概念的關鍵要素包括：組織體系，規則標準，決策權，責任體系，人員和信息管理的實施方法等方面，尤其強調基于數據相關事宜的管理基礎上，所做出的相應決策和實施的行動。價值鏈分析戰略問題數據建模數據庫設計備份和恢復內容管理內部規范客戶數據組織數據管理、應用能力的評估框架，通過數據能力成熟度模型，組織可以清楚的定義數據當前所處的發展階段和未來發展DCMMDCMM是國家標準《GB/T36073-2018數據管理能力成熟度評估模型》是我國首個數據管理領域正式發布的國家標準。DCMM分析提煉織數據管理的八大能力域，并對每項能力域進行了二級能力項(28個過動管理階段、量化管理階段和持續優化階段),以及相關功能介紹和評定指標(445項指標)的制定，可作為數據管理的指導規則，也可作為數據數據生存周期數據共享開放數據交換與服務數據安全數據質量時序數據數據共享開放數據交換與服務數據安全數據質量時序數據數據指標元數據主數據數據架構制度規范數據標準工具數據資產管理體系管理架構和策略戰略規劃管理架構和策略戰略規劃學習學習架構1審計審計R預D通過元數據智能和人工補錄完善的方式盤點全部數據資源，資產目錄的活化功能保證目錄能及時的反映資產結構的變化。補錄并掛接資源表據業務元數據據映射并掛接資源元數據采集億信華辰I數據資產入表系列直播核心核心職能資產服務運營能力資產規劃開發能力數據治理能力數據集成能力保障措施資產規劃資產規劃數據治理制度流程制度流程數據集成數據數據集成數據開發數據采集項目實施路徑規劃建議1調研數據問題2問題整理歸評估3確定治理目4制定實施路線圖7建立元數據6梳理業務系現狀5數據治理架構8.1數據質量提升(標準、模型、質量)8.2主數據管8.1數據質量提升(標準、模型、質量)8.2主數據管理8.4數據生命9建立數據治理長效機制高低6.2數據服務流程全行推廣3.1建立數據質量管理機制6.1建立數據需求管理流程8.1完善數據安全管理策略5.3建立數據模型管理機制7.1建立數據生命周期管理策略4.1規劃企業數據架構及傳輸規范4.2建立企業級數據模型2.2建立指標類數據標準1.1完成元數據獲取1.2推廣元數據管理應用5.1建立主數據管理機制8.2完善數據安全的執行機制7.2完善數據生命周期管理的執行機制綜合考慮任務業務價值、實施難易度及依賴關系三方面因素，確定實施任務優先級實施難易度實施難易度億信華辰I數據資產入表系列直播A3任務依賴于1.1任務項目實施組織架構建議結合數據治理、項目管理理論組織架構，組建決策、管理、執行三結合數據治理、項目管理理論組織架構，組建決策、管理、執行三層治理組織架構，包括：治理管理委員會、治理管理部門、執行工作小組。決策層業務部門n業務部門2業務部門1數據服務數據安全數據質量數據標準數據模型及數據倉庫元數據主數據信息科技部門數據治理管理委員會數據治理管理部門工作小組決策層數據治理委員會即為數據治理的決策層。作為數據治理工作的決策層，其目的是確立數據治理的目標、資源，保證涉及部門的負責人涵蓋其中，從而快速搭建起數據治理體系，為后續的工作形成共識并進而且共同朝著一致的目標推進。管理層管理層管理層管理層數據治理管理部門為數據治理管理層，是數據治理工作的管理機構，向數據治理決策層負責，可以由一個專門設置的獨立部門擔任，也可由分別負責數據標準、數據質量、數據倉庫、數據模型等各領域的業務部門和信息技術部門共同承擔執行層執行層執行層執行層數據治理執行層是數據治理日常工作的執行機構，向數據治理決策層負責，由業務部門和信息管理部共同組成。數據治理執行層參與、配合數據治理日常管理工作，根據數據治理管理組要求，制定數據標準、數據質量等內容，評審數據治理成，執行數據治理要求億信華辰I數據資產入表系列直播基于企業數據資產管理業務需求，通過數據采集、主數據、元數據、數據標準、數據質量、數據安全，數據資產管理、數據服務、數據可視化等全流程治理，實現數據價值提升。數據集成的概念：構建數據采集、處理能力●數據脫敏和加密●數據脫敏和加密●增量數據捕獲湖北漢市江漢區↓數猴8加密…一致性維度行記錄拆分數倉組件行轉列緩慢變化維隨機前后期增補億信華辰I數據資產入表系列直播數據集成：滿足企業大數據中心多樣化數據采集加工需求統一平臺數據匯聚統一平臺數據匯聚協同處置綜合決策接口采集填報采集統統一管理互聯網采集Crawler,互聯網采集Crawler,DPI網站元數據的概念元數據的英文原文為Metadata,最早出現于美國航空與宇宙航臺灣則有“詮釋資料”、“超資料”等多種譯名。作者：東為/沈則潛出版社電子工業出版社出版年：2013-12頁數：68叢書：大數據叢書你大概經常聽到元數據(metadata)作曲人專輯名元數據概念解析●元數據識別：基于企業系統現狀，通過元數據采集獲取各系統元數據，實現數據地圖及各類元數據分析：血緣分析、全鏈分析、影響分析、溯源分析、對比分析等。ETLjobs點擊查看源網頁億信華辰I數據資產入表系列直播存儲介質元數據關系存儲介質元數據關系模型設計工具系統數據庫>ETL工具等報表工具規程文檔號作得分)作得分)作得分)作得分)作得分)基本信息產品型號元數據模型先數據設計端到端管控統一集中管理準確性唯一性管控數據版本管理共享共用保障元數據源頭變更監控變更采集、增量更新多種分析應用輔助資產盤點舊舊舊田田舊理清數據的來龍去脈理清數據的來龍去脈能滿足跨部門業務協同需要的、反映核心業務實體狀態屬性的基礎信息。圖財務管理系統財務管理系統員工姓名員工編號員工姓名員工編號員工姓名拼音性別男員工手機號員工分類入職時間員工分類入職時間開戶行所屬部門ID識別評估模型成熟工具業務影響程度元數據關聯度管理成熟度業務影響程度元數據關聯度管理成熟度數據鏈路數據共享程度需求迫切程度確定企業內數據定義缺失；數據屬性不完整；企業外部數據無暇顧及；數據在多個系統中重復采集、重復存系統數據無法關聯、共享，數據整合困難；系統林立，數出多門；數據時效性差，使用者無法及時獲得所需信息；數據使用不方便，方法繁瑣；手工報表多；數據質量差，數據不完整，數據不一管理變革清洗歸納、集中管理、統一分發數據治理(主數據管理)快速準確分析，為決策提供權威準確數據支撐快速準確分析，為決策提供權威準確數據支撐提升管理效率、降低管理成本建立集團級的主數據管理組織架構促進業促進業務，提升管理，釋放價值統一主數據的信息標準與規范統一主數據的信息標準與規范統一主數據管理流程和治理機制統一主數據管理口徑統一標準數據申請錄入數據質量校驗審核數據維護共享使用·標準制定，統一口徑統一主數據管理平臺各類主數據的清洗、轉換、整合規則統一主數據管理平臺各類主數據的清洗、轉換、整合規則主數據管理平臺與業務系統高效集成、數據共享數據標準定義數據標準流程數據標準應用數據標準落地檢核數據質量管理數據標準落地檢核數據質量管理元數據管理元數據管理●數據標準：每個屬性項的業務標準、技術標準和管理標準，實現對數據的規范性、完整描述。屬性分類、屬性名稱、屬性分類、屬性名稱、業務規則等數據類型、數據長度、數據精度等數據創建、數據使用、數據維護等外部標準業務制度源系統最佳實踐參考標準管理標準技術標準歸屬管理部門歸屬管理部門引用系統管理標準別名集團/數據標準提高各系統元數據規范，消除跨系統的非一致性，為后續系統建設提供數據標準指導。參考國家、行業標準結合企業現狀制定相關數據標準，對已建、在建、規劃的業務系統進行指導和約束。參考國家行業標準制定企業標準規范5097G標準分類an典rGm億信華辰I數據資產入表系列直播·進行標準落地評估··輸出標準規范·指導和約束·按標準落地·進行落地評估實例空值檢查號碼、郵編如日期先后引用完整性檢查用月1日12點、數導致●技術問題：系統缺乏校驗·規范數據采集人員操作°建立數據質量管理流程°建立數據質量管理團隊建立數據質量管理平臺數據質量概念解析億信華限I數據資產入表系列直播數據質量通過質檢規則，提升各業務系統數據準確性、規范性，并定期提供質量報告。通過PDCA循環，全面提升企業各業務系統的數據質量，為業務、決策提供高質量基礎數據。數據質量標準數據質量標準客戶、產品、合約等關鍵要素信息不能為空客戶編號、產品編號、機構編號、賬戶編號等按識別規則賦予唯一編號客戶、產品、合約等關鍵要素信息不能為空客戶編號、產品編號、機構編號、賬戶編號等按識別規則賦予唯一編號客戶編號、產品編號、機構編號、賬戶編號等應有統一規范的編碼規則：關鍵要素信息原則上不存在“空”、“無”、異常字符亂碼等內容：表關鍵要素信息原則上不存在“空”、“無”、異常字符亂碼等內容：表一致性各信息系統內客戶編號、產品編號、機構編號、賬戶編號等必須在主_準確性a出資a出出r全面的陽造十性.數據質量價值：讓數據清澈如水零編碼、覆蓋數據全生命周期，實現數據質量全過程管理，為業務、管理提供高質量的數據。數據質量的提升并不是一蹴而就，而是一個長期整改上升的過程。每個部門都可以提出質量問題，由質量管理小組進行分析，然后通過平臺找出問題，——整改，提升數據質量。數據資源目錄概念在數據資產分類中，以目錄結合標簽的形式登記數據資產，通常以系統主題、業務主題、組織架構主題3個維度作據據敏感級敏感級(3級)(5級)重要級(4級)(5級)重要級(4級)(1級)(1級)(2級)數數據分類→機構機構法人供應商經銷商供應商經銷商經營數據庫表經營表字段數據打造企業數據資產門戶：類電商門戶數據消費全流程可控數據應用需求審核安全配置監控統計用戶設計統一標準設計統一標準n開發高效生產質量檢驗aae面向業務人員的零編碼、全可視化界面定義、自助式指標管理平臺，功能涵蓋指標基礎信息配置、指標定義、指標體系構建、指標固化、指標分析等功能，可通過自助式指標分析應用和指標駕駛艙服務，輔助管理者科學決策。指標駕駛舶指標駕駛舶自助式指標分析指標體系分析指標報表企業ERP調用換口模型檢事指標體系指標主題指標查詢指標審核指標發布擔對指按報定義散據源客戶CRMExeel文本數據標指標定義自定文字典引用字典表數據庫表--E演樂(18E演樂(18精準營銷智慧研策精準營銷數據資產管理案例響應國家層面15年首次提出的“國家大數據戰略”,17年發布的“大數據發展規劃”。基于江蘇省國資監管指標體系、公司內部數據治理需求背景，xx集團亟需對各業務板塊各項數據加強采集、治理、應用、服務。··2002年7月，市政府批準成立xx集團，主要負責xx重·2019年9月8日，按照市委市政府部署，xx集團與xx管委會實行“事企分離”改革，實現了獨立運·截至2020年9月，集團總資產899億元，員工總數(含子企業)約3000人，·下屬全資(控股)子公司8個，其中兩家子公司資產規模超過100億，參股公司15家新建部門/組織新建部門/組織調整部門/組織控股(集團)有限責任公司黨委董事會監事會經營層紀檢監察部法務審計部工程管理部投資資產部運營管理部人力資源部黨群工作部財務管理部綜合辦公室信息中心億信華辰I數據資產入表系列直播集團數據資產管理項目：建設成果數據采集，實現對xx集團各業務系統、各種數據源的采集、加工、清洗、轉換等處理，是后續數據中心、數據治理的基礎。統統一采集·協同管理系統·統一身份認證系統·檔案管理系統·集成與開放平臺·黨建管理平臺·會展業務運營平臺·業財一體化系統·公園管理業務運營平臺·人事管理系統·商業資產管理及運營平臺實際上線系統為準實際上線系統為準采集技術統統一管理數據中心集團主數據域分類完成集團11個大類25個主數據域梳理，完成相關主數據模型設計。主數據域包括人員、崗位、組織架構、會計科目等，以及參考數據。集團主數據域分類人員崗位黨員會計科目項目商業資產管理及運營平臺客戶客戶用戶資產商業資產管理及運營平臺系統截圖系統截圖NN睿碼自組織人員▲不安全|10.0.0.239:8988/masterdata/eweb/titlepage.do?title=%25u984%25u覽表單運營管部數計主欺露治理門戶管理主數據根型主數據維護主數據分發實體模管理/職人員/人庭/蒸單設計星區審批流程預對應梳理文檔》完成基礎標準14個子類，參考標準10個子類的數據標準規范定義，可以為集團各業務系統模型設計提供參考。·標準指導和約束·標準指導和約束·按標準落地·進行落地評估資產人員崗位人員崗位員員組織資產1客戶品牌商戶頁4大員3人員商戶品牌3人員學歷信息6客戶3人員獲獎信息42人員學位信息人員人員·進行標準落地評估資春治標準分類uvo一階段對10套系統梳理資產目錄，資產目錄按照來源系統和業務目錄進行細分，為資產門戶提供基礎分類數據。19253465紀檢監察平臺464748996按業務域可以分為：報銷、發票、稅費等。3DQ□”□□集團數據資產管理項目：數據資產門戶平臺為不同崗位和角色提供對應的功能模塊及數據資產門戶及數據服務。數據資產服務門戶可提供的數據服務按業務域目錄層級的劃分。不同部門除了可以看到自己的管理的業務系統數據，也能看到集團其他部門下的數據資產類型。“部腸目技創斷末派”節假日會展數據需求商管公司客流量需求提節假日會展數據需求數據應用mmm信息部門會展公司會展平臺數據采集盤點數據服務數據資產數據服務數據審核集團數據資產管理項目：數據治理大屏對數據治理的各管理域進行分析監控，如主數據、數據標準、數據質量、數據安全及形成數據資產等進行分析，并可按業務系統進行分析監控。未集團層、管理層提供從集團層面到系統層面的數據治理情況的跟蹤、對比。數據運營監控0人事商管黨建統一協同統一認證統一協同業財億信華限I數據資產入表系列直播典型案例：xx-車輛網數據資產管理平臺和定位。某車企集團平臺建設汽車板塊零部件業務金融板塊徽銀地產板塊智能化業務xx國際數據治理平臺架構于數據湖之上，采集數據湖及中臺層、應用層各系統及服務的元數據模型，構建標準、進行質量管控，實現資產化運營。項目背景·缺乏統一數據視圖、存在數據孤島現象、數據質量不佳。·基于數據驅動的理念，故需建立一個數據資產管理平臺，讓奇瑞數據資產開發、運維、治理、運營過程更安全、敏捷、精益、提高數據使用效率，降低數據使用成本。監控預警服務監控預警服務數據智能分析平臺數據銀行數據智能分析平臺數據安數據安挖據平臺數據運營：用戶車輛行駛習慣、金融貸款服務。智能座艙：座艙、埋點、車機自動駕駛：采集各類自動駕駛視頻、傳感器、雷達等數據。數據資產是企業有價值的核心數據，為數據消費者提供清晰可視的數據資產類電商門戶，數據消費者可以在線申請數據的使用。數據消費者視角類電商門戶，可查可管可消費“韶膈翻投回曬來聚”·靜態/動態·車型-車機(有車型區分)·用戶行為(車機埋點采集)·Tbox元器件數據·Ota數據/藍牙數據05數據資產管理總結通過項目建設基于自主可控的數據倉庫和數據管理平臺，實現企業數據資產化運營體系建設。盤清企業