智慧方案智慧金融大數據平臺數據治理與建設方案_第1頁
智慧方案智慧金融大數據平臺數據治理與建設方案_第2頁
智慧方案智慧金融大數據平臺數據治理與建設方案_第3頁
智慧方案智慧金融大數據平臺數據治理與建設方案_第4頁
智慧方案智慧金融大數據平臺數據治理與建設方案_第5頁
已閱讀5頁,還剩13頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

金融大數據治理平臺解決方案系統功能功能分類功能名稱功能說明檢核對象管理對象編輯修改導入表,修改表和字段的相關屬性檢核規則管理有效性靈活定制自定義檢核規則,實現可視化

規則配置和管理關聯性一致性準確性及時性檢查頻度管理檢核頻度管理質量監控周期頻度,可按日、周、月、年等頻度制定檢核時間問題管理問題管理對發現的數據質量問題進行進一步的描述和分析,并劃分問題歸屬業務分類報告管理報告管理質量問題報告查詢,并可按照部門、系統、問題進行匯總查詢系統管理權限管理管理員、操作員權限設置檢核對象配置管理需檢核的表系統架構數據質量檢核與反饋系統檢核對象苔塑導入、查詢、修改、刪除檢查對象檢模規則管瞬新增、刪除、修改檢核規則匯總層問題報告檢直頻度管理制定檢查周期和時間間題管醒維護并管理發現的數據質量問題問題查詢規則查詢

打包下載報告管理日志查詢貼源層整合層架構和功能權限量用戶建立調度管理權限管理

數據治理概述

某行數據現狀及問題數據治理階段目標成效和特點

數據管理系統建設情況目錄

?

數據治理概述第一部分數據治理意義、作用和價值意義·

是構建完善、共享、統一管理數據環境的基本保障和重要組成部分·

是把數據作為資產來管理的有效手段作用·

確定了一系列崗位角色和相應的責任及管理流程·

保證了業務數據在采集、集中、轉換、存儲、應用整個過程中的完整性、準確性、

一致性和時效性價值·

企業進行數據治理的最大驅動力來自數據質量,通過提高數據質量實現更多的業務價值·

將實現業務目標作為數據管理和服務的核心驅動力,優化數據架構,提升數據倉庫/信息化管理系統建設,支持管理能力的提高、精細化和決策的科學性數據治理框架數據戰略數據服務管理

數據需求管理

數據服務

應用系統建設保障機制數據組織與職責一年提供不少于3000份智庫資料,如果沒

做到,全額退款內容涉及信息化4大板塊,50個細分領域

具體介紹詳見下方星球亮點

…數據應用與服務300+7800+488成員數量內容數量運營天數數據制度與管理流程年排

·

排邀請你加入星球,

一起學習牛排說某省市星主:牛排數據戰略與規劃數據管理C

知識星球微信掃碼加入星球實現支撐促進牛排+數據源數據業務系統數據交換平臺其他系統外部數據互聯網物聯網數據服務某省市數據接口數據切分數據傳輸數據調度與處理數據生命周期管理數據質量檢核數據應用統計報表數據

挖掘高管駕駛艙數據結構化轉換大數據分析計算分布式數據庫分布式文件系統貼源層

整合層

匯總層數據架構數據

管理

平臺大數據平臺基礎

數據平臺數據平臺元數據管理一、應用(需求)驅動主導數據平臺的實現,加強業務的關注和參與回應用是展現數據總線建設效果的門戶,因此需要建設業務人員最緊迫和最關注的需求和應用,讓業務部門最快參與數據總線的建設當中。二

、初期能夠快速見效并體現建設價值,不盲目投入實施周期不,規模不,能夠快速的見到數據總線帶來的效果和價值。三、借鑒同業的成功經驗和成果,選擇成熟技術架構和解決方案回盡量參考同行業、同規模、同類型企業行的建設經驗,適當創新。四

、重視人員培養,建設配套運營制度和管理體系回前期讓公司內IT人員盡量更多、更深入的參與到數據總線

的建設中,后期角色以管理為主,盡量與合作伙伴共同建

設二期以上。配套的管理規范、技術規范、運營體系。數據平臺建設原則第二部分

某行數據現狀及問題財務會計部

信貸管理部

國際業務部資金計劃部X\?567Ⅱ架構中中都是以部

門級應用為主(如計財、

資金計劃部等),缺乏從

大的管理職能(財務、風

險、運營等)綜合方面的數據整合、數據標準和統

一業務定義業務職能不清晰或

相互重疊,觀察數據視

角不盡相同,缺少數據

標準與業務統一定義,

語軌不一致數據應用現狀分析-總體情況缺乏數據梳理,造成行領導看到的數據相互沖突和矛盾綜合報表平臺數據交換平臺|由于業務系統輸入的隨意性

導致部分關鍵業務數據質量較差國際業務系

統綜合業務系

統債券管理系

統貸款余額客戶信息貸款余額

客戶信息…

…行領導信貸管理客戶信息客戶信息業務人員客戶信息…數據應用現狀分析-數據架構方面●由于全行的數據散落在各個業務系統中,沒有進行有效整合,形成豎井式架構,造成多個信息孤島,整體架構缺少一個穩定的、抗源變化的保存最細粒度歷史數據的數據層。無法支撐未來共享性應用。

缺少一個穩定的、●

業務表現

>

>數據冗余

>共享性差>歷史數據缺失問題>數據分散,難以管理>沒有一個穩定的,抗源變化的數據層匯總數據層ODS層BDS層DEP層沒有進行整合,無法

共享,不能支持如客

戶管理等共享性應用客戶風險

客戶一部

中間業務

支付業務豎井式架構造成信息孤島報表應用共用主題數據抗源變化的數據層績效考核

客戶管理客戶

風險

報表中間

業務

報表集市層客戶

一部

報表源系統主題層支付報表其它

報表綜合業務債券核算國際結算信貸管理生新的指標(增量)某省市指標派生無法實現>指標邏輯視圖(指標分類)不一致問題>重復投入>數據不

致>指標設計、口徑不一致>指標難以共享數據應用現狀分析-數據應用難題客戶某省市用戶我想看客戶經營情

況信息,有哪些呢?《活期存款流水采集單》●

缺少統一的應用分析標準●

業務表現某省市系統指標存在重復某省市系統在保有存量的同時,不斷產用戶活期存款指標數據

怎么不一致呢?借據編號期末貸款余額總資產o

00我想看本期貸款

余額,看哪個呢?主營業務收入負債總額0

0

0《G21

流動性期限缺口統計表》資金計劃

部客戶某省市借據號期末余額活期存款●

缺少統一的基礎數據標準●

業務表現>各系統存在冗余數據>各系統存在業務含義一致,名稱定義不一致的屬性>各系統存在含義不一致,名稱定義一致的情況>業務代碼定義混亂問

題>重復投入>數據不一致、不準確>難以利用和管理>各系統數據難以共享業務含義一致,名稱定義不一致數據冗余相同業務代碼

定義不一致信貸管理五級分類代碼01正常02關注0

3

級04可疑0

5

失核心五級分類代碼1正常2關注3次級(不良)4可疑(不良)

5損失(不良)數據應用現狀分析-數據應用難題貸款主檔代碼貸款余額五級分類標志計息方式0

0貸款賬號貸款余額5級分類標志

借據計息周期○o

0核心貸款分戶賬表信貸管理借據表數據應用現狀分析-數據質量方面●沒有歸納并總結數據質量問題,缺少反饋機制,導致長期存在各類數據質量問題。《貸款質量五級分類情況簡表》●

業務表現>指標難以共享>數據不一致、不準確●

問題>部分關鍵業務數據缺失>源系統校驗關系缺失及業務人員操作隨意客戶號7568283997326762客戶號7568283997326762客戶簡稱綜合廠國鑫資產客戶簡稱糧食局糧油綜合某省市國鑫資產非觀場監管報表某省市分支機構每筆借據的五級分類信貸管理源系統操作錯誤由于信貸管理系統業務人員沒

有填寫或填寫錯誤借據的五級

分類信息,導致報表數據不準

確,需要手工補錄修改不同系統相同客戶號對

應的客戶簡稱不一致信貸管理客

戶表核心客戶表DDS層問題分類

信息孤島準確性問題一致性問題業務分類系統內數據關聯不上系統間數據關聯不上數據不準確數據不一致取數口徑不一致代碼定義不一致粒度定義不一致貨30266信貨6822結算8公共應用1646618存票18匯層問分類業務分類信息孤島準確性問題一致性問題系統內數據關聯不上系統間數據關聯不上數據不準確數據不一致取數口徑不一致代碼定義不一致粒度定義不一致貨票4618信貨412結算4公

共應用266630存30報表層問分類業務

分類信息孤島準確性問題一致性問題系統內數據關聯不上系統間數據關聯不上|數據不準確數據不一致取數口徑不一致代碼定義不一致粒度定義不一致貨50358535信貨383838結算共

應用65056存1010●隨著業務的不斷發展和信息化的不斷深入,需建設的業務系統越來越多,隨著業務系統的數據種類不斷豐富完善,數據量的不斷增大,如果不采取有效手段解決數據架構、數據標準、數據質量問題,隨著信息化建設的深入,這些問題將像雪球一樣越滾越大,越積越多。數據應用現狀分析-總結綜合報表平臺適應性升級改造階段(問題增加為451個)綜合報表平臺建設階段(問題339個)第三部分

數據治理階段目標非現場報表財會報表客戶風險報表……高管駕駛艙集市層非現場某省市財會某省市風險某省市高管駕某省市………元數據管理數據生命周期管理數據質量檢查系統源數據CBSCM2006EE貼源層綜合業務系統CM2006國際結算系統

債券管理系統

外匯資金系統報文清算系統報價引擎系統數據切分數據傳輸數據平臺邏輯架構BONDPE整合層

匯總層當事人協議事件機構客戶賬戶數據管理系統數據倉庫數據應用作酒度作調度作業調度當事人資產MCSFESETLETLET三層交換機新購置明細報表應用服務器(6臺)>Weblogic11g>v4.3>v3.2●新建客戶風險報表應用●原有應用節點擴充●數據切分應用(完善后)●元數據管理應用新購置數據平臺EIL服務器(8臺)

>RedHatEnterpriseLinux

5(Advanced)>MOIA4.4agent>DataStage8.5EE

(內置Websphere)●調度平臺代理節點●數據平臺ETL

工程

●DS8.5管理應用心跳新購置數據平臺數據庫新購置明

表數據庫

已有ETL服務器(2臺)

已有數據庫服務器(2服務器(2臺)

服務器(2臺)

(188.1.6.109/188.1,6.110)

臺)>0racle11g>Oracle11g>MQIA4.4

agent

+188.1.6.105/188.1.●數據整合層、匯總層

p

R某省市物

后)

●數據傳輸平臺配置庫(優化節點程理王代TL平平臺E調度●●型6)理模6.10e)Eher8.5內

置Kebs>DataStage庫用數據庫元數據配置客戶風險應●●新購置調度服務器(4臺

Hat

EnterpriseLinux

server

release

5.5>MIA4.4server●調

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論