安徽EDW系統-入職培訓_第1頁
安徽EDW系統-入職培訓_第2頁
安徽EDW系統-入職培訓_第3頁
安徽EDW系統-入職培訓_第4頁
安徽EDW系統-入職培訓_第5頁
已閱讀5頁,還剩21頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

安徽EDW系統-入職培訓培訓大綱2023/5/10

-2主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理主機和后臺服務數據倉庫主機(166),部署有數據倉庫、ETL后臺服務和ETL程序(datastage\shell\proc\C++)ETL主機(164/121),部署有ETL后臺服務和ETL程序(datastage\shell\proc\C++)報表服務器主機(168),部署有web服務和cognos服務。測試服務器主機(174),部署有edw的web服務器測試環境etl調度監控程序emc)可以供使用的語言第三方開發平臺比較多培訓大綱2023/5/10

-4主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理常用數據庫-概述Crm生產庫(2個大區),鏈接(ods_133_dw/ods_161_dw)計費生產庫,鏈接(cen_jf_37/cen_jf_39)計費清單庫,鏈接(odsb_qd)計費同步庫

鏈接(odsb_dsg)結算庫,鏈接(tss6)日賬庫,鏈接(hb_79)本地分析中心庫(17個),鏈接(edw_本地網拼音)常用數據庫-數據EDW系統目前數據包含(計費,crm,預付費,清單,日帳,卡,結算等)數據源數據。數據抽取,EDW部分使用數據,是自己在生產系統直接取數入庫到edw接口層。老分析系統庫,目前只承擔,本地網上傳的月資料和賬單處理工作。培訓大綱2023/5/10

-7主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理2023/5/10

-8數據庫表命名規范數據庫表(包括庫表、

視圖和索引)命名結構如下:表名稱組成<Prefix>為前綴名,表示數據庫對象的類型;<subject>為主題域,按業務進行分類<body>為主體名,應該能夠清楚地說明對象的含義;<suffix>是后綴名,提供特效的含義,比如在該對象需分表存放時使用,如按月分開存放的表。2023/5/10

-9數據庫表命名規范-說明接口層表命名規范接口層表命名與源系統保持一致。原子層表命名規范主題域命名參照主題域名規范;原子層表需匯總存放接口層表,因此后綴名不需要“_LATN“。事實層(匯總層)表命名規范事實層(匯總層)表的主題域命名統一為“TB_B_FT”;日事實表的后綴統一按“_LATN”命名;月事實表的后綴統一按“_YYYYMM”命名。集市層(應用層)表命名規范集市層(應用層)表的主題域命名統一為“TB_B_DM”。維表命名規范維表的主題域命名統一為“TB_B_DIM”。2023/5/10

-10數據庫表命名規范-前綴名前綴數據庫對象備注TB表(Table)V視圖(View)MC宏(Macro)TRI觸發器(Trigger)P存儲過程(Procedure)TEMP臨時表(TemporaryTable)IDX索引(Index)UK唯一索引(UniqueIndex)PK主鍵(PrimaryKey)FK外鍵(ForeignKey)MV物化視圖F函數(Function)PG包(Package)SEQ序列(Sequence)2023/5/10

-11數據庫表命名規范-主題域名主題域中文描述主題域英文描述主題域縮寫<Subject>參與人主題PartyPTY產品主題ProductPRD地域主題LocationLOC市場營銷主題MarketingMKT事件主題EventEVT帳務主題BillingBIL資源主題ResourceRES財務主題FinancialFIN2023/5/10

-12數據庫表命名規范-后綴后綴定義_HIS歷史表_LOG流水表_MAP對照表_REF配置表,如表名是XXX_REF,這表的主鍵和相對的外鍵字段應同時命名為:XXX_CD表內的描敘字段應命名為:XXX_DESC_REL關系表_YYYYMMDD因數據量龐大,需按日分開存放的表_YYYYMM因數據量龐大,需按月分開存放的表_LATN因數據量龐大,需按本地網分開存放的表字段命名規范2023/5/10

-13字段命名結構如下:字段名稱結構:<body>為主體名,應該能夠清楚地說明對象的含義<suffix>是后綴名,提供特效的含義字段注釋規范:EDW中新建表必須有字段注釋說明;若字段是維度編碼,注釋中需注明對應維表,格式如:“產品類型對應維表:tb_b_dim_prd”若字段是維度編碼,但沒有維表對應,需在注釋中明確標注各編碼含意若字段是指標類型,注釋中需注明,如:“指標:計費時長”。字段命名規范-后綴2023/5/10

-14后綴定義_CD有相對參數表的字段(FK),或者是參數表的主鍵如字段名是XXX_CD,相對的參數表應命名為:XXX_REF一般來講是CHAR(n)_DESC參數表內的描敘字段如字段名是XXX_DESC,相對參數表應命名為:XXX_REF一般來講是VARCHAR(n)_FLAG只可能是Y或N的字段一般來講是CHAR(1)_NBR編號字段,一般來講是VARCHAR(n)_ID標識字段,一般來講是number(n)_TYPE類型字段,一般來講是CHAR(1)培訓大綱2023/5/10

-15主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理表空間使用規范EDW個人用戶,提供開發使用,只能使用默認的dic_test表空間。其它表空間都指定了用途,并且有維護組每天監控大小情況。表空間的擴建和新建等操作,需要向局方申請,批準后由技術支持部操作。表空間管理報表,每日更新大小字段,并報警當使用率>90%培訓大綱2023/5/10

-17主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理數據庫權限管理EDA生產用戶,所有發布程序使用該用戶運行程序。該用戶可在任何表空間下創建表。該用戶目前歸維護組管理,局方定期修改密碼,維護組負責配合修改程序配置信息。DIC_*所有EDW開發人員使用的用戶,具有生產用戶表的查詢權限。該類用戶建表不可指定表空間,都放在默認表空間DIC_TEST空間下。QX_*所有局方人員使用的用戶,具有生產用戶表的查詢權限。該類用戶建表不可指定表空間,都放在默認表空間TBS_EDA空間下。用戶管理用戶創建和刪除,需向局方申請,批準后由技術支持部處理。報表權限管理,操作流程同上。培訓大綱2023/5/10

-19主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理EDW模型分層EDW表目前分為“接口層”“整合層”“匯總層”“應用層”,有

直接訪問生產庫生產報表。目標,所有數據先整合到接口層或整合層,在逐層向上層處理。整合層匯總層接口層CRMHB結算200卡PPHS…EDW應用層ODS刪除和ODS重復部分CRMHB結算200卡PPHS…匯總層EDW整合層接口層應用層ODS應用層整合層接口層財務收入培訓大綱2023/5/10

-21主機和后臺服務常用數據庫EDW表名稱規范表空間使用規范寬表介紹EDW模型分層數據庫權限管理匯總層-19張寬表日寬表附屬產品實例(日)主產品實例(日)銷售品(日)虛擬網事實表(日)C網代收匯總表(日)月寬表欠費事實表(月)寬帶事實表(月)預付費賬單事實表(月)零次戶事實表(月)無線寬帶(月)客戶積分表(月)主產品實例(月)銷售品(月)CDMA資料表(月)CDMA賬單表(月)全業務賬單表(月)客戶資料表(月)用戶銷賬表(月)抽取分攤前的出賬賬單表(月)日寬表每日從生產庫抽取數據到edw接口層(9點開始-11:30結束)(3點開始-4:

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論