1、1unit twounit two數據倉庫環境數據倉庫環境 2學完本講后，你應該能夠了解：1.數據倉庫的定義；2.數據倉庫的特點是：面向主題的、集成的、非易失的和隨時間變化的；3.數據倉庫的多粒度數據結構可滿足不同層次的需求，且粒度與分割技術是提高數據倉庫性能的兩個關鍵技術；4.建立數據倉庫的典型過程是由核心逐步擴展的過程，隨著擴展，數據倉庫面臨著性能下降的問題；5.數據倉庫中的數據不是多數據庫數據的簡單堆積，而是通過多種主要方式來組織：簡單堆積文件、輪轉綜合文件、簡單直接文件和連續文件；6.數據倉庫中的數據是有生命周期的，需要定期做數據清理。本 講 主 要 目 標3一數據倉庫的定義一數據倉庫

2、的定義二數據倉庫的特點二數據倉庫的特點三數據倉庫的數據結構三數據倉庫的數據結構四建立數據倉庫的典型過程四建立數據倉庫的典型過程五數據倉庫的數據組織形式五數據倉庫的數據組織形式六六. . 清理數據倉庫清理數據倉庫4數據倉庫數據倉庫的定義的定義5世 界 公 認 的 數 據 倉 庫 概 念 創 始 人w.h.inmon在數據倉庫（building the data warehouse）一書中對數據倉庫的定義是：數據倉庫就是面向主題的、集成的、非易失的（穩定性）、隨時間變化（不同時間）的數據集合，用以支持經營管理中的決策制定過程。6數據倉庫數據倉庫的特點的特點71.數據倉庫的特點面向主題的面向主題的集

3、成的集成的隨時間變化的隨時間變化的非易失的非易失的數據倉庫數據倉庫82.面向主題的什么是主題？ 主題是一個抽象的概念，是在較高層次上將企業信息系統中的數據綜合、歸類并進行分析利用的抽象。在邏輯意義上，它是對應企業中某一宏觀分析領域所涉及的分析對象。92.面向主題的客戶財務信息客戶財務信息資產資產股票股票保險保險貸款貸款儲蓄儲蓄102.面向主題的傳統的操作型系統是圍繞公司的應用進行組織的.對一個保險公司來說,應用問題可能是汽車保險、人壽保險與意外傷亡保險。公司的主要主題范圍可能是顧客、保險單、保險費與索賠。112.面向主題的122.面向主題的什么是面向主題的數據組織方式？就是在較高層次上對分析對

4、象的數據的一個完整、一致的描述，能完整、統一地刻畫各個分析對象所涉及的企業的各項數據，以及數據之間的聯系。 所謂較高層次是相對面向應用的數據組織方式而言的，是指按照主題進行數據組織的方式具有更高的數據抽象級別。132.面向主題的 主題以一組相關的表來具體實現142.面向主題的 主題的表通過一個公共鍵值聯系起來152.面向主題的 一個主題的數據可存儲在不同介質上162.面向主題的 相同的數據既有綜合級，又有細節級，每個鍵碼都有一個時間元素173.集成的指數據由面向應用的操作型環境向數據倉庫傳送時所進行的集成183.集成的savingscurrent accountsloanscustomer19

5、3.集成的應用問題的設計人員歷經多年制定出來的不同的設計決策有很多種不同的表示方法，沒有什么應用在編碼、命名習慣、屬性度量等方面是一致的，各個應用問題設計員自由地做出他或她自己的設計決策。203.集成的214.非易失的操作型數據u一次訪問和處理一個記錄u可以對操作型環境中的數據進行更新數據倉庫u一起載入與訪問大量數據u不進行一般意義上的數據更新224.非易失的234.非易失的245.隨時間變化的u數據倉庫中的數據時間期限要遠遠長于操作型系統中的時間期限u操作型數據庫含有“當前值”的數據，這些數據的準確性在訪問時是有效的，并且是可更新的；數據倉庫中的數據僅僅是一系列某一時刻生成的復雜的快照u操作

6、型數據的鍵結構可能包含也可能不包含時間元素，而數據倉庫的鍵結構總是包含某時間元素255.隨時間變化的01/9702/9703/97januaryfebruarymarchtimedata199719971997265.隨時間變化的27數據倉庫數據倉庫的數據結構的數據結構281.數據倉庫的數據結構在數據倉庫中，數據存在著不同的細節級：u早期細節級（通常是備用的、批量的存儲）u當前細節級u輕度綜合數據級（數據集市）u高度數據綜合級291.數據倉庫的數據結構高度綜合級輕度綜合級當前細節級早期細節級集成轉換dss映射元數據db分析工具數據倉庫的多粒度數據組織301.數據倉庫的數據結構312.粒度問題u

7、粒度 是指數據倉庫的數據單位中保存數據的細化或綜合程度的級別。細化程度越高，粒度級別越小u粒度問題是設計數據倉庫的一個最重要的方面322.粒度問題u粒度的設計問題：粒度的大小影響存放在數據倉庫中的數據量的大小，同時，影響數據倉庫所能回答的查詢類型332.粒度問題 粒度大小影響數據量342.粒度問題 粒度大小影響回答查詢的能力352.粒度問題 粒度的權衡很重要，但很難363.樣本數據庫樣本數據庫是真實檔案數據或輕度綜合數據的子集373.樣本數據庫u樣本數據庫是另一種在數據倉庫中改變粒度的方法u樣本數據庫不是通用的數據庫，只適用于作統計分析和觀察發展趨勢u樣本數據庫的最大好處是存取效率非常高384

8、.數據分割 u數據分割是把結構相同的數據劃分成小的、不重疊的物理單元，它們能夠獨立地被處理u在數據倉庫中，圍繞分割問題的焦點不是該不該分割，而是如何分割u數據分割是數據倉庫中數據的第二個主要的設計問題394.數據分割 - 把結構相同的數據劃分成小的、不重疊的物理單元404.數據分割 分割標準u時間u商業u地理位置u組織單位u所有上述標準414.數據分割 在應用層對數據分割u系統層上分割 - 是某些dbms和操作系統的一種功能；u應用層上分割 - 是由設計的應用程序代碼完成，只由開發者和程序員嚴格地控制u分割的數據可以有不同的定義u能從一個處理集無損地轉移到另一個處理集42建立數據倉庫建立數據倉

9、庫的典型過程的典型過程43u建立數據倉庫只能采用有序地反復和一次一步的方式，進行設計和載入數據，即它是進化性的，而非革命性的。u突然建立一個數據倉庫的費用、需要的資源和對環境的破壞，都表明數據倉庫的建立要采用有序地反復和一次一步的方式44建立數據倉庫要采用有序地反復和一次一步的方式45數據倉庫的數據倉庫的數據組織形式數據組織形式461.數據倉庫的數據組織形式u簡單堆積文件u輪轉綜合文件u簡單直接文件u連續文件472.簡單堆積文件u最簡單、最常用的數據組織形式u從操作型環境中取出每天的事務處理（更新操作），然后綜合成數據倉庫記錄，這個綜合可根據任何組織到數據倉庫的主題領域來進行，這里的事務處理是

10、以天來進行綜合u例：對一個顧客的一個帳號的每天的所有活動進行合計，并在一天一天的基礎上輸入數據倉庫482.簡單堆積文件493.輪轉綜合文件a.是簡單逐日堆積數據的一個變種b.數據用與前面相同的處理方法從操作型環境輸入到數據倉庫環境中，只是輸入到不同的結構形式中。c.第一周的七天中的活動被逐一綜合到七個每日相應的位置，到第八天，將七個每日位置的數據加到一起，并放入第一周的數據位置中。d.月底將每周位置的數據加到一起，并放入當月相應的數據位置處503.輪轉綜合文件514.輪轉綜合文件與簡單堆積文件的比較525.簡單直接文件u是間隔一定時間的操作型數據的一個快照u不是在每天的基礎上組織數據，而是以較

11、長時間為單位的，比如，一個星期或者一個月535.簡單直接文件546.連續文件a.依據兩個或更多的簡單直接文件能生成一種連續文件a.將兩個快照合并，創建一個連續文件b.把一個快照追加到一個以前生成的連續文件556.連續文件566.連續文件57清理數據倉庫清理數據倉庫581.數據是有生命周期的2.休眠數據u休眠數據休眠數據是那些存在于數據倉庫中的、當前并不使用、將來也很少使用或者根本就不會使用的數據u造成休眠數據的原因u由于概括表格的創建u由于錯誤估計實際上所需要的歷史數據的年限u由于時間的推移，需求的現實性逐漸明顯u由于堅持讓詳細數據駐留在數據倉庫中592.休眠數據u休眠數據的處理1)查找休眠數據2)選擇刪除的數據數據倉庫管理員查看已訪問或不訪問的數據，確定哪些數據應該從數據倉庫中刪除。可以使用一個活動監視器跟蹤數據倉庫用戶過去的活動。3)確定訪問的可能性根據數據的訪問可能性來安全地從數據倉庫中刪除數據4)刪除休眠數據603.清理數據的方法u將數據加入到一個輪轉綜合文件中u將數據從高性能介質轉移到大容量介質上u將數據從系統中實際清除u將數據從一個體系結構層次轉到另一個層次61學完本講后，你應該能夠了解：1.數據倉庫的定義；2.數據倉庫的特點是：面向主題的、集成的、非易失的和隨時間變化的；3.數據倉庫的多粒度數