




版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、第9章 數(shù)據(jù)庫(kù)系統(tǒng)的研究與發(fā)展9.1 分布式數(shù)據(jù)庫(kù)系統(tǒng)分布式數(shù)據(jù)庫(kù)系統(tǒng)Distributed Database SystemDDBS 分布式數(shù)據(jù)庫(kù)分布式數(shù)據(jù)庫(kù) 邏輯上是一個(gè)統(tǒng)一的數(shù)據(jù)庫(kù)系統(tǒng)邏輯上是一個(gè)統(tǒng)一的數(shù)據(jù)庫(kù)系統(tǒng) 物理上分散在不同的場(chǎng)地節(jié)點(diǎn))物理上分散在不同的場(chǎng)地節(jié)點(diǎn)) 各場(chǎng)地通過(guò)計(jì)算機(jī)網(wǎng)絡(luò)連接在一起各場(chǎng)地通過(guò)計(jì)算機(jī)網(wǎng)絡(luò)連接在一起 統(tǒng)一由一個(gè)分布式數(shù)據(jù)庫(kù)管理系統(tǒng)統(tǒng)一由一個(gè)分布式數(shù)據(jù)庫(kù)管理系統(tǒng)( DDBMS )管管理理 特點(diǎn)特點(diǎn) 分布性:分布性: 數(shù)據(jù)的分布性數(shù)據(jù)的分布性 事務(wù)的分布性事務(wù)的分布性 協(xié)調(diào)性:邏輯上整體、具整體完整性約束協(xié)調(diào)性:邏輯上整體、具整體完整性約束 數(shù)據(jù)的分布性數(shù)據(jù)的分
2、布性 分布式數(shù)據(jù)存儲(chǔ)分布式數(shù)據(jù)存儲(chǔ) 復(fù)制復(fù)制 分片分片 復(fù)制復(fù)制 + 分片分片 數(shù)據(jù)的冗余數(shù)據(jù)的冗余 提高數(shù)據(jù)的可用性、并發(fā)性、減少網(wǎng)絡(luò)傳輸提高數(shù)據(jù)的可用性、并發(fā)性、減少網(wǎng)絡(luò)傳輸 增加了數(shù)據(jù)更新的開(kāi)銷(xiāo),副本一致性問(wèn)題增加了數(shù)據(jù)更新的開(kāi)銷(xiāo),副本一致性問(wèn)題 事務(wù)的分布性事務(wù)的分布性 局部事務(wù)局部事務(wù) 僅訪問(wèn)當(dāng)?shù)財(cái)?shù)據(jù)庫(kù)的事務(wù)僅訪問(wèn)當(dāng)?shù)財(cái)?shù)據(jù)庫(kù)的事務(wù) 全局事務(wù)全局事務(wù) 需訪問(wèn)其他場(chǎng)地?cái)?shù)據(jù)庫(kù)的事務(wù)需訪問(wèn)其他場(chǎng)地?cái)?shù)據(jù)庫(kù)的事務(wù) 分布式數(shù)據(jù)庫(kù)環(huán)境下的訪問(wèn)代價(jià)分布式數(shù)據(jù)庫(kù)環(huán)境下的訪問(wèn)代價(jià) 磁盤(pán)讀寫(xiě)磁盤(pán)讀寫(xiě) 網(wǎng)絡(luò)傳輸網(wǎng)絡(luò)傳輸 分布式數(shù)據(jù)庫(kù)的目標(biāo)分布式數(shù)據(jù)庫(kù)的目標(biāo) 部門(mén)組織分布,降低成本部門(mén)組織分布,降低成本 數(shù)據(jù)資
3、源共享,提高數(shù)據(jù)庫(kù)的利用率數(shù)據(jù)資源共享,提高數(shù)據(jù)庫(kù)的利用率 全局外模式全局外模式 全局應(yīng)用的用戶視圖,全局概念模式的子集全局應(yīng)用的用戶視圖,全局概念模式的子集 全局概念模式全局概念模式 是全局概念視圖是全局概念視圖 全局概念模式名、屬性名、域全局概念模式名、屬性名、域 分片模式分片模式 定義分片片段以及全局關(guān)系到片段的映象定義分片片段以及全局關(guān)系到片段的映象 是一對(duì)多的,一個(gè)全局關(guān)系可對(duì)應(yīng)多個(gè)片段,一個(gè)片段只來(lái)自是一對(duì)多的,一個(gè)全局關(guān)系可對(duì)應(yīng)多個(gè)片段,一個(gè)片段只來(lái)自全局關(guān)系全局關(guān)系 分布模式分布模式 分片的物理分配視圖分片的物理分配視圖 局部概念模式局部概念模式 局部數(shù)據(jù)庫(kù)中的概念模型,關(guān)于本
4、地?cái)?shù)據(jù)庫(kù)的描述局部數(shù)據(jù)庫(kù)中的概念模型,關(guān)于本地?cái)?shù)據(jù)庫(kù)的描述 如果局部數(shù)據(jù)庫(kù)中還有獨(dú)立應(yīng)用,則應(yīng)有局部外模式,提供給如果局部數(shù)據(jù)庫(kù)中還有獨(dú)立應(yīng)用,則應(yīng)有局部外模式,提供給本地應(yīng)用使用本地應(yīng)用使用 局部?jī)?nèi)模式局部?jī)?nèi)模式 局部數(shù)據(jù)庫(kù)的物理描述局部數(shù)據(jù)庫(kù)的物理描述 局部數(shù)據(jù)庫(kù):本地的局部數(shù)據(jù)庫(kù)局部數(shù)據(jù)庫(kù):本地的局部數(shù)據(jù)庫(kù)網(wǎng)絡(luò)網(wǎng)絡(luò)LDBLDBMSGDBMSCM全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典LDBCMGDBMSLDBMS全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典LDBCMGDBMSLDBMS全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典DDBMS的結(jié)構(gòu)的結(jié)構(gòu) 全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典 存放數(shù)據(jù)概念模式、分片模式、分布模式的定存放數(shù)據(jù)概念模式、分片模式
5、、分布模式的定義及各模式之間映象的定義義及各模式之間映象的定義 存放有關(guān)用戶存取權(quán)限的定義存放有關(guān)用戶存取權(quán)限的定義 存放數(shù)據(jù)完整性約束條件的定義存放數(shù)據(jù)完整性約束條件的定義 分布式數(shù)據(jù)庫(kù)的基本原則分布式數(shù)據(jù)庫(kù)的基本原則 對(duì)用戶最終用戶、程序員來(lái)說(shuō),一個(gè)分布對(duì)用戶最終用戶、程序員來(lái)說(shuō),一個(gè)分布式系統(tǒng)應(yīng)該看起來(lái)完全象一個(gè)非分布式系統(tǒng)式系統(tǒng)應(yīng)該看起來(lái)完全象一個(gè)非分布式系統(tǒng) Sybase Enterprise Connect 數(shù)據(jù)庫(kù)互聯(lián)與復(fù)制解決方案 提供在同 / 異構(gòu)數(shù)據(jù)源中進(jìn)行分布事務(wù)復(fù)制、位置透明、與應(yīng)用獨(dú)立的數(shù)據(jù)存取功能 集成 Repliaction Server / Replication
6、 Agent (復(fù)制服務(wù)器/代理) JconnectJ連接) Open Server/Open Client (開(kāi)放式服務(wù)器/客戶機(jī)) Omni Connect / Direct Connect (總連接/直接連接)SQL RemoteASA 聯(lián)機(jī)用戶ASA 遠(yuǎn)程移動(dòng)用戶ASA/ASE企業(yè)數(shù)據(jù)ASA的遠(yuǎn)程工作組(辦事處 1)總部SQLRemoteSQLRemoteSQLRemote復(fù)制服務(wù)器ASA的遠(yuǎn)程工作組(辦事處 2)9.2 數(shù)據(jù)倉(cāng)庫(kù)技術(shù)與聯(lián)機(jī)數(shù)據(jù)倉(cāng)庫(kù)技術(shù)與聯(lián)機(jī)分析處理分析處理Data Warehouse & OLAP 數(shù)據(jù)庫(kù)處理的兩大應(yīng)用數(shù)據(jù)庫(kù)處理的兩大應(yīng)用 聯(lián)機(jī)事務(wù)處理聯(lián)機(jī)事務(wù)
7、處理OLTP) 操作型處理,為企業(yè)的特定應(yīng)用服務(wù)操作型處理,為企業(yè)的特定應(yīng)用服務(wù) 是對(duì)數(shù)據(jù)庫(kù)的聯(lián)機(jī)的日常操作,通常是對(duì)是對(duì)數(shù)據(jù)庫(kù)的聯(lián)機(jī)的日常操作,通常是對(duì)一個(gè)或一組記錄的查詢和修改一個(gè)或一組記錄的查詢和修改 人們關(guān)心的是響應(yīng)時(shí)間、數(shù)據(jù)的安全性和人們關(guān)心的是響應(yīng)時(shí)間、數(shù)據(jù)的安全性和完整性完整性 決策支持系統(tǒng)決策支持系統(tǒng)DSS) 分析型處理,用于管理人員的決策分析分析型處理,用于管理人員的決策分析 經(jīng)常需要訪問(wèn)大量的歷史數(shù)據(jù)經(jīng)常需要訪問(wèn)大量的歷史數(shù)據(jù) 數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù) + 聯(lián)機(jī)分析處理聯(lián)機(jī)分析處理 + 數(shù)據(jù)挖掘數(shù)據(jù)挖掘 ( DW + OLAP + DM ) DSS 數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù) 是一個(gè)面向主題
8、的、集成的、非易失是一個(gè)面向主題的、集成的、非易失的不可修改且隨時(shí)間變化的數(shù)據(jù)的不可修改且隨時(shí)間變化的數(shù)據(jù)集合,用來(lái)支持管理人員的決策集合,用來(lái)支持管理人員的決策 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 面向主題面向主題 主題是在較高層次上對(duì)數(shù)據(jù)抽象主題是在較高層次上對(duì)數(shù)據(jù)抽象 面向主題的數(shù)據(jù)組織分為兩步驟面向主題的數(shù)據(jù)組織分為兩步驟 抽取主題抽取主題 確定每個(gè)主題所包含的數(shù)據(jù)內(nèi)容確定每個(gè)主題所包含的數(shù)據(jù)內(nèi)容 每個(gè)主題在數(shù)據(jù)倉(cāng)庫(kù)中都是由一組關(guān)系表每個(gè)主題在數(shù)據(jù)倉(cāng)庫(kù)中都是由一組關(guān)系表實(shí)現(xiàn)的實(shí)現(xiàn)的 集成的集成的 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 隨時(shí)間變化的隨時(shí)間變化的 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 面向主題面向主
9、題 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 面向主題面向主題 集成的集成的 數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)是從原有的分散數(shù)據(jù)庫(kù)數(shù)據(jù)中數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)是從原有的分散數(shù)據(jù)庫(kù)數(shù)據(jù)中抽取來(lái)的抽取來(lái)的 消除數(shù)據(jù)表述的不一致性數(shù)據(jù)的清洗)消除數(shù)據(jù)表述的不一致性數(shù)據(jù)的清洗) 數(shù)據(jù)的綜合數(shù)據(jù)的綜合 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 隨時(shí)間變化的隨時(shí)間變化的 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 集成集成 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 面向主題面向主題 集成的集成的 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 數(shù)據(jù)倉(cāng)庫(kù)的主要數(shù)據(jù)操作是查詢、分析數(shù)據(jù)倉(cāng)庫(kù)的主要數(shù)據(jù)操作是查詢、分析 不進(jìn)行一般意義上的數(shù)據(jù)更新過(guò)期數(shù)據(jù)可能不進(jìn)行一般意義上的數(shù)據(jù)更新過(guò)期數(shù)據(jù)可能被刪除)被刪除)
10、數(shù)據(jù)倉(cāng)庫(kù)強(qiáng)化查詢、淡化并發(fā)控制和完整性保數(shù)據(jù)倉(cāng)庫(kù)強(qiáng)化查詢、淡化并發(fā)控制和完整性保護(hù)等技術(shù)護(hù)等技術(shù) 隨時(shí)間變化的隨時(shí)間變化的 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)不可更改數(shù)據(jù)不可更改 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 面向主題面向主題 集成的集成的 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 隨時(shí)間變化的隨時(shí)間變化的 不斷增加新的數(shù)據(jù)內(nèi)容不斷增加新的數(shù)據(jù)內(nèi)容 不斷刪除舊的數(shù)據(jù)內(nèi)容不斷刪除舊的數(shù)據(jù)內(nèi)容 定時(shí)綜合定時(shí)綜合 數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)表的鍵碼都包含時(shí)間項(xiàng),以標(biāo)數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)表的鍵碼都包含時(shí)間項(xiàng),以標(biāo)明數(shù)據(jù)的歷史時(shí)期明數(shù)據(jù)的歷史時(shí)期 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) 隨時(shí)間變化隨時(shí)間變化 數(shù)據(jù)倉(cāng)庫(kù)的結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)的結(jié)構(gòu)OLTP系統(tǒng)
11、系統(tǒng)RDBMSSybaseVSAMSAP/ERP5-10 年年過(guò)去過(guò)去詳細(xì)數(shù)據(jù)詳細(xì)數(shù)據(jù)當(dāng)前當(dāng)前詳細(xì)數(shù)據(jù)詳細(xì)數(shù)據(jù)輕度輕度匯總數(shù)據(jù)匯總數(shù)據(jù)高度高度匯總數(shù)據(jù)匯總數(shù)據(jù)數(shù)據(jù)集市數(shù)據(jù)集市分析型分析型CRM業(yè)務(wù)指標(biāo)分析業(yè)務(wù)指標(biāo)分析數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)/決策分析系統(tǒng)決策分析系統(tǒng)EXCEL 數(shù)據(jù)倉(cāng)庫(kù)的結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)的結(jié)構(gòu) 數(shù)據(jù)由操作型環(huán)境綜合導(dǎo)入數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)由操作型環(huán)境綜合導(dǎo)入數(shù)據(jù)倉(cāng)庫(kù) 數(shù)據(jù)具有不同的細(xì)節(jié)級(jí)數(shù)據(jù)具有不同的細(xì)節(jié)級(jí) 早期細(xì)節(jié)級(jí)過(guò)期數(shù)據(jù))早期細(xì)節(jié)級(jí)過(guò)期數(shù)據(jù)) 當(dāng)前細(xì)節(jié)級(jí)當(dāng)前細(xì)節(jié)級(jí) 輕度綜合數(shù)據(jù)級(jí)數(shù)據(jù)集市)輕度綜合數(shù)據(jù)級(jí)數(shù)據(jù)集市) 高度綜合數(shù)據(jù)級(jí)高度綜合數(shù)據(jù)級(jí) 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式
12、 簡(jiǎn)單堆積簡(jiǎn)單堆積 輪轉(zhuǎn)綜合輪轉(zhuǎn)綜合 數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加 簡(jiǎn)化直接簡(jiǎn)化直接 按一定的時(shí)間間隔,對(duì)數(shù)據(jù)進(jìn)行提取,是操作按一定的時(shí)間間隔,對(duì)數(shù)據(jù)進(jìn)行提取,是操作型數(shù)據(jù)的一個(gè)快照型數(shù)據(jù)的一個(gè)快照 延續(xù)延續(xù) 把新的快照追加到以前的連續(xù)數(shù)據(jù)上去把新的快照追加到以前的連續(xù)數(shù)據(jù)上去 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式 簡(jiǎn)單堆積簡(jiǎn)單堆積 每日由數(shù)據(jù)庫(kù)中提取并加工的數(shù)據(jù)逐天積累堆每日由數(shù)據(jù)庫(kù)中提取并加工的數(shù)據(jù)逐天積累堆積積 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式 輪轉(zhuǎn)綜合輪轉(zhuǎn)綜合 數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加 數(shù)據(jù)
13、倉(cāng)庫(kù)中的數(shù)據(jù)組織形式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式 簡(jiǎn)單堆積與輪轉(zhuǎn)綜合的比較簡(jiǎn)單堆積與輪轉(zhuǎn)綜合的比較 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式 簡(jiǎn)化直接簡(jiǎn)化直接 按一定的時(shí)間間隔,對(duì)數(shù)據(jù)進(jìn)行提取,是操作按一定的時(shí)間間隔,對(duì)數(shù)據(jù)進(jìn)行提取,是操作型數(shù)據(jù)的一個(gè)快照型數(shù)據(jù)的一個(gè)快照 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)組織形式 延續(xù)延續(xù) 把新的快照追加到以前的連續(xù)數(shù)據(jù)上去把新的快照追加到以前的連續(xù)數(shù)據(jù)上去 數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)追加數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)追加 數(shù)據(jù)追加數(shù)據(jù)追加 數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)初裝完成以后,再向數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)初裝完成以后,再向數(shù)據(jù)倉(cāng)庫(kù)輸入數(shù)據(jù)的過(guò)程稱(chēng)為數(shù)據(jù)追加輸入數(shù)據(jù)的過(guò)程稱(chēng)為數(shù)據(jù)追加 變
14、化數(shù)據(jù)的捕獲變化數(shù)據(jù)的捕獲 時(shí)標(biāo)法:加標(biāo)識(shí)時(shí)標(biāo)法:加標(biāo)識(shí) DELTA法:對(duì)更新作記錄法:對(duì)更新作記錄 前后映象法:兩次快照的對(duì)比前后映象法:兩次快照的對(duì)比 日志法:利用日志法:利用DBMS的日志,需改進(jìn)的日志,需改進(jìn) 數(shù)據(jù)庫(kù)的體系化環(huán)境數(shù)據(jù)庫(kù)的體系化環(huán)境 是在一個(gè)企業(yè)或組織內(nèi)部,由各面向應(yīng)用的是在一個(gè)企業(yè)或組織內(nèi)部,由各面向應(yīng)用的OLTP數(shù)據(jù)庫(kù)及各級(jí)面向主題的數(shù)據(jù)倉(cāng)庫(kù)所組數(shù)據(jù)庫(kù)及各級(jí)面向主題的數(shù)據(jù)倉(cāng)庫(kù)所組成的完整的數(shù)據(jù)環(huán)境成的完整的數(shù)據(jù)環(huán)境 操作型環(huán)境、分析型環(huán)境操作型環(huán)境、分析型環(huán)境 四層體系化環(huán)境四層體系化環(huán)境 操作型環(huán)境操作型環(huán)境OLTP 全局級(jí)全局級(jí)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù) 部門(mén)級(jí)部門(mén)級(jí)局部倉(cāng)
15、庫(kù)局部倉(cāng)庫(kù) 個(gè)人級(jí)個(gè)人級(jí)個(gè)人倉(cāng)庫(kù),用于啟發(fā)式的分析個(gè)人倉(cāng)庫(kù),用于啟發(fā)式的分析 數(shù)據(jù)集市數(shù)據(jù)集市Data Mart) 特定的、面向部門(mén)的小型數(shù)據(jù)倉(cāng)庫(kù)特定的、面向部門(mén)的小型數(shù)據(jù)倉(cāng)庫(kù) 是為滿足用戶特定需求而創(chuàng)建的數(shù)據(jù)倉(cāng)庫(kù)是為滿足用戶特定需求而創(chuàng)建的數(shù)據(jù)倉(cāng)庫(kù) 是數(shù)據(jù)倉(cāng)庫(kù)的子集是數(shù)據(jù)倉(cāng)庫(kù)的子集 數(shù)據(jù)庫(kù)的體系化環(huán)境數(shù)據(jù)庫(kù)的體系化環(huán)境 數(shù)據(jù)庫(kù)的體系化環(huán)境數(shù)據(jù)庫(kù)的體系化環(huán)境 數(shù)據(jù)倉(cāng)庫(kù)的開(kāi)發(fā)生命周期數(shù)據(jù)倉(cāng)庫(kù)的開(kāi)發(fā)生命周期 數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)模式數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)模式 星型模式星型模式(Star Schema) 事實(shí)表事實(shí)表(fact table),存放基本數(shù)據(jù),相關(guān)主,存放基本數(shù)據(jù),相關(guān)主題的數(shù)據(jù)主體題的數(shù)據(jù)主
16、體BCNF) 維維(dimension),影響、分析主體數(shù)據(jù)的因,影響、分析主體數(shù)據(jù)的因素素 量量(measure),事實(shí)表中的數(shù)據(jù)屬性,事實(shí)表中的數(shù)據(jù)屬性 維表維表(dimension table),表示維的各種表,表示維的各種表 維是量的取值條件,維用外鍵表示維是量的取值條件,維用外鍵表示 以事實(shí)表為中心,加上若干維表,組成星以事實(shí)表為中心,加上若干維表,組成星型數(shù)據(jù)模式型數(shù)據(jù)模式 例:產(chǎn)品例:產(chǎn)品-商店商店-銷(xiāo)售額銷(xiāo)售額 數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)模式數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)模式CustSalesLocationSalesProdSalesTimeSalesSalestime idproduct id
17、location idcustomer idsales revenueunits soldProductproduct idmakemodelTimetime iddateyearquartermonthweekLocationlocation idregiondistrictstoreCustomercustomer idcategorygroupSales factSales measuresTime dimensionAttributes of the time dimension 數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)模式數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)模式 雪花模式雪花模式(Snowflake Schema) 維一般
18、是由若干層次組成維一般是由若干層次組成 把維按其層次結(jié)構(gòu)表示成若干個(gè)表把維按其層次結(jié)構(gòu)表示成若干個(gè)表 規(guī)范化、節(jié)省存儲(chǔ)空間規(guī)范化、節(jié)省存儲(chǔ)空間 但需多做連接操作但需多做連接操作 數(shù)據(jù)倉(cāng)庫(kù)的解決方案數(shù)據(jù)倉(cāng)庫(kù)的解決方案 通用的關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)通用的關(guān)系數(shù)據(jù)庫(kù)系統(tǒng) 專(zhuān)門(mén)的數(shù)據(jù)倉(cāng)庫(kù)服務(wù)器專(zhuān)門(mén)的數(shù)據(jù)倉(cāng)庫(kù)服務(wù)器 數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu) 數(shù)據(jù)倉(cāng)庫(kù)層數(shù)據(jù)倉(cāng)庫(kù)層 數(shù)據(jù)倉(cāng)庫(kù)工具層數(shù)據(jù)倉(cāng)庫(kù)工具層 最終用戶最終用戶 數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng) 數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù) 居系統(tǒng)的核心地位居系統(tǒng)的核心地位 是信息挖掘的基礎(chǔ)是信息挖掘的基礎(chǔ) 數(shù)據(jù)倉(cāng)庫(kù)管理系統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)管理系統(tǒng) 是整個(gè)系統(tǒng)的引擎是整個(gè)系統(tǒng)的引擎 負(fù)責(zé)
19、管理整個(gè)系統(tǒng)的運(yùn)轉(zhuǎn)負(fù)責(zé)管理整個(gè)系統(tǒng)的運(yùn)轉(zhuǎn) 數(shù)據(jù)倉(cāng)庫(kù)工具數(shù)據(jù)倉(cāng)庫(kù)工具 一般的查詢工具、功能強(qiáng)大的分析工具一般的查詢工具、功能強(qiáng)大的分析工具 是整個(gè)系統(tǒng)發(fā)揮作用的關(guān)鍵是整個(gè)系統(tǒng)發(fā)揮作用的關(guān)鍵 數(shù)據(jù)分析模型數(shù)據(jù)分析模型 早期早期 靜態(tài)數(shù)據(jù)值的相互比較靜態(tài)數(shù)據(jù)值的相互比較 需求需求 從多個(gè)不同的數(shù)據(jù)源中綜合數(shù)據(jù)從多個(gè)不同的數(shù)據(jù)源中綜合數(shù)據(jù) 從不同的角度觀察數(shù)據(jù)從不同的角度觀察數(shù)據(jù) 多變的主題、多維數(shù)據(jù)多變的主題、多維數(shù)據(jù) E-RE-R不能完全支持不能完全支持 四種分析模型四種分析模型CoddCodd) 絕對(duì)模型絕對(duì)模型 解釋模型解釋模型 思考模型思考模型 公式模型公式模型 四種分析模型四種分析模型Co
20、ddCodd) 絕對(duì)模型絕對(duì)模型 靜態(tài)數(shù)據(jù)分析靜態(tài)數(shù)據(jù)分析 只能對(duì)歷史數(shù)據(jù)進(jìn)行值的比較,描述基本事實(shí)只能對(duì)歷史數(shù)據(jù)進(jìn)行值的比較,描述基本事實(shí) 用戶交互少用戶交互少 解釋模型解釋模型 靜態(tài)數(shù)據(jù)分析靜態(tài)數(shù)據(jù)分析 在當(dāng)前多維視圖的基礎(chǔ)上找出事件發(fā)生的原因在當(dāng)前多維視圖的基礎(chǔ)上找出事件發(fā)生的原因 思考模型思考模型 動(dòng)態(tài)數(shù)據(jù)分析動(dòng)態(tài)數(shù)據(jù)分析 多維分析多維分析 在決策者的參與下,找出關(guān)鍵變量在決策者的參與下,找出關(guān)鍵變量 需要高級(jí)數(shù)據(jù)分析人員的介入需要高級(jí)數(shù)據(jù)分析人員的介入 公式模型公式模型 動(dòng)態(tài)性最高的一類(lèi)動(dòng)態(tài)性最高的一類(lèi) 自動(dòng)完成變量的引入工作自動(dòng)完成變量的引入工作 數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的工具層數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的
21、工具層 查詢工具查詢工具 主要是對(duì)分析結(jié)果的查詢主要是對(duì)分析結(jié)果的查詢 很少有對(duì)記錄級(jí)數(shù)據(jù)的查詢很少有對(duì)記錄級(jí)數(shù)據(jù)的查詢 驗(yàn)證型工具驗(yàn)證型工具 多維分析工具多維分析工具 用戶首先提出假設(shè),然后利用各種工具通過(guò)反復(fù)、用戶首先提出假設(shè),然后利用各種工具通過(guò)反復(fù)、遞歸的檢索查詢以驗(yàn)證或否定假設(shè)遞歸的檢索查詢以驗(yàn)證或否定假設(shè) 發(fā)掘型工具發(fā)掘型工具 從大量數(shù)據(jù)中發(fā)現(xiàn)數(shù)據(jù)模式從大量數(shù)據(jù)中發(fā)現(xiàn)數(shù)據(jù)模式 預(yù)測(cè)趨勢(shì)和行為預(yù)測(cè)趨勢(shì)和行為 聯(lián)機(jī)分析處理聯(lián)機(jī)分析處理OLAP 是針對(duì)特定問(wèn)題的聯(lián)機(jī)訪問(wèn)和分析。是針對(duì)特定問(wèn)題的聯(lián)機(jī)訪問(wèn)和分析。 通過(guò)對(duì)信息的很多種可能的觀察形式進(jìn)行快速、通過(guò)對(duì)信息的很多種可能的觀察形式進(jìn)行
22、快速、穩(wěn)定一致和交互性的存取,允許分析人員對(duì)數(shù)據(jù)穩(wěn)定一致和交互性的存取,允許分析人員對(duì)數(shù)據(jù)進(jìn)行深入觀察進(jìn)行深入觀察 一些概念一些概念 變量是數(shù)據(jù)的實(shí)際意義,描述數(shù)據(jù)是什么變量是數(shù)據(jù)的實(shí)際意義,描述數(shù)據(jù)是什么 維是人們觀察數(shù)據(jù)的特定角度維是人們觀察數(shù)據(jù)的特定角度 維的層次是維在不同細(xì)節(jié)程度的描述維的層次是維在不同細(xì)節(jié)程度的描述 維成員是維的一個(gè)取值維成員是維的一個(gè)取值 多層次維的維成員是各層次取值的組合多層次維的維成員是各層次取值的組合 對(duì)應(yīng)一個(gè)數(shù)據(jù)項(xiàng),維成員是該數(shù)據(jù)項(xiàng)在該維中位對(duì)應(yīng)一個(gè)數(shù)據(jù)項(xiàng),維成員是該數(shù)據(jù)項(xiàng)在該維中位置的描述置的描述 多維數(shù)組可以表示為維多維數(shù)組可以表示為維1,維維2,變量)
23、,如變量),如地域地域,時(shí)間時(shí)間,銷(xiāo)售渠道銷(xiāo)售渠道,銷(xiāo)售額)銷(xiāo)售額) 多維數(shù)組的取值稱(chēng)為數(shù)據(jù)單元單元格)多維數(shù)組的取值稱(chēng)為數(shù)據(jù)單元單元格) 可以理解為交叉表的數(shù)據(jù)格可以理解為交叉表的數(shù)據(jù)格 一些基本操作一些基本操作 在多維數(shù)組的某一維選定一個(gè)維成員的動(dòng)在多維數(shù)組的某一維選定一個(gè)維成員的動(dòng)作稱(chēng)為切片。作稱(chēng)為切片。 舍棄一些觀察角度舍棄一些觀察角度 在多維數(shù)組的某一維上選定某一區(qū)間的維在多維數(shù)組的某一維上選定某一區(qū)間的維成員切塊成員切塊 多個(gè)切片的疊加多個(gè)切片的疊加 旋轉(zhuǎn)是改變一個(gè)報(bào)告或頁(yè)面顯示的維方向旋轉(zhuǎn)是改變一個(gè)報(bào)告或頁(yè)面顯示的維方向 以用戶容易理解的角度來(lái)觀察數(shù)據(jù)以用戶容易理解的角度來(lái)觀察數(shù)
24、據(jù) 基于多維數(shù)據(jù)庫(kù)的基于多維數(shù)據(jù)庫(kù)的OLAPMOLAP 以多維方式組織數(shù)據(jù)綜合數(shù)據(jù))以多維方式組織數(shù)據(jù)綜合數(shù)據(jù)) 以多維方式顯示察看數(shù)據(jù)以多維方式顯示察看數(shù)據(jù) 多維數(shù)據(jù)庫(kù)的形式類(lèi)似于交叉表,可直觀多維數(shù)據(jù)庫(kù)的形式類(lèi)似于交叉表,可直觀地表述一對(duì)多、多對(duì)多的關(guān)系地表述一對(duì)多、多對(duì)多的關(guān)系 如:產(chǎn)品、地域、銷(xiāo)售額如:產(chǎn)品、地域、銷(xiāo)售額 關(guān)系關(guān)系 多維多維 多維數(shù)據(jù)庫(kù)由許多經(jīng)壓縮的、類(lèi)似于數(shù)組多維數(shù)據(jù)庫(kù)由許多經(jīng)壓縮的、類(lèi)似于數(shù)組的對(duì)象構(gòu)成,帶有高度壓縮的索引及指針的對(duì)象構(gòu)成,帶有高度壓縮的索引及指針結(jié)構(gòu)結(jié)構(gòu) 以關(guān)系數(shù)據(jù)庫(kù)存放細(xì)節(jié)數(shù)據(jù)、以多維數(shù)據(jù)以關(guān)系數(shù)據(jù)庫(kù)存放細(xì)節(jié)數(shù)據(jù)、以多維數(shù)據(jù)庫(kù)存放綜合數(shù)據(jù)庫(kù)存放綜
25、合數(shù)據(jù) 基于關(guān)系數(shù)據(jù)庫(kù)的基于關(guān)系數(shù)據(jù)庫(kù)的OLAPROLAP 以二維表與多維聯(lián)系來(lái)表達(dá)多維數(shù)據(jù)綜以二維表與多維聯(lián)系來(lái)表達(dá)多維數(shù)據(jù)綜合數(shù)據(jù))合數(shù)據(jù)) 星型結(jié)構(gòu)星型結(jié)構(gòu) 事實(shí)表,存儲(chǔ)事實(shí)的量及各維的碼值事實(shí)表,存儲(chǔ)事實(shí)的量及各維的碼值BCNF) 維表,對(duì)每一個(gè)維,至少有一個(gè)表用來(lái)保維表,對(duì)每一個(gè)維,至少有一個(gè)表用來(lái)保存該維的元數(shù)據(jù)多層次、冗余)存該維的元數(shù)據(jù)多層次、冗余) 事實(shí)表通過(guò)外鍵與每個(gè)維表相聯(lián)系事實(shí)表通過(guò)外鍵與每個(gè)維表相聯(lián)系 雪花、星座、雪暴雪花、星座、雪暴 模擬多維方式顯示察看數(shù)據(jù)模擬多維方式顯示察看數(shù)據(jù) MOLAP與與ROLAP MOLAP 計(jì)算速度較快計(jì)算速度較快 支持的數(shù)據(jù)容量較小支持的數(shù)據(jù)容量較小 缺乏細(xì)節(jié)數(shù)據(jù)的缺乏細(xì)節(jié)數(shù)據(jù)的OLAP ROLAP 結(jié)構(gòu)較復(fù)雜結(jié)構(gòu)較復(fù)雜 以關(guān)系模擬多維以關(guān)系模擬多維 支持適當(dāng)細(xì)節(jié)的支持適當(dāng)細(xì)節(jié)的OLAP 較成熟較成熟 HOLAP是以上兩種的綜合是以上兩種的綜合 數(shù)據(jù)挖掘數(shù)據(jù)挖掘Data Mining) 探測(cè)型的數(shù)據(jù)分析探測(cè)型的數(shù)據(jù)分析 發(fā)現(xiàn)信息、發(fā)現(xiàn)知識(shí)發(fā)現(xiàn)信息、發(fā)現(xiàn)知識(shí) 基于人工智能、機(jī)器學(xué)習(xí)、統(tǒng)計(jì)學(xué)基于人工智能、機(jī)器學(xué)習(xí)、統(tǒng)計(jì)學(xué) 由計(jì)算機(jī)自動(dòng)智能地分析數(shù)據(jù),獲取信息,由計(jì)算機(jī)自動(dòng)智能地分析數(shù)據(jù),獲取
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 小數(shù)乘小數(shù)(教學(xué)設(shè)計(jì))-2024-2025學(xué)年五年級(jí)上冊(cè)數(shù)學(xué)西師大版
- 第二章 有理數(shù)的運(yùn)算-綜合與實(shí)踐-進(jìn)位制的認(rèn)識(shí)與探究 大單元教學(xué)設(shè)計(jì)方案 2024-2025學(xué)年人教版數(shù)學(xué)七年級(jí)上冊(cè)
- 2025年中國(guó)抗衰老肽護(hù)膚品行業(yè)市場(chǎng)全景分析及前景機(jī)遇研判報(bào)告
- 2025年中國(guó)聚酯漆刷行業(yè)市場(chǎng)全景分析及前景機(jī)遇研判報(bào)告
- 尿毒癥防治指南
- 設(shè)備采購(gòu)培訓(xùn)課件
- 信用專(zhuān)題培訓(xùn)課件
- 2024年全球及中國(guó)汽車(chē)鋰電池鋁制包外殼行業(yè)頭部企業(yè)市場(chǎng)占有率及排名調(diào)研報(bào)告
- 中國(guó)耐熱壓制玻璃行業(yè)市場(chǎng)深度調(diào)查評(píng)估及投資方向研究報(bào)告
- 2025年中國(guó)電子地圖市場(chǎng)運(yùn)行態(tài)勢(shì)及行業(yè)發(fā)展前景預(yù)測(cè)報(bào)告
- 2024年西藏公安機(jī)關(guān)招聘警務(wù)輔助人員筆試真題
- 2025-2030中國(guó)顯示驅(qū)動(dòng)芯片行業(yè)競(jìng)爭(zhēng)風(fēng)險(xiǎn)及前景發(fā)展創(chuàng)新研判報(bào)告
- 2024年昆明市公安局招聘勤務(wù)輔警真題
- 客房部?jī)?nèi)部管理制度
- 小學(xué)生數(shù)學(xué)學(xué)習(xí)習(xí)慣的培養(yǎng)講座
- DeepSeek+AI大模型賦能制造業(yè)智能化供應(yīng)鏈解決方案
- 2025河南省豫地科技集團(tuán)有限公司社會(huì)招聘169人筆試參考題庫(kù)附帶答案詳解析集合
- T/CCOA 45-2023氣膜鋼筋混凝土球形倉(cāng)儲(chǔ)糧技術(shù)規(guī)程
- 《船舶行業(yè)重大生產(chǎn)安全事故隱患判定標(biāo)準(zhǔn)》解讀與培訓(xùn)
- 2025年中考生物模擬考試卷(附答案)
- 11《大家排好隊(duì)》(教學(xué)設(shè)計(jì))2023-2024學(xué)年統(tǒng)編版道德與法治二年級(jí)上冊(cè)
評(píng)論
0/150
提交評(píng)論