教學數據存儲技術_第1頁
教學數據存儲技術_第2頁
教學數據存儲技術_第3頁
教學數據存儲技術_第4頁
教學數據存儲技術_第5頁
已閱讀5頁，還剩5頁未讀， 繼續免費閱讀

下載本文檔

版權說明：本文檔由用戶提供并上傳，收益歸屬內容提供方，若內容存在侵權，請進行舉報或認領

文檔簡介

主講：孟繁興分布式文件系統分布式文件系統（DistributedFileSystem）是指文件系統管理的物理存儲資源不一定直接連接在本地節點上，而是通過計算機網絡與節點相連。Hadoop是一個分布式系統基礎架構，由Apache基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序，充分利用集群的威力高速運算和存儲。Hadoop實現了一個分布式文件系統（HadoopDistributedFileSystem），簡稱HDFS。HDFS有著高容錯性的特點，并且設計用來部署在低廉的硬件上。分布式文件系統一個HDFS集群是由一個Namenode和一定數目的Datanodes組成。分布式文件系統關系型數據庫關系數據庫，是建立在關系模型基礎上的數據庫，借助于集合代數等數學概念和方法來處理數據庫中的數據?，F實世界中的各種實體以及實體之間的各種聯系均用關系模型來表示。NoSQL=非關系數據庫NoSQLNoSQL數據存儲不需要固定的表結構，通常也不存在連接操作。在大數據存取上具備關系型數據庫無法比擬的性能優勢。非關系數據庫NoSQL分類Examples舉例典型應用場景數據模型優點缺點鍵值（key-value）TokyoCabinet/Tyrant,Redis,Voldemort,OracleBDB內容緩存，主要用于處理大量數據的高訪問負載，也用于一些日志系統等等。Key指向Value的鍵值對，通常用hashtable來實現查找速度快數據無結構化，通常只被當作字符串或者二進制數據列存儲數據庫Cassandra,HBase,Riak分布式的文件系統以列簇式存儲，將同一列數據存在一起查找速度快，可擴展性強，更容易進行分布式擴展功能相對局限文檔型數據庫CouchDB,MongoDbWeb應用（與Key-Value類似，Value是結構化的，不同的是數據庫能夠了解Value的內容）Key-Value對應的鍵值對，Value為結構化數據數據結構要求不嚴格，表結構可變，不需要像關系型數據庫一樣需要預先定義表結構查詢性能不高，而且缺乏統一的查詢語法。圖形(Graph)數據庫Neo4J,InfoGrid,InfiniteGraph社交網絡，推薦系統等。專注于構建關系圖譜圖結構利用圖結構相關算法。比如最短路徑尋址，N度關系查找等很多時候需要對整個圖做計算才能得出需要的信息，而且這種結構不太好做分布式的集群方案。非關系型數據庫NoSQL傳統的分布式計算往往是先積累大量的數據，

溫馨提示

  • 1. 本站所有資源如無特殊說明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網頁內容里面會有圖紙預覽，若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間，僅對用戶上傳內容的表現方式做保護處理，對用戶上傳分享的文檔內容本身不做任何修改或編輯，并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容，請與我們聯系，我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論