聯合NameNode的體系結構_第1頁
聯合NameNode的體系結構_第2頁
聯合NameNode的體系結構_第3頁
聯合NameNode的體系結構_第4頁
聯合NameNode的體系結構_第5頁
已閱讀5頁，還剩5頁未讀， 繼續免費閱讀

下載本文檔

版權說明：本文檔由用戶提供并上傳，收益歸屬內容提供方，若內容存在侵權，請進行舉報或認領

文檔簡介

主講：朱佳目錄01聯合NameNode的體系結構聯合NameNode的體系結構1聯合NameNode的體系結構HDFS是Hadoop的存儲組件，可以把它看作命名空間和存儲服務的整體。存儲服務稱為塊存儲服務。命名空間包含HDFS存儲系統一部分的文件、目錄和數據塊的信息。聯合NameNode的體系結構塊存儲服務包括兩個主要組件:物理存儲和塊管理。物理存儲就是DataNode如何在底層Linux(或其他操作系統)文件系統上存儲HDFS塊。塊管理是指與塊相關的操作，例如創建、刪除和修改數據塊，以及復制和副本在集群節點之間的放置。聯合NameNode的體系結構在非常大的Hadoop環境中，存在數以千計的具有數百萬個文件和數據塊的數據節點，存儲量超過PB。在這種環境中，雖然可以通過添加新節點來擴展HDFS，但命名空間無法跟上存儲的增長。單命名空間的吞吐量設計僅支持大約60000個任務。聯合NameNode的體系結構聯合體系結構中的每個命名空間都被分配一個塊池，這是屬于單個命名空間的一組特定的HDFS塊。命名空間(元數據)及其塊池一起被稱為命名空間卷。聯合NameNode的體系結構每個命名空間卷是一個自包含的管理單元，每個命名空間管理自己的塊池，其能夠為新塊生成自己的塊ID，而不與其他命名空間沖突。聯合NameNode的體系結構如果其中一個聯合NameNode失效，并且沒有為其配置備用數據庫，則無法訪問屬于該NameNode的命名空間的數據塊。因此，NameNode服務的聯合體系結構不會提供高

溫馨提示

  • 1. 本站所有資源如無特殊說明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網頁內容里面會有圖紙預覽，若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間，僅對用戶上傳內容的表現方式做保護處理，對用戶上傳分享的文檔內容本身不做任何修改或編輯，并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容，請與我們聯系，我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論