1、Contents目錄0102030404Part 01企業存儲層面臨的問題企業存儲層面臨的問題 存儲架構多樣化、存儲設備多樣化。 業務類型、重要程度、讀寫特點、數據特點等多元化特點。 存儲設備擴展性差、設備性能差、架構設計復雜導致存儲性能瓶頸。 存儲設備故障、數據存儲介質故障、存儲環境故障等。 雙或者多數據中心模式下的數據容災。存儲異構存儲分級存儲性能高可用性數據容災企業存儲層面臨的問題1243架構統一異構整合分級管理性能平衡提高數據容災級別存儲平臺穩定健壯Part 02如何設計企業存儲架構存儲整合及優化目標存儲整合及優化原則 存儲定義多樣化與存儲架構統一性相結合01 存儲平臺整體性能平衡與特

2、殊業務性能粒度細分相結合02 存儲需求的靜態分析與存儲擴張的動態分析相結合03 存儲數據容災手段多樣化與策略統一性相結合04傳統存儲架構DASLocal DiskLocal DiskX86 虛擬化Power 虛擬化數據庫節點其他節點HP 3ParEMC VNXIBM DSNetAppNASSAN 環境LAN 環境 管理： 沒有統一管理接口，資源分散管理，管理方式多樣復雜化。 資源利用： 各自分配，資源無法實現共享及平衡，資源的回收及再利用操作很麻煩。 擴展性： 只能依靠單個設備的擴容，數據不具備橫向擴展性。 高可用性： 只能依靠單個設備控制器的冗余性，設備級別的故障無法解決。 遷移： 非常困難

3、，需要借助主機端或者單獨存儲工具結合完善的遷移方案。 性能： 性能問題只能依靠高端存儲的高吞吐量，不能實現設備級別的橫向性能拉伸。軟件定義存儲架構存儲整合底層HP 3ParEMC VNXIBM DSNetAppNASLocal Disk服務實例服務實例服務實例服務實例服務實例對象存儲服務塊兒存儲服務文件存儲服務SAN 環境LAN 環境X86 虛擬化Power 虛擬化數據庫節點管理節點軟件定義存儲架構實現異構SAN存儲設備的統一整合，將傳統SAN存儲軟件功能層上移到整合層。SAN存儲整合能夠將主機本地存儲資源進行統一整合并且能并入存儲統一管理平臺。純軟件定義整合能夠實現NAS、DAS等其他傳統存

4、儲設備的資源整合。其他存儲整合整體存儲架構扁平化，存儲服務實現分布式模式。服務功能實例化存儲資源池化上移到整合之后，性能平衡以及高可用以池為依托。資源極限池化軟件定義存儲架構存儲整合類型整合對象典型產品產品特點典型應用場景純軟件存儲整合服務器本地磁盤其他廉價磁盤存儲IBM Spectrum AccelerateVmware VSANZETTAKITEMC ViPR通過軟件實現主機本地磁盤及其他獨立磁盤柜的統一資源池化；通過SSD盤配置實現本地讀寫緩存的優化。分布式對象存儲局部軟件定義存儲OLAP業務SAN存儲統一整合傳統異構磁盤陣列IBM SVCEMC VPLEXNetapp Dataonta

5、p異構SAN存儲設備接入虛擬化節點集群；分層實現設備級別的性能整體平衡；高可用實現跨存儲設備。OLTP業務系統雙活數據中心架構數據在線遷移場景其他存儲統一整合NAS及類似存儲OpenfilerEMC isilonNexentaIBM Spectrum Scale （GPFS）將NAS設備統一接入實現資源重組；通過網絡協議向主機提供虛擬文件存儲空間。非結構化數據業務大吞吐量并行業務Part 03如何實現存儲層整體優化存儲層的關鍵性能瓶頸分析存儲服務實例節點單存儲設備性能瓶頸存儲性能短板架構深度帶來的延時存儲服務網絡性能瓶頸存儲后端網絡性能瓶頸性能瓶頸服務器和存儲服務節點之間的前端存儲網絡性能服務

6、器IO策略的選擇業務負載總量與性能極限單個負載與服務實例性能極限業務離散度與服務實例平衡度異構存儲間的性能差異存儲工作模式的差異存儲虛擬化服務節點與存儲設備之間的SAN網絡或者TCPIP網絡性能從主機層到正真的物理層之間深度越深，那么IO經歷的延時就會越長。虛擬卷的整體性能會因為具體存儲設備或存儲類型的短板效應而成倍放大。如何消除架構前端性能瓶頸存儲整合底層服務實例服務實例服務實例服務實例服務實例對象存儲服務塊兒存儲服務文件存儲服務SAN 環境LAN 環境業務整體負載壓力 業務系統整體負載壓力總和應該小于存儲層提供服務實例的總吞吐量。 業務系統中最高IOPS記錄應該小于存儲層單個實例的最大能力

7、。 所有存儲服務實例平均資源利用率應與高可用策略匹配。 所有存儲服務實例的IO負載應實現平衡分布式服務。 交換設備本身不能成為系統環境的性能瓶頸（通道寬度、交換緩存、鏈路使用策略）。 環境架構實現扁平化，減少IO實際深度以及帶來的延時。 數據讀寫實現跨設備級橫向擴展，存儲空間實現橫向拉伸。但是需要避免出現橫向拉伸中的性能短板效應出現。 存儲整合層數據橫向實現科學合理遷移、遷移策略既能實現性能的時間維度平衡，同時不能產生對縱向IO的影響。 對業務讀寫特點及需求進行細分，科學正確配置存儲池策略，保證高需求業務利用高端物理設備，讀寫敏感性低的業務盡量橫向擴展。 以性能和高可用的最佳平衡點為指導設置存

8、儲虛擬層的落盤策略。 以閃存的超高速讀寫性能來提升熱點數據性能，以整體分層策略來平衡存儲池整體存儲效率。 將閃存單獨抽離作為存儲池的緩存，以解決底層物理設備存儲性能的多樣化差異。如何消除架構后端性能瓶頸存儲整合底層HP 3ParEMC VNXIBM DSNetAppNAS服務實例服務實例服務實例服務實例服務實例對象存儲服務塊兒存儲服務文件存儲服務 底層SAN環境及LAN環境實現扁平架構，避免交換設備的過多級聯，減少數據落盤的延時影響。結合分布式存儲軟件利用低端存儲設備，支撐分析類業務。Flash System拉伸了的存儲集群架構（接管模式）拉伸了的存儲集群架構（接管模式）節點節點存儲存儲節點節

9、點存儲存儲節點節點存儲存儲 功能描述：兩個節點組成一個組（拉伸的集群），組內主節點對VDISK提供IO服務。VDISK的兩個物理鏡像位于兩個中心的存儲。VDISK不能被其他組接管。 部署注意點：科學計算業務負載并以此衡量架構橫向吞吐能力及橫向擴展能力；合理平衡VDISK和IO GROUP的映射關系，保證節點負載均衡；根據業務需求設置IO寫策略（性能優先&數據優先）；利用FLASH COPY分擔數據讀請求壓力；利用Metro和Global合理實現數據容災；兩端的存儲設備性能差異不要懸殊，以保證IO落盤沒有短板效應放大帶來的性能影響。拉伸了的存儲集群架構（并寫模式）拉伸了的存儲集群架構（并

10、寫模式）節點節點存儲存儲節點節點存儲存儲節點節點存儲存儲 功能描述：兩個節點組成一個拉伸集群，每一個節點有兩個引擎，每個引擎有兩個控制器。共同為所有VDISK提供IO服務。兩個節點同時讀寫，會有數據競爭及數據同步。 部署注意點：盡量避免應用層再次出現強烈數據熱點問題；嚴格保證節點之間的通道帶寬及延時符合產品要求；虛擬化層本身不具備存儲分層及FLASH COPY等功能，需要借助存儲設備本身的功能來實現，因此存儲層的Storage Group需要小粒度細分。兩邊的存儲設備需要嚴格保證其配置的一致性，否則會加倍放大性能影響。Part 04存儲資源整合過程中的誤區存儲資源整合過程中的誤區單個服務實例性能指標不代表整體性能，要看實例整體工作模式是否能實現負載均衡。整體性能與服務實例性能01為了追求存儲的統一性和便利性而犧牲存儲服務的特殊化特征將會帶來性能災難。存儲集中管理與存儲