科學數據網格進展中科院計算機網絡信息中心周維2005.11科學數據網格進展中科院計算機網絡信息中心背景介紹科學數據網格應用服務介紹背景介紹立項:863支持的“高性能計算機與核心軟件”重大專項的應用網格項目（2002－2005）;主要基礎:科學數據網格的建設以中國科學院科學數據庫;目的:是科學數據庫數據資源的基礎上，通過網格計算的相關技術，特別是數據網格技術，促進科學數據庫中大量分布式異構數據資源的共享，并在此基礎上開發對科學研究有直接實用意義的應用系統

科學數據網格項目背景介紹(一)科學數據網格項目背景介紹(一)組成：網格信息服務系統科學數據網格數據訪問服務科學數據網格存儲服務開發的一些實用的工具，如：通用數據管理工具、數據目錄管理工具、數據量統計工具、通用元數據管理工具、訪問控制工具等。主要研究內容：構造科學數據網格的系統平臺;開發科學數據網格所必需的中間件軟件;開發科學數據網格的示范應用系統(包括:虛擬天文臺)，并在這些研究工作成果的基礎上，提出一種科學研究領域的網格應用框架，爭取成為領域內的網格應用標準。科學數據網格項目背景介紹(二)組成：主要研究內容：科學數據網格項目背景介紹(二)科學數據網格主要軟硬件環境硬件超級數據服務器（已安裝）海量存儲系統（已安裝）磁帶庫系統（正在采購）外聯交換機（正在采購）軟件數據庫管理系統（正在采購）并行數據庫管理系統（正在采購）數據備份軟件（正在采購）科學數據網格主要軟硬件環境硬件超級數據服務器－深騰6800259個結點（4-way安騰2）；20TB盤陣；2Gbps網絡出口超級數據服務器－深騰6800259個結點（4-way安騰超級數據服務器－深騰68001PC機群系統IA64結點總數59個每CPU內存2GB以上每結點局部存儲73GB以上每結點具備千兆以太網端口總計算能力達1TFLOPS對外網絡連接2Gbps支持主流并行數據庫支持Linux和Windows超級數據服務器－深騰68001PC機群系統超級數據服務器－深騰680032個數據庫服務結點并行Oracle10G數據庫2個文件/存儲服務結點基于GSI的FTP服務器文件I/O結點22個外部結點（應用服務結點）SQLServer、Mysql數據庫等Apache、Tomcat、IIS等GT3運行環境等超級數據服務器－深騰680032個數據庫服務結點科學數據網格應用服務介紹科學數據網格存儲服務2.科學數據網格信息服務3.科學數據網格數據訪問服務科學數據網格應用服務介紹科學數據網格存儲服務科學數據中心存儲軟硬件環境6800NodeSAN存儲設備Oracle10G磁帶庫科學數據中心存儲服務文件存儲服務數據庫服務科學數據網格存儲服務部分科學數據中心存儲軟硬件環境科學數據網格存儲服務部分海量存儲系統(一)數據中心的在線存儲系統采取基于存儲網絡（SAN）的磁盤陣列系統。其他節點采取直接連接服務器的磁盤陣列;存儲科學數據，為科學數據庫提供數據存儲空間。海量存儲系統(一)數據中心的在線存儲系統采取基于存儲網絡（海量存儲系統(二)Brocade3900FibreSwitchSAN結構全光纖磁盤陣列裸存儲容量20TB持續數據傳輸率（讀/寫）不小于2GB/s支持RAID5全雙工冗余海量存儲系統(二)Brocade3900FibreSw磁帶庫系統正在采購提供數據備份服務（備份在線存儲系統數據）完全備份增量備份性能最大存儲容量15TB以上持續數據傳輸率150MB/s以上驅動器數目不小于10個磁帶容量不小于100GB磁帶庫系統正在采購軟件系統數據庫管理系統SQLServerEnterprise2000(64bit)正在采購并行數據庫管理系統Oracle10gRACforIA64(8CPU)正在采購數據備份軟件Veritas等正在選型軟件系統數據庫管理系統GSI安全框架科學數據中心存儲服務架構圖存儲系統（StorageSystem）操作系統（OS）其它服務數據庫服務上網服務文件服務用戶備份GSI科學數據中心存儲服務架構圖存儲系統（StorageS文件存儲服務(一)為給各建庫單位提供安全而有效的數據存儲服務，并且提供數據存儲管理功能以及配額管理功能。用途存儲科學數據存儲資源缺乏的建庫單位數據備份需要大數據量備份工具SSTools、Ftp文件存儲服務(一)為給各建庫單位提供安全而有效的數據存儲服務文件存儲服務(二)數據提供/服務方式遠程數據傳輸基于GSI的FTP上傳機制（SSTools）本地數據傳輸光盤硬盤其它遠程方式協作方式EmailFTP共享目錄10月初提供服務所有上述各種方式文件存儲服務(二)數據提供/服務方式數據庫服務(一)為科學數據庫（各建庫單位）提供安全而有效的數據庫服務。用途提供數據存儲服務提供數據庫服務接口日常備份（磁帶庫）數據庫種類（不斷增長）OracleSQLServerMySQL……數據庫服務(一)為科學數據庫（各建庫單位）提供安全而有效的數數據庫服務(二)數據提供方式遠程數據傳輸（SSTools）本地數據庫導入光盤硬盤協作方式文件存儲服務（上載數據）數據中心管理人員導入數據服務方式提供數據庫接口Oracle－1521端口MySQL－3306端口提供數據庫備份接口10月份提供服務Oracle10GSQLServer數據庫服務(二)數據提供方式科學數據中心文件存儲服務(二)數據中心基于GSI的FTP服務器SAN1122331-遠程數據傳輸2-協同工作3-本地數據傳輸用戶數據中心管理人員科學數據中心文件存儲服務(二)數據中心基于GSI的SAN11科學數據網格信息服務目的:

實現科學數據網格信息的集中高效管理提供數據網格資源狀態信息提供數據資源的元數據信息。

科學數據網格信息服務目的:服務信息注冊權限的獲取服務信息注冊地址：/srvReg服務信息注冊采用密碼認證方式各建庫單位的初始密碼申請請發簽名email至ims@，請未申請證書或對證書的使用不了解的單位與科學數據庫CA中心聯系服務信息注冊權限的獲取服務信息注冊地址：http://ims科學數據網格進展課件科學數據網格進展課件資源（數據、服務）信息的查詢服務信息查詢SdgFinder的地址/一般查詢特色查詢資源（數據、服務）信息的查詢服務信息查詢SdgFinder的科學數據網格進展課件科學數據網格進展課件科學數據網格

數據訪問服務系統

（DAS2.0）科學數據網格

數據訪問服務系統

（DAS2.0）數據訪問服務數據訪問服務是一個符合OGSA定義的網格服務。訪問異構數據庫的接口是一致的。用戶不需要關心專業子庫使用的數據庫管理系統、操作系統和平臺的技術細節，通過數據訪問服務統一的接口就可以訪問專業子庫，按照用戶的要求獲取滿足條件的數據。DAS介于數據用戶和物理數據庫系統之間，對物理數據庫進行封裝后，對外提供數據訪問的網格服務接口。支持的關系數據庫管理系統的類型包括：Oracle8、Oracle9i、SQLServer2000、Mysql4MySQLSQLServerOracle數據訪問服務(DAS)用戶用戶用戶數據訪問服務數據訪問服務是一個符合OGSA定義的網格服務。訪系統結構示意圖數據訪問服務接口虛擬數據庫物理數據庫映射工具MappingBuilderDataView系統結構示意圖數據訪問服務接口虛擬數據庫物理數據庫映射工具D數據訪問網格服務的使用通用Web檢索前端DataViewDAS網格服務的客戶端通過調用網格服務訪問數據庫資源。建庫單位或最終用戶，基于DAS網格服務開發應用系統。數據訪問網格服務的使用通用Web檢索前端DataView服務信息的注冊服務信息的注冊最終用戶怎么用？1a.查詢與××相關的數據庫的信息1b.返回符合條件的數據庫的GSH2a.請求元數據服務2b.返回數據庫結構信息3a.用戶提交查詢請求（sql等）3b.數據服務與數據庫交互3c.返回XML格式的查詢結果給用戶注冊服務SDGFinder元數據服務數據服務用戶關系數據庫SOAP/HTTPAPIinteractions/sdgfinder

最終用戶怎么用？1a.查詢與××相關的數據庫的信息1b.返回科學數據網格進展課件科學數據網格進展課件能幫建庫單位解決什么問題呢？靈活定制檢索系統，滿足您的需求訪問控制可設置哪些數據表、哪些字段可以訪問補充和豐富元數據信息，數據規范化可添加或修改數據庫、表、字段的中英文名稱和描述信息等檢索系統的需求可設置檢索字段、概要顯示字段、詳細顯示字段多表結構，可以添加表間約束條件。能幫建庫單位解決什么問題呢？靈活定制檢索系統，滿足您的需求科學數據網格進展課件科學數據網格進展課件科學