基于數據湖架構的時空大數據平臺解決方案_第1頁
基于數據湖架構的時空大數據平臺解決方案_第2頁
基于數據湖架構的時空大數據平臺解決方案_第3頁
基于數據湖架構的時空大數據平臺解決方案_第4頁
基于數據湖架構的時空大數據平臺解決方案_第5頁
已閱讀5頁,還剩33頁未讀 繼續免費閱讀

VIP免費下載

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

基于數據湖架構的時空大數據平臺解決方案2023年解決方案應用服務層領導決策服務資源池服務平臺層數據層(數據湖)基礎設施層統一云計算中心安全保障體系、標準規范體系多源異構數據匯聚引擎數據區矢量數據資源池柵格數據資源池實時數據資源池歸檔數據資源池分析處理區矢量大數據分析引擎柵格大數據分析引擎實時大數據分析引擎業務流引擎模型算法庫地表形變監測影像變化監測城市體檢……數據管理系統云平臺運維管理系統時空信息基礎服務定制化業務專題服務影像在線處理分析服務云GIS應用環境租用服務應用系統快速搭建服務數據共享交換服務大數據分析挖掘服務大數據可視化服務開發接口服務時空信息云平臺門戶城市治理行業應用公眾生活一云一湖一平臺N應用一云

:統一的云計算中心依托統一云計算環境建設的集約模式建立全市統一的云計算中心,面向全市各部門提供統一的云服務全市所有新建應用系統及非涉密時空大數據平臺,都應部署于統一云計算環境在IaaS之上建立云GIS

PaaS平臺依托統一的云計算環境向業務部門用戶開放私有的時空數據處理、存儲、分析、服務器集群等GIS軟硬件資源服務。云GISPaaS平臺的建立和使用三個端組成:面向系統管理員、租戶管理員、普通用戶,滿足市、縣多級應用需求。資源池化機制:不同的應用場景分配不同的云GIS資源池規劃;不同的組織賬戶分配不同的云GIS資源。多租戶隔離機制:GIS計算資源、存儲資源安全隔離。云平臺監控策略:不同角色均可以實時監控各類云GIS資源。云GIS資源交付能力:分鐘級交付云GIS資源,彈性動態地調整計算資源。云GISPaaS平臺的建立和使用多租戶:廣東省地理信息公共服務云平臺建設業主單位:廣州地理研究所面向用戶:01-誠脈地理咨詢;02-珠海某著名企業;0某著名企業;04某著名企業;05-廣東省應急研究中心;06-廣州地理研究所服務方式:廣州地理所統一建設,對各公司部門以租用的方式提供云服務。云底層:VMware

vSphere6.0虛擬化+OpenStack(億訊)現行規模:37個云桌面,5個云集群,7個租戶,80個用戶數以上。大規模GIS服務支撐:貴州省國土云業主單位:貴州省自然資源廳硬件規模:3500vCPU,10TB內存,10TB存儲;服務規模:1000個;站點數10個以上用戶規模:測試1000并發云底層:華為Fusiopute虛擬化+ManageOne3.0;共享存儲:華為NAS5500V3服務方式:市級統一建設的一體化云GIS平臺,面向各縣級提供云服務。服務類型:01-縣級公共平臺服務;02-云服務器服務;03-云存儲服務;04-云GIS集群服務;05-云GIS數據庫服務;06-云GIS桌面服務。云底層:VMware

vSphere6.0虛擬化+VMware

vCloud

Director5.5一體化云思想:衡陽市縣一體化云平臺建設業主單位:衡陽市自然資源和規劃局多類型云GIS資源交付:浙江省時空大數據云平臺業主單位:浙江省測繪科學技術研究院開放性定制服務:第三方站點接入,實現第三方站點在GIStack中的交付。時空大數據云平臺:地理大數據可視化展示云底層:阿里公有云一湖

:時空信息數據湖數據湖的起源“三駕馬車”論文催生Hadoop和HBase傳統的Hadoop(HDFS+MapReduce)的計算存儲一體化的方式面臨收益上的瓶頸,大數據框架走向存儲和計算分離的架構2011年,“數據湖”概念的提出,核心:支持異構數據的匯聚、異構數據分析框架的融合典型數據湖架構的邏輯組成數據湖數據匯集處理&分析數據分類、編目數據管理數據可視化數據湖架構可以在一個集中式存儲位置安全地存儲、分類和分析所有數據,且數據可以按照原始格式存儲而無需轉換為預定義結構。時空大數據的構成1 2 3 4遙感衛星數據大小飛機數據視頻監控數據氣象臺站數據空氣質量數據傳感器類數據車輛GPS數據手機信令數據基礎測繪數據社會統計數據問卷調查數據規劃設計數據行為記錄數據社交網站數據數據體系:從靜態走向動態,從測繪為主到多專題匯集,打造涵蓋地上、地表、地下,呈現過去、現在、未來的時空大數據體系。來自設備 來自人 來自系統業務系統數據辦公文檔資料網頁資料數據交數據系統日志數據數據入湖:多源異構數據匯聚數據庫IoT實時采集網絡爬蟲接口文件時空信息數據湖矢量數據 原始影像成果影像三維模型實景數據激光點云實時數據文檔資料……RDBMS應用系統多類型文件系統GPS官網/論壇/自媒體IoTWebService離線數據采集混合多態存儲與統一存儲管理統一存儲管理成果數據區生產與管理數據區辦事料柵格塊存儲(關系型數據庫+SDE)對象存儲分布式存儲(HDFS)索引存儲(ES)共享文件存儲(NAS)時空大數據管理時空大數據管理系統數據自動編目原始數據管理主數據管理歸檔數據管理元數據管理數據智能檢索血緣分析遙感影像數據的統籌與管理一平臺

:時空信息云平臺云平臺架構設計云中心桌面平臺某著名企業平臺云平臺服務能力時空信息基礎服務:提供二三維地圖服務、要素服務、影像服務、地名地址匹配服務、網絡分析服務、地理處理服務、OGC標準服務等基礎服務類型。定制化業務專題服務:提供面向業務的空間分析模型搭建或數據聚合服務,用于支撐總體規劃、多規合一、規劃業務審批等。遙感影像在線分析服務:提供遙感影像數據的在線處理與分析。云GIS應用環境租用服務:提供云GIS集群、云GIS桌面、云主機等軟件的租賃服務。應用系統快速搭建服務:提供零代碼的業務應用系統快速搭建服務。數據共享交換服務:提供跨業務部門的數據交換服務。數據空間化服務:基于地名地址匹配引擎,實現數據的空間化。大數據分析挖掘服務:提供基于矢量、影像、實時大數據的分析挖掘服務。核心服務能力時空信息基礎服務定制化業務專題服務提供面向業務的,

空間分析模型搭建、底圖定制或特定數據產品服務用于支撐和響應不同部門的業務需求。遙感影像在線分析服務為業務用戶提供在線的影像提取分析、變化監測等功能服務,支持多業務領域應用,

如城市規劃、環境保護等。影像在線分析系統影像在線分析系統水體變化檢測植被變化檢測硬質地表變化檢測影像共享、在線發布系統提供數據源云GIS應用環境租用服務應用系統快速搭建服務零代碼的應用構建器跨桌面和某著名企業電腦跨平臺使用豐富的功能插件,可以擴展自己的插件界面可進行定制,使之與眾不同配置信息可以保存成應用模版數據共享交換服務數據目錄數據購物車數據訂單數據訂單審批數據下載數據空間化服務基于地名地址匹配引擎,實現非空間數據的空間化。大數據分析挖掘服務基于時空大數據資源和挖掘引擎,按需建立大數據分析應用主題域。時空分布關聯分析深度挖掘統一服務門戶統一服務門戶打造一個融合資源檢索與展示、“開放式”共享交換以及用戶個性化內容管理于一體的新型地理信息資源門戶,并具備在線智能制圖、零代碼應用自動快速組裝、用戶按需自服務等能力。云端運維管理系統云平臺運維管理系統多租戶的管理模式云基礎資源監控與管理(資源池、存儲、數據庫、鏡像模板、虛擬機配置)云平臺服務監控與管理細粒度的權限控制黑名單與異常報警機制多維度的統計分析N應用N類智慧應用面向領導決策面向行業應用面向城市治理面向公眾生活面向領導決策時空信息一/綜合市情:涵蓋空間基礎、空間規劃、自然資源、城市管理、公共專題、智能感知等專題。面向領導決策自然資源及生態環境保護履職平臺(生態審計平臺)本底庫變化庫動態巡查自然資源及生態環境保護預警自然資源與生態環境保護決策與分析組織部干部考核平臺檢察院公益訴訟平臺審計局生態審計平臺面向行業應用自然資源管理服務系統數據服務:時空基礎數據、自然資源管理專題數據;業務模型:自然資源要素地理分布統計、空間開發格局分析、資源優化配置

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論