視頻結構化大數據平臺解決方案_第1頁
視頻結構化大數據平臺解決方案_第2頁
視頻結構化大數據平臺解決方案_第3頁
視頻結構化大數據平臺解決方案_第4頁
視頻結構化大數據平臺解決方案_第5頁
已閱讀5頁,還剩45頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

1、視頻結構化大數據平臺解 決 方 案千視通目錄 TOC o 1-5 h z HYPERLINK l bookmark2 o Current Document 建設背景4 HYPERLINK l bookmark4 o Current Document 建設目標5 HYPERLINK l bookmark6 o Current Document 建設原則6 HYPERLINK l bookmark8 o Current Document 標準化原則6 HYPERLINK l bookmark10 o Current Document 統一設計原則6 HYPERLINK l bookmark12 o

2、 Current Document 大數據處理原則6 HYPERLINK l bookmark14 o Current Document 高可靠/高安全性原則 6 HYPERLINK l bookmark16 o Current Document 適用性原則7 HYPERLINK l bookmark18 o Current Document 可擴展性原則7 HYPERLINK l bookmark20 o Current Document 系統總體設計7 HYPERLINK l bookmark22 o Current Document 設計依據7 HYPERLINK l bookmark3

3、4 o Current Document 總體架構設計10 HYPERLINK l bookmark42 o Current Document 業務架構設計11 HYPERLINK l bookmark46 o Current Document 網絡架構設計12 HYPERLINK l bookmark48 o Current Document 數據結構化13 HYPERLINK l bookmark50 o Current Document 概述 13 HYPERLINK l bookmark52 o Current Document 數據采集14 HYPERLINK l bookmark5

4、6 o Current Document 控制調度單元15 HYPERLINK l bookmark58 o Current Document 目標結構化單元15車輛結構化單元21 HYPERLINK l bookmark86 o Current Document 前端要求26 HYPERLINK l bookmark95 o Current Document 數據存儲29概述 29功能設計29數據存儲29數據服務30系統管理31 HYPERLINK l bookmark97 o Current Document 存儲設計32 HYPERLINK l bookmark99 o Current

5、Document 數據應用32 HYPERLINK l bookmark101 o Current Document 以圖搜車33人物大數據34 HYPERLINK l bookmark103 o Current Document 人物綜合查詢34 HYPERLINK l bookmark105 o Current Document 人物檢索34 HYPERLINK l bookmark107 o Current Document 人騎車檢索36 HYPERLINK l bookmark109 o Current Document 視頻框選嫌疑目標37以圖搜圖38 HYPERLINK l bo

6、okmark111 o Current Document 智能建庫引擎38 HYPERLINK l bookmark113 o Current Document 以圖搜圖應用38GIS 應用39基本操作39 HYPERLINK l bookmark118 o Current Document 地圖查詢39 HYPERLINK l bookmark120 o Current Document 軌跡展示40攝像頭操作錯誤!未定義書簽。 TOC o 1-5 h z HYPERLINK l bookmark122 o Current Document 系統管理41平臺特點44 HYPERLINK l

7、bookmark124 o Current Document 提高海量視頻倒查的效能44 HYPERLINK l bookmark126 o Current Document 提供視頻關鍵特征的視頻檢索45 HYPERLINK l bookmark128 o Current Document 永久保存結構化的視頻信息45 HYPERLINK l bookmark130 o Current Document 基于虛擬化服務的云計算架構46配置清單錯誤!未定義書簽。1.建設背景平安城市視頻監控技術已經從聯網整合階段發展到視頻實戰深 度應用階段。面對視頻資源整合規模的持續擴大、視頻實戰業務的廣 泛應

8、用以及視頻信息化處理過程中產生的海量視頻數據,如何充分利 用海量的視頻數據,實現海量視頻數據的高效檢索以及基于實戰需求 構建警務視頻大數據應用平臺,成為視頻深度應用亟待解決的問題。 建設統一開放的視頻云計算平臺,并在視頻云計算架構基礎上,實現 視頻信息化、信息情報化、情報實戰化是視頻大數據實戰應用的關鍵。隨著公安信息化建設進程的不斷加快,全國各地都在掀起“平安 城市”、“智慧城市”和“科技強警”等一系列大型安防系統建設。全 國各地隨著“平安城市”的推動,建設了越來越多的視頻監控攝像頭。 但是如何將這些視頻資源整合好、利用好、管理好、應用好,發揮視 頻實戰的最大效用,是視頻實戰應用下一步發展面臨

9、的問題。全球在2010年已正式進入ZB時代,全球數據量大約每兩年翻一 番,一天產生的視頻監控數據超過1500PB。地市“天網”攝像頭都 數以萬計。由于數據的飛速增加不僅出現了視頻圖像信息海量儲存、檢索困 難,歷史圖像查找比對困難,多級視頻圖像信息共享平臺無法實現互 聯互通,傳輸網絡架構和帶寬不足等問題;也使以往公安人工檢索,人工分析視頻的方法不再適用。如何存儲海量視頻信息?如何提升海量視頻信息查找效率?如何利用海量視頻信息為案件偵破提供支撐?千視通視頻結構化應用平臺對海量視頻數據中(人物、車、人臉) 經過結構化引擎處理,基于云存儲技術構建大數據平臺,基于數據挖 掘技術構建應用平臺,實現視頻圖片

10、的智能檢索、車輛大數據應用、 人物大數據應用,人臉大數據應用等。.建設目標系統主要解決如何快速有效提高從大量視頻和圖像信息中查找到 有效信息的效率問題,解決海量視頻數據的不斷增大帶來的存儲成本 的增加問題以及目前的視頻數據使用方案越來越難解決的海量視頻 應用場景。其次利用目前已建設的公安視頻及社會面視頻,打造視頻 大數據中心,為偵查破案提供數據分析支撐。系統建成后,公安所有的監控視頻、交通卡口、社會監控數據以 及案事件的視頻資料等歸檔數據將成為一個結構化的處理,存儲,管 理,分析,計算,使用的一體化大數據云中心。.建設原則標準化原則基于數據標準建設結構和非結構化云存儲技術中心,能夠有效確 保數

11、據模型設計的規范性,以及與源系統及管理分析類系統保持一致 的業務定義和技術定義,從而滿足支持業務開展、橫向的信息擴展和 宏觀管理的要求,使結構化后的視頻、圖片和分析結果等成為公安各 業務系統的可信數據源。統一設計原則按照公安部視頻數據的相關標準設計系統結構。特別是應用系統 建設結構、數據模型結構、數據存儲結構以及系統擴展規劃等內容, 從規劃的全局出發、從長遠的角度考慮。大數據處理原則致力于跨警種、跨系統的視頻相關數據結構化處理,致力于非結 構數據加工和數據挖掘等深層次的數據應用,建立在云存儲和云計算 的體系之上,具有海量數據處理能力,以適應不斷增長的數據量和業 務需求。高可靠/高安全性原則從系

12、統從結構上、產品性能上、設備的選型上,以及具體的實施 方案,將充分考慮軟硬件的成熟度,使得系統的穩定性和可靠性得到 保障,同時系統具備完備的網管單元,實時監測系統運行狀態,靈活 對整個計算資源進行有效調度和分配,平時保障85%的計算資源利用 率,預留15%的計算資源,一方面使得機器不在峰值上一直運行,同 時在突發臨時事件時 ,預留的 15%的計算資源可以備用,確保系統 正常、穩定、可靠、連續地運行。系統的設計充分考慮系統的安全。 在系統設計、設備選型、調試、安裝等環節都需嚴格執行國家、行業 的有關標準及公安部門有關安全技術防范的要求。適用性原則系統的建設將保護已有資源,急用先行,在滿足應用需求

13、的前提 下,盡量降低建設成本。可擴展性原則系統設計不但保證目前系統容量的要求,也將考慮今后系統的 發展,便于向更新技術的升級與銜接。系統提供標準的SDK控件及數 據接口服務,以實現與其它子系統之間的數據交換,保證系統的不斷 擴展。.系統總體設計設計依據本系統主要設計依據遵循以下標準和規范:項目政策文件:公安部關于進一步加強社會治安防控體系建設的指導意 見公安部關于深入開展城市報警與監控系統應用工作的意見公安部全國公安機關視頻圖像信息整合與共享工作任務書公通字201119號全國公安裝備建設“十二五”規劃公科信201211號全國公安機關視頻圖像信息整合與共享工 作任務書公科信【2012】 73 號

14、全國公安機關圖像信息聯網總體設 計方案公科信傳發【2012】367 號省(區、市)公安機關視頻圖 像信息整合與共享技術方案編寫指南公安信息系統類標準公安部金盾工程總體方案設計公安部公安信息系統應用支撐平臺總體方案設計公安部公安信息化標準體系公安部地市級綜合信息系統總體設計方案公安部共享數據項代碼標準公安部共享數據項集項目規范公安部刑事犯罪信息管理代碼GA 240. (121) -2000公安部刑事犯罪信息管理代碼GA 240. (2257) -2003公安部經濟犯罪案件信息管理系統技術規范GA397.X-2002公安部道路交通違章管理信息代碼GA 408.X-2003公安部全國道路交通管理數據

15、交換格式GA 409.X-2003公安部違法犯罪信息管理GA 8-1991公安部信息系統安全等級保護基本要求GB/T22239-2008公安部信息系統等級保護安全設計技術要求GB/T24856-2009公安部城市監控報警聯網系統技術標準GA/T669-2008計算機信息系統類標準計算機軟件開發規范操作系統安全技術要求GB/T 20272-2006數據庫管理系統通用安全技術要求GB/T 20273-2006視頻系統類標準城市監控報警聯網系統技術標準(GA/T669-2008)安全防范視頻監控聯網系統信息傳輸、交換、控制技術要求GBT 28181-2011民用閉路監視電視系統工程技術規范(GB50

16、198-94)視頻安防監控系統技術要求(GA/T367-2001)信息安全類標準信息系統等級保護安全設計技術要求GB/T24856-2009信息系統安全等級保護基本要求GB/T22239-2008計算機信息系統安全保護等級劃分準則GB17859-1999信息系統安全等級保護定級指南GB/T 22240-2008信息系統安全管理要求GB/T20269-2006總體架構設計方案總體架構設計為“一個中心,一個平臺,多個業務應用平臺”。一個中心:利用云計算、云存儲技術,建設視頻大數據中心;一個平臺:實現視頻,圖片數據結構化;多個業務應用:在大數據中心上,實現視頻圖片的智能檢索;在大數據中心上,實現視頻

17、圖片的車輛分析;在大數據中心上,實現視頻圖片的人物分析;業務架構設計Spark/Stornn分布式計算框架數據結構優及大數據存儲)深度學習特征識別大數需儲HDFS薛牌識別算法) 國標識別算珍 S臉識別算闔 C3【數據接人工數據接入數據轉換父安中吧,卡口卜電易飛交通 公安外網H教育,衛生社區架構說明:系統采用分布式系統構架,主要由大數據接入、大數據處理存儲、 大數據應用平臺組成。大數據接入負責接入在線各種社會視頻資源和公安各視頻資源。 或者直接導入離線視頻資源。大數據處理對收集到的數據經進行轉換、分析處理。視頻、圖片 等非結構化數據經過各種算法生成標準數據集供挖掘和分析使用。存 儲中心主要用來管

18、理大數據接入、大數據處理生成的各種非結構化數 據和處理后的結構化數據集,同時負責維護系統建立的各種專題庫。 大數據存儲中心是建立在成熟的云存儲體系之上的,具備存儲的復雜 均衡,軟硬件的動態擴展和刪除以及數據的自動備份和恢復功能。同 時,系統提供SDK庫供第三方集成,實現視頻數據在業務應用的深度 可視化。大數據應用提供客戶端功能的可視化展示,如數據的檢索訪問、 車牌信息分析、目標類型分析、人臉分析、GIS應用等應用服務。網絡架構設計系統采用統一云存儲設計,部署大數據平臺Hadoop集群設備,通過網絡實時將結構化分析平臺處理后的特征信息上傳。各業務部門通 過客戶端即可實現大數據的綜合業務應用。系統

19、可單獨部署,也可以級聯部署。級聯部署時,中心管理平臺 可以對子節點進行任務管理、調度、狀態查看。可指定子節點信息上 傳的位置、信息上傳的類型。中心管理服務器收到信息后,可對消息 進行二次過濾后再入庫。祗頻浩恂北平視密器網平白機外結枕化引 攀亞境盛網中自V中心豈悝而勞 區和頹花耦徒引整核心交投機視頻結構化平臺級聯示意圖5.數據結構化概述大數據視頻結構化分析系統控制調度、目標結構化單元、車輛結構化單元于一體,實現高清實時監控視頻、高清錄像以及圖片資源的 結構化處理。結構化引擎處理后的數據統一存儲于結構化云平臺中。 支持標清和高清視頻、不同廠家視頻格式等,滿足視頻監控各類應用 場合和應用模式的視頻內

20、容處理需要。數據采集主要接入卡口數據、電警數據、實時視頻、歷史視頻、卡口識別 數據、視頻特征提取數據、其他外部業務系統等數據,經過對數據清 洗、轉換、分類后,將數據存入大數據平臺。提供對大數據統一的接入方式,接口形式包括API、文件、FTP, WebService等,方便公安數據接入大數據平臺。大數據平臺采集視頻聯網平臺如下大數據平臺主動采集視頻聯網平臺系統示意圖所示,大數據 平臺通過數據接入組件主動從數據源系統采集數據,經過轉換、清洗 后通過大數據平臺API接口存入大數據平臺。主要提供如下幾種接入 方式:文件交換形式接口通過FTP/HTTP/SOCKET協議交換文件,文件格式需要接入時定 義

21、接口文檔;RDBMS中間庫接口通過JDBC的接口訪問中間庫的方式交換數據;WebService 接口通過開發定制的服務和第三方接口。控制調度單元控制調度單元是視頻結構化分析平臺的核心管理模塊,實現處理 服務單元的管理配置,提供視頻結構化分析平臺的注冊授權,對各節 點的處理單元進行增、減操作。實現信令控制管理,對平臺所有層級 的業務處理服務單元進行信令集中控制、轉發,實現數據同步。支持 任務調配管理,實現由中心主控單元接受視頻處理任務,對各層級的 業務處理服務單元進行任務分派。支持負載均衡能力,根據服務單元 的運行狀態和硬件資源耗用狀況及任務屬性,分攤服務單元的工作任 務,實現業務處理單元的最大

22、化利用效率,降低單個業務處理單元錯 峰填谷,實現各個處理單元的負載均衡處理。活動目標結構化單元具備視頻轉碼功能:支持將多種廠商的私有視頻格式轉換為標準的AVI流,MPEG4編碼,如海康、大華、科達、東方網力、安訊 士、景陽等廠家。2)具備視頻獲取功能:對不同視頻源(如監控平臺、DVR錄像文件、 指定存儲設備的錄像文件)的視頻存儲文件下載至本處理單元。具備對視頻處理任務的執行功能:根據控制單元分配的任務,對 錄像文件進行處理。具備處理狀態上報功能:視頻結構化處理單元向中心管理控制單元主動或被動上報運行監測狀態和當前任務處理狀態。具備任務更新功能:接受到來自中心管理控制單元的任務更新通 知,可自動

23、調整處理任務,并支持通過人工進行處理優先級的調 整。具備文件數據轉發功能:具備將結構化分析生成的文件,發送到 指定的視頻數據管理單元。或把原始錄像文件數據,發送到指定 的視頻數據管理單元。視頻預處理:提取視頻圖像中的背景圖像數據和運動物體的圖像數據,并記錄運動物體的特征(顏色、方向、大小等)信息。目標結果化單元是視頻結構化分析平臺的業務處理單元,采用智能識別技術和先進的圖像識別算法,對實時視頻流、錄像文件以及圖 片中人、車輛、人騎車的特征信息提取。例如:人結構化流程圖:獲取人圖像信息。獲取圖片中的人的等相關特征信息。實現對視頻圖幀中人信息(性別、年齡段、方向特征、衣服顏色、 背包、拉桿箱、戴眼

24、鏡等)進行自動檢測、自動識別的功能。支持模式:工具支持三種檢測模式。文件流模式實時流模式直連設備模式單元采用智能識別技術和先進的圖像識別算法,對視頻流及圖片 中人的信息提取,并識別出相關信息。主要功能:人結構化描述信息:性別信息識別系統支持男人、女人識別。年齡段信息識別系統支持老人、中年、青年、兒童進行識別。方向識別系統支持正面、側面、背面、斜上方等方向進行識別。上下身衣服顏色識別系統支持黑、白、紅、黃、藍、綠、灰、青等顏色識別。人裝飾物識別系統支持戴眼鏡、帽子、背包、拉桿箱、打雨傘等進行識別,國內領先。人物信息結構化干視通能夠對普通監控視頻中的人物信息進行矢量分析 及結構化分析J結構化分析包

25、括:基本特征性別、年齡段)服t硝征(上下衣著顏色、眼鏡)攜帶物特征(背包.拉桿箱、打傘)運動特征(姿態、方向)提供語義檢索、人形檢索等檢索手段,可快速準確的找 到目標人物。人騎車結構化描述信息:騎車類別識別系統支持兩輪車、三輪車識別。性別信息識別系統支持男人、女人識別。年齡信息識別系統支持老人、中年、青年、幼兒進行識別。上身衣服顏色識別系統支持黑、白、紅、黃、藍、綠、灰、青等顏色識別。人裝飾物識別系統支持戴眼鏡、打雨傘等進行識別。活動目標速度識別系統支持對活動目標移動速度進行慢、快進行識別。人騎車信息結構化千視通能夠對普通監控視頻中的人騎車信息進行矢量分 析及結構化分析,結構化特征包括:基本特

26、征(騎車類型、性別、年齡段)服飾特征(上衣著顏色.眼鏡)攜帶物特征(背包、打傘)運動特征(方向、速度)提供語義檢索、人形檢索等檢索手段,可快速準確的找 到目標人物。車輛結構化描述信息:不同環境下車輛識別系統支持白天、夜間、同畫面多車輛、從車頭、從車尾識別。車身顏色識別黑、白、紅、黃、藍、綠、灰、青等 10種車身顏色識別。車型識別如轎車、小型貨車、大型貨車、客車等類型。車品牌、車系、款型識別系統支持車輛三級品牌(品牌、車系和款型)識別國內領先。活動目標運動方向系統支持對活動目標運動方向上、下、左、右進行識別。活動目標速度識別系統支持對活動目標移動速度進行慢、快進行識別。車輛結構化單元車輛結構化單

27、元是視頻結構化分析平臺的業務處理單元,車輛結 構化單元采用車輛智能識別技術和先進的圖像識別算法,對實時視頻 流、錄像文件以及圖片中車輛的特征信息提取,并識別出車輛、車牌 等的相關特征信息。車牌:藍閩品牌:福特干品牌:稿克斯車型;轎車顏色:灰色速度.中建車輛信息結構化千視通能夠對卡口或類卡口視頻圖片中的隼輛信息進行 矢量分析及結構化分析,結構化特征包括:基本特征(車牌號碼、車牌類型、生身顏色、車型、 車牌品牌、子品牌、款型)標識物(年檢標、遮陽板、掛飾、紙巾盒、副駕、是 否打電話、是否系安全帶等)運動特征(方向、速度)提供語義檢索、以圖搜車等檢索手段,可快速準確的找 到目標車SL車輛結構化流程圖

28、:車牌顏色”號碼車身顏色車標】車系車輛寬度安全帶系否手持電話否車輛正面特征獲取車輛圖像信息。獲取圖片中的車輛的車牌、車身、車標、車 系、車輛寬度、安全帶等相關特征信息。實現對視頻圖幀中車輛信息(車牌號碼、車牌顏色、車身顏色、 標識物、駕駛員行為等)進行自動檢測、自動識別的功能。支持模式:工具支持三種檢測模式。文件流模式實時流模式直連設備模式車輛特征識別單元采用車牌智能識別技術和先進的圖像識別算 法,對視頻流及圖片中車輛的信息提取,并識別出車輛、車牌等的相 關信息。主要功能:不同環境下車輛識別系統支持白天、夜間、同畫面多車輛、從車頭、從車尾識別。車牌信息識別系統按照GA36-2007標準進行設計

29、,支持多達17種車牌類型的 號碼識別。包括:小型汽車號牌、大型汽車號牌(前后車牌)、掛車 號牌、使館車牌、香港入境車號牌、澳門入境車號牌、教練汽車號牌、 警用汽車號牌(前后車牌)、拖拉機號牌、軍車號牌、武警車號牌、 個性化車牌、黑色車牌。車身顏色識別黑、白、紅、黃、藍、綠、灰、青等 10種車身顏色識別。 車型識別如轎車、越野車、商務車、小型貨車、大型貨車、輕客、小型 客車、大型客車、三輪車、微面、皮卡、掛車、混泥土攪拌車、罐車、 隨車吊、消防車、渣土車、押運車、工程搶修車、救援車、欄板卡車 等類型。車品牌、車系、款型識別系統支持車輛三級品牌(品牌、車系和款型)識別,其中包括多 于160種以上的

30、車輛品牌識別,在識別車輛品牌的基礎上,系統支持 近千種車輛系列的識別,支持子型號數量大于3000,國內領先。 特有的年檢標、車窗貼、掛飾、遮陽板識別能力系統支持對年檢標、車窗貼、掛飾、遮陽板的識別檢測,并以不 同顏色框加以標識。駕駛員行為識別系統支持駕駛員打電話、是否系安全帶等危險行為進行識別檢測。活動目標運動方向系統支持對活動目標運動方向上、下、左、右進行識別。活動目標速度識別系統支持對活動目標移動速度進行慢、快進行識別。人臉結構化單元人臉結構化單元是視頻結構化分析平臺的業務處理單元,人臉結 構化單元采用人臉智能識別技術和先進的圖像識別算法,對實時視頻 流、錄像文件以及圖片中人臉的特征信息提

31、取,并識別出年齡、性別、 表情、種族等的相關特征信息。實現對視頻圖幀中人臉信息(年齡、性別、表情、種族等)進行 自動檢測、自動識別的功能。支持模式:工具支持三種檢測模式。文件流模式實時流模式直連設備模式人臉特征識別單元采用人臉智能識別技術和先進的圖像識別算 法,對視頻流及圖片中人臉的信息提取,并識別出的相關信息。主要功能:1)性別信息識別區分男性、女性2)年齡識別能準確識別出具體的年齡3)種族識別能區分黃種人、黑種人、白種人。人臉信息結構化干視通能夠對人瞼卡口中的人臉信息進行矢量分析及結 構化分析I結構化特征包括:基本特征(性別、年齡)服飾特征(上衣顏色、眼鏡)提供語義檢索、人臉比對等手段,可

32、快速準確的定位目5.7.前端要求為保證從視頻中能準確的提取車牌和對提起后的車牌進行識別,對 提取車牌的攝像機架設有如下要求:1、高清視頻流(25/30fps1920 x1080pixel)。2、具備自動曝光補償、強光抑制、寬動態、自動白平衡。3、適應角度:車輛顯示完整,車輛正面與攝像頭法線方向的左右傾斜在20度以內,上下傾斜角度小于15度。4、車牌識別時,車牌聚焦清晰區域處的環境照明在白天必須大于200lux,夜晚必須大于100lux。5、車牌像素要求90-160像素點,無逆光、曝光過度、車牌圖像 太暗等。6、支持各種車牌識別:民用車牌(92 式)、民用貨車車牌(雙 排黃車牌)、民用車牌(20

33、02 個性化車牌)、警車車牌、武警車牌、 軍車車牌(2005式)。7、識別車牌號碼的時間三100ms移動車輛,車牌檢測正確 率95%;漢字識別正確率90%、字符位識別率大于95%、全車牌識 別正確率90%。a)攝像機架設要求設備安裝位置與角度應避免出現強逆光、反光等情況。當同一個 攝像機抓取兩個車道時,立桿應根據現場勘測架設于中間區域,滿足 兩車道提取的準確率。如下現場布局側視圖所示。為保證從視頻中能準確的提供人臉和提起后進行人臉比對識別,對提取人臉的攝像機架設有如下要求:攝像機架設要求距地面2.5m左右,使得俯視人臉15度以內。攝像頭到人臉的距 離6米左右。地面2m以內的對焦寬度,監控人臉寬

34、度至少占畫面寬 度的1/8,人兩眼之間距離60像素以上。背景盡量不要有太復雜顏色 圖案,單色、淺色為宜,盡量不要有玻璃等強反光物品。如下圖所示:攝像機架設示例b)光線要求光線均勻,亮度保持200 lux左右,避免有逆光、強光和陰陽臉 的情況。若光照達不到要求,需在系統正對被拍攝正面采用白色光源進行補光,亮度控制在200-900 lux。c)照片采集要求抓拍的人臉照片清晰、完整。6.數據存儲概述視頻大數據資源信息庫是視頻圖像存儲、管理的綜合平臺。支 持創新的QPI硬件架構,支持海量級視頻、圖片、數據的管理。視頻 大數據資源信息庫采用SOA體系結構,以及多媒體數據庫(MD)、分 布式存儲和云計算架

35、構、流媒體播放等先進技術,不但使系統具有更 好的可用性、可維護性和擴展性,同時保證了對視頻、圖片、數據的 高效訪問,低資源占用,大大提高特征數據的交互性。功能設計數據存儲支持對上傳的結構或非結構化數據提供云存儲,主要體現在 以下三個部分:多節點擴容能力:當磁盤容量不夠時,可以靈活的增加數據節點,簡單實現擴 容。文件分塊存儲:對大文件進行分塊存儲,把一個大的數據文件自動切割成成 千上萬個小的文件塊,均勻的散個各個存儲節點上,通過并行 的方式進行存儲,讀取時,分別在多個存儲節點上讀取,減少磁 盤IO操作并且可以在數據所在的節點上并行地處理數據,數 據處理迅速。自動容災:平臺支持能自動對數據進行多份

36、復制,當磁盤有壞道或數據丟 失的時,系統自動的在其它存儲節點上去獲取文件,對丟失的 文件進行修復,自動重新恢復文件,達到數據節點相互備份的 目的。數據服務通過封裝SDK提供以下主要服務:全文檢索對視頻大數據資源信息庫中存儲的所有數據提供全文檢索 功能,即當用戶錄入數據后,將數據按查詢條件和關鍵字進行歸 類并建立索引,當用戶進行檢索時,系統提供強大的檢索功能, 可以根據內容進行多角度多側面的利用數據信息資源,方便快 捷得獲取到自己想要的信息。文件下載對用戶需要進行存儲和管理的文件進行上傳和下載功能, 對上傳到庫中的視頻文件進行快速下載或播放,圖片文件進行放大縮小以及瀏覽功能。流媒體服務系統內置流

37、媒體服務,對用戶上傳的視頻,音頻以及多媒 體文件,以流的方式在網絡中進行傳輸,相對于下載后觀看的 網絡播放形式而言,流媒體的典型特征是把連續的音頻和視頻 信息壓縮后放到網絡服務器上,用戶邊下載邊觀看,而不必等 待整個文件下載完畢。系統管理用戶管理:實現用戶的創建、修改、刪除等操作,并可對用戶 賦予相應的角色權限,從而控制用戶查看庫中數據的權限;角色授權:實現系統角色的創建、修改、刪除等操作,并可對 角色賦予相應的功能權限,從而控制用戶在系統中的功能權 限;置頂配置:用戶可從庫中選擇數個重點事件作為首頁置頂顯 示,并可對置頂的內容進行維護;用戶組管理:實現用戶組維護,并可對用戶組的成員進行維護,

38、 在信息審核時,選擇相應的用戶組,從而確定事件、視頻等信 息的共享范圍;基礎數據:實現單位信息、案件字典、人車物字典信息的管理。存儲設計存儲設計方案:令目標結構化;1天每路:3.5G令車輛結構化;1天每路(或者1天每路10萬輛車計算):3.2G備注:視頻結構化分析平臺:目標結構化按40路90天存儲:3.5Gx40 路x90 天E024G,12.6T車輛結構化按120路90天存儲:3.2Gx120 路x90 天E024G,34.6T必須按3倍冗余進行設計。12.6T+34.6T,47.2T47.2T * 3 =141.6 T單臺設備存儲不超過48T共需要的設備數量為:141.6 T -48T =

39、 3 臺7.數據應用從視頻數據的數據量增長的角度,隨著公安業務及視頻技術的不斷發展,視頻數據在公安業務中所占的比例將越來越重,這勢必對視 頻大數據應用的吞吐能力及處理性能提出了很高的要求。系統致力于 跨警種、跨系統的視頻相關數據分析處理、研判排查,致力于非結構 數據加工和數據挖掘等深層次的數據應用。大數據綜合業務應用平臺提供視頻綜合分析業務應用,實現智能 檢索、車輛大數據、人臉大數據、人物大數據等功能,滿足不同業務 部門應用需求。以圖搜車破案過程中,搜集到的案件線索很有可能是嫌疑車輛的一張或多 張圖片,基于此種情況下,系統能夠借助車輛的全面車體特征和局部 特征從而對目標車輛進行有效檢索,在最短

40、時間內鎖定其行蹤。支持 通過瀏覽按鈕選擇需要上傳的目標車輛圖片。海曲 渴阻&! 悶叫 M3 iWKSb HFaax:蒯 白 相玉 海馬圖i xoam口ki光論未成F無,同蝴帆,駕均心挈盟必卷oi aig* TWrti3H:Wfr*4Ml tMfl miftL4F2383X硝B2冊加推iU S5SC17753snEl*3C37733整腳白53C17733j&JT白in 4圖*俄中4到點:HiRi2X32D10 A兀翔F無匐陋2010無元越T無2OM2D10jE乏*ffiF無ZM2D1O A尢未血克ZmiDIQ無無才獨事無行中 HUBcdtiflMr-H#4岬式is o& 3D aej9.n7 9

41、12014 g 抑 13 加 91 2J01SW-29 36:ali 5B WSGlS-ee 29 17:47149 KnmWlW的加西“8 ”苑以圖搜車結果對比圖片顯示7.2.1人物綜合查詢系統對日常業務所接入的實時源和離線源等視頻/圖片數據,進 行特征提取分析及識別,對目標人物結構化信息(包括性別、年齡、 方向特征、衣服顏色、背包、拉桿箱等)進行存儲。查找人物的時候,通過WEB客戶端,提交性別、年齡、姿態特征、 衣服顏色、背包、拉桿箱等及進過時間段等信息對識別結果進行部分 /組合查詢。系統支持對目標任務進行精確查詢和模糊查詢。7.2.2人物檢索人形檢索將嫌疑人的截圖輸入至系統中,利用人形檢

42、索的功能,系統會根據目標嫌疑人的衣著、顏色分布、體態特征快速地在跨攝像頭中進行全局搜索,查找出相似的目標,并將結果以快照的形式輸出,刑偵人員可此進行研判;人形檢索,如下圖所示:人員衣著顏色和紋理特征檢索支持人員衣著顏色檢索,可以通過調色板精確選色,以及從視頻 畫面中采集顏色。支持按上半身、下半身分別指定顏色進行檢索,檢索結果中符合 條件的目標能夠排在前列。上下半身檢索結果如下圖所示:支持根據人員衣著紋理特征進行檢索,檢索結果如下圖所示:跨線與運動方向檢測支持通過指定跨線位置和方向對運動目標進行檢索,輸出目標快 照。支持設置多條跨線,每條線的方向可單獨設置,目標快照中同時 顯示所畫的線和方向。跨

43、區域檢索支持進入區域、離開區域、在區域內逗留、出現在此區域的目標檢索。條件組合檢索支持在視頻中使用人車分類、跨線、跨區域、顏色等多種條件的 組合檢索,檢索結果中符合條件的目標能夠排在目標快照圖片前列。7.2.3人騎車檢索系統融合對人騎車目標進行檢索,結果如下圖:檢索人騎車目標快照7.2.4視頻框選嫌疑目標支持在查看原始視頻時,暫停直接框選嫌疑目標,以框選的目標截圖為條件,可跨監控點對框選目標進行快速查找。如下圖所示:7.3.1智能建庫引擎以Hadoop為分布式存儲和計算框架,建立最終的字典索引向檢 索端提供服務,滿足文字檢索圖片、圖片篩選等功能。通過提供簡單 的接口向用戶提供分布式索引建庫服務

44、。7.3.2以圖搜圖應用支持本地上傳圖片至圖片庫進圖像比對查找(人物、車輛、人臉、非機動車輛等目標);通過提取圖片的局部特征進行查找和比對,分析結果通過快照的方式進行展示;支持對查找結果按時間進行排序以圖片列表的方式進行可視化呈現。VW心:加爐4qilR耳MN曜1 1131”設EEf*QfflEM42 用FSJ白冰get白場gi 37733做V白Mft肛a SCST?33否SM4前EiHS環&麗6 4|F2a33X自MS油,略m號附期也wtwm廿.M業物MUS3KDB?flR 無工?kffiT而XiMffiE融3h卻-7frq?91K4M幼止我j 柚用而JMlE-iH ia 遙川391圖ixe

45、aania 亮王前股F無2015.20 3.4 59佃海博屏Kcaaoio.無劉a不而2015 S 門*T:照馳海唱S酒馨&!。沒IfflT SCTm2ft.SSfliaiS-W-29 ?海日KXBZDia xit桃下無am?同游卻劉15g5口1收豺01 917.4GIS應用基本操作平臺支持同時接入多個地圖服務器廠家,可以通過電子地圖實現 監控點調看、設置、報警聯動等。一個人員組織機構可以配置一個地 圖服務器地址,也可以定義首次顯示的默認經緯度坐標。支持地圖放 大、縮小、漫游、測距、導航的功能。各個數據圖層可以顯示與關閉,支持如下數據圖層:地圖基礎圖 層:標識道路、地點等;監控路口圖層:具備經

46、緯度信息的監控路口; 攝像頭圖層:正常攝像頭圖層,故障攝像頭圖層;車輛軌跡圖層:標 識車輛出現過的軌跡點,GPS行駛軌跡。事十 口七忖尾賓代修同育林事.業工因肥同!區“但同岬:與田爭卸 tr產的看i:i LfhUziiSrftU察值用電代限工!靠住專用*K fSHFWB亞也 nnlGiMSSiii7.4.2地圖查詢支持視頻、卡口、電警等的點選、框選、圈選、多邊形選擇、 路選并播放相關視頻,實現視頻、卡口、電警、道路、路口、門牌號、 社會面監控的普通查詢和空間查詢。支持按“道路類型+道路名稱”、“卡口類型+設備名稱”、“攔 截點名稱”等多種組合條件,基于PGIS平臺查詢監測路段、卡口設 備、攔截

47、點等,地圖和列表形式顯示查詢結果,并實現查詢結果快速定位,顯示卡口基礎信息、過車數據信息等信息。7.4.3軌跡展示以PGIS平臺為基礎,利用平臺車輛通行信息實現預警車輛快速 定位報警與軌跡顯示,并通過嫌疑車輛行駛方向、車速、過車時間綜 合計算,對預警車輛的位置與軌跡進行預測。A預警車輛定位。通過地圖和列表形式實時顯示預警車輛信息, 點擊列表可快速定位至地圖上預警卡口位置,并顯示預警車輛基本信 息。支持單個或多個預警車輛同時定位。A預警車輛軌跡查詢。支持選擇一個或多個預警車輛,查詢某個時間段內的行駛軌跡,并在地圖上顯示完整的車輛行駛軌跡。預警車輛軌跡預測。根據預警車輛的行駛方向、車速、過車時 間

48、等,基于GIS分析其周邊卡口分布、歷史通行軌跡等,在地圖上顯 示5分鐘、10分鐘等不同時間段預警車輛可能出現的范圍和途徑卡口位置。7.4.4系統管理視頻源管理主要實現視頻聯網平臺資源配置及同步,本地錄像文 件上傳及管理;平臺已完成接入主流監控廠商的視頻聯網平臺,可直 接通過配置進行視頻資源同步即可完成。在視頻源管理模塊提供原始 視頻播放功能,可選擇4個播放窗口實時查閱監控圖像。支持輸入關鍵字對平臺資源或本地資源進行檢索,快速鎖定需要 查找的視頻圖像資源。具備視頻文件上傳功能:支持用戶手動上傳本 地原始視頻文件和建立DVR/NVR獲取計劃任務來自動獲取文件,將需 要進行特征分析處理的視頻文件上傳

49、至視頻結構化分析平臺。支持結構化任務調度管理:選擇視頻圖像文件進行結構化處理任務配置,靈活設定任務優先級。系統設置主要實現平臺的權限控制、日志管理、任務模板配置、 時鐘同步、服務器配置功能,實現系統平臺整體監控及資源調度。具備用戶權限控制功能,對客戶端登錄的用戶進行用戶鑒權,限 制和管理用戶的操作權限;對系統用戶及操作權限提供增刪查改等。系統日志包括登錄日志和操作日志,登錄日志記錄了用戶登錄系 統的情況(包括被拒絕的登錄請求),操作日志記錄了用戶在系統上 進行的配置操作。系統日志的查詢為系統的安全審計提供了一種手 段。管理員可通過靈活的條件對系統日志進行查詢。通過設置查詢條件為系統管理員提供了

50、靈活的操作日志查詢功 能。查詢條件包括:日志類型、日志事件等。查詢結果列表可以直觀 的顯示操作用戶名、操作時間范圍、操作項、具體操作內容和登錄地 址等相關信息。系統支持日志的導出功能。支持處理任務模塊定制,可根據實際環境彈性定義任務范圍,按天、按周、或按某一段時間段進行配置,系統將自動執行任務模板。支持時鐘同步功能,解決不同應用場景下,時間校時問題,支持 自動、手動兩種時鐘同步方式。支持服務器配置,管理員可進行增刪查改等操作,可實時查看服 務器及服務運行狀態是否在線,系統將自動統計當前處理任務的類型 數量和總數量。具備運行監測管理:實時監測各節點處理單元的運行狀況,監測 內容由CPU使用率,內存占用率,存儲使用情況以及整體性能等,以 圖表的方式進行展示。云存儲管理中心主要包括集群管理、存儲管理、日志管理、系統管理四個部分。集群管理主要包括hadoop、hbase、solr、linux等模塊;實現各模塊信息管理、狀態顯示、基礎信息展示等。存儲管理主要包括存儲空間管理、表管理、目錄結構等模塊,實 現存儲空間統一管理、分配、狀態跟蹤顯示;數據庫表名設計、查詢 以及狀

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論