年5月29日媒資檔案管理系統(tǒng)技術(shù)方案文檔僅供參考媒資檔案管理系統(tǒng)技術(shù)方案北京亞細(xì)亞智業(yè)科技有限公司10月目錄TOC\o"1-4"\h\z\u第1章 方案綜述 11.1 系統(tǒng)建設(shè)的必要性 11.2 建設(shè)內(nèi)容和目標(biāo) 21.3 業(yè)務(wù)需求分析 3第2章 系統(tǒng)總體設(shè)計(jì) 52.1 系統(tǒng)設(shè)計(jì)原則 52.2 系統(tǒng)結(jié)構(gòu)設(shè)計(jì) 62.3 數(shù)據(jù)處理流程 82.3.1 數(shù)據(jù)導(dǎo)入流程 82.3.2 數(shù)據(jù)輸出(發(fā)布)流程 102.4 本方案的優(yōu)勢 112.4.1 體系結(jié)構(gòu)靈活 112.4.2 強(qiáng)大的視音頻處理 112.4.3 能夠管理各類數(shù)據(jù)資源 112.4.4 海量數(shù)據(jù)多級存儲 122.4.5 成熟穩(wěn)定的基礎(chǔ)軟件平臺 122.4.6 軟件強(qiáng)大的跨平臺運(yùn)行能力 12第3章 系統(tǒng)功能描述 133.1 資料整理上載 133.2 視頻轉(zhuǎn)碼分析 143.3 資料編目標(biāo)引 153.3.1 編目標(biāo)引建模 153.3.2 視頻關(guān)鍵幀抽取 173.3.3 附件資料上傳 183.4 海量數(shù)據(jù)存儲 193.4.1 海量數(shù)據(jù)多級存儲體系 193.4.2 數(shù)據(jù)多級存儲的實(shí)現(xiàn) 213.5 多媒體資料查詢?yōu)g覽 253.5.1 視音頻資料檢索 253.5.2 關(guān)鍵字檢索 263.5.3 條件組合檢索 263.5.4 全文檢索 263.6 資料下載 293.7 資料安全控制 293.8 數(shù)據(jù)統(tǒng)計(jì)分析 303.8.1 設(shè)備使用情況統(tǒng)計(jì) 303.8.2 數(shù)據(jù)利用情況統(tǒng)計(jì) 313.8.3 人員工作量統(tǒng)計(jì) 31第4章 非視音頻數(shù)據(jù)的管理 32第5章 系統(tǒng)的擴(kuò)展性 33方案綜述經(jīng)過多年的發(fā)展和努力,許多企業(yè)已經(jīng)積累了大量高水平、高質(zhì)量、具有保存價(jià)值的歷史資料,其中,包括音像資料、圖片資料、文檔資料、資料等等。隨著時(shí)間的延續(xù),這些資料的保存價(jià)值和重要性也隨著突顯出來。首先,這些歷史資料需要更安全可靠的介質(zhì)保存;其次這些寶貴資料更需要合理有效的管理和調(diào)用,使它們完整有序、便于檢索、并能夠提供方便、快捷、全面的資料服務(wù),充分發(fā)揮其實(shí)用價(jià)值。當(dāng)前,信息技術(shù)的廣泛應(yīng)用,使各類資料的數(shù)字化保存管理已經(jīng)成為趨勢。數(shù)字技術(shù)在資料的生成、編輯、發(fā)布播出等業(yè)務(wù)中普遍采用,有效的提高了資料保存和發(fā)布的質(zhì)量,低成本、安全高效的海量存儲技術(shù)也為大量歷史資料的長期數(shù)字化保存與管理奠定了基礎(chǔ)。信息化在知識經(jīng)濟(jì)時(shí)代的深入,信息工作對資料的檢索和再利用提出更高的要求,編導(dǎo)在制作音像節(jié)目時(shí),要查閱庫存中同類或相似的信息以便參考和再利用;逐漸增多的行業(yè)內(nèi)部交流更需要資料共享;隨著遠(yuǎn)程寬帶網(wǎng)絡(luò)的飛速發(fā)展,用戶所擁有的豐富資源還能經(jīng)過網(wǎng)上資料交流而產(chǎn)生巨大的經(jīng)濟(jì)效益和社會效益。面對當(dāng)前企業(yè)的需求,構(gòu)建一個(gè)適當(dāng)?shù)拿劫Y檔案管理系統(tǒng)能夠合理地解決這些問題。在保障數(shù)據(jù)安全的前提下,技術(shù)方案采用了靈活多樣的低成本設(shè)計(jì)思路,使其既適用于當(dāng)前各類資料存儲管理的需要,也適用于今后企業(yè)科學(xué)發(fā)展的要求。系統(tǒng)建設(shè)的必要性1、歷史資料管理的現(xiàn)狀:數(shù)量大、價(jià)值高、格式多樣企業(yè)擁有大量數(shù)字多媒體資源,而且每年還再不斷增加。資料越來越多,種類日趨齊全,其有形價(jià)值和無形資產(chǎn)均不能以金錢去衡量。2、現(xiàn)有的管理和保存環(huán)境條件有限許多企業(yè)由于歷史原因,現(xiàn)有的管理和保存環(huán)境條件不是很理想,原有的資料查找和檢索相對困難,有些珍貴資料保存也出現(xiàn)危機(jī)。3、資料管理現(xiàn)代化的條件已具備,主要體現(xiàn)在:存儲與管理技術(shù)的進(jìn)步,資料再利用的需求,系統(tǒng)建設(shè)成本的降低等。而且數(shù)字化的文件資料能夠長時(shí)間保存,質(zhì)量不會有任何降低,因此,數(shù)字資料的存儲與管理已經(jīng)是發(fā)展的必然。4、海量存儲技術(shù)的發(fā)展,為數(shù)字資料的再次利用打下了良好的保存基礎(chǔ)。綜上所述,企事業(yè)機(jī)構(gòu)建立一個(gè)資料豐富,保存條件好,編目完備的現(xiàn)代化媒資檔案管理系統(tǒng)是具備條件且完全是必要的!建設(shè)內(nèi)容和目標(biāo)1．結(jié)合現(xiàn)有主流媒體使用的多媒體資源管理系統(tǒng)和多媒體資源現(xiàn)狀,保證系統(tǒng)開發(fā)所用技術(shù)的先進(jìn)性,為企業(yè)建立一個(gè)資料豐富、保存質(zhì)量高、使用快捷的現(xiàn)代化數(shù)字媒體資料管理系統(tǒng)的目標(biāo)。2．系統(tǒng)具備海量存儲功能(軟件系統(tǒng)支持)。根據(jù)現(xiàn)有媒體資源的容量,能夠?yàn)槠髽I(yè)建立媒資檔案管理中心,即搭建中心服務(wù)器及海量存儲設(shè)備,實(shí)現(xiàn)集中式管理和資源共享,核心服務(wù)器以及相關(guān)系統(tǒng)設(shè)備采用高端服務(wù)器集群,并實(shí)現(xiàn)核心設(shè)備間光纖高速連接。實(shí)現(xiàn)對于分散的文檔進(jìn)行集中的、進(jìn)行長期無損的數(shù)字化存儲,防止數(shù)據(jù)資料的散失。3．系統(tǒng)具備強(qiáng)大的多媒體處理能力。為了保證多媒體素材今后不同的調(diào)用方式,要實(shí)現(xiàn)常見格式的輸入輸出以及格式轉(zhuǎn)換,如一份視頻資料能夠生成兩個(gè)碼率的文件,高質(zhì)量的用來長期存儲,較低質(zhì)量的實(shí)現(xiàn)網(wǎng)絡(luò)中的在線搜索、瀏覽、發(fā)布及在線點(diǎn)播。4．系統(tǒng)具備高速的數(shù)據(jù)輸入輸出能力。媒資檔案管理系統(tǒng)要借助現(xiàn)有網(wǎng)絡(luò)環(huán)境進(jìn)行數(shù)據(jù)交換及存儲,日常數(shù)據(jù)輸入輸出的量十分大,系統(tǒng)必須提供相應(yīng)的數(shù)據(jù)接口或解決方案來適應(yīng)這種大容量、集中式的數(shù)據(jù)交換。如處理多個(gè)終端同時(shí)向中心系統(tǒng)上傳或下載數(shù)據(jù)的能力。5．系統(tǒng)的可擴(kuò)展性。隨著企業(yè)不斷發(fā)展,多媒體資料不斷豐富、容量不斷增加,系統(tǒng)必須提供一個(gè)簡便可靠的擴(kuò)展功能來滿足正常上述需要。另外,隨著使用需求的不斷變化,系統(tǒng)設(shè)計(jì)時(shí)必須靈活,系統(tǒng)管理者維護(hù)修改必須簡便。如預(yù)留更多自定義的系統(tǒng)功能供系統(tǒng)管理者選擇。6．對于各種類型的多媒體資料,統(tǒng)一格式,詳細(xì)分類,經(jīng)過一個(gè)系統(tǒng)平臺規(guī)范化管理。分配不同層面使用者不同的操作權(quán)限,保證原始資源安全可靠的長期存儲以及分級管理。如經(jīng)過編輯的資源要與原始資源分別存儲,并有一定關(guān)聯(lián)方式,能夠方便的被使用者搜索到。對于歷史數(shù)據(jù)的方便、準(zhǔn)確快速的檢索、實(shí)現(xiàn)在線瀏覽、提取編輯等。7．為了快速完成資料整理和上載準(zhǔn)備工作,根據(jù)資料容量和投資規(guī)模能夠搭建視頻采集、視頻編輯和處理、媒體資料上傳等功能的媒體工作站:8．?dāng)M定一套使用規(guī)程和管理制度,規(guī)定進(jìn)入媒資檔案庫文件的內(nèi)容、格式等標(biāo)準(zhǔn)。在完成資料存儲格式的統(tǒng)一后,進(jìn)行節(jié)目資料的編目、標(biāo)引等整理工作,做到操作簡捷、直觀,符合規(guī)范。業(yè)務(wù)需求分析許多企業(yè)的歷史資料規(guī)模大、種類多,既有視音頻、也有文檔、圖片等等,經(jīng)過對多個(gè)案例的實(shí)際分析,我們認(rèn)為,企業(yè)的媒資檔案管理系統(tǒng)要能夠滿足如下方面的業(yè)務(wù)需求:視音頻或平明媒體數(shù)據(jù)是系統(tǒng)管理的重點(diǎn)內(nèi)容視音頻資料和平明媒體資料具有時(shí)間長、格式多樣、存儲容量大、管理復(fù)雜的特點(diǎn),在整個(gè)存儲系統(tǒng)中,其數(shù)據(jù)量所占的比重也最大。因此,科學(xué)、合理、高效的管理和存儲企業(yè)大量的視音頻資料,是本方案需要解決的重點(diǎn)。本方案采用主流、先進(jìn)的數(shù)據(jù)處理技術(shù),將模擬形式的視音頻資料或紙質(zhì)的平面資料進(jìn)行數(shù)字化轉(zhuǎn)換和制作,并進(jìn)行有效管理和存儲,使大量資料能夠經(jīng)過系統(tǒng)存得好、找得著、調(diào)得出。海量數(shù)據(jù)存儲管理建成的系統(tǒng)存儲量要滿足存儲幾十TB、甚至上百TB的數(shù)據(jù)資料的能力,并隨著資料的不斷增加實(shí)現(xiàn)系統(tǒng)的無縫升級,存儲的介質(zhì)類型要以符合數(shù)字化技術(shù)潮流和保存時(shí)間長的介質(zhì)為主,重點(diǎn)要考慮到數(shù)據(jù)長期存儲的安全、高效。足夠的數(shù)據(jù)輸入輸出能力用戶在需要各類數(shù)據(jù)時(shí),系統(tǒng)應(yīng)能及時(shí)輸出所需的內(nèi)容或提供信號。對音像資料來講,應(yīng)該實(shí)現(xiàn)包括MPEG-2-I、MPEG-2-IBP、DVSD、DV25、DV50、MPEG-1、MPEG4、AVI等常見格式的輸入輸出,而且能夠?qū)崿F(xiàn)對WMV等格式的支持,實(shí)現(xiàn)網(wǎng)絡(luò)中的發(fā)布與點(diǎn)播。便捷的分布式數(shù)據(jù)上、下載系統(tǒng)除了要為企業(yè)建立媒資檔案中心外,還能夠經(jīng)過網(wǎng)絡(luò)覆蓋企業(yè)的分支機(jī)構(gòu)或企業(yè)的用戶處,使這部分用戶也能夠及時(shí)上傳和下載。因此,系統(tǒng)的軟件功能要能夠經(jīng)過網(wǎng)絡(luò),便捷的連通各部門,并將需要管理的數(shù)據(jù)及時(shí)傳輸?shù)酱鎯χ行?同時(shí),對保存在中心檔案庫中的數(shù)據(jù)資料,操作人員經(jīng)過軟件界面,也要能夠進(jìn)行便捷的檢索和瀏覽、輸出,最大限度的方便實(shí)際工作應(yīng)用?？焖俸喗莸木幠?、標(biāo)引對資料管理系統(tǒng)要求操作簡捷直觀符合規(guī)范,提供符合標(biāo)準(zhǔn)的編目標(biāo)引方法,提供良好的編目升級方式。對不同類型的數(shù)據(jù)需要提供靈活的編目、標(biāo)引建模體系,滿足不同類型數(shù)據(jù)管理的要求。易懂有效的資料檢索、瀏覽對于系統(tǒng)中保存的不同類型的數(shù)據(jù)資料,軟件要提供方便、高效的數(shù)據(jù)檢索、瀏覽能力,能夠經(jīng)過數(shù)據(jù)建模的任何條件與字段,對資料進(jìn)行檢索、查找。而且,針對不同類型的數(shù)據(jù)資料,應(yīng)該能夠按照其編目和描述方式靈活的定義和調(diào)整檢索條件,使用戶能夠在業(yè)務(wù)發(fā)生變化或增加新的描述字段時(shí),方便地調(diào)整檢索方案?？煽康南到y(tǒng)安全性能夠提供使用者權(quán)限的科學(xué)分配,提供良好的數(shù)據(jù)安全機(jī)制,能夠保障數(shù)據(jù)的通讀性,實(shí)現(xiàn)數(shù)據(jù)的長期穩(wěn)定的保存。對不同級別的操作人員,能夠靈活的控制其使用權(quán)限,能夠?qū)幠俊⒉樵兊炔煌军c(diǎn)實(shí)現(xiàn)不同權(quán)限的分配,而且對登錄系統(tǒng)的人員操作進(jìn)行全面的日志記錄。

系統(tǒng)總體設(shè)計(jì)系統(tǒng)設(shè)計(jì)原則系統(tǒng)設(shè)計(jì)原則是在滿足用戶數(shù)據(jù)資料的采集、編輯、編目標(biāo)引、存儲管理下載輸出等業(yè)務(wù)處理要求的情況下,充分考慮系統(tǒng)的可用性、穩(wěn)定性、可靠性,同時(shí)兼顧系統(tǒng)的先進(jìn)性、兼容性、可擴(kuò)展性。系統(tǒng)的功能性、適用性系統(tǒng)應(yīng)根據(jù)企業(yè)數(shù)據(jù)采集、編輯、存儲管理、下載輸出等業(yè)務(wù)處理要求進(jìn)行開發(fā),實(shí)現(xiàn)與企業(yè)實(shí)際業(yè)務(wù)工作的高度結(jié)合,切實(shí)提高工作效率。系統(tǒng)的開放性、可擴(kuò)展性采用成熟、標(biāo)準(zhǔn)的技術(shù)和產(chǎn)品,以便于將來與外系統(tǒng)的聯(lián)接和數(shù)據(jù)共享;采用模塊化設(shè)計(jì)方法,便于擴(kuò)展,以適應(yīng)未來發(fā)展需要。系統(tǒng)的先進(jìn)性系統(tǒng)應(yīng)采用先進(jìn)的視音頻編輯技術(shù)、計(jì)算機(jī)技術(shù)、網(wǎng)絡(luò)通信技術(shù)、存儲技術(shù)、內(nèi)容管理技術(shù)等等。系統(tǒng)的安全性采用各種有效的安全措施(如數(shù)據(jù)容錯(cuò)備份、網(wǎng)絡(luò)隔離技術(shù)等),確保網(wǎng)絡(luò)的安全性。系統(tǒng)的穩(wěn)定性主要表現(xiàn)在兩個(gè)方面,一是采用成熟的技術(shù)和高質(zhì)量的設(shè)備;二是對網(wǎng)絡(luò)的關(guān)鍵設(shè)備要考慮容錯(cuò)及備份措施。系統(tǒng)的可管理性系統(tǒng)應(yīng)具有很強(qiáng)的管理能力,以提高節(jié)目的制作速度和設(shè)備使用調(diào)度能力。充分考慮廠商的技術(shù)支持本方案全面基于我公司自行研發(fā)的MarsMedia數(shù)據(jù)管理軟件平臺構(gòu)建,由于管理軟件全部為我公司自行研發(fā),因此,擁有對企業(yè)集團(tuán)的最佳支持能力,從實(shí)施維護(hù)到開發(fā)升級,都能夠全面滿足用戶的要求,做到最佳的支持與維護(hù)。經(jīng)濟(jì)性本方案所有技術(shù)選型應(yīng)該堅(jiān)持性能價(jià)格比最優(yōu)的原則,同時(shí)兼顧維護(hù)服務(wù)能力和將來的擴(kuò)展能力,保護(hù)用戶現(xiàn)有的投資。綜上,媒資檔案系統(tǒng)的設(shè)計(jì)目標(biāo)是:滿足用戶需求、考慮長遠(yuǎn)利益、充分保護(hù)企業(yè)的現(xiàn)有投資。系統(tǒng)結(jié)構(gòu)設(shè)計(jì)企業(yè)的媒資檔案管理系統(tǒng)就是要利用計(jì)算機(jī)將大量數(shù)據(jù)資料整理、編目標(biāo)引、海量存儲、以便方便的檢索和再利用。對資料的編目體系要按照一個(gè)靈活、規(guī)范的方式將各類資料分門別類的存放,對其中的所有的信息,不論是文字的,還是聲音的、圖像的,都加以標(biāo)引,讓使用者從任何角度出發(fā),都能夠準(zhǔn)確、迅速地找到所需要的數(shù)字資料。對不同的資料源也能夠采用不同的編目方式,以提高編目效率,同時(shí)系統(tǒng)支持多種數(shù)據(jù)格式的歸檔存儲與管理。根據(jù)上述的業(yè)務(wù)需求分析,本方案將基于我公司成熟的MarsMedia多媒體數(shù)據(jù)管理軟件平臺來構(gòu)建整個(gè)系統(tǒng)。MarsMedia為我公司自行研發(fā)的多媒體數(shù)據(jù)管理平臺,經(jīng)過多個(gè)項(xiàng)目的長期實(shí)踐檢驗(yàn),運(yùn)行穩(wěn)定、可靠。從邏輯上講,MarsMedia涵蓋了數(shù)據(jù)內(nèi)容管理與存儲管理兩個(gè)層面,數(shù)據(jù)存儲為內(nèi)容管理提供底層的存儲支撐服務(wù),內(nèi)容管理層提供對數(shù)據(jù)資料的各類業(yè)務(wù)處理,而且,軟件最大限度的基于B/S結(jié)構(gòu),日常業(yè)務(wù)操作,包括數(shù)據(jù)編目標(biāo)引、檢索、瀏覽、系統(tǒng)管理等工作,全部基于Web界面,操作簡單易用。由于軟件系統(tǒng)全面基于網(wǎng)絡(luò),具備跨網(wǎng)段、跨路由的數(shù)據(jù)管理能力,因此完全滿足企業(yè)對總部及分支機(jī)構(gòu)廣域范圍的數(shù)據(jù)傳送與管理。經(jīng)過軟件的內(nèi)容管理層,查詢、瀏覽等應(yīng)用層用戶能夠?qū)φ麄€(gè)檔案庫進(jìn)行輸入、輸出等訪問,以進(jìn)行節(jié)目資料的再次處理與利用。因此,基于MarsMedia軟件平臺,并與相關(guān)硬件設(shè)備的密切配合,能夠?yàn)槠髽I(yè)能源建設(shè)一個(gè)科學(xué)、穩(wěn)定、靈活、高效的媒資檔案管理系統(tǒng)。本方案設(shè)計(jì)的企業(yè)媒資檔案管理系統(tǒng)物理結(jié)構(gòu)圖如下所示:上圖中,系統(tǒng)管理服務(wù)器和海量存儲設(shè)備全部架設(shè)在公司的中心檔案管理室,包括系統(tǒng)元數(shù)據(jù)服務(wù)器,是系統(tǒng)業(yè)務(wù)處理的核心,運(yùn)行元數(shù)據(jù)管理模塊,完成對象建模、編目標(biāo)引、檢索查詢、流媒體瀏覽等核心管理功能,軟件基于IE界面,任何經(jīng)過網(wǎng)絡(luò)登錄到本服務(wù)器的終端經(jīng)過授權(quán),都能夠進(jìn)行各類業(yè)務(wù)操作。數(shù)據(jù)存儲服務(wù)器運(yùn)行海量數(shù)據(jù)存儲軟件模塊,連接海量存儲設(shè)備,將入庫整理好的歷史數(shù)據(jù)進(jìn)行長期保存。根據(jù)具體的存儲策略,能夠?qū)⒅付ǖ臄?shù)據(jù)完成從磁盤陣列、磁帶庫、以及磁帶架之間的多級歸檔、恢復(fù),調(diào)用。數(shù)據(jù)存儲服務(wù)器同時(shí)運(yùn)行數(shù)據(jù)交換軟件,需要上載入庫的資料無論是中心還是遠(yuǎn)端,只要放入指定的目錄,交換軟件能夠經(jīng)過網(wǎng)絡(luò)自動監(jiān)測目標(biāo)數(shù)據(jù)的變化,將新增數(shù)據(jù)及時(shí)抓取到中心存儲設(shè)備,進(jìn)行數(shù)據(jù)的編目和入庫保存工作。經(jīng)過數(shù)據(jù)交換軟件,要上載的數(shù)據(jù)只需存入各自的指定目錄即可,都能夠自動將數(shù)據(jù)上傳到中心存儲設(shè)備。為了支持多種數(shù)據(jù)上傳手段,技術(shù)方案還提供上傳客戶端軟件,各部門用戶也能夠經(jīng)過數(shù)據(jù)上傳客戶端,將需要入庫的資料傳送到存儲中心。節(jié)目轉(zhuǎn)碼服務(wù)器運(yùn)行視音頻格式轉(zhuǎn)換軟件,完成自動將上載入庫的高質(zhì)量Mpeg-2節(jié)目向?yàn)g覽用Mpeg-4wmv節(jié)目的轉(zhuǎn)換。以及其它數(shù)字格式如:avi、DVD、Mpeg-1等資料向標(biāo)準(zhǔn)存儲格式的轉(zhuǎn)換。系統(tǒng)重建模塊運(yùn)行于重建服務(wù)器中,負(fù)責(zé)對系統(tǒng)中主數(shù)據(jù)庫、服務(wù)器操作系統(tǒng)的自動備份。經(jīng)過完全、增量、差分等專業(yè)的備份方式將數(shù)據(jù)備份到數(shù)據(jù)流磁帶中。在服務(wù)器系統(tǒng)一旦出現(xiàn)問題的情況下,能夠快速對系統(tǒng)進(jìn)行恢復(fù)。海量存儲設(shè)備采用磁盤陣列與磁帶庫相結(jié)合的多級存儲方式,按照要求,各配備容量為15TB,并經(jīng)過SAN存儲網(wǎng)絡(luò)與各服務(wù)器連接,是服務(wù)器能夠統(tǒng)一訪問中心的海量存儲資源。相關(guān)部門配備相應(yīng)的視音頻上下載工作站,運(yùn)行采集軟件,完成模擬視音頻資料向標(biāo)準(zhǔn)Mpeg-2存儲格式的采集,上載。數(shù)據(jù)處理流程方案采用的MarsMedia多媒體數(shù)據(jù)管理平臺,由元數(shù)據(jù)管理模塊(MetaServer)、視音頻轉(zhuǎn)碼模塊(FlipServer)、數(shù)據(jù)交換模塊(ExServer)、系統(tǒng)重建模塊(RebuildServer)、數(shù)據(jù)多級存儲模塊(StorageServer)等組成,配合視音頻上下載設(shè)備來完成視音頻數(shù)據(jù)的業(yè)務(wù)處理與存儲。而各類型的文檔、圖片等電子數(shù)據(jù)則直接能夠?qū)胂到y(tǒng),進(jìn)入檔案庫的管理體系中。各類多媒體數(shù)據(jù)導(dǎo)入系統(tǒng)以及從系統(tǒng)中輸出、發(fā)布的流程如下:數(shù)據(jù)導(dǎo)入流程數(shù)據(jù)導(dǎo)入指的是由數(shù)據(jù)交換軟件模塊(ExServer)主動對需要上載到系統(tǒng)中的數(shù)據(jù)進(jìn)行檢測,并將需要管理的數(shù)據(jù)進(jìn)行存儲、編目、歸檔等處理的過程。導(dǎo)入過程中,系統(tǒng)認(rèn)為需要導(dǎo)入的資料是完整的內(nèi)容資料,不再有任何對數(shù)據(jù)的再加工或再處理。具體業(yè)務(wù)流程圖如下:數(shù)據(jù)導(dǎo)入流程圖上圖流程描述的是全部的處理流程。當(dāng)交換服務(wù)器(ExServer)檢測到用戶存儲的文件有新的時(shí),就會提示是否需要遷移到本內(nèi)容管理系統(tǒng)中,如不需要則只在數(shù)據(jù)庫中作記錄;如需要遷移,則利用交換服務(wù)器按類進(jìn)行資料遷移,在遷移的同時(shí)還可進(jìn)行資料的備份、發(fā)布等功能。除此之外,交換服務(wù)器還提供在線素材的ftp服務(wù),不能經(jīng)過交換服務(wù)器與本內(nèi)容系統(tǒng)進(jìn)行直接交換的客戶端,能夠經(jīng)過ftp服務(wù),進(jìn)行素材的遷移。然后把遷移的相關(guān)內(nèi)容在數(shù)據(jù)庫中作記錄。遷移到存儲系統(tǒng)中的視頻資料,有些本身格式不適合瀏覽或碼流過大影響瀏覽效果,如需要瀏覽時(shí)則可利用轉(zhuǎn)碼服務(wù)器(FlipServer),生成預(yù)覽素材、幀圖片以及對素材做其它格式的轉(zhuǎn)換工作。如素材還需要進(jìn)行編目則可利用元數(shù)據(jù)服務(wù)器(MetaServer)提供的編目功能進(jìn)行。經(jīng)過上述三個(gè)步驟后的素材,就是用戶編輯好的能夠進(jìn)行發(fā)布或其它用途的素材。在此,能夠進(jìn)行利用存儲服務(wù)器(StorServe)對編輯好的素材進(jìn)行保存,方便用戶以后使用。在以上過程中用戶能夠根據(jù)需求,對不同的內(nèi)容資料選擇不同的處理流程。如:非視音頻素材是不需要轉(zhuǎn)碼過程的。數(shù)據(jù)輸出(發(fā)布)流程數(shù)據(jù)從系統(tǒng)向外部輸出、發(fā)布的業(yè)務(wù)流程圖如下所示:數(shù)據(jù)輸出流程圖如上圖,在用戶下載或發(fā)布素材時(shí)需要進(jìn)行數(shù)據(jù)輸出(發(fā)布)流程。主要是指在經(jīng)過元數(shù)據(jù)管理軟件(MetaServer)提供的檢索頁面檢索到素材后,將內(nèi)容資料傳送到其它系統(tǒng)的過程。具體步驟是首先用戶在元數(shù)據(jù)處理模塊根據(jù)需要檢索定位到所需的素材;然后從存儲模塊把素材遷移到當(dāng)前在線狀態(tài)(即編輯或使用狀態(tài));接著看輸出(發(fā)布)的需求,是否需要對素材進(jìn)行轉(zhuǎn)碼,若需要轉(zhuǎn)碼則調(diào)用轉(zhuǎn)碼模塊對素材轉(zhuǎn)碼,使之滿足用戶需求;最后,利用數(shù)據(jù)交換模塊把整理好的素材遷移到客戶端或是其它系統(tǒng)中。整個(gè)數(shù)據(jù)輸出(發(fā)布)流程能夠根據(jù)素材類型的不同,用戶能夠根據(jù)模板或手工來配置不同的流程,使之使用更加自動、方便。本方案的優(yōu)勢體系結(jié)構(gòu)靈活本方案構(gòu)建的企業(yè)媒資檔案管理系統(tǒng)中,用戶能夠靈活的導(dǎo)入、增加各種數(shù)據(jù)類型,如:視音頻、圖片、文檔(PDF或Word等格式)以及未來可能產(chǎn)生的全新數(shù)據(jù)資產(chǎn)類型,以適應(yīng)和支撐不斷產(chǎn)生的新媒體、新業(yè)務(wù)的需求。視頻的存儲格式采用高質(zhì)量的、國際標(biāo)準(zhǔn)的MPEG-2IBP4:2:2格式,能夠向其它各種常見視頻格式的轉(zhuǎn)換。用戶能夠靈活定義和修改原有的數(shù)據(jù)對象的標(biāo)引描述,滿足不同時(shí)期對內(nèi)容數(shù)據(jù)的不同描述需求,使數(shù)據(jù)內(nèi)容在描述上能夠與時(shí)俱進(jìn)。不同類型的數(shù)據(jù)內(nèi)容能夠使用不同的分類法描述,而且分類法能夠允許用戶自定義。針對不同類型的數(shù)據(jù)內(nèi)容,能夠按照其描述方式定義和調(diào)整檢索條件,使用戶能夠在業(yè)務(wù)發(fā)生變化或增加新的描述字段時(shí),靈活調(diào)整檢索方案。強(qiáng)大的視音頻處理能夠?qū)σ曇纛l文件自動進(jìn)行后臺MPEG-4流媒體轉(zhuǎn)換生成,關(guān)鍵幀分析、抽幀等處理,減少人為干預(yù)的工作量。視頻格式轉(zhuǎn)換應(yīng)該支持DVD、VCD、DV、AVI、WMV等常見格式與標(biāo)準(zhǔn)MPEG-2存儲格式之間的轉(zhuǎn)換。編目時(shí)要求實(shí)現(xiàn)對視音頻的逐幀編輯編目時(shí)能夠手動添加和刪除關(guān)鍵幀,并能夠?qū)﹃P(guān)鍵幀進(jìn)行描述。關(guān)鍵幀的屬性能夠自定義。數(shù)據(jù)內(nèi)容能夠添加不同的附屬文件,如:宣傳海報(bào)、相關(guān)照片、相關(guān)文檔等,附件的描述屬性要求能夠自定義。能夠管理各類數(shù)據(jù)資源本方案采用MarsMedia軟件平臺,該平臺完全是基于對象型設(shè)計(jì)的通用數(shù)據(jù)管理平臺,除專門為視音頻數(shù)據(jù)設(shè)計(jì)的處理功能外,還具備管理各類不同數(shù)據(jù)類型的能力,如:word、excel、pdf、dwg、mp3等等。經(jīng)過數(shù)據(jù)的交換導(dǎo)入,各類不同類型數(shù)據(jù)都能夠進(jìn)入系統(tǒng)的管理范圍,而且不同類型數(shù)據(jù)的建模和管理,都能夠按照各自的數(shù)據(jù)特色,分別設(shè)計(jì)其建模體系,檢索方式等,以適應(yīng)各種不同數(shù)據(jù)類型的管理需要。海量數(shù)據(jù)多級存儲本方案設(shè)計(jì)的媒資檔案管理系統(tǒng)基于成熟的MarsMedia管理平臺,支持海量數(shù)據(jù)的多級存儲體系,所謂多級存儲,是指在線磁盤陣列、近線磁帶庫、離線磁帶架相結(jié)合的數(shù)據(jù)多級存儲體系,軟件系統(tǒng)能夠按需要將所需特定數(shù)據(jù)(如:不常見的歷史資料)自動歸檔到磁帶庫中一份,以實(shí)現(xiàn)海量存儲設(shè)備的最佳性價(jià)比,同時(shí)確保磁盤陣列中數(shù)據(jù)的安全,而且存儲容量能夠無限擴(kuò)容。成熟穩(wěn)定的基礎(chǔ)軟件平臺本方案采用的MarsMedia軟件平臺是一個(gè)經(jīng)過多年實(shí)際項(xiàng)目檢驗(yàn)的成熟平臺,集成各類通用數(shù)據(jù)對象的管理能力,而且完全融合我公司媒體領(lǐng)域多年的視音頻管理經(jīng)驗(yàn),具備強(qiáng)大的視音頻處理功能,運(yùn)行穩(wěn)定、可靠。而且具備多個(gè)案例的成功實(shí)施、運(yùn)行經(jīng)驗(yàn)。因此,經(jīng)過MarsMedia,企業(yè)完全能夠?yàn)槠髽I(yè)建立一個(gè)科學(xué)、穩(wěn)定、高效的媒資檔案管理系統(tǒng)。軟件強(qiáng)大的跨平臺運(yùn)行能力MarsMedia軟件的主體模塊全部基于標(biāo)準(zhǔn)的Java架構(gòu)開發(fā),能夠適應(yīng)任意的操作系統(tǒng)和主機(jī)環(huán)境,除Windows外,還能夠方便的移植到Linux、Unix等各種不同的操作系統(tǒng)環(huán)境中。系統(tǒng)功能描述由上述的系統(tǒng)結(jié)構(gòu)設(shè)計(jì),本方案設(shè)計(jì)的企業(yè)媒資檔案管理系統(tǒng)基于我公司成熟的MarsMedia軟件平臺實(shí)現(xiàn),其功能能夠分為數(shù)據(jù)內(nèi)容管理與數(shù)據(jù)存儲管理兩個(gè)層面。具體來講,系統(tǒng)能夠具備如下方面的功能:資料整理上載、資料編目標(biāo)引、數(shù)據(jù)海量存儲、資料查詢輸出、資料安全控制、業(yè)務(wù)統(tǒng)計(jì)分析、系統(tǒng)維護(hù)、網(wǎng)絡(luò)配置、應(yīng)用定制開發(fā)等功能。具體說明如下:資料整理上載對于現(xiàn)有模擬形式的音像節(jié)目來講,需要利用數(shù)字上載工作站將節(jié)目進(jìn)行數(shù)字化處理、上載。按照音像資料處理的標(biāo)準(zhǔn),上載工作站需要采集、生成高質(zhì)量的Mpeg-2格式、8—10Mbps的數(shù)據(jù)文件,用來進(jìn)行節(jié)目資料的長期保存和二次利用。對高碼率視頻,本方案的壓縮格式采用國際標(biāo)準(zhǔn)的Mpeg-2IBP4:2:2格式,經(jīng)過各類標(biāo)準(zhǔn)的硬件或軟件都能夠進(jìn)行MPEG-2解碼,都能對檔案庫中存儲的節(jié)目資料進(jìn)行回放。根據(jù)項(xiàng)目的實(shí)際情況,需要配備上載工作站,并經(jīng)過網(wǎng)絡(luò)與中心媒資檔案室連接在一起。各部門編碼生成的Mpeg-2文件首先緩存到工作站本地的存儲目錄中,中心軟件系統(tǒng)的數(shù)據(jù)交換模塊會實(shí)時(shí)監(jiān)測各上載工作站的緩存目錄,將新壓縮生成的高質(zhì)量數(shù)字節(jié)目自動抓取到存儲中心的磁盤陣列,完成數(shù)據(jù)由采集編碼前端向存儲中心的上載。采集生成的高碼率MPEG-2節(jié)目主要用于節(jié)目資料的長期保存、下載輸出、以及再次利用等。為保障MPEG-2節(jié)目的高質(zhì)量采集,系統(tǒng)采用專業(yè)的上載編碼器配合上載軟件模塊來實(shí)現(xiàn)。能夠根據(jù)具體需要對節(jié)目選擇不同的碼率和GOP組合,充分滿足各類需求。高碼率MPEG-2動態(tài)圖像能夠?qū)崿F(xiàn)視音頻信號的高保真,滿足長期存儲和向各類不同應(yīng)用的視頻格式轉(zhuǎn)換要求,以及庫存節(jié)目進(jìn)行二次利用、制作的需要。在設(shè)計(jì)上載整理系統(tǒng)時(shí),主要注重以下幾個(gè)功能:A、采用先進(jìn)的分布式組件技術(shù),確保系統(tǒng)組件靈活性和開放性。從而建立了一個(gè)易于操作的標(biāo)準(zhǔn)和開放系統(tǒng)平臺;只需升級軟件和圖像卡就可實(shí)現(xiàn)系統(tǒng)的擴(kuò)展和升級。B、采集碼率可由用戶靈活定義。高碼流素材按照存儲機(jī)制將暫時(shí)放到上載工作站的存儲體里,經(jīng)過交換服務(wù)器將其傳送到存儲中心,進(jìn)入多級存儲的管理范圍。配合系統(tǒng)提供先進(jìn)的純軟件轉(zhuǎn)碼中心,實(shí)現(xiàn)多種不同格式間的互轉(zhuǎn),生成檢索和瀏覽所使用的低碼流Mpeg-4節(jié)目等。Mpeg-4節(jié)目將直接保存到存儲中心的在線磁盤陣列上,以備實(shí)時(shí)檢索和點(diǎn)播。具體采集步驟如下:1．建立素材模版在采集數(shù)據(jù)之前,需要做好準(zhǔn)備工作,使用人員能夠根據(jù)素材類型的不同,編制出不同類型素材的采集模版,供各種素材錄入或上傳時(shí)使用。2．采集數(shù)據(jù)在數(shù)據(jù)采集過程中,主要是首先由數(shù)據(jù)交換模塊檢測用戶系統(tǒng)固定的目錄內(nèi)是否有新的文件,如有新的文件且需要上傳保存時(shí),則由交換服務(wù)器進(jìn)行數(shù)據(jù)遷移。如若需要其它效果的視頻素材,則可經(jīng)過轉(zhuǎn)碼模塊進(jìn)行轉(zhuǎn)碼。如還需編目,則可利用元數(shù)據(jù)處理模塊進(jìn)行編目。等需要進(jìn)行的所有操作都完成后即可把素材數(shù)據(jù)進(jìn)行保存完成采集過程。對于其它文檔、數(shù)據(jù)來講,主要經(jīng)過統(tǒng)一的資料處理,經(jīng)過數(shù)據(jù)交換軟件,將其從不同來源收集到存儲中心,以備作詳細(xì)編目和統(tǒng)一存儲。視頻轉(zhuǎn)碼分析上傳到存儲中心的視音頻資料,根據(jù)需要能夠?qū)⒉杉玫臉?biāo)準(zhǔn)Mpeg-2文件轉(zhuǎn)碼成瀏覽碼率的Mpeg-4wmv等格式,經(jīng)過瀏覽碼率資料進(jìn)行節(jié)目的編目、在線瀏覽等,完成對視音頻資料的全面管理。視頻轉(zhuǎn)碼模塊,還能夠方便的實(shí)現(xiàn)標(biāo)準(zhǔn)存儲格式與各類不同用途的視頻格式進(jìn)行相互轉(zhuǎn)換,以滿足庫存音像資料的各種不同類型應(yīng)用,如:在線網(wǎng)絡(luò)瀏覽、視頻二次編緝、DVD刻錄、錄像帶輸出,甚至播出等等。資料編目標(biāo)引編目標(biāo)引建模經(jīng)過軟件系統(tǒng)的元數(shù)據(jù)管理中心,用戶能夠靈活、方便的對上載到系統(tǒng)中的各類數(shù)據(jù)資源進(jìn)行編目和標(biāo)引,而且對各類數(shù)據(jù)資料都能夠適用,不論其是視音頻、文檔、或是其它數(shù)據(jù),都能夠靈活制定對應(yīng)的編目體系,對不同類型數(shù)據(jù)進(jìn)行描述建模,來適應(yīng)不同類型數(shù)據(jù)對象的管理要求。由于視頻或音頻文件是一種不能由一個(gè)具體數(shù)值來描述的非結(jié)構(gòu)化數(shù)據(jù),如何把這些非結(jié)構(gòu)化的數(shù)據(jù)轉(zhuǎn)換成能夠用數(shù)據(jù)庫來記錄的結(jié)構(gòu)化數(shù)據(jù),是這個(gè)模塊所要完成的主要功能。此模塊主要具有音像資料類別判定、標(biāo)引錄入、審閱等功能,視頻內(nèi)容的描述是經(jīng)過元數(shù)據(jù)來完成的,經(jīng)過輸入屬性值來完成由非結(jié)構(gòu)到結(jié)構(gòu)化的轉(zhuǎn)換。由于不同的數(shù)字資料分類的方法不同,應(yīng)用時(shí)所要檢索和查詢的屬性也會不同。例如:新聞?lì)惖馁Y料比較重視時(shí)間性、比較短小,而影視類的資料比較重視題材和故事內(nèi)容,系統(tǒng)將對不同類型的音像資料定義不同的元數(shù)據(jù)集,來描述它們。任何音像資料在做標(biāo)引之前都必須判斷其所屬類型,選定后系統(tǒng)將自動調(diào)用其相應(yīng)的元數(shù)據(jù),生成標(biāo)引界面供標(biāo)引工作人員錄入。最后,經(jīng)過審閱的功能,檢查標(biāo)引信息的正確性和完整性,審查經(jīng)過的標(biāo)引將進(jìn)入數(shù)據(jù)庫進(jìn)行保存。系統(tǒng)對不同數(shù)據(jù)對象的描述建模體系中應(yīng)用了先進(jìn)的XML數(shù)據(jù)交換技術(shù),從而使各類元數(shù)據(jù)以及對象模型的定義與增添變得十分靈活。在沒有應(yīng)用XML的系統(tǒng)中元數(shù)據(jù)一旦被定義就很難再做修改,隨著業(yè)務(wù)的發(fā)展,某一天可能因業(yè)務(wù)或應(yīng)用需要增加一種對視頻描述的新屬性,在原先的系統(tǒng)中就需要開發(fā)人員重新修改數(shù)據(jù)庫表結(jié)構(gòu)、重新編寫代碼,這樣就會帶來很多復(fù)雜的開發(fā)工作。由于系統(tǒng)利用了XML技術(shù),工作人員應(yīng)用系統(tǒng)提供的對象建模功能,能夠隨時(shí)增加任何一項(xiàng)新的屬性即新的元數(shù)據(jù),如果對系統(tǒng)中定義的元數(shù)據(jù)不滿意或希望增加新條目,能夠完全由操作人員自己完成修改工作,當(dāng)標(biāo)引端調(diào)用這一類型的元數(shù)據(jù)時(shí),系統(tǒng)將生成新的標(biāo)引窗口,而且在索引端會提供新的索引條目,從而使元數(shù)據(jù)的維護(hù)成為可能,降低了系統(tǒng)對開發(fā)商的依賴程度。編目系統(tǒng)是否完善直接關(guān)系到編導(dǎo)在查詢資料時(shí)的準(zhǔn)確性和方便性,為了提高該系統(tǒng)的使用效率,系統(tǒng)的編目體系著重設(shè)計(jì)如下功能:A.各類數(shù)據(jù)資料的編目體系和屬性均可在系統(tǒng)初始化建模時(shí)自定義,很好的滿足了企業(yè)的不同要求,并增強(qiáng)了系統(tǒng)的擴(kuò)展性。包括分類類型的定義,各類型屬性的加刪,以及各種屬性的顯示方式,次序,是否多值,是否學(xué)習(xí)等各種個(gè)性設(shè)置。B.設(shè)置多種分類方法:系統(tǒng)完全支持頒布的編目標(biāo)準(zhǔn)。而且能夠根據(jù)企業(yè)的情況,定制新的分類方法和編目屬性,具有很強(qiáng)的針對性和擴(kuò)展性,分類方法的自由添加為以后新的分類方式的出現(xiàn)提供了方便。還能夠使一種資源能夠歸屬到多種分類類型中,方便了用戶的使用和查找。系統(tǒng)能夠方便的導(dǎo)入音像資料建模的國家標(biāo)準(zhǔn),或者自定義的建模標(biāo)準(zhǔn)。國家標(biāo)準(zhǔn)的節(jié)目描述模版如下:C.數(shù)據(jù)檔案詳細(xì)編目:在各類數(shù)據(jù)的建模體系基礎(chǔ)上,為不同的數(shù)據(jù)資源添加詳細(xì)編目信息,使不同的資料資料能進(jìn)行分類標(biāo)引,并提供分類輔助標(biāo)引手段,提供分類標(biāo)引的維護(hù)功能,能夠利用主題詞,關(guān)鍵字等對資料標(biāo)引,在主題詞確立的完成后引入安全權(quán)限機(jī)制,保證用戶標(biāo)引信息的安全性。同時(shí)也提供主題詞的維護(hù)功能軟件對已經(jīng)上載到中心檔案庫中的視音頻資料進(jìn)行編目、標(biāo)引的界面示意圖如下:視頻關(guān)鍵幀抽取關(guān)鍵幀檢索是視音頻資料在網(wǎng)絡(luò)上進(jìn)行檢索、發(fā)布必不可少的功能,有了關(guān)鍵幀抽取功能,節(jié)目檢索如同文字檢索一樣,用戶訪問時(shí),能夠檢索到關(guān)于視頻的標(biāo)題、描述,以及影片中的各個(gè)關(guān)鍵畫面,而且能夠從某個(gè)關(guān)鍵幀開始,瀏覽、觀看一個(gè)節(jié)目的不同部分。節(jié)目轉(zhuǎn)碼完成后,軟件根據(jù)要求,自動完成相應(yīng)關(guān)鍵幀的自動抽取,包括定時(shí)抽取、根據(jù)視頻內(nèi)容的自動轉(zhuǎn)場抽取等,當(dāng)視頻畫面的內(nèi)容的變化量大于用戶預(yù)先設(shè)定值時(shí),自動提取畫面首幀,加入視頻編目描述信息系統(tǒng)內(nèi)的元數(shù)據(jù)庫,提高系統(tǒng)的編目工作效率,這些視頻元數(shù)據(jù)實(shí)時(shí)進(jìn)入元數(shù)據(jù)服務(wù)器的數(shù)據(jù)庫,在管理系統(tǒng)中就如同管理其它圖像文件一樣進(jìn)行視頻管理和發(fā)布,當(dāng)然,因?yàn)橐曨l包括更多的附加索引信息,因此能夠在系統(tǒng)中定義更多的其它元數(shù)據(jù)。軟件界面如下:附件資料上傳對于每個(gè)視音頻或者其它數(shù)字文件,除了對主文件進(jìn)行編目描述外,還能夠上傳與其相關(guān)的各類附件資料,如:音視頻的文本稿件、宣傳圖片、附屬其它信息等。經(jīng)過附件資料的關(guān)聯(lián)和上傳,在檢索到需要的數(shù)據(jù)后,還能夠?yàn)g覽、查看相關(guān)的附件信息。軟件界面如下:海量數(shù)據(jù)存儲海量數(shù)據(jù)多級存儲體系根據(jù)企業(yè)的業(yè)務(wù)需求,系統(tǒng)需要存儲的數(shù)據(jù)量非常大,一期要求達(dá)到30TB的數(shù)據(jù)存儲容量。如此海量的數(shù)據(jù)存儲規(guī)模,必然需要科學(xué)、穩(wěn)定的海量存儲管理軟件的支持。本方案采用的MarsMedia軟件平臺,具備強(qiáng)大的數(shù)據(jù)多級存儲模塊,支持強(qiáng)大、靈活的海量數(shù)據(jù)多級存儲體系。所謂多級存儲,是指在線磁盤陣列、近線磁帶庫、離線磁帶架相結(jié)合的數(shù)據(jù)多級存儲體系,能夠安裝業(yè)務(wù)需要將不同類別的數(shù)據(jù)合理的分配到不同的存儲設(shè)備中,來達(dá)到存儲資源的最佳利用與性價(jià)比最優(yōu),而且充分滿足了長期存儲情況下的數(shù)據(jù)安全需要。根據(jù)系統(tǒng)的業(yè)務(wù)需求,技術(shù)方案對多級存儲系統(tǒng)采用了基于SAN存儲網(wǎng)絡(luò)的設(shè)計(jì),配備磁盤陣列、磁帶庫兩級存儲設(shè)備,經(jīng)過光纖交換機(jī)與存儲服務(wù)器構(gòu)成SAN存儲網(wǎng)絡(luò)。SAN網(wǎng)絡(luò)基于先進(jìn)的2Gbps光纖標(biāo)準(zhǔn),數(shù)據(jù)傳輸快速,高效。在這種多級存儲體系中,磁盤陣列用來保存常見的、適用頻率高的數(shù)據(jù)資料,能夠被使用者快速調(diào)用,數(shù)據(jù)流磁帶庫由于其存儲量大、安全可靠的特性,用來長時(shí)間保存不經(jīng)常使用的歷史資料,經(jīng)常使用的重要資料,也能夠歸檔到帶庫,作為安全可靠的數(shù)據(jù)后備,以備在線盤陣一旦故障的情況下,還能夠確保數(shù)據(jù)的安全使用。在線存儲在線存儲采用磁盤陣列來實(shí)現(xiàn),采集整理的各類數(shù)據(jù),如MPEG2和MPEG4節(jié)目,先存儲在本地視頻編碼器硬盤上,由數(shù)據(jù)交換服務(wù)器統(tǒng)一調(diào)度上載到SAN磁盤陣列,進(jìn)入海量存儲系統(tǒng)的管理范圍。近線存儲近線系統(tǒng)用來保存更大規(guī)模的數(shù)據(jù)資料,系統(tǒng)重點(diǎn)考慮到了近線系統(tǒng)的與在線系統(tǒng)的數(shù)據(jù)交換性能,數(shù)據(jù)的存儲可靠性,系統(tǒng)運(yùn)行成本,以及系統(tǒng)的擴(kuò)展性(容量與性能)。近線存儲設(shè)備采用自動化的數(shù)據(jù)流磁帶庫設(shè)備,在存儲管理軟件模塊的指揮下,自動完成數(shù)據(jù)的多級遷移和調(diào)用。存儲管理軟件模塊具備強(qiáng)大的海量數(shù)據(jù)多級存儲能力,除了在線磁盤陣列存儲外,還能夠控制磁帶庫等近線存儲設(shè)備,實(shí)現(xiàn)海量數(shù)據(jù)長時(shí)間的多級存儲與調(diào)度。離線存儲隨著時(shí)間的推移,系統(tǒng)數(shù)據(jù)量會不斷增大,考慮到更長時(shí)間歷史數(shù)據(jù)的保存,存儲管理軟件支持?jǐn)?shù)據(jù)流磁帶出庫的離線保存方式,離線存儲在數(shù)據(jù)量超出近線帶庫保存容量的時(shí)候來使用。離線存儲用來保存更大規(guī)模的數(shù)據(jù)資料。在線存儲和近線存儲的數(shù)據(jù)都是系統(tǒng)自動實(shí)現(xiàn),能夠?qū)崿F(xiàn)實(shí)時(shí)數(shù)據(jù)交換和存儲容量之間的自動平衡,對實(shí)際業(yè)務(wù)中的數(shù)據(jù),其訪問量隨著時(shí)間的推移而急速衰減。對訪問量較小的數(shù)據(jù)完全能夠?qū)⑵鋸膸熘腥〕?進(jìn)行離線存儲,為新數(shù)據(jù)、訪問量大的數(shù)據(jù)騰出寶貴的存儲空間。離線的數(shù)據(jù)流磁帶只要上架保存就可,用條形碼作為標(biāo)識,按類、時(shí)間等方式管理存放。存儲網(wǎng)絡(luò)存儲網(wǎng)絡(luò)既能夠支持傳統(tǒng)的以太網(wǎng)方式,由能夠支持SAN結(jié)構(gòu),使大容量數(shù)據(jù)采用FC傳輸?？紤]到系統(tǒng)的大數(shù)據(jù)量以及高效吞吐的要求,方案采用SAN結(jié)構(gòu)的存儲網(wǎng)絡(luò),將磁盤陣列、磁帶庫和相關(guān)服務(wù)器統(tǒng)一連接到SAN網(wǎng)絡(luò)中,完成數(shù)據(jù)的高速訪問和調(diào)度。數(shù)據(jù)多級存儲的實(shí)現(xiàn)存儲任務(wù)管理總體的存儲任務(wù)管理調(diào)度由”存儲控制”軟件模塊完成,”存儲管理”接受業(yè)務(wù)層數(shù)據(jù)遷移調(diào)度的指令,并把完成數(shù)據(jù)在不同存儲設(shè)備間搬移的工作分配給”數(shù)據(jù)遷移”模塊。根據(jù)數(shù)據(jù)遷移量的情況,系統(tǒng)中能夠配備多個(gè)”數(shù)據(jù)遷移”模塊,分別由不同的主機(jī)完成數(shù)據(jù)遷移的任務(wù),彼此互相協(xié)同的并行工作,這樣,中心存儲區(qū)的數(shù)據(jù)搬移、調(diào)度等處理工作能夠并發(fā)進(jìn)行,從而保證存儲系統(tǒng)高效、穩(wěn)定的運(yùn)行。其主要功能包括:接受應(yīng)用層管理與檢索指令、任務(wù)調(diào)度、下達(dá)數(shù)據(jù)搬移指令、反饋提示信息、系統(tǒng)設(shè)置及管理等等。數(shù)據(jù)歸檔與恢復(fù)”數(shù)據(jù)遷移”模塊接受存儲遷移的調(diào)度命令,主要完成把數(shù)據(jù)從原始存儲位置遷移到目標(biāo)位置的工作,安裝有”數(shù)據(jù)遷移模塊”的數(shù)據(jù)搬移工作站經(jīng)過光纖通道分別連接磁盤陣列、磁帶庫?！睌?shù)據(jù)遷移模塊”負(fù)責(zé)整個(gè)歸檔/恢復(fù)過程的執(zhí)行,完成磁盤陣列、磁帶庫之間的數(shù)據(jù)歸檔與恢復(fù)。磁帶庫機(jī)械手控制”機(jī)械手控制”軟件模塊負(fù)責(zé)操作控制磁帶庫的機(jī)械手,它配合相應(yīng)的歸檔/恢復(fù)命令,來操作機(jī)械手抓取磁帶并放入相應(yīng)的驅(qū)動器,從而與數(shù)據(jù)遷移器配合來完成具體的歸檔/恢復(fù)任務(wù)。由于本模塊經(jīng)過底層的硬件控制,直接驅(qū)動帶庫機(jī)械手,因此系統(tǒng)中同一時(shí)刻只能有一個(gè)存在。離線磁帶管理”存儲服務(wù)器”還有一個(gè)附加功能,就是對離線的出庫磁帶進(jìn)行管理。本功能允許當(dāng)數(shù)據(jù)量達(dá)到一定程度,超出在線和近線存儲容量的時(shí)候,不經(jīng)常使用的磁帶能夠自動或按照事先制訂的策略從磁帶庫中吐出來,管理員能夠人工將其保存到離線的帶架上,可是這盤磁帶的離線保存位置以及其數(shù)據(jù)對象信息已經(jīng)被軟件系統(tǒng)所記錄,即軟件同樣能夠方便的管理離線的數(shù)據(jù)。例如,如果應(yīng)用層的信息管理、檢索界面請求恢復(fù)一個(gè)位于已經(jīng)被取出的磁帶上的信息時(shí),相應(yīng)的磁帶狀態(tài)將變成”請求”,并要求操作員把這盤磁帶重新裝入帶庫,以備系統(tǒng)進(jìn)行數(shù)據(jù)恢復(fù)和調(diào)用。本模塊允許將那些不常見的數(shù)據(jù)磁帶放到帶架上,以空出近線磁帶庫的存儲空間,來保存其它更為常見的數(shù)據(jù)?？墒?它的重要特征就是軟件還在管理已經(jīng)被移出磁帶庫的離線數(shù)據(jù)磁帶。在軟件中,用戶能夠方便的查詢、瀏覽離線帶架上的各種磁帶狀態(tài)與數(shù)據(jù)信息。存儲系統(tǒng)管理”存儲控制”模塊同時(shí)完成軟件底層各種相關(guān)參數(shù)及用戶組設(shè)置,主要包括如下方面:遷移設(shè)置、磁帶庫設(shè)置、對象路徑監(jiān)視、對象的設(shè)計(jì)組成、策略條件監(jiān)視、數(shù)據(jù)分類設(shè)置、存儲位置設(shè)置、以及冗余糾錯(cuò)設(shè)置等等。存儲系統(tǒng)維護(hù)負(fù)責(zé)系統(tǒng)的整體維護(hù),顯示各種維護(hù)信息,主要包括:能夠隨時(shí)方便的獲得整個(gè)系統(tǒng)的相關(guān)介質(zhì)運(yùn)行狀態(tài)、磁帶驅(qū)動器的使用狀態(tài)、所有數(shù)據(jù)流磁帶的使用狀態(tài)、以及所有歸檔對象的存儲狀態(tài)等等。管理員能夠根據(jù)相關(guān)信息來進(jìn)行系統(tǒng)各方面的維護(hù)。磁帶冗余糾錯(cuò)數(shù)據(jù)流磁帶經(jīng)過一段時(shí)間后可能會出現(xiàn)問題,從而導(dǎo)致所保存的數(shù)據(jù)損壞,為解決這個(gè)問題,MarsMedia的”存儲服務(wù)器”軟件提供數(shù)據(jù)流磁帶的冗余糾錯(cuò)功能?！比哂嗄K”采用了專利技術(shù)的可移動存儲介質(zhì)冗余數(shù)據(jù)保護(hù)方法,其原理示意圖如下:校驗(yàn)磁帶的生成數(shù)據(jù)磁帶的恢復(fù)由上圖,冗余校驗(yàn)機(jī)制允許將帶庫中的n盤磁帶(n值能夠根據(jù)實(shí)際需要自由設(shè)定)進(jìn)行按位異或計(jì)算,即先將兩盤磁帶進(jìn)行按位異或,得出的結(jié)果再與下一盤磁帶進(jìn)行按位異或計(jì)算,以次類推,將n盤磁帶全部進(jìn)行按位異或計(jì)算后生成的冗余數(shù)據(jù)作為備份容錯(cuò),寫入單獨(dú)的容錯(cuò)磁帶。這樣,當(dāng)這n盤磁帶中有任何一盤磁帶損壞的話,軟件能夠根據(jù)冗余數(shù)據(jù)和其它的n-1盤磁帶同樣經(jīng)過按位異或算法,將損壞的磁帶恢復(fù)。而且如果這n盤磁帶中有不止一盤磁帶存在部分損壞,甚至每盤磁帶都有不同程度的損壞,只要每盤磁帶損壞的位置不互相重疊的話,依然能夠經(jīng)過冗余數(shù)據(jù)對每盤磁帶損壞部分進(jìn)行恢復(fù)。本方案建議采用Raid冗余糾錯(cuò)方式。數(shù)據(jù)多級存儲管理軟件模塊的操作界面示意如下:A、特定數(shù)據(jù)按照具體存儲策略由磁盤陣列向磁帶庫的歸檔保存:B、數(shù)據(jù)流磁帶庫設(shè)備管理:C:帶庫中數(shù)據(jù)流磁帶介質(zhì)的管理多媒體資料查詢?yōu)g覽經(jīng)過軟件系統(tǒng),對檔案庫中各類數(shù)據(jù)資料進(jìn)行查詢?yōu)g覽,是對數(shù)據(jù)建模與編目結(jié)果的調(diào)用。系統(tǒng)的數(shù)據(jù)檢索完全基于標(biāo)準(zhǔn)的Web界面,用戶經(jīng)過網(wǎng)絡(luò)能夠連接到中心元數(shù)據(jù)服務(wù)器的任何電腦,都能夠在授權(quán)的情況下,方便的查詢自己需要的任何信息。軟件支持多種復(fù)合式條件的數(shù)據(jù)檢索方式,用戶按照自己相應(yīng)的操作權(quán)限,能夠按照各種主題詞、關(guān)鍵字等要素對資料庫中的數(shù)據(jù)進(jìn)行檢索查詢,并返回結(jié)果,大大提高了檢索效率和檢索結(jié)果的精確度。在對資料進(jìn)行了多媒體采集和編目的基礎(chǔ)上,查詢終端不但能夠使用Web界面方便的查詢文檔、圖片類信息,還能夠經(jīng)過網(wǎng)絡(luò)瀏覽到低碼流的音像資料。終端用戶對數(shù)據(jù)資料檢索查詢的具體功能如下:視音頻資料檢索系統(tǒng)支持Web方式的節(jié)目檢索查詢,內(nèi)部的用戶經(jīng)過Web端瀏覽檢索視音頻資料需要相應(yīng)的企業(yè)門戶軟件的支持。Web檢索門戶系統(tǒng)支持用戶經(jīng)過以下多種方式進(jìn)行視音頻資料的查詢、瀏覽。關(guān)鍵字檢索經(jīng)過關(guān)鍵字進(jìn)行的查詢功能主要提供模糊查詢和精確查詢功能。模糊查詢又稱為智能查詢。當(dāng)用戶輸入一個(gè)關(guān)鍵詞時(shí),搜索引擎不但反饋包括了關(guān)鍵詞的資料信息,同時(shí)也發(fā)來與關(guān)鍵詞意義相近的內(nèi)容。比如,當(dāng)查找”查詢”一詞時(shí),模糊查詢會反饋來包涵了”查詢”、”查找”、”查一查”、”尋找”、”搜索”等內(nèi)容的資料;反饋資料的排列,一般是完全符合關(guān)鍵詞的在最前邊,其次是相近的。

模糊查詢沒有特殊的使用方法,只要在文字框中輸入關(guān)鍵詞即可。而在對英文資料的查詢中,還能夠使用通配符星號(*)和問號(?),使關(guān)鍵詞更為模糊。模糊查詢往往會反饋來大量不需要的信息,如果想精確地只查某一個(gè)關(guān)鍵詞,則能夠使用精確查詢功能。精確查詢是在文字框中輸入關(guān)鍵詞,例如:”中華人民共和國”。條件組合檢索這一功能允許用戶輸入多個(gè)關(guān)鍵詞,而且,各關(guān)鍵詞之間的關(guān)系能夠是”和”、”或”、”非”(and、or、not)的邏輯關(guān)系,再經(jīng)過各種匹配算法,反饋檢索結(jié)果。全文檢索經(jīng)過輸入內(nèi)容中所包含的文字,經(jīng)過全文檢索將反饋所有具有這些文字描述的多媒體資料信息。當(dāng)然,多媒體資料的全文檢索功能需要第三方全文檢索引擎的支持,考慮到商業(yè)化的全文檢索引擎比較昂貴,使用也比較復(fù)雜,本方案能夠集成一個(gè)開源而且免費(fèi)的全文檢索引擎,來達(dá)到數(shù)據(jù)高效的全文檢索。經(jīng)過以上多種方式的檢索功能,系統(tǒng)將把符合條件的反饋資料按照樹形的方式顯示在界面中,用戶能夠單擊所需資料的標(biāo)題進(jìn)入。用戶能夠根據(jù)權(quán)限的大小查看資料的文字信息、圖片信息、MPEG-4文件,以及下載高質(zhì)量的MPEG-2文件。在內(nèi)容檢索、瀏覽功能模塊中,還具備資料的映射功能,經(jīng)過標(biāo)記報(bào)道中出現(xiàn)的人物、地點(diǎn)和事件,使內(nèi)容更有價(jià)值。經(jīng)過映射,資料將與其它相關(guān)的資料鏈接。查看一段資料的同時(shí),能夠?yàn)g覽出與本資料相關(guān)的其它資料內(nèi)容,大大提高了資料信息的利用率。經(jīng)過各類檢索條件能夠方便的查詢到需要的各類資料信息,軟件界面如下:點(diǎn)擊任何查找到的多媒體資料,都能夠?yàn)g覽、查看其所有屬性、描述信息,并能夠在線播放Mpeg-4格式的wmv流媒體視頻。軟件界面如下圖所示:除了能夠?yàn)g覽查詢到的節(jié)目資料的基本元數(shù)據(jù)以外,還能夠查看與本資料相關(guān)聯(lián)的附件信息,如:與本資料附屬的圖片、文稿、背景介紹等關(guān)聯(lián)信息。資料下載編者經(jīng)過檢索后得到所需的資料內(nèi)容,在瀏覽其屬性,及觀看其低碼率視頻,確認(rèn)檢索數(shù)據(jù)即為所要資料后,能夠?qū)ζ溥M(jìn)行下載,輸出。經(jīng)過上、下載工作站或者任何與中心元數(shù)據(jù)服務(wù)器相連的終端電腦登錄軟件系統(tǒng),在得到授權(quán)后,都能夠?qū)z索到的高質(zhì)量節(jié)目數(shù)據(jù)進(jìn)行下載,高質(zhì)量存儲格式采用標(biāo)準(zhǔn)的Mpeg-2IBP格式,因此任何支持標(biāo)準(zhǔn)硬件或軟件Mpeg-2解碼的終端都能夠?qū)Ω哔|(zhì)量節(jié)目進(jìn)行回放。同時(shí),經(jīng)過下載工作站的視頻輸出,還能夠向錄像機(jī)等設(shè)備輸出模擬信號,以便將節(jié)目轉(zhuǎn)錄到錄像帶等介質(zhì)?；蛘呓?jīng)過軟件轉(zhuǎn)碼,轉(zhuǎn)換成標(biāo)準(zhǔn)的DVD數(shù)據(jù),刻錄到DVD光盤。這樣,從資料庫中輸出的數(shù)據(jù)介質(zhì)能夠是磁帶、DVD光盤、VCD光盤、視音頻數(shù)據(jù)文件和打印的資料等,形式多種多樣,滿足各類不同的應(yīng)用需要。對于需要再編輯的節(jié)目,還能夠按照要求利用系統(tǒng)的轉(zhuǎn)碼模塊把存儲中心IBP幀的MPEG2格式節(jié)目轉(zhuǎn)換成用戶所需要的非線編I幀格式或?qū)Ｓ酶袷降奈募?與非線編系統(tǒng)對接,實(shí)現(xiàn)節(jié)目的二次制作利用。對于非視音頻數(shù)據(jù),不涉及多樣的格式轉(zhuǎn)換,能夠直接從存儲中心將數(shù)據(jù)下載到檢索客戶端,利用對應(yīng)的編輯軟件,如:word、excel、acrobatreader、autocad等,對下載的數(shù)據(jù)進(jìn)行查看,編輯。編輯完成過的數(shù)據(jù),還能夠重新錄入回?cái)?shù)據(jù)檔案庫系統(tǒng)中。資料安全控制作為企業(yè)的集中式多媒體數(shù)據(jù)管理系統(tǒng),系統(tǒng)安全尤為重要。安全性能夠從兩方面來考慮:用戶操作安全與數(shù)據(jù)安全。技術(shù)方案充分考慮到了系統(tǒng)的操作權(quán)限與數(shù)據(jù)安全管理。從用戶操作使用的權(quán)限控制來講:系統(tǒng)能夠限制用戶的數(shù)據(jù)上載、訪問權(quán)限和針對不同級別的存儲資料做出不同的瀏覽權(quán)限的設(shè)定,最大限度的保護(hù)資料資源的安全。具體如下:A.系統(tǒng)管理的權(quán)限:整個(gè)系統(tǒng)是一個(gè)軟硬件結(jié)合的系統(tǒng),它要涉及不同的管理比如網(wǎng)絡(luò)管理,數(shù)據(jù)庫管理,這些人員在對自己職責(zé)行使權(quán)限時(shí)應(yīng)該是經(jīng)過系統(tǒng)授權(quán),所有的操作是在整個(gè)系統(tǒng)的安全控制范圍之內(nèi)。B.登錄系統(tǒng)操作的權(quán)限:為了保證系統(tǒng)在安全有效的條件下進(jìn)行運(yùn)行,避免人為的干擾或破壞,在系統(tǒng)中實(shí)現(xiàn)了嚴(yán)格的權(quán)限管理,任何人員都只能根據(jù)事先規(guī)劃好的人員職能及權(quán)限分配計(jì)劃來使用媒資檔案系統(tǒng),不能越權(quán)操作,從而有效保證素材使用的安全、有序、有效;保證節(jié)目制作按規(guī)范有序的進(jìn)行。同時(shí)對每個(gè)操作使用人員以及網(wǎng)絡(luò)管理人員的每一次操作,系統(tǒng)都有詳細(xì)的日志記錄,系統(tǒng)管理員能夠進(jìn)行人員、部門、欄目的增加刪除;建立人員的登錄口令;用機(jī)使用計(jì)劃的