多媒體技術與應用2023/7/27多媒體技術與應用[1]第一章多媒體技術概述本章主要內(nèi)容：1.1多媒體的基本概念

1.2多媒體技術的發(fā)展與應用

1.3多媒體技術研究的主要內(nèi)容

1.4多媒體技術的研究熱點

1.5多媒體技術的發(fā)展趨勢

2023/7/27多媒體技術與應用[1]本章重點與學習目標了解多媒體的基本概念了解多媒體技術的定義、特性、產(chǎn)生與發(fā)展過程掌握多媒體技術研究的主要內(nèi)容理解并掌握多媒體技術的研究熱點了解多媒體技術的發(fā)展趨勢2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.1媒體與多媒體

媒體一詞源于英文Medium，是指人們用于傳播和表示各種信息的手段。媒體包括兩個方面的含義：一方面是指存儲信息的實體，如磁盤、光盤、磁帶等，稱為媒質(zhì)；另一方面是指傳遞信息的載體，如數(shù)字、文字、聲音、圖像等，稱為媒介。2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念

按照國際電信聯(lián)盟(ITU)的定義，媒體通常分為以下5類。

感覺媒體:感覺媒體包括人類的語言、音樂和自然界的各種聲音、活動圖像、圖形、曲線、動畫及文本等。表示媒體:表示媒體包括各種語音編碼、音樂編碼、圖像編碼、文本編碼、活動圖像編碼和靜止圖像編碼等。

顯示媒體:顯示媒體有輸入顯示媒體和輸出顯示媒體兩種。存儲媒體:存儲媒體有軟盤、硬盤、U盤、光盤、磁帶等。傳輸媒體:傳輸媒體有電話線、雙絞線、同軸電纜、光纖、無線電和紅外線等。

1.1.1媒體與多媒體

2023/7/27多媒體技術與應用[1]多媒體技術就是計算機綜合處理聲、文、圖像多種媒體信息的技術。多媒體計算機(MultimediaPersonalComputer，MPC)是指具有多媒體功能、符合多媒體計算機規(guī)范的計算機。1.1多媒體的基本概念1.1.2多媒體技術與多媒體計算機2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.3多媒體技術的特性1.集成性2.多維性

3.交互性

4.數(shù)字化

2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.4多媒體的關鍵技術1.視頻、音頻等媒體壓縮/解壓縮技術編碼理論研究已有40多年的歷史，技術已日趨成熟，在研究和選用編碼時，主要有兩個問題：一是該編碼方法能用計算機軟件或集成電路芯片快速實現(xiàn)；二是一定要符合壓縮/解壓縮編碼的國際標準。2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.4多媒體的關鍵技術2.多媒體專用芯片技術多媒體計算機的專用芯片可分為兩類：一類是固定功能的芯片；另一類是可編程數(shù)字信號處理器DSP芯片。除專用處理器芯片外，多媒體系統(tǒng)還需要其他集成電路芯片支持，如數(shù)/模(D/A)和模/數(shù)(A/D)轉(zhuǎn)換器，音頻、視頻芯片，彩色空間變換器及時鐘信號產(chǎn)生器等。2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.4多媒體的關鍵技術3.媒體輸入/輸出技術媒體輸入/輸出技術包括媒體變換技術、識別技術、媒體理解技術和綜合技術。

2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.4多媒體的關鍵技術4.多媒體存儲設備與技術

多媒體的音頻、視頻、圖像等信息雖經(jīng)過壓縮處理，但仍需相當大的存儲空間。只有大容量只讀光盤存儲器CD-ROM問世后，才真正解決了多媒體信息的存儲空間問題。

2023/7/27多媒體技術與應用[1]1.1多媒體的基本概念1.1.4多媒體的關鍵技術5.多媒體系統(tǒng)軟件技術多媒體系統(tǒng)軟件技術主要包括多媒體操作系統(tǒng)、多媒體編輯系統(tǒng)、多媒體數(shù)據(jù)庫管理技術、多媒體信息的混合與重疊技術等。2023/7/27多媒體技術與應用[1]1.2多媒體技術的發(fā)展與應用1.2.1多媒體技術的發(fā)展過程

1.啟蒙發(fā)展階段在多媒體技術的發(fā)展過程中，1984年Apple公司推出的Macintosh被認為是多媒體計算機的開始。Macintosh使用Bitmap(位圖)和Icon(圖標)作為用戶界面。在此基礎上，Apple公司又于1987年使用了HyperCard(超級卡)，使Macintosh成為當時極為流行的多媒體計算機，直到今日，Macintosh在多媒體計算機界仍占有很重要的地位。2023/7/27多媒體技術與應用[1]1.2多媒體技術的發(fā)展與應用1.2.1多媒體技術的發(fā)展過程2.標準化階段1990年11月，MPC成為多媒體技術的國際標準。1991年，第六屆國際多媒體技術和CD-ROM大會宣布了CD-ROMXA標準，是對原有CD-ROM標準在音頻方面的擴充。1993年發(fā)布的二級MPC標準包括全活動的視頻圖像，使用16位的音頻信號采樣。隨后，多媒體的數(shù)據(jù)壓縮標準也相繼制定。靜態(tài)圖像壓縮標準(JointPhotographicExpertsGroup，JPEG)成為ISO/IEC的10918號標準。1994年11月，動態(tài)視頻壓縮標準(MotionPictureExpertsGroup，MPEG)-1成為國際標準。。1995年7月，MPEG-2成為國際標準。1999年初，MPEG-4成為國際標準。2023/7/27多媒體技術與應用[1]1.2多媒體技術的發(fā)展與應用1.2.1多媒體技術的發(fā)展過程3.蓬勃發(fā)展階段1997年1月，美國Intel公司推出了具有MMX技術的奔騰處理器(PentiumProcessorwithMMX)，使它成為多媒體計算機的一個標準。AC-97杜比數(shù)字環(huán)繞音響的推出。電視機頂盒(Set-TopBox)、DVD、視頻電話(VideoPhone)、視頻會議(VideoConference)等觀念的興起。MPEG壓縮標準得到了推廣和應用。2023/7/27多媒體技術與應用[1]1.2多媒體技術的發(fā)展與應用1.2.2多媒體技術的應用領域1.教育與培訓3.多媒體電子出版物

5.多媒體聲光藝術品的創(chuàng)作

4.多媒體通信2.桌面出版物(DesktopPublishing)與辦公自動化2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.1多媒體技術的基礎數(shù)據(jù)壓縮

多媒體信息的數(shù)字化2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.1多媒體技術的基礎多媒體信息的數(shù)字化1.文字

在計算機中，西文可直接通過鍵盤輸入，在計算機內(nèi)部由ASCII碼表示。漢字不能直接通過鍵盤輸入。要使用鍵盤輸入漢字，就必須考慮相應的輸入編碼方法、漢字在計算機內(nèi)部的內(nèi)碼表示方法、漢字的輸出編碼方法。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.1多媒體技術的基礎多媒體信息的數(shù)字化2.數(shù)字音頻數(shù)字音頻是指用一系列數(shù)字表示的音頻信號，是對聲音波形的表示。MIDI是樂器數(shù)字接口(MusicalInstrumentDigitalInterface)的英文縮寫。MIDI信息實際上是一段音樂的描述，當MIDI信息通過一個音樂或聲音合成器進行播放時，該合成器對一系列的MIDI信息進行解釋，然后產(chǎn)生相應的一段音樂或聲音。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.1多媒體技術的基礎多媒體信息的數(shù)字化3.圖形與圖像在幾何學中，幾何元素通常用矢量表示，所以圖形也稱為矢量圖形。矢量圖形是以一組指令集合來表示的，在顯示圖形時，需要相應的軟件讀取和解釋這些指令，將其轉(zhuǎn)換為屏幕上所顯示的形狀和顏色。圖像是一個矩陣，其元素代表空間中的一個點，稱之為像素，每個像素的顏色和亮度用二進制數(shù)來表示，這種圖像也稱為位圖。

2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.1多媒體技術的基礎數(shù)據(jù)壓縮評價一種數(shù)據(jù)壓縮技術的性能好壞主要有3個關鍵的指標：壓縮比、圖像質(zhì)量、壓縮和解壓縮的速度。除此之外，還要考慮壓縮算法所需要的軟件和硬件。第一個指標是壓縮比，壓縮性能常常用壓縮比來定義，也就是壓縮過程中輸入數(shù)據(jù)量和輸出數(shù)據(jù)量之比，希望壓縮比盡量大。

第二個指標是圖像質(zhì)量，這與壓縮的類型有關。

第三個指標是壓縮和解壓縮的速度，希望壓縮和解壓縮速度要快。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.2多媒體數(shù)據(jù)壓縮技術1.壓縮編碼的歷史1948年，Oliver提出PCM(脈沖碼調(diào)制編碼)。1952年，Huffman提出根據(jù)字符出現(xiàn)的概率來構造平均長度最短的異字頭碼字，有時稱為最佳編碼。1977年，Lempel和Ziv提出基于字典的編碼。20世紀80年代初，第一代壓縮編碼已成熟，并進入實用階段。20世紀80年代中期，開始了第二代壓縮編碼的研究。1989年，制成數(shù)據(jù)壓縮集成電路。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.2多媒體數(shù)據(jù)壓縮技術2.數(shù)據(jù)壓縮方法根據(jù)解碼后數(shù)據(jù)與原始數(shù)據(jù)是否完全一致，目前的壓縮編碼方法可以分為兩類：一類是冗余壓縮法，也稱為無損壓縮法或熵編碼；另一類是熵壓縮法，也稱有損壓縮法。有損壓縮法壓縮了熵，會減少信息量。熵定義為平均信息量，損失的信息是不可再恢復的。這種壓縮法是不可逆的，但冗余壓縮是可逆的。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.2多媒體數(shù)據(jù)壓縮技術3.通用壓縮編碼標準(1)

H.261：由CCITT(國際電報電話咨詢委員會)通過的用于音頻、視頻服務的視頻編碼解碼器，它的全稱為“p×64Kbit/s視聽業(yè)務的視頻編解碼器”。(2)

JPEG：全稱是JointPhotograghicExpertsGroup(聯(lián)合照片專家組)，是一種基于DCT的靜止圖像壓縮和解壓縮算法。(3)

MPEG：是MovingPicturesExpertsGroup的英文縮寫，是目前所采用的最有效的計算機視頻影像、聲音數(shù)據(jù)壓縮標準。(4)

DVI：DVI是DigitalVisualInterface(數(shù)字視頻交互)的縮寫，是一個非常重要的數(shù)字視頻新標準。

2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.3多媒體數(shù)據(jù)管理技術

1.文件系統(tǒng)管理方式為了方便用戶瀏覽多媒體數(shù)據(jù)，出現(xiàn)了很多的圖形、圖像瀏覽工具軟件。文件系統(tǒng)方式存儲簡單，當多媒體數(shù)據(jù)較少時，瀏覽查詢還能接受，但演播的數(shù)據(jù)格式受到限制，最主要的是當多媒體數(shù)據(jù)的數(shù)量和種類相當多時，查詢和演播就不方便了。所以，文件系統(tǒng)方式一般只適用于小的項目管理或較特殊的數(shù)據(jù)對象，所表示的對象及相互之間的邏輯關系比較簡單，如管理單一媒體信息，像圖片、動畫等。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.3多媒體數(shù)據(jù)管理技術2.擴充關系數(shù)據(jù)庫的方式用關系數(shù)據(jù)庫存儲多媒體資料的方法一般有以下3種。(1)用專用字段存放多媒體文件。(2)多媒體數(shù)據(jù)分段存放在不同的字段中，播放時再重新構建。(3)文件系統(tǒng)與數(shù)據(jù)庫相結(jié)合，多媒體數(shù)據(jù)以文件系統(tǒng)存放，即若關系中元組的某個屬性是非格式化數(shù)據(jù)，則以存放非格式化數(shù)據(jù)的媒體類型、應用程序名、媒體屬性、關鍵詞等代替，這是一種比較簡單的實現(xiàn)方式。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.3多媒體數(shù)據(jù)管理技術3.面向?qū)ο髷?shù)據(jù)庫的方式面向?qū)ο蟮姆椒ㄗ钸m合于描述復雜對象，通過引入封裝、繼承、對象、類等概念，可以有效地描述各種對象及其內(nèi)部結(jié)構和聯(lián)系。面向?qū)ο蟮臄?shù)據(jù)庫方法是將面向?qū)ο蟪绦虻脑O計語言與數(shù)據(jù)庫技術有機地結(jié)合起來，是開發(fā)的多媒體數(shù)據(jù)庫系統(tǒng)的主要方向。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.4多媒體通信與分布應用技術多媒體通信是通過現(xiàn)有的各種通信網(wǎng)來傳輸、轉(zhuǎn)存和接收多媒體信息的通信方式，其關鍵技術是多媒體信息的高效傳輸和交互處理。多媒體通信系統(tǒng)是多媒體計算機技術與通信技術相結(jié)合的產(chǎn)物，可以提供一種滿足應用需要的多媒體數(shù)據(jù)端到端交付和產(chǎn)生機制。分布式多媒體系統(tǒng)是多媒體信息處理系統(tǒng)與多媒體通信系統(tǒng)的有機結(jié)合，分布式系統(tǒng)的設計問題和多媒體系統(tǒng)的設計問題在很大程度上是互補的。例如，分布式調(diào)度研究主要集中在負載均衡和負載共享上，而多媒體系統(tǒng)則更多地考慮實時調(diào)度和服務質(zhì)量的保證。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.5多媒體網(wǎng)絡技術多媒體網(wǎng)絡是一個端到端的、能夠提供多性能服務的網(wǎng)絡，它由多媒體終端、多媒體接入網(wǎng)絡、多媒體傳輸骨干網(wǎng)絡及能夠滿足多媒體網(wǎng)絡化應用的網(wǎng)絡軟件等4個部分組成。多媒體網(wǎng)絡典型的應用有：交互式遠程教學、遠程醫(yī)療、交互式視頻服務。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.6多媒體應用系統(tǒng)開發(fā)多媒體應用系統(tǒng)的特點：(1)多媒體應用系統(tǒng)的開發(fā)環(huán)境復雜。(2)所涉及的數(shù)據(jù)類型繁多。(3)系統(tǒng)要求具有良好的交互性。(4)開發(fā)過程需要各種技術人才。2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.6多媒體應用系統(tǒng)開發(fā)

多媒體應用系統(tǒng)的人員組成：(1)項目經(jīng)理(2)多媒體設計師(3)寫作專家(4)視頻專家(5)音頻專家(6)多媒體程序員2023/7/27多媒體技術與應用[1]1.3多媒體技術研究的主要內(nèi)容1.3.6多媒體應用系統(tǒng)開發(fā)多媒體應用系統(tǒng)的開發(fā)過程：

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.1多媒體數(shù)據(jù)編碼1.媒體壓縮編碼JPEG、MPEG-1、H.261等已為人們所熟識，并且形成了國際標準，但關于壓縮技術的研究卻一直沒有停止，人們在算法及實現(xiàn)技術上仍在做大量的研究，以期獲得更高的質(zhì)量和壓縮比，并且在實現(xiàn)上更加簡單和便宜。小波(Wavelt)和分形算法已成為重點研究方向并已取得一定的成果，層次化矢量量化(HierachiaclVectorQuantization，HVQ)壓縮方法也有一定的研究。其他方法(如基于模型的特征編碼、基于自適應網(wǎng)格圖像序列的編碼、超低比較率的編碼等)也都為多媒體信息編碼的研究注入了新的活力。國際標準的擴展型(如MPEG-2、MPEG-4等)開始針對原先存在的某些局限(如適應存儲不適應傳輸、適應低質(zhì)量而不能滿足廣播級質(zhì)量要求等)進行了改進，也引了人們的注意。

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.1多媒體數(shù)據(jù)編碼2.媒體譯碼的軟件化因為現(xiàn)有的大多數(shù)視頻編譯器都是用硬件實現(xiàn)的，雖然速度很快，但價格比較昂貴。作為編碼的一個很重要的趨勢就是研究基于純軟件的實時譯碼方式。純軟件的譯碼方式可以使得一般的用戶不用特殊設備就可以得到較高水平的媒體表現(xiàn)，尤其是視頻的服務。這種方式要求編碼方法應具有較高的非對稱性，而且應能夠應付通信及表現(xiàn)對實時性的要求。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.1多媒體數(shù)據(jù)編碼3.合成與同步多種媒體的合成可以使得一些原來并不存在的場景產(chǎn)生出來，如虛擬會議影像、超現(xiàn)實的影片制作等，尤其是電影的制作，使得特技變得容易，對布景和道具的破壞損失降低，使影片制作成本大大下降。同步與合成是相輔相成的，同步更多地應用于實時媒體之間的表現(xiàn)方面。自動同步、自動特征匹配同步、同步的形式化描述的研究在表現(xiàn)和分布化方面考慮得較多。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.2多媒體數(shù)據(jù)安全數(shù)字水印技術就是一種有效的方法。與人們熟知的紙幣防偽水印的道理一樣，數(shù)字水印方法通過在數(shù)碼圖像中嵌入人眼無法感知的認證標志，即脆弱水印，然后通過檢測水印是否被破壞來達到驗證圖像完整性的目的。被稱為脆弱水印的認證標志，在圖像作品經(jīng)過修改后，甚至最輕微的修改，都會變得無效。數(shù)字水印的基礎研究主要集中在魯棒水印算法、水印容量等方面。數(shù)字水印技術的提出就是為了解決信息化道路上的障礙問題，是多媒體信息安全保障的有力技術手段。如何將這些算法結(jié)合到具體的應用體系中，取得一定的安全保障，成為當前研究的熱點問題。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.3人機交互技術

1.多媒體用戶界面多媒體技術被認為是在智能用戶界面和自然交互技術取得突破之前的一種過渡技術。在多媒體用戶界面出現(xiàn)之前，用戶界面已經(jīng)經(jīng)過了從文本向圖形的過渡，此時用戶界面中只有兩種媒體：文本和圖形(圖像)，都是靜態(tài)的媒體。多媒體技術引入了動畫、音頻、視頻等動態(tài)媒體，特別是引入了音頻媒體，從而大大豐富了計算機表現(xiàn)信息的形式，拓寬了計算機輸出的帶寬，提高了用戶接收信息的效率。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.3人機交互技術

2.多通道用戶界面多媒體用戶界面大大豐富了計算機信息的表現(xiàn)形式，使用戶可以交替或同時利用多個感覺通道。20世紀80年代后期以來，多通道用戶界面(MultimodalUserInterface)成為人機交互技術研究的嶄新領域，在國際上受到高度重視。多通道用戶界面的研究正是為了消除當前圖形用戶界面WIMP/GUI、多媒體用戶界面通信帶寬不平衡的瓶頸，綜合采用視線、語音、手勢等新的交互通道、設備和交互技術，使用戶利用多個通道以自然、并行、協(xié)作的方式進行人機對話，通過整合來自多個通道的精確的和不精確的輸入來捕捉用戶的交互意圖，提高人機交互的自然性和高效性。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.3人機交互技術

2.多通道用戶界面多通道用戶界面目前開展的研究課題有以下幾方面：(1)文字和語音識別輸入以及語音合成技術。(2)基于人體生物特征的多模態(tài)身份驗證技術。(3)虛擬秘書或播音員。

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.3人機交互技術

3.虛擬現(xiàn)實技術虛擬現(xiàn)實(VirtualReality，VR)是多媒體技術的最高境界，也是當今計算機科學中最尖端的課題，是計算機硬件技術、軟件技術、傳感技術、人工智能及心理學等技術的綜合。它利用數(shù)字媒體系統(tǒng)生成一個具有逼真的視覺、聽覺、觸覺及嗅覺的模擬現(xiàn)實環(huán)境，受眾可以用人的自然技能對這一虛擬的現(xiàn)實進行交互體驗，仿佛在真實現(xiàn)實中的體驗一樣。

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.3人機交互技術

4.普適計算環(huán)境普適計算(PervasiveComputing)的思想是由Xerox的首席執(zhí)行官MarkWeiser于1991年提出的，被認為是一種能包含各種設備(計算機、汽車、娛樂設備和信息設備等)的計算模式。在普適計算時代，計算機主要不是以單獨的計算設備的形態(tài)出現(xiàn)，而是采用將嵌入式處理器、存儲器、通信模塊和傳感器集成在一起，以信息設備(InformationAppliances)的形式出現(xiàn)。從20世紀90年代后期開始，普適計算受到廣泛關注，在國際上已發(fā)展成為一個研究熱點。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.4多媒體數(shù)據(jù)管理

1.多媒體數(shù)據(jù)庫根據(jù)多媒體數(shù)據(jù)的特點，多媒體數(shù)據(jù)庫除要求處理結(jié)構化的數(shù)據(jù)外，還要求處理大量非結(jié)構化數(shù)據(jù)。多媒體數(shù)據(jù)的體系結(jié)構更趨向于分布、合作的方式，所以客戶/服務器是一種很適合的結(jié)構形式。多媒體數(shù)據(jù)庫的數(shù)據(jù)模型采用面向?qū)ο蟮姆椒ǎ欣诜庋b不同媒體之間的差異，有利于數(shù)據(jù)庫的操作和操縱；多媒體的用戶接口需要協(xié)助用戶表達他們的查詢請求，并把這些請求轉(zhuǎn)變?yōu)橄到y(tǒng)的動作。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.4多媒體數(shù)據(jù)管理

2.基于內(nèi)容的檢索基于內(nèi)容(Content-Based)的檢索就是從媒體數(shù)據(jù)中提取出特定的信息線索，然后根據(jù)這些線索從大量存儲在數(shù)據(jù)庫中的媒體中進行查找，檢索出具有相似特征的媒體數(shù)據(jù)。基于內(nèi)容的檢索技術一般用于多媒體數(shù)據(jù)庫系統(tǒng)中，如指紋數(shù)據(jù)庫系統(tǒng)、頭像數(shù)據(jù)庫系統(tǒng)或其他應用系統(tǒng)。從基于內(nèi)容檢索的角度出發(fā)，系統(tǒng)由組織媒體輸入的插入子系統(tǒng)，對媒體作特征提取的媒體處理子系統(tǒng)，存儲插入時獲得的特征和相應媒體數(shù)據(jù)的數(shù)據(jù)庫，以及支持對該媒體的查詢子系統(tǒng)組成，同時需要相應的知識輔助支持特定領域的內(nèi)容處理。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.4多媒體數(shù)據(jù)管理

3.超文本和超媒體超文本可以簡單地定義為收集、存儲和瀏覽離散信息，以及建立和表示信息之間關系的技術。一般把已組成網(wǎng)的信息稱為超文本，而把對其進行管理使用的系統(tǒng)稱為超文本系統(tǒng)。隨著多媒體技術的發(fā)展，超文本中的媒體信息除了文字以外，還可以是聲音、圖形、圖像、視頻等多媒體信息，從而引入了“超媒體”這一概念，超媒體=多媒體+超文本。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.4多媒體數(shù)據(jù)管理

4.帶有時間和空間感的多媒體信息結(jié)構一般的信息管理只是一類信息的組合或挑選，但多媒體信息都可以向用戶提供有時間感和空間感的信息，這是一般的信息系統(tǒng)所做不到的。用這種技術可以建立一座博物館，所有的景物如同真實的一樣，用戶可以自由地在其中漫步和觀察，也可以通過某個操作跨越時空去與古人(如作者)對話，或參考有關資料。這種形式并非虛擬現(xiàn)實中的場景，而是由離散的信息組織起來的全景化虛擬世界數(shù)據(jù)庫(VirtualWorldDatabase)，有人稱之為三維全景圖，也有人稱之為半現(xiàn)實。時間感、空間感也可以給用戶帶來身臨其境的感覺，完整性和沉浸性是其主要特性，基于內(nèi)容的空間超媒體技術是主要支撐技術之一。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.5網(wǎng)絡多媒體多媒體通信對網(wǎng)絡環(huán)境要求較高，這些要求必然涉及一些關鍵性的網(wǎng)絡性能參數(shù)，它們是網(wǎng)絡的傳輸速率、吞吐量、差錯率及傳輸延遲等。在這些性能參數(shù)中，除了傳輸速率對多媒體信息產(chǎn)生重要影響外，其他參數(shù)對評價網(wǎng)絡當前運行狀況和多媒體通信質(zhì)量也很重要。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.5網(wǎng)絡多媒體1.

QoSQoS(QualityofService，服務質(zhì)量)是指網(wǎng)絡提供更高優(yōu)先服務的一種能力，包括專用帶寬、抖動控制和延遲(用于實時和交互式流量情形)、丟包率的改進以及不同WAN、LAN

和

MAN

技術下的指定網(wǎng)絡流量等，同時確保為每種流量提供的優(yōu)先權不會阻礙其他流量的進程。基于策略(Policy)的QoS管理技術是近年來提出的一種智能化的網(wǎng)絡管理方法，其目的在于提高網(wǎng)絡管理系統(tǒng)的自動化、智能化和集成化能力，也是對現(xiàn)有網(wǎng)絡管理系統(tǒng)的進一步擴充。該技術已引起業(yè)界的關注，一些網(wǎng)絡設備廠商，如Cisco、3COM、Nortel以及Cabletrom等公司都在積極開發(fā)策略管理技術。

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.5網(wǎng)絡多媒體2.組播組播是指在網(wǎng)絡中將數(shù)據(jù)包以盡力傳送(best-effort)的方式發(fā)送到網(wǎng)絡中的某個確定結(jié)點子集，以實現(xiàn)網(wǎng)絡中點到多點的高效數(shù)據(jù)傳送。組播從1988年提出到現(xiàn)在已經(jīng)經(jīng)歷了20年的發(fā)展，許多國際組織對組播的技術研究和業(yè)務開展進行了大量的工作。盡管目前端到端的全球組播業(yè)務還未大規(guī)模地開展起來，但是具備組播能力的網(wǎng)絡數(shù)目正在增加。一些主要的ISP(網(wǎng)絡服務提供商)已運行域間組播路由協(xié)議進行組播路由的交換，形成組播對等體。組播技術涵蓋了從地址方案、成員管理、路由和安全等各個方面，其中，組播地址的分配方式、域間組播路由以及組播安全等仍是研究的熱點。2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.5網(wǎng)絡多媒體3.

CSCWCSCW是指計算機支持的協(xié)同工作，也稱為計算機支持的合作工作(ComputerSupportedCollaborativeWork)，可以定義為：在基于計算機支持的共享環(huán)境中，一個群體協(xié)同工作去完成某一項共同的任務。CSCW(協(xié)同工作)是一個跨學科的、新興的研究領域，它發(fā)展的腳步受多方面的影響，但最直接、最關鍵的因素是計算機技術。

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.5網(wǎng)絡多媒體4.實時傳輸控制流媒體是指在Internet/Intranet中使用流式傳輸技術的連續(xù)媒體，流媒體實現(xiàn)的關鍵技術就是流式傳輸。實現(xiàn)流式傳輸有兩種方法：實時流式傳輸(RealtimeStreaming)和順序流式傳輸(ProgressiveStreaming)。一般來說，如果視頻為實時廣播，或使用流式傳輸媒體服務器，或應用如RTSP的實時協(xié)議，即為實時流式傳輸。

2023/7/27多媒體技術與應用[1]1.4多媒體技術的研究熱點1.4.5網(wǎng)絡多媒體

5.自適應傳輸不同媒體的特征是不同的。對實時多媒體進行傳輸，如視頻和音頻，延時要求小，但允許一些錯誤。另外，如Web接入和下載文件，需要可靠性，允許一定的延時。目前，許多流媒體服務屬于非實時多媒體傳輸，這就要求流媒體服務器具有一定的機制來適應網(wǎng)絡狀況和用戶設備。實時自適應網(wǎng)絡帶寬的流媒體傳送技術利用了自適應控制、模糊控制、反饋與前饋控制等先進控制技術，是一項可大幅提高流媒體寬帶傳送過程中關鍵服務質(zhì)量瓶頸的技術。