資源描述:
《多媒體信息處理技術音頻處理技術》由會員上傳分享,免費在線閱讀,更多相關內(nèi)容在行業(yè)資料-天天文庫。
1、1、媒體和多媒體媒體(Media)是人與人之間實現(xiàn)信息交流的中介,簡單地說,就是信息的載體,也稱為媒介。多媒體就是多重媒體的意思,可以理解為直接作用于人感官的文字、圖形、圖像、動畫、聲音和視頻等各種媒體的統(tǒng)稱,即多種信息載體的表現(xiàn)形式和傳遞方式。其實在傳播學中,使用媒價來表示傳遞信息的手段、方式或載體,用媒體來表示傳播活動的組織、機構或人員,但人們在計算機中已經(jīng)約定俗成的使用多媒體來表示信息的手段、方式或載體,比如視頻,音頻等。2、多媒體的特點:(1)集成性能夠?qū)π畔⑦M行多通道統(tǒng)一獲取、存儲、組織與合成。(2)控制性多媒體技
2、術是以計算機為中心,綜合處理和控制多媒體信息,并按人的要求以多種媒體形式表現(xiàn)出來,同時作用于人的多種感官。(3)交互性交互性是多媒體應用有別于傳統(tǒng)信息交流媒體的主要特點之一。傳統(tǒng)信息交流媒體只能單向地、被動地傳播信息,而多媒體技術則可以實現(xiàn)人對信息的主動選擇和控制。(4)非線性多媒體技術的非線性特點將改變?nèi)藗儌鹘y(tǒng)循序性的讀寫模式。以往人們讀寫方式大都采用章、節(jié)、頁的框架,循序漸進地獲取知識,而多媒體技術將借助超文本鏈接(HyperTextLink)或其他方法,把內(nèi)容以一種更靈活、更具變化的方式呈現(xiàn)給讀者。(5)實時性當用戶給
3、出操作命令時,相應的多媒體信息都能夠得到實時控制。(6)信息使用的方便性用戶可以按照自己的需要、興趣、任務要求、偏愛和認知特點來使用信息,任取圖、文、聲等信息表現(xiàn)形式。(7)信息結構的動態(tài)性“多媒體是一部永遠讀不完的書”,用戶可以按照自己的目的和認知特征重新組織信息,增加、刪除或修改節(jié)點,重新建立鏈。3、多媒體系統(tǒng)的組成多媒體硬件系統(tǒng)、多媒體操作系統(tǒng)、媒體處理系統(tǒng)工具和用戶應用軟件。(1)多媒體硬件系統(tǒng):包括計算機硬件、聲音/視頻處理器、多種媒體輸入/輸出設備及信號轉換裝置、通信傳輸設備及接口裝置等。其中,最重要的是根據(jù)多媒
4、體技術標準而研制生成的多媒體信息處理芯片和板卡、光盤驅(qū)動器等。(2)多媒體操作系統(tǒng):或稱為多媒體核心系統(tǒng)(Multimediakernelsystem),具有實時任務調(diào)度、多媒體數(shù)據(jù)轉換和同步控制對多媒體設備的驅(qū)動和控制,以及圖形用戶界面管理等。(3)媒體處理系統(tǒng)工具:或稱為多媒體系統(tǒng)開發(fā)工具軟件,是多媒體系統(tǒng)重要組成部分。(4)用戶應用軟件:根據(jù)多媒體系統(tǒng)終端用戶要求而定制的應用軟件或面向某一領域的用戶應用軟件系統(tǒng),它是面向大規(guī)模用戶的系統(tǒng)產(chǎn)品。4、多媒體計算機具有多媒體信息處理能力的計算機,早期的計算機一般只支持文字和數(shù)
5、字,信息的交流方式比較單一?,F(xiàn)在的計算機包括PC機都已經(jīng)具備了多媒體信息的處理能力。5、媒體播放器在WEB中的應用由于聲音點播和影視點播應用還沒有完全直接集成到現(xiàn)在的Web瀏覽器中,所以需要一個單獨的應用程序來幫助,通常我們使用媒體播放器(Mediaplayer)來播放聲音和影視。典型的媒體播放器要執(zhí)行好幾個功能,包括解壓縮、消除抖動、錯誤糾正和用戶播放等功能。現(xiàn)在可以使用像插件這種技術把媒體播放器的用戶接口放在Web客戶機的用戶界面上,瀏覽器在當前Web頁面上保留屏幕空間,并且由媒體播放器來管理。目前,大多數(shù)客戶機使用如下
6、幾種方法來讀取聲音和影視文件:(1)通過Web瀏覽器把聲音/影視從Web服務器傳送給媒體播放器;(2)直接把聲音/影視從Web服務器傳送給媒體播放器;(3)直接把聲音/影視從多媒體流放服務器傳送給媒體播放器;在這個過程中,媒體播放器的主要功能表現(xiàn)在如下四個方面:(1)解壓縮:幾乎所有的聲音和電視圖象都是經(jīng)過壓縮之后存放在存儲器中的,因此無論播放來自于存儲器或者來自網(wǎng)絡上的聲音和影視都要解壓縮。(2)去抖動:由于到達接收端的每個聲音信息包和電視圖象信息包的時延不是一個固定的數(shù)值,如果不加任何措施就原原本本地把數(shù)據(jù)送到媒體播放器
7、播放,聽起來就會有抖動的感覺,甚至對聲音和電視圖象所表達的信息無法理解。在媒體播放器中,限制這種抖動的簡單方法是使用緩存技術,就是把聲音或者電視圖象數(shù)據(jù)先存放在緩沖存儲器中,經(jīng)過一段延時之后再播放。(3)錯誤處理:由于在因特網(wǎng)上往往會出現(xiàn)讓人不能接收的交通擁擠,信息包中的部分信息在傳輸過程中就可能會丟失。如果連續(xù)丟失的信息包太多,用戶接收的聲音和圖象質(zhì)量就不能容忍。采取的辦法往往是重傳。(4)用戶可控制的接口:這是用戶直接控制媒體播放器播放媒體的實際接口。媒體播放器為用戶提供的控制功能通常包括聲音的音量大小、暫停/重新開始和
8、跳轉等等。1、聲音的物理特征聲音一般可能通過連續(xù)的波形來表示,波形的最大位移也就是振幅反映音量(音高、響度或強度)。波形中連續(xù)兩個波峰或波谷之間的時間距離稱為周期,周期的倒數(shù)稱為頻率。頻率用Hz表示,用來反映聲音的音調(diào)。另外,由于不同材質(zhì),不同的環(huán)境,所產(chǎn)生的聲音所伴隨的泛音也不同,所以也