在多媒體的通信中其同步是服務質量衡量的標準,因此多媒體在通信中實現同步受到了學術領域的熱切關注。本文主要論述了多媒體的同步通信,分析其音視頻在同步時存在的問題,主要是對時延抖動的影響。在研究該問題中也比較了語音優先的復用模型、FIFO模型在同步問題上的性能,有利于更好的選用通信協議,實現對數據的可靠性傳輸指標。
【關鍵詞】多媒體 通信 音視頻 同步 問題 探討
當今通信網絡都采用了TCP、IP兼存的協議,提升了數據在傳輸過程中的可靠性能。然而,多媒體在通信的業務方面需及時處理音視頻的相關數據,以確保通信服務的質量。由于諸多原因都會致使通信出現延遲和抖動等,嚴重影響了音視頻播放的質量。因此,多媒體在傳輸數據時對同步誤差的有效控制十分重要。只有音視頻數據在通信中實現了同步的控制,能夠為該通信網絡減少傳輸誤差的負擔,進而在該基礎上提升通信網絡服務的總質量。
1 多媒體同步通信的概述
該通信在廣義上其媒體對象主要包含了內容、時間及空間的關系,實現同步也是針對時間而言,尤其是在多媒體的通信之中,在時間上同步的實現是基于系統中多個媒體間的時間關系,實現同步的主要目的為了向用戶實時播放多媒體的相關信息。在分布式的多媒體有關系統中,存在著多個信源或信宿及其信道。其中一個信源及信宿的系統屬于“點到點”通信。它對同步的基本要求主要是功能,故涉及的問題也是流內、流間的同步。
2 研究基于H.323多媒體通信的音視頻同步的問題
2.1 媒體間音視頻的同步
2.1.1 媒體的復用框架
不同媒體的數據對網絡承載有著差異性的要求,其音頻、視頻數據就對實時性有較高要求,因而網絡的傳送機制必須具備較好的實時性。然而,數據、控制信息還要求網絡必須提供具有可靠性的傳送性能,對其實時性的性能無高要求。在H.323的系統之中形成了RTP分組,使用不可靠的UDP傳輸協議實現了傳送,有效抑制了通信的延時問題。但要想得到可靠性的的數據傳輸,就需應用TCP協議。在多媒體的通信中要求該關系必須具備準確性,否則時間抖動會對視頻、音頻的傳輸造成破壞播映,進而影響了各分組的通信質量。
2.1.2 語音優先的復用模型
此模型允許目前正執行傳輸任務的分組繼續傳輸高級分組,若設置一致的模型條件和參數,研究其平均時延W。針對語音隊列而言,對其進行分組前其視頻分組的數要設為0。根據Wi=Ri+Ni 整理得出
,可知該視頻分組“平均時延”定大于語音分組“平均時延”。同時和FFIO模型進行對比,語音的優先模型中語音分組“平均時延”小于FIFO模型。其視頻分組“平均時延”大于FFIO模型。此外,由于音視頻分組“平均時延”具有不等性,故兩者排隊的時延產生的偏移不能為O,因此此模型在實現同步時性能較弱。
2.2 媒體內音視頻的同步
2.2.1 音頻流、視頻流的特性
在語音特性中最關鍵的參數是分組幀數,增加幀數能降低其網絡分組的成本。語音會出現時延的同步問題,不利于通信實現語音服務。由于語音分組屬于UDP單元,故需有UDP頭結合IP分組。一個完整的視頻幀可由幾個段組成,但音頻幀就不需分段組成。視頻分段會令其分組在短時間之內突發“多個”視頻的分組。該突發狀況可能會令視頻分組產生時延及抖動,通過設置不同視頻分段的長度對該分組產生時延、抖動進行分析,且研究其產生的具體影響。
2.2.2 MFS對音頻時延抖動的影響
音視頻分組在通信使用中會影響其發送數據的同步時間,致使語音分組也產生了時延、抖動。通過設置不用的模擬參數,如:256B、512B、768B分段長度,分析語音分組的“視頻字節數”特性。當MFS在256B和512B之時,均值和標準差在大小上無明顯差異,當MFS在768B之時,兩項參數就明顯的減小了。因此,通過表1可知,MFS減小時其音頻性能很難得到提升,相反會增大其音頻在同步中的時延及抖動。
2.2.3 MFS對視頻時延抖動的影響
通過分析推算發送的時延、到達的間隔所產生的時間變化,進而令分組實驗產生抖動。當MFS為256B時,視頻分組會產生較大的抖動;當MFS為512B時,其會產生較小的抖動;當MFS為768B時,其時延、抖動有明顯的下降跡象。同時,可對MFS為256B、512B、768B各值時分析其同步的性能。通過相關計算可知,MFS在256B時其RMSE的誤差為43毫秒,MFS在512B時其誤差為37毫秒,則在768B時誤差為25毫秒。因此,MFS在256B時其視頻分組產生了最大的時延抖動,即當MFS增大時其發送端的視頻分組會降低時延的抖動。
3 總結
多媒體同步是多媒體通信系統的關鍵技術之一,它涉及了較廣的范圍。通過概述多媒體的同步通信,進而研究了其音視頻同步的問題。在多媒體的環境下切實分析了同步問題,有利于為廣大用戶提供相對可靠、穩定性能的音視頻通信,解決其音視頻在該通信中的同步難題。
參考文獻
[1]劉可釗.多媒體通信中的音視頻同步問題研究[D].南京:南京理工大學碩士論文,2010,6(29):1-71.
[2]王少燕.多媒體通信中的音視頻同步問題研究與實現[D].西安:西安電子科技大學碩士學位論文,2010,3(12):1-69.
作者簡介
蒙敏榮(1974-),男,陜西省富平縣人。研究生學歷。現為西安西芬探測科技有限公司DSP高級工程師。研究方向為音視頻、圖像。