基于運(yùn)動(dòng)區(qū)域檢測的會(huì)議視頻清晰度增強(qiáng)處理

彭 程

（中國移動(dòng)通信集團(tuán)廣西有限公司，廣西 南寧 450000）

0 引 言

近年來,多種視頻增強(qiáng)技術(shù)不斷涌現(xiàn)。其中，對(duì)比度增強(qiáng)技術(shù)［1］、超分技術(shù)［2］及視頻插幀等技術(shù)極大程度上提高了視頻質(zhì)量。Fattal等提出了快速雙邊濾波多尺度圖像分解，使用多尺度細(xì)節(jié)層重組的手段來構(gòu)造增強(qiáng)圖像。Zheng等人則通過一幅由求解一個(gè)梯度域最優(yōu)化問題得到的細(xì)節(jié)圖，采用二次濾波提取到相應(yīng)的基礎(chǔ)層和細(xì)節(jié)層分離結(jié)果。然而，上述圖像視頻增強(qiáng)算法更多關(guān)注的是增強(qiáng)效果，卻忽略了算法的實(shí)時(shí)性，難以應(yīng)用于小型嵌入式系統(tǒng)［3］。基于視頻會(huì)議靜止場景的特征，本文提出了一種基于運(yùn)動(dòng)區(qū)域檢測的視頻增強(qiáng)算法，能夠在降低視頻噪聲的同時(shí)增強(qiáng)視頻細(xì)節(jié)，同時(shí)能保持原視頻的色彩還原度。

1 背景差分法檢測變化區(qū)域

背景差分法是一種視頻變化區(qū)域檢測的算法。其原理是根據(jù)視頻的前幾幀信息提取出背景幀信息，將當(dāng)前圖像幀和背景幀做差分運(yùn)算，得到變化區(qū)域信息［4］。根據(jù)背景差分法檢測變化區(qū)域的流程如圖1所示。

該算法主要分為如下幾個(gè)步驟。

（1）更新背景幀信息，統(tǒng)計(jì)前幾幀圖像的灰度均值作為背景幀信息［5］。

（2）計(jì)算當(dāng)前幀和背景幀的灰度值并進(jìn)行差分運(yùn)算，根據(jù)絕對(duì)差進(jìn)行二值運(yùn)算，得到初始變化區(qū)域。

（3）對(duì)初始變化區(qū)域進(jìn)行閉運(yùn)算，得到聯(lián)通的變化區(qū)域。該步驟可以削弱視頻噪聲帶來的影響。

圖1 背景差分法檢測變化區(qū)域流程

該檢測算法運(yùn)算量少，能夠快速計(jì)算運(yùn)動(dòng)區(qū)域，并且對(duì)噪聲有較高的容忍度。該檢測算法的缺點(diǎn)是不適用于場景大幅變化的視頻［6］。視頻會(huì)議場景較為固定并且對(duì)視頻的實(shí)時(shí)性要求極高，因此背景差分法滿足該場景使用需求。

2 基于顏色空間的視頻時(shí)域降噪

在視頻增強(qiáng)處理過程中，視頻本身存在的噪點(diǎn)會(huì)被放大，在增強(qiáng)圖像對(duì)比度和紋理細(xì)節(jié)的同時(shí)會(huì)降低信噪比，導(dǎo)致視頻質(zhì)量的下降。在運(yùn)動(dòng)區(qū)域檢測基礎(chǔ)上進(jìn)行時(shí)域?yàn)V波，能夠提高圖像的信噪比，有利于后續(xù)的視頻增強(qiáng)［7］。

RGB顏色空間利用3個(gè)顏色分量的線性組合來表示顏色，任何顏色都與這3個(gè)分量有關(guān)，而且這3個(gè)分量高度相關(guān)。直接對(duì)3個(gè)分量進(jìn)行時(shí)域?yàn)V波會(huì)引入色彩偏差，從而導(dǎo)致視頻顏色異常［8］。因此首先對(duì)視頻幀進(jìn)行RGB到Y(jié)UV的顏色空間轉(zhuǎn)換。轉(zhuǎn)換公式為：

3 視頻增強(qiáng)

雙邊濾波基于高斯濾波的思想，在高斯濾波的基礎(chǔ)上加上圖像像素值對(duì)中心像素的影響，兩者共同影響中心像素的值。雙邊濾波的核函數(shù)是空間域核與像素范圍域核的綜合結(jié)果［9］。在圖像的平坦區(qū)域，像素值變化很小，對(duì)應(yīng)的像素范圍域權(quán)重接近于1，此時(shí)空間域權(quán)重起主要作用，相當(dāng)于進(jìn)行高斯模糊；在圖像的邊緣區(qū)域，像素值變化很大，像素范圍域權(quán)重變大，從而保持了邊緣的信息［10］。和其他圖像濾波算法相比，雙邊濾波在降低圖像噪聲的同時(shí)具有很好的保邊效果。因此根據(jù)雙邊濾波得到的圖像細(xì)節(jié)信息，將細(xì)節(jié)信息疊加到原圖像上，可以增強(qiáng)圖像的細(xì)節(jié)，優(yōu)化人體主觀感受。

4 試 驗(yàn)

整體視頻處理流程如圖2所示。

圖2 視頻處理流程

圖3中紅色框內(nèi)區(qū)域是由背景差分法檢測出來的變化區(qū)域。圖4（a）和圖4（b）分別是原始視頻幀和經(jīng)過視頻增強(qiáng)的視頻幀。對(duì)比兩圖可以看出，圖4（b）中的紋理細(xì)節(jié)得到了肉眼可見的增強(qiáng)，整個(gè)視頻畫面的清晰度更高。

圖3 變化區(qū)域檢測結(jié)果圖

圖4 視頻增強(qiáng)比較圖

5 結(jié) 語

針對(duì)實(shí)時(shí)性高且畫面場景固定的視頻會(huì)議場景，提出了一種基于變化區(qū)域檢測的視頻增強(qiáng)算法。充分利用靜止區(qū)域的時(shí)域信息進(jìn)行快速降噪，有效地增強(qiáng)視頻細(xì)節(jié)信息。試驗(yàn)結(jié)果表明，本文算法能夠快速實(shí)現(xiàn)圖像增強(qiáng)，在保持色彩還原度的情況下降低信噪比，同時(shí)增強(qiáng)了視頻的細(xì)節(jié)信息，在主觀感受上提高了視頻的清晰度。該方法為實(shí)時(shí)視頻增強(qiáng)技術(shù)提供了一種新思路。