999精品在线视频,手机成人午夜在线视频,久久不卡国产精品无码,中日无码在线观看,成人av手机在线观看,日韩精品亚洲一区中文字幕,亚洲av无码人妻,四虎国产在线观看 ?

基于水體衰減系數反演的水下圖像復原方法

2023-01-27 08:28:18莊子杰范之國金海紅宮凱強
計算機工程 2023年1期
關鍵詞:深度方法

莊子杰,范之國,金海紅,2,宮凱強

(1.合肥工業大學 計算機與信息學院,合肥 230601;2.安徽建筑大學 電子與信息工程學院,合肥 230601)

0 概述

海洋資源和海洋信息的開發利用是近年來的熱點問題,清晰的水下場景對水下活動十分重要,但海洋環境十分復雜。目標輻射在成像過程中會受到嚴重的水體吸收和散射,造成圖像模糊和顏色失真,這不利于水下視覺任務的進一步開展。因此研究能夠去除水體干擾、提升圖像質量的水下成像技術具有重要意義。

長期以來,國內外眾多學者在恢復水下圖像質量方面做了大量研究,提出一系列水下成像技術。現有成像技術總體上可分為兩類:一類是基于圖像處理的圖像增強方法,如圖像融合[1]、Retinex 理論[2]、直方圖拉伸等[3-4],這類方法重點關注水下圖像的“圖像”屬性,通過各種圖像處理技術使水下圖像的像素強度分布更符合自然無水圖像的特點,提升圖像視覺效果;另一類是基于物理模型的圖像復原方法,這類方法通過研究光在水體中的傳輸過程構建水下成像模型,通過求解模型中的參數完成目標場景反演。現有水下成像模型認為傳感器捕獲的圖像主要由直接衰減分量和后向散射分量組成。其中直接衰減分量由目標光經水體衰減后產生,后向散射分量主要源于環境光和水體間的彈性散射。在直接衰減分量和后向散射分量的構成中,傳輸率和背景光是關鍵部分,因此這2 個參數的求解[5-6]是水下圖像復原的關鍵問題。

受大氣去霧中暗通道先驗[7]的啟發,一些學者挖掘出水下圖像的先驗信息進行圖像復原,提出了一系列基于暗通道的改進方法[8-10],通過獲取更符合水下場景的先驗規律來求解傳輸率。這類方法在估計背景光時通常直接選取圖像中最亮像素值,或最大先驗值像素位置的原圖像強度,魯棒性較低。除了直接求解傳輸率外,通過確定傳輸率中衰減系數和場景深度這兩個組成因素間接獲得傳輸率也是一種思路。SONG 等[11]基于水下光衰減先驗得到場景深度,并使用固定的三通道歸一化剩余能量比來確定傳輸率。PENG 等[12]基于圖像的模糊估計和光吸收特性求解出場景深度,并利用模糊圖估計出背景光。在求解傳輸率時,使用固定的紅通道衰減系數先求得紅通道傳輸率,并對三通道衰減系數均取固定的標準波長。之后基于固定標準波長和通道間衰減系數比例關系求解藍綠通道傳輸率,完成圖像復原。BERMAN 等[13]使用場景邊緣圖來估計背景光,并使用霧線先驗方法先估計出藍通道傳輸率,之后基于固定的波長,通過Jerlov 水體衰減系數[14]曲線先確定藍紅通道和藍綠通道的衰減系數比例候選值,通過枚舉方式獲得使復原結果最符合灰度世界假設的衰減比例,以完成復原。

衰減系數的準確估計對求解傳輸率十分重要,衰減系數是水的固有光學特性,取決于水體類型和波長。本文提出一種基于衰減系數反演的水下圖像復原方法,利用水下圖像呈現的多種光傳輸特性得到場景深度的融合估計結果,并根據深度圖和水下成像表達式,建立水下圖像光強和場景深度間的指數關系模型。使用非線性擬合得到衰減系數的初步估計,完成后續優化。

1 水下成像模型

目標光在水中傳輸時強度變化主要取決于兩個因素:目標光的直接能量衰減;散射介質將環境光引入傳輸路徑形成干擾[15]。

根據Beer 定律,目標光I(λ)的直接能量衰減表示如式(1)所示:

其中:J(λ)為目標光強;β(λ)為水體衰減系數;z是傳輸距離。

目標光傳輸到距離z處時,周圍環境光經水體微元dz的散射會產生散射光dL,dL傳輸距離z后到達傳感器的強度為dB(z,λ),其表達式如式(2)所示:

其中:I*(λ,z,d)為路徑函數,表示單位路徑上由環境光散射引入的強度增加量,與深度d有關,同一深度d的路徑函數可認為處處相等,因此路徑函數可簡化為I*(λ,d)。對距離z1=0 到z2=z的傳輸路徑進行積分得到整個傳輸過程中引入的散射干擾強度B(z,λ),其表達式如式(3)所示:

路徑函數計算式如式(4)所示:

其中:δ(λ,?)是體散射函數[16];E(λ,d,?)表示深度d處沿方向?的環境光強,同一深度不同方向的環境光強近似相等,?可忽略。綜合目標光直接能量衰減和散射光干擾,到達距離目標z處傳感器的總光強表達式如式(5)所示:

其中:B∞(λ,d)為無窮遠處背景光。水下成像模型中,總圖像強度可寫成分通道形式,如下所示:

其中:c表示R、G、B 三個顏色通道,是一個波長范圍。在紅光、藍光和綠光的波長范圍內可分別選擇標準波長λR、λG、λB,并假設圖像對應水體的衰減特性可由這3 個波長的離散衰減系數充分表示[13,17-18],此時三通道衰減 系數均為固定 值:βR=β(λR)、βG=β(λG)、βB=β(λB)。

成像模型中環境光強Ec(d)的表達式為Ec(d)=,表示水面環境光E0經水體垂直傳輸深度d后的剩余能量,其中Kc是擴散衰減系數,用來描述光在水下垂直傳播單位深度后的能量變化。不同通道的擴散衰減系數不同,這使得環境光垂直傳輸到目標后本身就存在一定色差,因此為完成水下圖像復原,還需考慮環境光垂直傳輸衰減差異造成的垂直色差影響。

通過水下成像模型可知,為獲得原始場景圖像Jc,需要估計無窮遠處背景光、場景深度z(x)、衰減系數βc等參數。接下來分別介紹這些參數的求解方法,圖1 為本文方法的整體流程。

圖1 本文方法的流程Fig.1 Procedure of method in this paper

為避免垂直色差對水平方向上光衰減先驗造成干擾,本文首先進行垂直色差矯正,并根據背景區域光強特點估計全局背景光;接著基于圖像模糊特征、紅光衰減特征和通道間衰減差異特征這3 個傳輸特性完成場景深度融合估計;最后利用場景深度,基于不同深度區間中暗像素位置目標光強近似為定值的假設,使用非線性擬合完成衰減系數初步求解,并基于灰度世界理論進行衰減系數優化,完成圖像復原。為進一步提高圖像清晰度,使用非銳化掩膜進行圖像增強,凸顯細節信息。

2 本文方法

2.1 垂直色差消除與背景光估計

結合Retinex 理論[2],將水下成像模型表示如下:

其中:ρc(x)是目標表面反射率。水下圖像的場景目標可近似認為處于同一深度,因此環境光垂直衰減色差可看作全局色差。使用代表照射到目標上的不同通道環境光強衰減差異,得到式(8):

式(8)表明水下場景圖像由存在色差的環境光照射產生。為了使復原結果是無色差環境光照射下的目標圖像,對整幅圖像進行全局白平衡,將每個通道除以最大像素強度Ιcmax,消除引起的全局色差,色差消除后的圖像強度可近似表示如下:

其中:E1是處理后照射到目標上的全局環境光常量,近似反映水面處無色差入射光強;為全局背景光。垂直色差消除保證了圖像不同通道的強度特性主要由水平方向的衰減產生,降低了后續使用強度衰減先驗規律估計參數的誤差。

背景光強度對應著無窮遠處像素強度。由于紅光在水中衰減嚴重,背景區域紅通道強度很小,綠光和藍光波長較短,強散射使得背景區域藍綠通道強度相對較大。因此通過確定圖像中紅通道強度較小且藍綠通道強度較大的像素位置來估計背景光強,構建描述每個像素紅通道和藍綠通道間相對大小關系的表達式如式(10)所示:

其中:MinFilter(·)為最小值濾波,目的是避免場景中單一顏色物體影響,提高估計背景光的魯棒性;p值大小與該像素紅通道值成正比、藍綠通道值成反比,因為較遠區域存在噪聲干擾,選擇p值最小的0.1%~0.2%像素位置作為背景光所在位置,并取這些位置的原圖像素均值作為背景光強,該過程表達式如式(11)所示:

其中:pfin表示p值最小的0.1%~0.2%像素位置。圖2為消除垂直色差后的圖像及背景光估計結果。

圖2 垂直色差消除與背景光估計結果Fig.2 Results of the vertical color distortion and background light estimating

2.2 水下場景深度估計

水體對光的吸收和散射會使水下圖像呈現出一些傳輸特性,如圖像色差、霧化模糊等,這些傳輸特性反映了水下場景深度信息。本文利用不同的傳輸特性給出3 種場景深度估計方法,并通過融合方式得到最符合水下圖像特征的深度估計結果。

后向散射光容易造成圖像霧化模糊,且隨著場景深度增加圖像霧化越嚴重。水下圖像不同區域的霧化程度反映了該區域的后向散射光強強度,可以描述圖像相對深度。本文使用水下圖像紅通道先驗(Red Channel Prior,RCP)[10]來反映圖像霧化模糊程度。對水下圖像Ι′(x)取紅通道先驗:

其中:N(x)表示以x為中心的像素鄰域;S(·)表示圖像飽和度。

圖3 為水下圖像的RCP 圖及其最大濾波結果。對水下圖像紅通道先驗圖(圖3(b))及式(12)~式(13)分析可得,在近距離區域,由于霧化模糊程度很低,三通道強度滿足保留有一定的值,此時的值較小,RCP值較小[10],接近于0;隨著傳輸距離的增加,圖像霧化模糊程度變大,紅光的衰減使得(y)的值逐漸減小,趨近于0,此時RCP 值取決于(y)和(y),這兩個通道對散射較為敏感,隨著散射增加,藍綠通道強度逐漸變大,RCP 值也越來越大。

圖3 水下圖像的RCP 圖及其最大值濾波結果Fig.3 RCP map of underwater image and its maximum filtering result

水下圖像的RCP 值反映了圖像不同區域的霧化模糊程度。對模糊圖進行最大值濾波優化,得到最終的霧化模糊程度,其描述如圖3(c)所示,表達式如式(14)所示:

其中:MaxFilter(·)表示最大值濾波。

為得到場景相對深度,歸一化霧化模糊圖得到相對深度的第1 個估計:

其中:Fs(·)表示圖像歸一化處理。

紅通道相比其他通道受水體衰減影響最嚴重,強度變化對傳輸距離最敏感。直接使用紅通道強度得到場景深度的第2 個估計:

最后根據不同通道的衰減差異估計場景深度,這里使用文獻[11]的方法,將場景深度表示為描述之間差值的線性函數:

其中:θa=0.53 214829;θb=0.51 309827;θc=0.910 066 194。

依據水下圖像的不同傳輸特性,確定了3 個場景預估計深度。接下來通過融合獲取最符合圖像退化特征的深度估計結果,融合表達式如下:

當圖像十分模糊時,背景光干擾很強,當紅通道值很小時,基于通道衰減特性的估計方法誤差較大,此時選擇基于霧化模糊估計深度。當圖像保留有一定的紅通道值,霧化模糊偏弱時,選擇基于通道衰減特性來估計,如果背景光較亮,說明仍存在一定程度的散射光,只使用紅通道傳輸特性容易受到干擾,因此選擇基于通道衰減差異來估計深度;如果此時背景光較弱,說明圖像相對清晰,可直接使用紅通道傳輸特性估計深度。在這3 種極端情況之間,可得任意類型水下圖像的融合深度表達。

使用引導濾波[20]去除塊效應,得到最終的歸一化相對深度圖DRela,其表達式如下:

3 種場景深度估計值及相對深度融合估計結果如圖4 所示。

圖4 3 種場景深度預估計值及相對深度融合估計結果Fig.4 Three depth pre-estimation values and the relative depth fusion estimation results of the scenarios

為復原水下圖像,要得到水下場景的絕對深度。在相對深度基礎上,得到距離相機最近的場景點深度其表達式如下:

結合式(21)計算出場景絕對深度表達DFinal如下:

2.3 水體衰減系數的反演

實際的水下圖像對應不同的水體類型,不同水體類型所含雜質在成分和數量上存在差異,衰減系數存在區別。Jerlov 基于水的透明度開發了一種常用的水域分類方案,根據文獻[21],得到不同Jerlov水體類型的衰減系數變化曲線如圖5 所示。本文主要針對開闊海洋水域的圖像,因此主要列出I、IA、IB、II、III 這5 種開闊海洋水體類型的衰減系數分布。衰減系數值隨著水體類型和波長的變化而變化,藍光系數隨波長變化較為平緩,綠光系數隨波長變化稍快一些,紅光系數隨波長變化最為急促。這些典型衰減系數分布提供了其隨水體類型和波長的分布趨勢參考。需要指出,這些取值分布在離散曲線上不能直接反映任意水下圖像的衰減系數。衰減系數與標準波長有關,需要考慮傳感器靈敏度影響,不同水下圖像標準波長會有所不同。衰減系數分布范圍較大,直接對整個系數分布進行迭代尋優,效率低且誤差較大。因此為提高衰減系數估計的準確性,本文不事先預設水體類型和波長值,以Jerlov 衰減系數分布為參考,從水下圖像本身去反演衰減系數,獲得符合圖像本身特征的值。

圖5 不同水體類型的衰減系數曲線Fig.5 Attenuation coefficient curves of different water types

利用水下圖像場景深度圖DFinal,在最大深度和最小深度數值范圍內依據像素深度值將深度圖9 等分,得到9 個深度區間Di(i=1,2,…,9)。根據每個深度區間Di的像素位置得到一一對應的9 個水下圖像強度區間(i=1,2,…,9),c∈{R,G,B}。由于整體深度大小被9 等分,每個深度區間內深度值變化范圍較小,且整幅圖像的背景光和衰減系數βc是定值,因此單個圖像區間內的后向散射光強變化范圍也比較小,此時圖像區間內總光強的變化主要取決于目標光強的變化。

在每個圖像區間,c∈{R,G,B}內選擇強度最小的1%像素位置,由于取決于,這些位置的目標光強普遍較低,一般對應場景中較暗物體、陰影區域等。假設這些較低的目標光強可近似看作定值,即在所有內像素強度最小的1%位置處的目標光強是一個相同的定值。

在內選擇的強度最小1%像素位置,可將成像模型表達如下:

其中:ac為固定的目標光強為衰減系數。在這些像素位置,總光強(x)和場景深度D(x)之間是一種指數變換關系,ac和bc是指數曲線的兩個參數。通過獲取數值對進行曲線擬合,可得到該指數變換表達式及其參數值。為使擬合結果更準確,參考Jerlov 衰減系數分布,三通道ac取值界限均為[0.001,1],bR、bG、bB取值界限分別 為[0.04,3]、[0.02,3]、[0.02,3]。曲線擬合方程如式(24)所示:

由于背景處像素強度容易受到噪聲干擾,同時在較遠背景區域紅通道值很小,在這些區域選取擬合點會由于大量的yc=0 帶來擬合誤差,所以對R通道由近到遠選取等4 個強度區間,G、B 通道選 取等7 個強度區間(其中K∈{G,B})。擬合點是在圖像子區間像素強度最小的1%像素位置選取的,這些像素位置處圖像強度變化范圍不大,實驗也表明單個區間的擬合點個數對于復原結果的影響不大。為避免擬合點過于聚集,同時考慮到一些尺寸偏小圖像的像素點總個數有限,擬合點不宜設置過多,因此根據經驗取值,在每個強度區間的最小1%像素位置等間隔選取120 個點,最終得到480 個R 通道擬合點(xRn,yRn)[n=1,2,…,480],840個G、B通道擬合點(xKn,yKn)[K∈{G,B},n=1,2,…,840]。

2.4 品質分析 由表5可知,9個供試品種含油量在40.65%~48.83%,玉油5號最高,玉紅油2號最低;芥酸含量在0~0.40%,玉油1號、玉紅油2號、云油雜2號及云油雜15號均為檢出;硫甙含量在20.30%~29.89%,玉油4號最低,花油8號最低;供試品種均符合“雙低油菜”(芥酸含量低于3%,硫甙含量低于30 μmol/g)標準。

分通道對擬合點進行非線性最小二乘擬合,依據擬合結果得到參數bc,即水下圖像衰減系數的初步估計值βcpre。圖6 為衰減系數優化前后的后向散射強度曲線,圖6(b)給出了基于βcpre得到的后向散射光強曲線。整個擬合過程基于目標光強為定值的假設進行,這會引入一定誤差,為提高衰減系數估計的準確性,本文在βcpre的基礎上通過迭代尋優來優化βc值。

圖6 衰減系數優化前后的后向散射強度曲線Fig.6 Backscattering intensity curves before and after optimizing attenuation coefficient

βcpre能夠初步反映出圖像水體類型和標準波長,這縮小了迭代區間。以初步確定的水體類型和波長為基準,參考Jerlov曲線,在較小的波長變化范圍內,選擇R通道的衰減系數變化區間近似為0.20;G、B 通道的衰減系數變化區間偏小,近似為0.10。因此分別選取三通道衰減系數的迭代區間為 [max(βRpre-0.10,0.04),βRpre+0.10]、[max(βGpre-0.05,0.02),βGpre+0.05]、[max(βBpre-0.05,0.02),βBpre+0.05],迭代步長為0.01。

對每一組衰減系數[βR,βG,βB],求解相應復原結果,計算式如式(25)所示:

對每一個,通過灰度世界假設[22]判斷其圖像質量。經灰度世界算法處理后的圖像表達式如(26)所示:

其中:aver(·)表示取圖像強度均值;c∈{R,G,B}。

灰度世界處理前后圖像的變化程度反映了對灰度世界假設的符合程度,變化程度越低,越符合灰度世界假設,圖像質量越高。因此變化程度最低時的衰減系數就是最終衰減系數取值,對應復原結果即為最終的復原圖像。本文使用圖像間歐式距離反映灰度世界處理前后圖像的變化程度,表達式如式(27)所示:

最終衰減系數和復原圖像結果如式(28)所示:

基于優化后衰減系數βc求解的后向散射分布曲線如圖6(c)所示。圖7 給出了最終得到的R、G、B 三通道傳輸率圖以及衰減系數優化前后的復原結果,由圖7 可以看到衰減系數的優化使復原圖像的質量有了一定提升。

圖7 三通道傳輸率圖及衰減系數優化前后的復原結果Fig.7 Three channel transmission rate map and restoration results before and after optimization of attenuation coefficient

2.4 圖像細節增強

為提升圖像細節,使用非銳化掩膜對復原結果進行增強。本文方法的基本思想是先對整幅圖像進行濾波模糊,在原圖像中去除模糊區域得到高頻部分即圖像細節信息,對細節信息進行調節再加回原圖像,得到細節增強后的復原結果,其表達式如式(29)所示:

圖8 所示為復原圖像經非銳化掩膜增強前后的細節提升效果,由圖8 可知增強圖像的清晰度和紋理細節相比初步復原的圖像均有提升。

圖8 非銳化掩膜前后的圖像細節提升效果對比Fig.8 Comparison of image detail enhancement effects before and after unsharp mask enhancement

3 實驗結果與分析

為驗證本文所提方法的有效性和魯棒性,對本文方法的復原效果進行實驗分析,分析內容包括方法參數分析、中間結果分析、主觀評價、客觀評價。將本文方法與背景光統計模型與傳輸率優化(SMBOT)[9]、圖像模糊與光吸收(IBLA)[12]、水下光衰減先驗(ULAP)[11]、水下暗通道先驗(UDCP)[8]等現有方法進行對比。本節用于比較的水下圖像復原方法的復原結果均為原作者共享代碼或網絡代碼以默認參數直接運行的結果。為充分分析,對2 個常用的水下圖像增強基準(UIEB)數據集[23]和真實世界水下圖像增強(RUIE)數據集[24]進行了實驗處理。

3.1 參數對本文方法的影響

2.3 節對場景深度圖DFinal進行了9 等分,深度等分是為了使等分后的深度子區間Di內數值變化很小,使對應圖像子區間內總光強Ii的變化主要取決于目標光強Ji的變化,保證在總光強最小1%像素位置的目標光強可看作定值的假設成立。因此深度區間個數需保證等分后的深度子區間內數值范圍較小。

本文探究了區間劃分個數對圖像信息熵的影響,為保證等分后深度數值范圍較小,以6 等分為起點,保持總擬合點個數基本不變,固定迭代區間,依次得到深度圖6、9、12、15 等分后的圖像復原結果,復原圖像信息熵隨區間個數變化的折線圖如圖9 所示。由圖9(d)可以看出圖像信息熵變化較小,區間在由6 等分變為9 等分后信息熵有小幅提升,之后該值趨于平穩,本文最終選擇深度區間等分為9 等分。

圖9 信息熵隨區間個數的變化曲線Fig.9 Curve of information entropy changing with the number of interval

本文使用迭代尋優來修正假設目標光強為定值帶來的誤差,這里將分析迭代區間對復原結果的影響。根據文獻[21]中的數據,單個水體類型下單通道衰減系數數值最大變化范圍為0.5 左右,此外水體G 通道和B 通道的光衰減特性較為接近,相同水體類型R 通道衰減系數整體上要大于G、B 通道衰減系數,因此設置R 通道迭代區間增加值Num_R 依次為0.05、0.10、0.15、0.20、0.25;相應地G、B 通道迭代區間增加值Num_G 和Num_B 依次取區間[0.05,Num_R];內的值,步長為0.05。最終依次得到三通道的15 個迭代區間:[max(βRpre-Num_R,0.04),βRpre+Num_R];[max(βKpre-Num_K,0.02),βKpre+Num_K](K∈G、B)。利用每個迭代區間進行衰減系數迭代優化,并分析優化后復原結果的圖像質量。

使用信息熵作為復原結果質量的評價指標,圖10 所示為3 個復原圖像的信息熵變化曲線,橫坐標為0 處代表迭代優化前的復原圖像,橫坐標1~15 依次代表選取的迭代區間。由圖10 可以看出,相比迭代優化前,圖像信息熵有了一定的提升,之后隨著迭代區間的變化,信息熵的極大值變化不大。圖10(b)在第2 個迭代區間后信息熵的極大值在7.55 左右波動,圖10(a)、圖10(c)在第1 個迭代區間后信息熵整體分別穩定在7.63 和7.46 左右。選取指標極大值處對應的迭代區間,為保證復原圖像質量,同時考慮到算法效率等影響因素,本文最終選取迭代區間為Num_R=0.10,Num_G=Num_B=0.05。

圖10 信息熵隨迭代區間變化的曲線Fig.10 Curve of information entropy changing with iteration interval

3.2 中間結果分析

為分析本文方法中每個步驟的影響和作用,本節對中間結果進行分析,實驗結果如圖11 和圖12 所示。圖11 依次給出了原圖像垂直色差消除的結果、場景深度、衰減系數迭代優化前和優化后的復原結果、非銳化掩膜增強結果。圖12 依次給出了原圖、色差消除后、優化前、優化后以及非銳化掩膜增強后結果的平均梯度值變化趨勢。綜合主客觀分析結果,可以看出隨著方法步驟的進行,圖像整體質量在不斷提高。

圖11 中第1 行圖像(圖像1)具有一定景深,包含場景范圍較大,水平方向的光吸收和散射是導致圖像色差與模糊的主要原因,本文方法中的垂直色差消除步驟提高了場景深度估計的準確性,場景深度估計結果能夠反映圖像的特征。而經衰減系數反演得到的優化前復原結果,其整體質量相比垂直色差消除后的結果有明顯提升,這符合該圖像具有一定景深、圖像退化主要發生在水平方向上的特點。優化后的復原圖像進一步提升了視覺效果和清晰度,證明了優化方法的有效性。相比于圖像1,圖11第2 行所示圖像(圖像2)的場景深度較小,圖像色差主要由垂直方向光衰減產生,垂直色差消除矯正了顏色失真,后續處理結果進一步去除了散射模糊。圖12 中的平均梯度折線圖呈現出明顯的逐步驟上升趨勢,圖像清晰度不斷提高,最終復原結果的平均梯度接近于原水下圖像平均梯度的5 倍。

圖11 本文方法的中間結果Fig.11 Results in process of the method in this paper

圖12 本文方法的平均梯度值變化趨勢Fig.12 Variation trend of the mean gradient value of method in this paper

3.3 主觀評價

散射光帶來的成像模糊是水下成像質量不佳的主要原因,為評估所提算法的有效性,首先對圖像細節紋理的提升效果進行對比分析,實驗結果如圖13 所示。本文選取了UIEB 數據集中的兩幅圖像,將圖9(a)中場景中間位置和圖9(b)中場景近處的巖石部分進行放大,選取位置如圖13 中白色方框所示。可以看出本文方法和SMBOT 方法的細節提升效果明顯好于其他方法,巖石的紋理均清晰可見,對比度和清晰度明顯提高。通過放大區域可以看出,IBLA 方法和ULAP 方法并不能有效地去除散射影響,圖像依然存在色差,細節紋理不夠清晰,而UDCP 方法的復原結果則存在嚴重的失真現象,復原效果并不好。相比于SMBOT 方法,本文方法去除散射更加徹底,也更好地消除了色差影響,整體視覺感受更加自然,這說明本文方法在細節提升上具有較好的效果。

圖13 水下圖像細節提升效果對比Fig.13 Comparison of the effect of details-enhancing of the underwater images

為更全面地分析本文方法的有效性,本文選擇UIEB 數據集中6 幅不同場景的水下圖像進行復原實驗,選取的處理圖像包含偏綠色調、偏藍色調的圖像,也包括場景中含有背景區域、目標充滿整個場景等類型的水下圖像。4 種對比方法及本文方法的復原結果如圖14 所示。可以看出,本文方法在各種主觀視覺感受上均取得了較好效果。對于不同類型的圖像,本文方法均能提升圖像清晰度,復原結果的細節紋理更加明顯,這證明了本文方法在去散射方面的有效性。通過整體的復原結果可以看出本文方法和SMBOT 方法明顯好于其他方法,IBLA 方法的散射去除不夠徹底,ULAP 和UDCP 方法的復原結果仍存在色差。本文方法的恢復結果相比SMBOT 方法而言,恢復紋理更清晰,色彩更自然,這說明本文方法對不同類型的水下圖像均能提升其整體質量。

圖14 不同方法在UIEB 數據集下的圖像復原效果對比Fig.14 Comparison of image restoration effects of different methods under UIEB dataset

為驗證本文方法的普遍有效性,額外使用RUIE 數據集進行復原實驗和對比分析,本文選取了5 幅圖像,涵蓋綠色調和藍綠色調,實驗結果如圖15 所示。通過對比分析可以發現,本文方法對RUIE 數據集中的圖像依然取得了較好的復原結果。從圖15 可以看出,本文方法和SMBOT 方法處理效果仍是最優的,UDCP 方法的處理結果整體偏暗且顏色失真比較嚴重,IBLA 和ULAP 方法雖然在一定程度上提高了清晰度,但并沒有消除圖像色差。本文方法有效提升了圖像的細節紋理信息,圖像顏色也更自然,相比于SMBOT 方法,本文方法的去散射程度更徹底,這表明本文方法對RUIE 數據集的圖像的處理效果較好。

圖15 不同方法在RUIE 數據集下的圖像復原效果對比Fig.15 Comparison of image restoration effects of different methods under RUIE dataset

3.4 客觀評價

在進行主觀視覺感受分析后,使用客觀評價指標進一步分析本文的圖像復原效果。采用的評價指標包括無參考的水下彩色圖像質量評估(Underwater Color Image Quality Evaluation,UCIQE)[25]、基于人眼視覺系統激勵的無參考水下圖像質量評價(Underwater Image Quality Measure,UIQM)指標、圖像信息熵(Entropy)、圖像的平均梯度(Mean Gradient,MG)。其中UCIQE 和UIQM 用來評價圖像整體質量,包括色彩、清晰度、對比度等;信息熵和平均梯度用來描述圖像清晰度和細節信息,可以反映圖像去散射效果。使用以上指標對3.3節2 個數據集的復原結果進行評估。UIEB 數據集中8 幅復原圖像的指標平均值如表1 所示,RUIE 數據集中5 幅復原圖像的指標平均值如表2 所示。

表1 不同方法在UIEB 數據集下的復原結果評價指標平均值Table 1 Average value of restoration results evaluation indicators of different methods under UIEB dataset

表2 不同方法在RUIE 數據集下的復原結果評價指標平均值Table 2 Average value of restoration results evaluation indicators of different methods under RUIE dataset

通過表1 可以看出,本文方法對UIEB 數據集中圖像處理結果的評價指標整體表現較好,其中信息熵和平均梯度的平均值好于其他對比方法,這表明本文方法有效去除了圖像散射,使圖像清晰度明顯提升,圖像細節信息更加凸顯。本文方法的UCIQE 和UIQM 指標值也好于其他對比方法,其中UCIQE 指標為最佳值,UIQM 指標值排第2,這表明本文方法在恢復圖像整體質量上取得了很好的效果,復原結果的色彩較均衡、對比度更高、視覺效果較好。

通過表2 可以看出,與其他對比方法相比,本文方法的指標平均值均較好,與SMBOT、IBLA、ULAP、UDCP 方法相比,本文方法在RUIE 數據集上的Entropy 值分別提升了4.9%、5.4%、9.2%、17.9%,這說明本文方法對RUIE 數據集中的水下圖像同樣具有很好的復原效果。

綜上可知,不論是在主觀視覺感受上,還是客觀指標評價上,本文方法均表現較佳,既能夠去除水下圖像的散射影響,提升圖像清晰度,凸顯細節信息,也能夠減弱圖像色彩失真,提升圖像整體視覺效果。

4 結束語

本文提出一種基于水體衰減系數直接反演的水下圖像復原方法,不基于固定的水下圖像水體類型和標準波長,而是通過反演的方式從圖像中求解出最適合圖像本身的衰減系數并完成復原。通過對圖像去除垂直衰減色差,使描述水下圖像強度規律的先驗信息能更準確地反映水平方向的光傳輸特性,提升背景光估計和場景深度估計的準確性。基于在單個顏色通道的圖像強度區間內,像素值最小的1%像素位置處目標光強可近似為定值的假設,使用非線性擬合完成衰減系數求解,并進行衰減系數值的優化,成功復原圖像質量。實驗結果表明,與SMBOT、IBLA、ULAP 等方法相比,本文方法能更好地提升水下圖像復原質量。下一步將通過尋找更準確的水下圖像強度先驗規律,降低衰減系數的估計誤差,提升復原效果。

猜你喜歡
深度方法
深度理解一元一次方程
學習方法
深度觀察
深度觀察
深度觀察
深度觀察
用對方法才能瘦
Coco薇(2016年2期)2016-03-22 02:42:52
四大方法 教你不再“坐以待病”!
Coco薇(2015年1期)2015-08-13 02:47:34
賺錢方法
提升深度報道量與質
新聞傳播(2015年10期)2015-07-18 11:05:40
主站蜘蛛池模板: 成人亚洲天堂| 亚洲成人黄色网址| 久久亚洲国产一区二区| 欧美性精品不卡在线观看| 二级特黄绝大片免费视频大片| 在线精品自拍| 狠狠综合久久久久综| 在线国产毛片手机小视频| 国产不卡在线看| 老熟妇喷水一区二区三区| 任我操在线视频| 久久一色本道亚洲| 亚洲一级毛片在线观播放| 国产在线麻豆波多野结衣| 狠狠ⅴ日韩v欧美v天堂| AⅤ色综合久久天堂AV色综合| 伊人91在线| 99无码熟妇丰满人妻啪啪| 这里只有精品在线播放| 91久久天天躁狠狠躁夜夜| 欧美成人综合视频| 国产av色站网站| 精品国产99久久| 国产后式a一视频| 欧美视频在线第一页| 91久久国产综合精品女同我| 久久黄色一级片| 永久免费AⅤ无码网站在线观看| 欧美69视频在线| 免费午夜无码18禁无码影院| 少妇被粗大的猛烈进出免费视频| 国产91全国探花系列在线播放| 伊人久综合| 国产精品亚洲欧美日韩久久| 国产精品亚洲αv天堂无码| 亚洲精品另类| 在线观看欧美国产| 国产免费一级精品视频| 2021国产精品自产拍在线观看| 国产人碰人摸人爱免费视频| 国产精品一区在线麻豆| 老色鬼欧美精品| 午夜国产精品视频| 99激情网| 在线观看亚洲天堂| 午夜啪啪福利| 国产偷倩视频| 麻豆精品在线视频| 日韩人妻精品一区| 在线欧美一区| 无码专区在线观看| 国产喷水视频| 久久综合九九亚洲一区| a免费毛片在线播放| 91精品啪在线观看国产91九色| 久久伊伊香蕉综合精品| 亚洲免费三区| 亚洲午夜福利在线| 久久无码av一区二区三区| 全色黄大色大片免费久久老太| 色久综合在线| 久久国产精品娇妻素人| 成人午夜免费观看| 亚洲国产综合自在线另类| 久久综合丝袜长腿丝袜| 狠狠色成人综合首页| 伊人久综合| 亚洲,国产,日韩,综合一区 | 精品久久久无码专区中文字幕| 中文字幕在线日本| 五月丁香在线视频| 欧美一区二区福利视频| 国产精品亚洲一区二区三区在线观看| 日本高清有码人妻| 精品无码一区二区三区电影| 亚洲区第一页| 91亚洲免费视频| 精品久久久久久久久久久| 美女国内精品自产拍在线播放 | 国产自在线播放| 人妻夜夜爽天天爽| 日韩成人在线一区二区|