《電子技術應用》
您所在的位置:首頁 > 顯示光電 > 設計應用 > 基于雙目立體視覺的圖像增強
基于雙目立體視覺的圖像增強
2015年微型機與應用第19期
宋菲菲1,趙宏宇2
(1.內蒙古電子信息職業技術學院,內蒙古 呼和浩特 010070; 2.北京工業大學 計算機學院,北京 100124)
摘要: 戶外視覺系統采集圖像時,容易受到低照度等因素的影響,導致捕獲的圖像退化,視見度降低。本文提出了一種基于雙目立體視覺的圖像增強算法。該算法首先通過立體匹配處理求解場景視差圖像,然后構建廣義雙邊濾波估計圖像照度分量,根據Retinex原理求解圖像反射分量,實現圖像的增強。實驗證明,該算法能夠有效地改善圖像質量,提高雙目視覺系統工作的魯棒性和可靠性。
Abstract:
Key words :

  摘  要: 戶外視覺系統采集圖像時,容易受到低照度等因素的影響,導致捕獲的圖像退化,視見度降低。本文提出了一種基于雙目立體視覺圖像增強算法。該算法首先通過立體匹配處理求解場景視差圖像,然后構建廣義雙邊濾波估計圖像照度分量,根據Retinex原理求解圖像反射分量,實現圖像的增強。實驗證明,該算法能夠有效地改善圖像質量,提高雙目視覺系統工作的魯棒性和可靠性。

  關鍵詞: 圖像增強;Retinex;雙目立體視覺;立體匹配

0 引言

  雙目立體視覺直接模擬人類雙眼處理景物的方式,可靠簡便,在許多領域均極具應用價值,如人機交互、視頻監控、智能控制、三維測量、機器人導航與航測以及虛擬現實等。雙目立體視覺是計算機視覺的一個重要分支,其原理是由不同位置的兩臺攝像機或者一臺攝像機(CCD)經過移動或旋轉拍攝同一幅場景,通過計算機空間點在兩幅圖像中的視差,獲得該點的三維坐標值。

  目前,對于雙目立體視覺的研究主要集中在特征匹配[1-2]、攝像機標定、三維重建[3]等方面,對于圖像增強領域卻鮮有研究。在實際應用中,普遍采用單幅圖像的圖像增強算法,這類方法對圖像全局進行統一處理,由于沒有考慮場景的景深情況,不能充分校正不同景深區域的對比度和顏色。

  針對這個問題,本文提出了一種基于雙目立體視覺的圖像增強算法,主要針對低照度圖像進行處理。該算法首先進行立體匹配操作求解視差圖像,通過視差圖像反映場景的深度信息。根據Retinex原理[4],將視差圖像作為反映場景深度的先驗信息,構建廣義雙邊濾波估計圖像的照度分量,從而獲得含物體本身特性的反射分量,即增強后的清晰圖像。本文算法假設場景深度變化主要在于邊緣區域,而非邊緣區域深度變化平緩。最后通過實驗證明該算法能夠利用估計的視差信息,充分恢復不同景深的場景顏色與細節信息。

1 本文算法

  1.1 雙目立體視覺系統

  雙目立體視覺的基本原理是從兩個視點觀察同一景物,獲取兩幅同一場景的圖像,根據像素點的相似性計算求解圖像像素間的位置偏差(視差),從而根據三角形法原理確定三維空間點的深度信息,進而重建景物,這一過程與人類視覺的立體感知過程相類似。

001.jpg

  雙目視覺系統如圖1所示,焦點分別為O1和O2的兩臺攝像機具有相同的參數性能,同時光軸互相平行、X軸互相重合、Z軸與左攝像機的光軸重合,兩個攝像機焦距均為f,它們之間的距離為B,I1和I2為左右攝像機的像平面,P1和P2分別是空間點在左右像平面上的成像點。由相似三角形關系可導出深度信息方程:

  U{_V(XVNQ(%YYU]HH4R(GZ0.png

  式中,d=pl-pr為兩幅圖的視差,焦距f通過攝像機標定求得。

  在雙目立體視覺系統中,立體匹配與三維重建等方面的研究最多,而對于圖像增強方面的研究也具有重要的理論與實際意義,它直接影響到匹配操作的精度和速度,同時,通過削弱場景中諸多因素的干擾,如光照條件,能夠為最終的三維重建打下堅實的基礎。

  由公式(1)可知,通過對左右圖像進行特征匹配,就可以得到其視差信息,結合已知信息B和f,即可獲得場景中目標的深度。因此,本文假設圖像包含的視差信息能夠較好地反應場景深度,將視差信息作為反映場景深度的先驗信息施加到圖像增強處理過程中。

  1.2 立體匹配

  立體匹配是尋找同一空間景物在不同視點下投影圖像中像素間的一一對應關系,一般包括匹配代價計算、代價值聚集、視差計算等步驟[5-6]。本文采用自適應的方法,結合SAD(Sum of Absolute Differences)和梯度特征的相似性測度因子[6]進行匹配代價計算,即:

  23.png

  式中,x表示圖像像素,N(x)是在x處的3×3的包圍窗口,NH(x)是不包含最左一列的包圍窗口,NV(x)是不包含最下一行的包圍窗口。WNOV12LSTGEGH[DUW9(2Q8S.jpgH表示水平梯度,WNOV12LSTGEGH[DUW9(2Q8S.jpgV表示垂直梯度。此時,匹配代價函數可以表示為:

  KH}UYH%918LKMK9_)`AYXFU.png

  其中,WNOV12LSTGEGH[DUW9(2Q8S.jpg是最優權值,由最大化可靠對應像素的數量來決定,可靠像素是通過勝者為王(Winner-Takes-All,WTA)準則來過濾的,公式(4)經過閾值法[6]處理之后最終得到初始視差圖像為OG~FK{()`WC%1D$KL{(0AO4.jpg。在視差圖像計算方面,為了優化其結果,需要對視差圖像進行平滑操作,下面采用的是選擇性模式濾波器(Selective Mode Filter)[7],從而獲得理想的視差圖像結果D。本文將視差圖像D引入到圖像增強操作中來。

  1.3 基于Retinex原理的圖像增強處理

  基于Retinex理論提出來的圖像增強方法具有高動態范圍壓縮、局部對比度增強、保持圖像顏色恒常性等優點[4]。

  Retinex理論認為一幅圖像可分為兩部分,即一幅圖像I可由反射分量R和照度分量L的乘積表示,即:

  I(x)=R(x)L(x)(5)

  其中,照度分量的性質取決于光源,決定了圖像的動態范圍;反射分量的性質則取決于成像物體的特性,主要反映了圖像的細節信息。Retinex原理的思想實際上就是去除或減少照度分量的影響,獲得包含較多細節信息的反射分量。其計算過程在對數域上進行:

  logR(x)=logI(x)-logL(x)(6)

  上述反射分量的求解在數學上是一個奇異問題,因此需要把求解問題變成約束最優化問題,通過對照度分量的準確估計進行反射分量的求解。由于照度分量具有局部平滑的性質,因此對它的估計可以看作為平滑問題,本文采用廣義雙邊濾波求解照度分量。

  雙邊濾波的理論是Tomasi和Manduchi[8]于1998年提出的,該理論同時考慮了空間鄰近度與像素值相似度,是一種邊緣保持的非迭代平滑濾波方法。本文采用的廣義雙邊濾波則是結合了視差值相似度與像素值相似度進行平滑操作,其形式定義為:

  1.png

  式中,PL4WB6`K~%ZIUMO1~I`IUWD.png為高斯函數,表示隨著視差值差異以及灰度差值的增大,圖像像素的權重逐漸減小。

  公式(6)、(7)的計算需要將圖像由RGB顏色空間轉換到HSV(Hue,Saturation,Value)顏色空間下,僅對亮度分量進行處理,而獲得的飽和分量與色調分量保持不變,在獲得反射分量后,再將圖像由HSV顏色空間轉換到RGB顏色空間,即可獲得增強后的圖像。

2 實驗仿真與分析

002.jpg


  為驗證本文算法的有效性,在MATLAB平臺上進行圖像處理實驗,主要針對低照度圖像進行處理。圖2(a)、(b)為存在視差的參考圖像;(c)為獲得的初始視差圖像;(d)為優化后的視差圖像;(e)為圖(b)的照度分量;(f)為圖(b)的圖像增強結果。通過實驗可知,本文算法能夠根據場景深度的差異,再現場景的真實顏色,以及增強低照度區域的細節信息。

3 結論

  本文將雙目立體視覺原理應用于低照度圖像的增強上,將視差圖像作為場景深度的先驗信息,在估計圖像照度分量的時候,提供了約束條件,構建了廣義雙邊濾波,更加充分地恢復了圖像細節信息。該算法具有較高的魯棒性,能夠較好地改善雙目視覺系統的工作能力,具有廣泛的應用前景。

參考文獻

  [1] 岳陳平,孟麗婭.基于SAD算法的立體匹配的實現[J].微型機與應用,2013,32(6):41-43.

  [2] 歐陽鑫玉,張娟娟,趙楠楠,等.基于NCC的改進立體匹配算法[J].微型機與應用,2015,34(3):54-57.

  [3] 趙宏宇,李燕華,侯振杰,等.基于魯棒估計滅點分層重建的研究[J].微型機與應用,2011,30(9):31-35.

  [4] 肖創柏,趙宏宇,禹晶.基于引導濾波的Retinex快速夜間彩色圖像增強技術[J].北京工業大學學報,2013,39(12):1868-1873.

  [5] SCHARSTEIN D, SZELISKI R. Stereo matching with nonlinear diffusion[J]. International Journal of Computer Vision, 1998,28(2):155-174.

  [6] KLAUS A, SORMANN M, KARNER K. Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure[C]. 18th International Conference on Pattern Recognition, 2006:15-18.

  [7] LANKTON S. Selective mode filter in Matlab[EB/OL]. (2008-04-12)[2015-05-13]. Http://www.shawnlankton.com, 2008-04-12.

  [8] TOMASI C, MANDUCHI R. Bilateral filtering for gray and color images[C]. In: Proceedings of the 6th International Conference on Computer Vision Bombay, India: IEEE, 1998: 839-846.


此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 亚洲欧美一区二区三区在饯 | 免费人成在线观看网站 | 在线播放成人毛片免费视 | 高清三级毛片 | 精品国产一二三区 | 午夜看片免费 | 91极品蜜桃臀在线播放 | 亚洲综合久久综合激情久久 | 妞干网最新 | 精品久久久久久中文 | 免费男女网站 | 人人艹人人爽 | 日本黄色影片在线观看 | 欧美日本不卡 | 国产日本久久久久久久久婷婷 | 在线视频亚洲 | 99国产精品久久久久久久成人热 | 免费成人福利视频 | 思99re久久这里只有精品首页 | 欧美日韩成人在线观看 | 在线久操| 国产色一区 | 深夜福利网站在线 | 成人精品视频在线观看 | 曰本女人与动牲交毛片 | 成人免费无毒在线观看网站 | 777777农村一级毛片 | 在线不卡一区 | 国产天堂亚洲精品 | 欧美性xxxxx极品 | 一级看片| 国产成人精品在线观看 | 免费观看成人久久网免费观看 | 欧美在线一区二区三区 | 性欧美free荷兰hd | 国产人成精品免费视频 | 欧美成人精品一区二区 | 国产高清天干天天美女 | 一区二区三区日韩 | 黄视频免费网站 | 激情五月激情 |