一種立體圖像重定位方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及一種圖像信號(hào)的處理方法,尤其是涉及一種立體圖像重定位方法。
【背景技術(shù)】
[0002] 隨著立體顯示技術(shù)的快速發(fā)展,各種具有不同立體顯示功能的終端設(shè)備也廣泛出 現(xiàn),但由于立體顯示終端種類繁多,寬/高比規(guī)格不一,因此若將寬/高比一定的圖像放在 不同的立體顯示終端上顯示,就必須先對(duì)圖像尺寸進(jìn)行調(diào)整,以達(dá)到立體顯示的效果。傳統(tǒng) 的圖像縮放方法是通過裁剪或者是按固定比例進(jìn)行縮放,這樣做可能會(huì)出現(xiàn)圖像中的內(nèi)容 減少或者導(dǎo)致顯著物體變形。
[0003] 對(duì)于立體圖像而言,沿水平或垂直方向的拉伸或縮小處理會(huì)嚴(yán)重地影響立體效 果,導(dǎo)致雙目視差的變化,從而引起深度的失真,嚴(yán)重時(shí)會(huì)導(dǎo)致立體效果的喪失,因此,如何 對(duì)立體圖像的單個(gè)視點(diǎn)圖像進(jìn)行縮放以減少圖像形變、突出顯著內(nèi)容,如何保證縮放后左 視點(diǎn)圖像與右視點(diǎn)圖像的一致性,從而降低視覺不舒適、增強(qiáng)深度感,都是在對(duì)立體圖像進(jìn) 行重定位過程中需要研宄解決的問題。
【發(fā)明內(nèi)容】
[0004] 本發(fā)明所要解決的技術(shù)問題是提供一種符合顯著語(yǔ)義特征,且能夠有效地調(diào)整立 體圖像尺寸大小的立體圖像重定位方法。
[0005] 本發(fā)明解決上述技術(shù)問題所采用的技術(shù)方案為:一種立體圖像重定位方法,其特 征在于包括以下步驟:
[0006] ①將待處理的立體圖像的左視點(diǎn)圖像記為{LiO^y)},將待處理的立體圖像的 右視點(diǎn)圖像記為{RiUy)},將待處理的立體圖像的左視差圖記為{djx,y)},其中,i= 1,2, 3,1 <x<W,1 <y<H,W表示待處理的立體圖像的寬度,H表示待處理的立體圖像 的高度,Li(x,y)表示{Ljxj)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的第i個(gè)分量的顏色值, Ri(x,y)表示{Ri(X,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的第i個(gè)分量的顏色值,第1個(gè)分量 為R分量、第2個(gè)分量為G分量、第3個(gè)分量為B分量,4 (X,y)表不(X,y)}中坐標(biāo)位置 為(X,y)的像素點(diǎn)的像素值;
[0007] ②采用超像素分割技術(shù)將{LiO^y)}分割成M個(gè)互不重疊的區(qū)域;然后將 {Miy)}重新表示為M個(gè)區(qū)域的集合,記為{SPJ;接著通過計(jì)算{SPJ中的每個(gè)區(qū)域的顏 色對(duì)比度、空間緊密度和深度顯著值,獲取{SPJ中的每個(gè)區(qū)域的顯著值;再將{SPJ中的每 個(gè)區(qū)域的顯著值作為該區(qū)域中的所有像素點(diǎn)的顯著值,從而得到的立體顯著圖, 記為{Sstera)(x,y)};其中,M彡l,SPh表示{SPJ中的第h個(gè)區(qū)域,1彡h彡M,Sstera(x,y)表 示{SstOTra)(X,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值,亦表示{LiO^y)}中坐標(biāo)位置為 (X,y)的像素點(diǎn)的顯著值;
[0008] ③利用人類立體視覺感知對(duì)背景光照和對(duì)比度的視覺掩蔽效應(yīng),提取出 {Liky)}的雙目最小可察覺變化圖像,記為{JL(x,y)},其中,JL(x,y)表示{JL(x,y)}中坐 標(biāo)位置為(x,y)的像素點(diǎn)的像素值,亦表示{Li(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的雙 目最小可察覺變化值;
[0009] ④根據(jù){dJX,y)}獲取{LiUy)}中的每個(gè)像素點(diǎn)的深度能量值,并根據(jù) {Jjx,y)}獲取{LiO^y)}中的每個(gè)像素點(diǎn)的掩蔽能量值和一致性能量值,然后根據(jù) I(x,y)}中的每個(gè)像素點(diǎn)的深度能量值、掩蔽能量值和一致性能量值,得到{LiUy)}的 顯著能量圖,記為伍:3_。(1,7,1>1<)},其中,£ ;^。(1,7,1>1<)表示伍;^。(1,7,1>1<)}中坐標(biāo)位 置為(x,y)的像素點(diǎn)的像素值,亦表示{A(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的顯著能 量值,x""表示坐標(biāo)位置(x,y)的橫坐標(biāo)位置或與坐標(biāo)位置(x,y)水平相鄰的橫坐標(biāo)位置, x*G{x-1,x,x+1};
[0010]⑤將重定位后的立體圖像的寬度記為w',將{Liky)}和{Riky)}各自的垂直 縫隙的條數(shù)記為Ns,Ns=W-W',其中,W'〈W;
[0011]⑥根據(jù){SstOTeM(X,y)}和{EstOTeM(X,y,x,},通過動(dòng)態(tài)規(guī)劃方法找出{Li(X,y)}的 Ns 條垂直縫隙;然后獲取中的每個(gè)屬于遮擋區(qū)域的像素點(diǎn)的水平偏移值和每個(gè)屬 于匹配區(qū)域的像素點(diǎn)的水平偏移值;再根據(jù)中的每個(gè)屬于遮擋區(qū)域的像素點(diǎn)的 水平偏移值和每個(gè)屬于匹配區(qū)域的像素點(diǎn)的水平偏移值,對(duì){A(x,y)}的凡條垂直縫隙進(jìn) 行調(diào)整,得到的凡條最優(yōu)垂直縫隙,將{LiO^y)}的第i'條最優(yōu)垂直縫隙記為 {茍(力丨1 < #f小其中,1 <i,<Ns,茍(v)表示件Cv)IB#好丨在縱坐標(biāo)位置為y時(shí)的 橫坐標(biāo)位置;
[0012]⑦根據(jù){(^(X,y)}和{Li(X,y)}的Ns條最優(yōu)垂直縫隙,找出{Ri(X,y)}的 凡條最優(yōu)垂直縫隙,將{R,(x,y)}的第i,條最優(yōu)垂直縫隙記為{gOOMM"}, 斧(v) =茍(v) +《〇),v),其中,1彡i,彡Ns,茍⑴表示碎〇〇|1<3^叫在縱坐標(biāo)位置 為y時(shí)的橫坐標(biāo)位置,尖(茍Cy),_y)表示{djx,y)}中坐標(biāo)位置為(卑〇〇,_>〇的像素點(diǎn)的像素 值;
[0013] ⑧將{LiO^y)}中所有落在{LiO^y)}的凡條最優(yōu)垂直縫隙內(nèi)的像素點(diǎn)刪除, 得到重定位后的左視點(diǎn)圖像^(心^;并將{RiUy)}中所有落在{RiUy)}的凡條最 優(yōu)垂直縫隙內(nèi)的像素點(diǎn)刪除,得到重定位后的右視點(diǎn)圖像{瓦(XnV)};根據(jù)重定位后的左 視點(diǎn)圖像仏-V)}和重定位后的右視點(diǎn)圖像{^(X,7)},得到重定位后的立體圖像,其中, 1彡X#W',右表示[右(AJ)}中坐標(biāo)位置為(Xl,y)的像素點(diǎn)的第i個(gè)分量的顏色值, 反(xy)表示中坐標(biāo)位置為(Xl,y)的像素點(diǎn)的第i個(gè)分量的顏色值。
[0014] 所述的步驟②的具體過程為:
[0015]②-1、采用超像素分割技術(shù)將{LiO^y)}分割成M個(gè)互不重疊的區(qū)域,然后將 {LiUy)}重新表示為M個(gè)區(qū)域的集合,記為{SPJ,其中,l,SPh表示{SPJ中的第h個(gè) 區(qū)域,1彡h彡M;
[0016] ②-2、對(duì){SPJ中的每個(gè)區(qū)域中的每個(gè)像素點(diǎn)的各個(gè)分量的顏色值分別進(jìn)行 量化,得到{SPJ中的每個(gè)區(qū)域的量化區(qū)域,將SPh的量化區(qū)域記為 {P!u(xh,yh)}中坐標(biāo)位置為(xh,yh)的像素點(diǎn)的第i個(gè)分量的顏色值記為PuO^yhMg設(shè){P!u(xh,yh)}中坐標(biāo)位置為(Xh,yh)的像素點(diǎn)在{LiUy)}中的坐標(biāo)位置為(x,y),則 巧,,.〇/,,乃,)4£/〇,少)/16」,其中,1^^ 1^、1<71^1111,1表示5?11的寬度,11 11表示5?11 的高度,符號(hào)"L」"為向下取整符號(hào);
[0017] ②-3、計(jì)算{SPJ中的每個(gè)區(qū)域的量化區(qū)域的顏色直方圖,將{PuUbyh)}的顏色 直方圖記為j//.s/i⑷|〇a<4〇95j,其中,//、,:⑷表示{P^O^yh)}中屬于第k種顏色的所 有像素點(diǎn)的個(gè)數(shù);
[0018] ②-4、對(duì){SPJ中的每個(gè)區(qū)域的量化區(qū)域的顏色直方圖進(jìn)行歸一化操作,得 到對(duì)應(yīng)的歸一化后的顏色直方圖,將對(duì)(A)|0<A^4095j進(jìn)行歸一化操作后得到的 歸一化后的顏色直方圖記為I〃 &(/:) 1 () $K4()951 '
【主權(quán)項(xiàng)】
1. 一種立體圖像重定位方法,其特征在于包括以下步驟: ① 將待處理的立體圖像的左視點(diǎn)圖像記為{LiUy)},將待處理的立體圖像的右視點(diǎn) 圖像記為{RiUy)},將待處理的立體圖像的左視差圖記為{djx,y)},其中,i= 1,2,3, 1彡x彡W,1彡y彡H,W表示待處理的立體圖像的寬度,H表示待處理的立體圖像的高度, Li(x,y)表示{LiO^y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的第i個(gè)分量的顏色值,Ri(X,y)表 示{RiO^y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的第i個(gè)分量的顏色值,第1個(gè)分量為R分量、 第2個(gè)分量為G分量、第3個(gè)分量為B分量,4 (X,y)表不(X,y)