根據(jù)深度信息處理圖像的方法及裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明是有關(guān)于一種處理圖像的方法及裝置，且特別是有關(guān)于一種根據(jù)像素的深度信息處理圖像的方法及裝置。
【背景技術(shù)】
[0002]采用傳統(tǒng)電荷稱合元件(Charge-Coupled Device,簡(jiǎn)稱:CCD)相機(jī)在拍攝照片的過程中只會(huì)對(duì)整個(gè)圖像采樣一次，因此對(duì)于顏色亮暗明顯的圖像，會(huì)出現(xiàn)對(duì)整個(gè)圖像中明亮的區(qū)域過度曝光，陰暗的區(qū)域曝光不足的現(xiàn)象。寬動(dòng)態(tài)范圍(Wide Dynamic Range,簡(jiǎn)稱:WDR)技術(shù)采用特殊的數(shù)字信號(hào)處理(Digital Signal Processing,簡(jiǎn)稱:DSP)電路,其可對(duì)圖像中的明亮部分及陰暗部分分別進(jìn)行合適的曝光，然后再利用圖像融合的技術(shù)將兩個(gè)圖像中曝光較佳的明亮度分及陰暗部分取出并進(jìn)行重組，使得重組后的圖像中的明亮部分和陰暗部分都有合適的曝光。
[0003]然而，由于WDR技術(shù)只針對(duì)圖像中的明亮部分及陰暗部分進(jìn)行處理，未能區(qū)分這些部分的景深。若使用者欲拍攝的圖像中包含景深較近的拍攝主體以及景深較遠(yuǎn)的背景等需要強(qiáng)烈亮暗對(duì)比的區(qū)域，則執(zhí)行WDR將會(huì)得到暗部噪聲被放大且主體和背景對(duì)比不明顯的結(jié)果。

【發(fā)明內(nèi)容】

[0004]本發(fā)明提供一種根據(jù)深度信息處理圖像的方法及裝置，通過深度信息決定選取區(qū)塊，而可僅針對(duì)選取區(qū)塊進(jìn)行圖像處理。
[0005]本發(fā)明的根據(jù)深度信息處理圖像的方法適用于電子裝置。此方法先取得由立體成像系統(tǒng)拍攝的左圖像及右圖像，以及此左圖像及右圖像中相對(duì)應(yīng)的多個(gè)像素的深度圖，此深度圖記錄各個(gè)像素的深度。接著，顯示此左圖像及右圖像其中之一，以作為待處理圖像。然后，接收對(duì)于待處理圖像中至少一個(gè)像素的選取操作，并查詢深度圖，以在待處理圖像中查找其深度在選取操作所選取像素的深度前后的第一預(yù)設(shè)范圍內(nèi)的多個(gè)目標(biāo)像素，據(jù)此決定至少一個(gè)選取區(qū)塊。最后，對(duì)選取區(qū)塊執(zhí)行圖像處理。
[0006]在本發(fā)明的一實(shí)施例中，在上述取得由立體成像系統(tǒng)拍攝的左圖像及右圖像的步驟之后，所述方法還包括計(jì)算左圖像及右圖像相對(duì)應(yīng)的各個(gè)像素的像差，并根據(jù)立體成像系統(tǒng)的左鏡頭及右鏡頭拍攝左圖像及右圖像的焦距、左鏡頭及右鏡頭的鏡頭間距以及各個(gè)像素的像差，估測(cè)各個(gè)像素的深度。
[0007]在本發(fā)明的一實(shí)施例中，上述計(jì)算左圖像及右圖像相對(duì)應(yīng)的各個(gè)像素的像差的步驟包括根據(jù)各個(gè)像素在左圖像及右圖像中的位置，計(jì)算各個(gè)像素在左圖像及右圖像之間的位移，以作為像差。
[0008]在本發(fā)明的一實(shí)施例中，在上述決定選取區(qū)塊的步驟之后，所述方法還包括接收對(duì)于深度的容許度(tolerance)的調(diào)整操作，而根據(jù)此調(diào)整操作所調(diào)整的容許度，調(diào)整各個(gè)選取區(qū)塊的涵蓋范圍。
[0009]在本發(fā)明的一實(shí)施例中，在上述接收對(duì)于待處理圖像中像素的選取操作的步驟之后，所述方法還包括將深度圖所記錄的深度的數(shù)值范圍重新映射至選取操作所選取像素的深度前后的第二預(yù)設(shè)范圍，以將調(diào)整操作可調(diào)整的涵蓋范圍限制在第二預(yù)設(shè)范圍內(nèi)。
[0010]在本發(fā)明的一實(shí)施例中，上述對(duì)選取區(qū)塊執(zhí)行圖像處理的步驟還包括根據(jù)待處理圖像中各個(gè)像素的深度，對(duì)選取區(qū)塊以及待處理圖像中的其他區(qū)塊執(zhí)行圖像處理。
[0011]在本發(fā)明的一實(shí)施例中，上述根據(jù)待處理圖像中各個(gè)像素的深度，對(duì)選取區(qū)塊以及待處理圖像中的其他區(qū)塊執(zhí)行圖像處理的步驟包括根據(jù)待處理圖像中各個(gè)像素的深度，增加對(duì)于選取區(qū)塊執(zhí)行圖像處理的強(qiáng)度。
[0012]在本發(fā)明的一實(shí)施例中，上述圖像處理包括亮度、對(duì)比度、色溫、白平衡、銳利度、鮮艷度調(diào)整，或噪聲消除或特定顏色保留。
[0013]本發(fā)明的根據(jù)深度信息處理圖像的裝置包括檢索模塊、顯示模塊、區(qū)塊選取模塊及圖像處理模塊。其中，檢索模塊是用以取得由立體成像系統(tǒng)拍攝的左圖像及右圖像，以及左圖像及右圖像中相對(duì)應(yīng)的多個(gè)像素的深度圖，此深度圖記錄各個(gè)像素的深度。顯示模塊是用以在顯示單元中顯示左圖像及右圖像其中之一，以作為待處理圖像。區(qū)塊選取模塊是用以接收對(duì)于待處理圖像中至少一個(gè)像素的選取操作，據(jù)此查詢深度圖，以在待處理圖像中查找其深度在選取操作所選取像素的深度前后的第一預(yù)設(shè)范圍內(nèi)的多個(gè)目標(biāo)像素，以決定至少一個(gè)選取區(qū)塊。圖像處理模塊是用以對(duì)選取區(qū)塊執(zhí)行圖像處理。
[0014]在本發(fā)明的一實(shí)施例中，上述的裝置還包括深度分析模塊，其是用以計(jì)算檢索模塊所取得的左圖像及右圖像相對(duì)應(yīng)的各個(gè)像素的像差，并根據(jù)立體成像系統(tǒng)的左鏡頭及右鏡頭拍攝左圖像及右圖像的焦距、左鏡頭及右鏡頭的鏡頭間距以及各個(gè)像素的像差，估測(cè)各個(gè)像素的深度。
[0015]在本發(fā)明的一實(shí)施例中，上述的深度分析模塊是根據(jù)各個(gè)像素在左圖像及右圖像中的位置，計(jì)算各個(gè)像素在左圖像及右圖像的間的位移，以作為像差。
[0016]在本發(fā)明的一實(shí)施例中，上述的區(qū)塊選取模塊還接收對(duì)于深度的容許度的調(diào)整操作，并根據(jù)此調(diào)整操作所調(diào)整的容許度，以及待處理圖像中各個(gè)像素的深度，調(diào)整各個(gè)選取區(qū)塊的涵蓋范圍。
[0017]在本發(fā)明的一實(shí)施例中，上述的裝置還包括映射模塊，其是用以將深度圖所記錄的深度的數(shù)值范圍重新映射至選取操作所選取像素的深度前后的第二預(yù)設(shè)范圍，以將調(diào)整操作可調(diào)整的涵蓋范圍限制在第二預(yù)設(shè)范圍內(nèi)。
[0018]在本發(fā)明的一實(shí)施例中，上述的圖像處理模塊還根據(jù)待處理圖像中各個(gè)像素的深度，對(duì)選取區(qū)塊以及待處理圖像中的其他區(qū)塊執(zhí)行圖像處理。
[0019]在本發(fā)明的一實(shí)施例中，上述的圖像處理模塊是根據(jù)待處理圖像中各個(gè)像素的深度，增加對(duì)于選取區(qū)塊執(zhí)行圖像處理的強(qiáng)度。
[0020]在本發(fā)明的一實(shí)施例中，上述的圖像處理包括亮度、對(duì)比度、色溫、白平衡、銳利度、鮮艷度調(diào)整，或噪聲消除或特定顏色保留。
[0021]在本發(fā)明的一實(shí)施例中，上述的立體成像系統(tǒng)內(nèi)建在所述裝置中。
[0022]基于上述，本發(fā)明的根據(jù)深度信息處理圖像的方法及裝置通過查詢待處理圖像的深度圖，以提供使用者可經(jīng)由點(diǎn)選圖像以選取所欲處理的區(qū)塊，并對(duì)此選取區(qū)塊進(jìn)行特定的圖像處理。而通過僅針對(duì)選取區(qū)塊進(jìn)行圖像處理，或是針對(duì)選取區(qū)塊及其他區(qū)塊分別進(jìn)行不同種類或強(qiáng)度的圖像處理，而可獲得較佳的處理效果。
[0023]為讓本發(fā)明的上述特征和優(yōu)點(diǎn)能更明顯易懂，下文特舉實(shí)施例，并配合附圖作詳細(xì)說明如下。
【附圖說明】
[0024]圖1是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的裝置的方塊圖；
[0025]圖2是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的方法流程圖；
[0026]圖3 (a)?3 (c)是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的范例；
[0027]圖4是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的方法流程圖；
[0028]圖5 (a)?5 (b)是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的范例；
[0029]圖6是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的方法流程圖。
[0030]附圖標(biāo)記說明:
[0031]10:圖像處理裝置；
[0032]12:顯示單元；
[0033]14:存儲(chǔ)單元；
[0034]142:檢索模塊；
[0035]144:顯示模塊；
[0036]146:區(qū)塊選取模塊；
[0037]148:圖像處理模塊；
[0038]16:處理單元；
[0039]32:圖像；
[0040]34、50:深度圖；
[0041]36、52、54:選取區(qū)塊；
[0042]T1、T2、T3:觸碰點(diǎn)；
[0043]S202?S210、S402?S416、S602?S610:根據(jù)深度信息處理圖像的方法步驟。
【具體實(shí)施方式】
[0044]立體成像系統(tǒng)的雙鏡頭可拍攝同一區(qū)域不同角度的圖像，而結(jié)合左、右鏡頭所拍攝圖像間的像差信息以及預(yù)知的鏡頭間距，則可準(zhǔn)確估測(cè)出圖像中各個(gè)物件的深度信息。據(jù)此，本發(fā)明即通過立體成像系統(tǒng)所拍攝的左圖像及右圖像，估測(cè)圖像中像素的深度信息，并將此深度信息套用在使用者對(duì)于圖像中特定區(qū)塊的選取上。通過查詢使用者在圖像中點(diǎn)選區(qū)域的深度，從而圈選出此區(qū)域周圍深度值相近的像素所形成的區(qū)塊。之后，即可選擇性地僅針對(duì)此區(qū)塊內(nèi)的像素進(jìn)行特定圖像處理，或是針對(duì)此區(qū)塊內(nèi)及區(qū)塊外的像素分別進(jìn)行不同的圖像處理，從而達(dá)到針對(duì)圖像中特定區(qū)域進(jìn)行處理的功效。
[0045]圖1是依照本發(fā)明一實(shí)施例所示的根據(jù)深度信息處理圖像的裝置的方塊圖。請(qǐng)參照?qǐng)D1，本實(shí)施例的圖像處理裝置10例如是行動(dòng)電話、平板電腦、臺(tái)式電腦、筆記本電腦或包含立體呈像系統(tǒng)的立體像機(jī)，在此不設(shè)限。圖像處理裝置10包括顯示單元12、存儲(chǔ)單元14以及一個(gè)或多個(gè)處理單元(本實(shí)施例僅以處理單元16為例做說明，但不限于此)，其功能分述如下:
[0046]顯示單元12例如是液晶顯示器(Liquid Crystal Display,簡(jiǎn)稱:IXD)、發(fā)光二極體(Light-Emitting D1de,簡(jiǎn)稱:LED)顯不器或場(chǎng)發(fā)射顯不器(