專利名稱:通過合并圖像的內(nèi)插與外推來減少圖像信號的掃描速率變換中的贗像的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及圖像信號的掃描速率變換的一種方法、設(shè)備、計算機程序和計算機程序產(chǎn)品。
背景技術(shù):
圖像信號的掃描速率變換是大量的視頻應(yīng)用領(lǐng)域中需要的。例如,對第二視頻標準要求的圖像頻率采用服從第一視頻標準的圖像信號的圖像頻率來說,掃描速率變換是必要的。這個過程通常結(jié)合了圖像內(nèi)插。然而,圖像內(nèi)插可能導(dǎo)致內(nèi)插圖像中令人討厭的贗像。
光暈贗像是在現(xiàn)代的高端電視機中配置的運動補償掃描速率變換系統(tǒng)中殘留的最討厭的贗像之一。在這些運動補償掃描速率變換系統(tǒng)中,通過說明了圖像信號的兩個連續(xù)圖像之間的像素或像素塊的位移的估計的運動矢量從兩個原始圖像中移動所選的像素,并且在移動后的像素上執(zhí)行某些線性的(例如,平均)或者非線性的(例如,中值濾波)操作,或者執(zhí)行它們二者,將一個新的圖像內(nèi)插到兩個原始圖像中間。光暈贗像主要在執(zhí)行內(nèi)插時發(fā)生在所謂閉塞區(qū)域中,也就是在將要用于內(nèi)插而且在不可能發(fā)生運動矢量估計程序期間不同于在所述兩個圖像中的圖像區(qū)域或塊的匹配的程度的兩個圖像中的圖像區(qū)域中。
當(dāng)前技術(shù)發(fā)展水平的掃描速率變換系統(tǒng)在閉塞區(qū)域中應(yīng)用不同的處理以減輕光暈贗像,例如在檢測到閉塞區(qū)域時,通過用單向圖像處理(例如,從將要內(nèi)插的兩個圖像之一中提取簡單的像素)取代雙向內(nèi)插。例如,國際申請WO 00/11863建議檢測一個圖像信號的圖像中作為閉塞區(qū)域標識符的邊界的存在,并按照所檢測的閉塞區(qū)域執(zhí)行雙向或單向處理。
圖1示意性地描述了例如在WO 00/11863中使用的當(dāng)前技術(shù)發(fā)展水平的掃描速率變換系統(tǒng)。該系統(tǒng)包括一個用于存儲已確定的運動矢量的高速緩沖存儲器1,一個用于存儲當(dāng)前圖像的像素的高速緩沖存儲器2和一個用于存儲先前圖像的像素的高速緩沖存儲器3。用新的運動矢量和與掃描速率變換器4操作同步的像素連續(xù)地更新這些高速緩沖存儲器。例如,可以用在先前圖像中定義一個塊(例如,由16×16像素組成的一個宏塊)并在當(dāng)前圖像中搜索類似塊的塊匹配算法來粗略地確定運動矢量,其中二維位移矢量則表示運動矢量。當(dāng)然,也可以應(yīng)用用于塊內(nèi)物體或包含視頻信號的幾個圖像的更簡明的估計技術(shù)。隨后連續(xù)地將已確定的運動矢量和那些來自與塊匹配處理中形成的塊相關(guān)聯(lián)的先前和當(dāng)前圖像的像素饋送到掃描速率變換器4中,它內(nèi)插當(dāng)前和先前像素以獲得內(nèi)插像素,并從先前或當(dāng)前圖像的像素外推以獲得外推像素。例如,可以通過用已確定的運動矢量移動來自先前和當(dāng)前圖像的像素,并在其上執(zhí)行某些線性(例如,平均)和/或非線性(例如,級聯(lián)式中值濾波)操作來實現(xiàn)內(nèi)插處理。無論如何,由于得到的內(nèi)插像素包含來自先前和當(dāng)前圖像二者的信息,所以可以認為內(nèi)插是雙向圖像處理技術(shù)。相反,外推處理僅依賴來自所述先前和當(dāng)前圖像之一的信息。例如,通過用已確定的運動矢量移動先前圖像的像素,只可以在其上執(zhí)行運動補償。從而,外推表現(xiàn)為單向圖像處理技術(shù)。
隨后,內(nèi)插和外推像素饋送到開關(guān)5,它選擇內(nèi)插或外推像素作為掃描速率變換系統(tǒng)的最終輸出像素。關(guān)于要選擇內(nèi)插或外推像素中的哪個的判決基于視頻信號圖像中閉塞區(qū)域的檢測,該檢測是由基于已確定的運動矢量的閉塞檢測例6執(zhí)行的。如果所述閉塞檢測例6確定實際處理的像素所屬的圖像區(qū)域是一個閉塞區(qū)域,則為了減少掃描速率變換的圖像中光暈贗像量,通過開關(guān)5選擇外推像素而不選擇內(nèi)插像素。如果判決實際處理的像素所屬的圖像區(qū)域不是一個閉塞區(qū)域,則由于在內(nèi)插非閉塞區(qū)域時不太可能出現(xiàn)光暈贗像,開關(guān)選擇內(nèi)插像素作為掃描速率變換系統(tǒng)的最終輸出信號。
在圖1的當(dāng)前技術(shù)發(fā)展水平的掃描速率變換系統(tǒng)中應(yīng)用的諸如外推技術(shù)之類的單向圖像處理完全取決于已確定的運動矢量域的性質(zhì)。即使為外推的圖像區(qū)域確定了一個正確的運動矢量,例如一個圖像的背景運動矢量,那么在掃描速率變換的圖像信號中,尤其在圖像信號中復(fù)雜運動的情況下,還是會出現(xiàn)新型的令人厭煩的贗像。實驗表明,即使對閉塞區(qū)域應(yīng)用空間模糊濾波器也不能去除這些新型的贗像。
考慮到上面提到的問題,和其它的問題,本發(fā)明的目的是提供用以改善圖像信號掃描速率變換的一種方法、一種設(shè)備、一種計算機程序和一種計算機程序產(chǎn)品。
發(fā)明內(nèi)容
提出了一種圖像信號掃描速率變換的方法,包括至少在所述圖像信號的第一圖像的第一圖像區(qū)域和所述圖像信號的第二圖像的第二圖像區(qū)域之間內(nèi)插,以獲得至少一個內(nèi)插圖像區(qū)域;外推所述圖像信號的至少一個圖像的至少一個圖像區(qū)域以獲得至少一個外推圖像區(qū)域;并混合所述至少一個內(nèi)插圖像區(qū)域和所述至少一個外推圖像區(qū)域以獲得一個混合圖像區(qū)域。
所述掃描速率變換方法,舉例來說,可以是一種基于像素或子像素的運動補償掃描速率變換方法,并且為了改變所述圖像信號的圖像頻率,可以應(yīng)用在多種類型的多媒體設(shè)備中,比如電視機、機頂盒、數(shù)字和模擬接收機、廣播電臺、計算機或手持設(shè)備。特別地,用于高清晰度電視(HDTV)系統(tǒng)的視頻信號的上變換可以用所述掃描速率變換方法實現(xiàn)。因此,所述圖像信號可以遵照多種圖像或視頻標準,舉例來說,可以表示根據(jù)全國電視系統(tǒng)委員會制式(NTSC)、逐行倒相制式(PAL)或者順序與存儲彩色電視系統(tǒng)(SECAM)標準的電視信號。
所述圖像信號通常由一個圖像序列組成,它又由圖像元素(像素)的行和列組成。所述像素的組形成每個圖像內(nèi)的圖像區(qū)域,例如像素塊。為了確定期望的掃描速率變換的圖像信號的圖像區(qū)域,可以執(zhí)行內(nèi)插,其中所述圖像暫時位于要變換的輸入圖像信號的兩個給定的圖像之間。通常,在每個所述第一和第二圖像內(nèi)只有一個相應(yīng)的圖像區(qū)域考慮作內(nèi)插,產(chǎn)生內(nèi)插圖像區(qū)域?;蛘撸暾牡谝缓偷诙D像可以考慮作內(nèi)插。在內(nèi)插處理中,也可能有利于合并多于兩個圖像的像素信息。
舉例來說可以通過從所述第一和第二圖像的相應(yīng)第一和第二圖像區(qū)域移位像素對應(yīng)的運動矢量,并在其上執(zhí)行某些線性(比如,平均)和/或非線性(比如,中值濾波或級聯(lián)式的中值濾波)操作來實現(xiàn)內(nèi)插處理,其中舉例來說可以由在第一圖像中定義一個圖像區(qū)域并在第二圖像中搜索類似圖像區(qū)域的塊匹配算法來確定所述運動矢量,其中二維位移矢量則表示運動矢量。同樣,也可以應(yīng)用多種包含圖像信號的幾個圖像的更簡明的估計技術(shù)。從內(nèi)插圖像區(qū)域的觀點看來,所述內(nèi)插從而可以設(shè)想為雙向圖像處理技術(shù)。
相反,所述圖像信號的所述至少一個圖像的所述至少一個圖像區(qū)域的所述外推僅從一個圖像中的一個圖像區(qū)域開始,并無需結(jié)合來自所述圖像信號的兩個圖像的像素信息確定所述外推圖像區(qū)域。例如,在沒有運動補償?shù)姆椒ㄖ校馔葡袼乜梢院唵蔚厥撬鰣D像信號的所述至少一個圖像的一個未處理的像素。在有運動補償?shù)姆椒ㄖ校梢酝ㄟ^移位所述至少一個圖像的像素對應(yīng)的運動矢量來獲得所述外推像素。從外推圖像區(qū)域的觀點看來,外推從而可以設(shè)想為單向圖像處理技術(shù)。所述至少一個圖像信號可以和所述第一或第二圖像相同,或者表示另外的圖像。同樣,所述至少一個圖像區(qū)域可以和所述第一或第二圖像區(qū)域相同,或者表示另外的圖像區(qū)域。
所述混合所述至少一個內(nèi)插圖像區(qū)域和所述至少一個外推圖像區(qū)域的步驟舉例來說可以用所述至少一個內(nèi)插圖像區(qū)域和所述至少一個外推圖像區(qū)域的加權(quán)加法來表示。從而,所述內(nèi)插圖像區(qū)域的像素的亮度和/或色度值可以與第一因數(shù)相乘,而且因此在相加之前,所述外推圖像區(qū)域的像素的亮度和/或色度值可以與第二因數(shù)相乘。
這種加權(quán)加法允許在作為混合圖像區(qū)域的內(nèi)插圖像區(qū)域和作為混合圖像區(qū)域的外推圖像區(qū)域之間的無縫淡入淡出,并且非常有助于減少由掃描速率變換器最終輸出的混合圖像區(qū)域中的贗像。例如,如果對識別為閉塞區(qū)域的圖像區(qū)域執(zhí)行了外推,并且如果該外推以之為基礎(chǔ)的已確定的運動矢量是不準確的,那么由于在作為混合圖像區(qū)域的內(nèi)插圖像區(qū)域和外推圖像區(qū)域之間的簡單切換操作,在當(dāng)前工藝水平的掃描速率變換系統(tǒng)中新型贗像的出現(xiàn)是不可避免的。然而,根據(jù)本發(fā)明的方法,不僅可以在選擇最終輸出混合圖像區(qū)域時在內(nèi)插圖像區(qū)域和外推圖像區(qū)域之間切換,也可以輸出包括內(nèi)插和外推圖像區(qū)域二者成分的圖像區(qū)域。在本示例中,從而有可能減少有利于內(nèi)插圖像區(qū)域的混合圖像區(qū)域中外推圖像區(qū)域的作用。這導(dǎo)致變換贗像的全面緩解,以及變換后圖像信號的改善的感知特性。
在混合步驟期間關(guān)于加權(quán)因數(shù)的選擇舉例來說可以基于評價已確定的運動矢量精確度的標準,或者基于預(yù)定的或動態(tài)調(diào)整的閾值。
根據(jù)本發(fā)明的方法,可能有利的是,該方法還包括識別所述圖像信號的所述圖像中的閉塞區(qū)域。所述閉塞區(qū)域舉例來說可以借助運動矢量估計和邊界檢測來識別。一個圖像的剩余區(qū)域隨后可以識別為非閉塞區(qū)域。
根據(jù)本發(fā)明的方法,可能有利的是,至少部分地依靠所述內(nèi)插和/或外推的圖像區(qū)域是否為閉塞區(qū)域的判定來執(zhí)行所述混合的步驟。光暈效果只在對是閉塞區(qū)域的圖像區(qū)域執(zhí)行內(nèi)插時發(fā)生。因此有利于合并關(guān)于內(nèi)插和/或外推到混合步驟中的圖像區(qū)域特性的知識。當(dāng)圖像區(qū)域是非閉塞區(qū)域時,可以以混合圖像區(qū)域完全由內(nèi)插圖像區(qū)域組成而沒有任何外推圖像區(qū)域影響的方式來執(zhí)行混合。相反,如果圖像區(qū)域是閉塞區(qū)域,那么由于閉塞區(qū)域中的內(nèi)插導(dǎo)致光暈贗像,可能有利于減少有利于外推圖像區(qū)域的混合圖像區(qū)域中內(nèi)插圖像區(qū)域的作用。
根據(jù)本發(fā)明的方法,可能有利的是,該方法還包括確定至少一個運動矢量,和關(guān)于所述圖像信號的至少一個圖像的至少一個圖像區(qū)域的至少一個相關(guān)聯(lián)匹配誤差。所述運動矢量描述了目標從圖像到圖像的移動,例如通過可從第一圖像內(nèi)的圖像區(qū)域或塊中出發(fā)并隨后在第二圖像中搜索類似的圖像區(qū)域或塊的塊匹配算法,其中在所述兩個圖像內(nèi)的所述圖像區(qū)域或塊之間的二維位移隨后可以表示一個運動矢量。對每個已確定的、對應(yīng)于它描述其位移的圖像區(qū)域或塊的運動矢量,可以計算出匹配誤差,其量化已經(jīng)被所述運動矢量投影時的所述第一圖像的所述圖像區(qū)域或塊與第二圖像中的圖像區(qū)域或塊之間的差異。
根據(jù)本發(fā)明的方法,可能有利的是,至少部分地依靠所述至少一個已確定的匹配誤差來執(zhí)行所述混合的步驟。因而,所述混合的步驟有可能依賴有關(guān)被內(nèi)插和/或外推的圖像區(qū)域是否為閉塞區(qū)域的判定,并依賴所述已確定的匹配誤差。所述匹配誤差舉例來說可以作為已確定的運動矢量的精確度的標識符來使用,而在所述混合的步驟中在所述內(nèi)插圖像區(qū)域和所述外推圖像區(qū)域相加之前可以與它們相乘的加權(quán)因數(shù)可以依賴所述匹配誤差。因而,在混合的步驟之后由所述掃描速率變換方法最終輸出的混合圖像區(qū)域中的所述內(nèi)插和外推圖像區(qū)域的作用可以適應(yīng)運動矢量的特性。如果運動矢量是錯誤的,則增大內(nèi)插圖像區(qū)域的作用,而如果運動矢量是精確的,則增大外推圖像區(qū)域的作用。如果已經(jīng)斷定要被內(nèi)插和/或外推的圖像區(qū)域是一個閉塞區(qū)域,則這是特別重要的。然而,在混合圖像區(qū)域中內(nèi)插圖像區(qū)域和外推圖像區(qū)域的作用是可以根據(jù)所述匹配誤差來調(diào)整的,反之,如果斷定當(dāng)前處理的是一個非閉塞區(qū)域,混合圖像區(qū)域可以直接設(shè)置為內(nèi)插圖像區(qū)域,而無需在混合步驟中考慮匹配誤差。
在運動補償?shù)膾呙杷俾首儞Q系統(tǒng)中,匹配誤差的計算是運動矢量估計器的一個整數(shù)部分,所以在驅(qū)動基于所述匹配誤差的混合操作時沒有出現(xiàn)了額外的計算復(fù)雜性。
根據(jù)本發(fā)明的方法,可能有利的是,根據(jù)絕對差(SAD)之和的標準來確定所述至少一個匹配誤差。然后,計算在已經(jīng)由一個相應(yīng)運動矢量投射的第一圖像的一個圖像區(qū)域或塊內(nèi)的所有像素與在第二圖像中的相應(yīng)圖像區(qū)域或塊中的像素之間的亮度和/或色度值的絕對差的總和?;蛘?,均方誤差(MSE)標準可以應(yīng)用于匹配誤差。
根據(jù)本發(fā)明的方法,可能有利的是,基于像素、行、塊或域并以所述至少一個圖像區(qū)域的預(yù)定模式確定所述至少一個匹配誤差。基于行、塊或域計算匹配誤差,與不得不考慮一個圖像區(qū)域或塊的所有像素的情況比較,可能有利于降低計算復(fù)雜性。
根據(jù)本發(fā)明的方法,可能有利的是,依靠執(zhí)行的所述混合的步驟,所述至少一個匹配誤差對應(yīng)于一個是非閉塞區(qū)域的圖像區(qū)域。得自閉塞區(qū)域的匹配誤差可能不準確,所以可能有利于使用來自是非閉塞區(qū)域的其它的、可能鄰近的圖像區(qū)域的匹配誤差。
根據(jù)本發(fā)明的方法,可能有利的是,依靠所述非閉塞區(qū)域的相應(yīng)運動矢量和期望的運動矢量之間的差來選擇所述非閉塞區(qū)域。所述期望的運動矢量舉例來說可以是一個背景運動矢量,可以利用搖鏡頭變焦模式來確定它。然后選擇一個不是一個閉塞區(qū)域而它的運動矢量接近所述背景運動矢量的圖像區(qū)域。對應(yīng)于所述圖像區(qū)域的匹配誤差隨后用于混合步驟。
根據(jù)本發(fā)明的方法,可能有利的是,所述非閉塞區(qū)域位于至少一個被內(nèi)插和/或外推的閉塞區(qū)域附近。舉例來說,如果所述圖像區(qū)域識別為閉塞區(qū)域,這可能有利于測試在被內(nèi)插和/或外推的圖像區(qū)域左邊和右邊的圖像區(qū)域。如果這些在左邊和右邊的圖像區(qū)域是非閉塞區(qū)域,可以確定它們相應(yīng)的運動矢量并將其與期望的運動矢量進行比較,比如背景運動矢量。隨后,對應(yīng)于與該背景運動矢量最接近的運動矢量的匹配誤差用于內(nèi)插和外推圖像區(qū)域的混合。
還提出了一種具有可操作以使處理器執(zhí)行所述方法步驟的指令的計算機程序。所述處理器舉例來說可以是一個提供和/或變換所述圖像信號的多媒體設(shè)備的中央處理器。
還提出了一種包括具有可操作以使處理器執(zhí)行所述方法步驟的指令的計算機程序的計算機程序產(chǎn)品。
還提出了一種圖像信號掃描速率變換的設(shè)備,該設(shè)備包括至少在所述圖像信號的第一圖像的第一圖像區(qū)域和所述圖像信號的第二圖像的第二圖像區(qū)域之間內(nèi)插,以獲得至少一個內(nèi)插圖像區(qū)域的裝置;外推所述圖像信號的至少一個圖像的至少一個圖像區(qū)域以獲得至少一個外推圖像區(qū)域的裝置;和混合所述至少一個內(nèi)插圖像區(qū)域和所述至少一個外推圖像區(qū)域以獲得一個混合圖像區(qū)域的裝置。
根據(jù)本發(fā)明的設(shè)備,可能有利的是,該設(shè)備還包括在所述圖像信號的所述圖像中識別閉塞區(qū)域的裝置。
根據(jù)本發(fā)明的設(shè)備,可能有利的是,該設(shè)備還包括確定所述圖像信號的至少一個圖像的至少一個圖像區(qū)域的至少一個運動矢量和至少一個相關(guān)聯(lián)匹配誤差的裝置。
本發(fā)明的這些和其它的方面將通過參考下文中描述的實施方式被闡明而顯而易見。
在附圖中示出了圖1.根據(jù)現(xiàn)有技術(shù)的掃描速率變換系統(tǒng);圖2.根據(jù)本發(fā)明的掃描速率變換系統(tǒng);和圖3.根據(jù)本發(fā)明的方法的流程圖。
具體實施例方式
圖2示意性地描述了根據(jù)本發(fā)明的掃描速率變換系統(tǒng)。圖2系統(tǒng)的基本結(jié)構(gòu)與圖1的現(xiàn)有技術(shù)系統(tǒng)相同。但是,在圖2的系統(tǒng)中,用混合器7代替了開關(guān)5,而且更改了高速緩沖存儲器1,以便它現(xiàn)在既包括運動矢量又包括相應(yīng)的匹配誤差。這些匹配誤差被饋送到所述混合器例7。
在混合器例7及其輸入上,顯露了現(xiàn)有技術(shù)的掃描速率變換系統(tǒng)和根據(jù)本發(fā)明的掃描速率變換系統(tǒng)之間的決定性差別。除了由掃描速率變換器4輸出的內(nèi)插及外推像素和來自閉塞檢測例6的可以得自運動矢量的關(guān)于閉塞區(qū)域的信息之外,混合器例7還接收表示已確定的運動矢量精確度的匹配誤差信息。
在圖3的流程圖中示意性地描述了混合器例7的操作。在步驟10,基于來自閉塞檢測例6的信息,混合器例7檢查當(dāng)前要掃描速率變換的像素的圖像區(qū)域是否為一個閉塞區(qū)域。如果不是這樣,則進行內(nèi)插而不會導(dǎo)致光暈贗像是可能的,而且在步驟11中,簡單地將輸出像素設(shè)置為內(nèi)插像素。如果在步驟10中識別圖像區(qū)域是一個閉塞區(qū)域,則在步驟12中混合器例6檢查可由高速緩沖存儲器1用于所述混合器例6的匹配誤差是否低于某個閾值。注意,由于當(dāng)前圖像區(qū)域是一個使相應(yīng)匹配誤差非常不準確的閉塞區(qū)域的事實,在步驟12中檢查的匹配誤差不是從當(dāng)前圖像區(qū)域得出的,而是從一個識別為非閉塞區(qū)域而且其相應(yīng)運動矢量接近于已確定的背景矢量的鄰近圖像區(qū)域得出的。如果在步驟12中的判定為正,則認為匹配誤差低,并且,相應(yīng)地,假定已確定的運動矢量是準確的,以便在步驟13中能夠?qū)⑤敵鱿袼卦O(shè)置為外推像素而不會導(dǎo)致新型的贗像?;蛘撸绻诓襟E12中的判定為負,則由掃描速率變換系統(tǒng)輸出內(nèi)插和外推像素的加權(quán)和。為了這個目的,在步驟14中從在步驟12中使用的匹配誤差得出第一加權(quán)因數(shù)we和w,并且,最終,在步驟15中,將輸出像素設(shè)置為內(nèi)插和外推像素的加權(quán)和。
已經(jīng)借助于實施方式說明了本發(fā)明。應(yīng)該注意到,對本領(lǐng)域的技術(shù)人員來說有顯然的替代方式和變化,而且可以在不脫離所附權(quán)利要求的范圍和主旨的情況下可以實現(xiàn)它們。特別地,可以應(yīng)用檢測閉塞和內(nèi)插及外推的不同技術(shù),而且在混合步驟內(nèi),可以使用可替換的標準控制在完全由外推像素組成的輸出像素和完全由內(nèi)插像素組成的輸出像素之間的淡入淡出。例如,這可以包括均方誤差(MSE)匹配誤差標準,也包括以像素的行或者像素的一些格柵或者結(jié)構(gòu)為基礎(chǔ)計算的所有類型的匹配誤差標準,尤其節(jié)省計算。取代僅對圖像的圖像區(qū)域執(zhí)行內(nèi)插和外推,對整個圖像執(zhí)行它們可能是有利的。很容易看到,不僅是閉塞區(qū)域的檢測,而且還有導(dǎo)致雙向內(nèi)插的性能降低的其它圖像特性的檢測,可以在本發(fā)明中使用,以指出單向外推可能是有利的。
權(quán)利要求
1.一種用于圖像信號掃描速率變換的方法,包括-至少在所述圖像信號的第一圖像的第一圖像區(qū)域和所述圖像信號的第二圖像的第二圖像區(qū)域之間內(nèi)插,以獲得至少一個內(nèi)插圖像區(qū)域;-外推所述圖像信號的至少一個圖像的至少一個圖像區(qū)域以獲得至少一個外推圖像區(qū)域;并且-混合所述至少一個內(nèi)插圖像區(qū)域和所述至少一個外推圖像區(qū)域以獲得一混合圖像區(qū)域。
2.根據(jù)權(quán)利要求1的方法,還包括-識別所述圖像信號的所述圖像中的閉塞區(qū)域。
3.根據(jù)權(quán)利要求2的方法,其中所述混合步驟依賴所述被內(nèi)插和/或外推的圖像區(qū)域是否為閉塞區(qū)域的判決來至少部分地執(zhí)行。
4.根據(jù)權(quán)利要求1-3的方法,還包括-確定至少一個運動矢量,和關(guān)于所述圖像信號的至少一個圖像的至少一個圖像區(qū)域的至少一個相關(guān)聯(lián)匹配誤差。
5.根據(jù)權(quán)利要求4的方法,其中所述混合步驟依賴所述至少一個已確定的匹配誤差來至少部分地執(zhí)行。
6.根據(jù)權(quán)利要求4-5中任意一個的方法,其中所述至少一個匹配誤差是根據(jù)絕對差之和(SAD)的標準來確定的。
7.根據(jù)權(quán)利要求4-6中任意一個的方法,其中所述至少一個匹配誤差是基于像素、行、塊或域并對于所述至少一個圖像區(qū)域以預(yù)定模式確定的。
8.根據(jù)權(quán)利要求5-7中任一個的方法,其中依靠其執(zhí)行所述混合步驟的所述至少一個匹配誤差對應(yīng)于是非閉塞區(qū)域的圖像區(qū)域。
9.根據(jù)權(quán)利要求8的方法,其中所述非閉塞圖像區(qū)域是依靠其相應(yīng)的運動矢量和期望的運動矢量之間的差來選擇的。
10.根據(jù)權(quán)利要求9的方法,其中所述非閉塞區(qū)域位于至少一個被內(nèi)插和/或外推的閉塞區(qū)域附近。
11.一種具有可操作以使處理器執(zhí)行權(quán)利要求1-10的方法步驟的指令的計算機程序。
12.一種包括具有可操作以使處理器執(zhí)行權(quán)利要求1-10的方法步驟的指令的計算機程序的計算機程序產(chǎn)品。
13.一種用于圖像信號掃描速率變換的設(shè)備,包括-至少在所述圖像信號的第一圖像的第一圖像區(qū)域和所述圖像信號的第二圖像的第二圖像區(qū)域之間內(nèi)插以獲得至少一個內(nèi)插圖像區(qū)域的裝置;-外推所述圖像信號的至少一個圖像的至少一個圖像區(qū)域以獲得至少一個外推圖像區(qū)域的裝置;和-混合所述至少一個內(nèi)插圖像區(qū)域和所述至少一個外推圖像區(qū)域以獲得一個混合圖像區(qū)域的裝置。
14.根據(jù)權(quán)利要求13的設(shè)備,還包括-用以識別所述圖像信號的所述圖像中的閉塞區(qū)域的裝置。
15.根據(jù)權(quán)利要求13-14中任意一個的設(shè)備,還包括-用以確定所述圖像信號的至少一個圖像的至少一個圖像區(qū)域的至少一個運動矢量和至少一個相關(guān)聯(lián)匹配誤差的裝置。
全文摘要
本發(fā)明涉及圖像信號的掃描速率變換的一種方法、設(shè)備、計算機程序和計算機程序產(chǎn)品,包括至少在所述圖像信號的第一圖像的第一圖像區(qū)域和所述圖像信號的第二圖像的第二圖像區(qū)域之間內(nèi)插,以獲得至少一個內(nèi)插圖像區(qū)域;外推所述圖像信號的至少一個圖像的至少一個圖像區(qū)域以獲得至少一個外推圖像區(qū)域;并混合所述至少一個內(nèi)插圖像區(qū)域和至少一個外推圖像區(qū)域以獲得一個混合的圖像區(qū)域。所述混合步驟有利地取決于要內(nèi)插和/或外推的圖像區(qū)域是不是一個閉塞區(qū)域的判決,并取決于至少一個確定的運動矢量的精確度。
文檔編號H04N7/01GK1922873SQ200580005631
公開日2007年2月28日 申請日期2005年2月18日 優(yōu)先權(quán)日2004年2月23日
發(fā)明者R·J·N·弗博格, H·本坦 申請人:皇家飛利浦電子股份有限公司