專(zhuān)利名稱(chēng):圖像處理設(shè)備和圖像處理方法
技術(shù)領(lǐng)域:
實(shí)施例一般涉及圖像處理設(shè)備和圖像處理方法。
背景技術(shù):
價(jià)格驅(qū)動(dòng)的產(chǎn)品(例如,諸如移動(dòng)電話或多媒體播放器/錄像機(jī)的幾乎所有非專(zhuān)用照相機(jī)實(shí)現(xiàn)的消費(fèi)設(shè)備)中的照相機(jī)模塊可以以稱(chēng)為“滾動(dòng)快門(mén)”的電子方式實(shí)現(xiàn)快門(mén)機(jī)制。不像在經(jīng)典照相機(jī)設(shè)備中,其中傳感器(或膠片)曝光可以通過(guò)機(jī)械卷簾控制,而電子快門(mén)可以通過(guò)激勵(lì)且隨后去激勵(lì)相應(yīng)傳感器元件這樣做。盡管所謂的同步快門(mén)可以同時(shí)激勵(lì)和去激勵(lì)所有的光敏單元,滾動(dòng)快門(mén)可以通過(guò)逐行曝光傳感器工作。同步快門(mén)可能涉及讀出邏輯,因?yàn)榭赡茚槍?duì)所有行需要同步發(fā)生到影子存儲(chǔ)器的轉(zhuǎn)移,因而增加了設(shè)備復(fù)雜性且進(jìn)而增加了成本?;跐L動(dòng)快門(mén)的解決方案幾乎可以在整個(gè)幀周期上擴(kuò)展讀出時(shí)間,因而允許片上相對(duì)低速和小的緩沖器。因此,實(shí)際上,在除了消費(fèi)數(shù)碼照片中的最高質(zhì)量片段之外的所有中,基于滾動(dòng)快門(mén)的系統(tǒng)可以是流行的解決方案。成本和復(fù)雜性的優(yōu)點(diǎn)可以在某一價(jià)格體現(xiàn),但是因?yàn)楦餍锌赡茉诓煌瑫r(shí)間點(diǎn)暴露于光,快速移動(dòng)的對(duì)象(或照相機(jī)移動(dòng)/搖攝)可能導(dǎo)致明顯的偽像。
發(fā)明內(nèi)容
本發(fā)明第一方面涉及一種圖像處理設(shè)備,包含
第一圖像采集器,配置成采集第一空間分辨率的第一圖像;
第二圖像采集器,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;
確定器,配置成基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置;以及
復(fù)制電路,配置成基于確定的位置將第二圖像的預(yù)定部分復(fù)制到輸出圖像中的位置。本發(fā)明第二方面涉及一種圖像處理方法,包含
采集第一空間分辨率的第一圖像;
采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;
基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置;以及
基于確定的位置,將第二圖像的預(yù)定部分復(fù)制到輸出圖像中的位置。本發(fā)明第三方面涉及一種圖像處理設(shè)備,包括
第一圖像采集器,配置成采集第一空間分辨率的第一圖像;
第二圖像采集器,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;
放大電路,配置成將第一圖像放大到第二空間分辨率;運(yùn)動(dòng)向量采集器,配置成基于執(zhí)行第二圖像相對(duì)于放大的第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及
發(fā)生電路,配置成基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。本發(fā)明第四方面涉及一種圖像處理方法,包含
采集第一空間分辨率的第一圖像;
采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;
將第一圖像放大到第二空間分辨率;
基于執(zhí)行第二圖像相對(duì)于放大的第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。
在附圖中,貫穿不同視圖,相似的參考符號(hào)一般表示相同的部件。附圖沒(méi)有必要按比例繪制,而是將重點(diǎn)放在說(shuō)明本發(fā)明的原理上。在下面的描述中,將參考下圖描述本發(fā)明的各個(gè)實(shí)施例。附圖中
圖I示出說(shuō)明同步快門(mén)的圖像采集的圖示;
圖2示出說(shuō)明滾動(dòng)快門(mén)的圖像采集的圖示;
圖3示出根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備;
圖4示出根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備;
圖5示出說(shuō)明根據(jù)一個(gè)實(shí)施例的圖像處理方法的流程圖6示出根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備;
圖7示出說(shuō)明根據(jù)一個(gè)實(shí)施例的圖像處理方法的流程圖8示出說(shuō)明根據(jù)一個(gè)實(shí)施例的第一圖像的圖像采集的圖示;
圖9示出說(shuō)明根據(jù)一個(gè)實(shí)施例的輸出圖像的產(chǎn)生的圖示;
圖10示出根據(jù)一個(gè)實(shí)施例的第二圖像;
圖11示出根據(jù)一個(gè)實(shí)施例的第一圖像;
圖12示出根據(jù)一個(gè)實(shí)施例的放大的第一圖像;以及圖13示出根據(jù)一個(gè)實(shí)施例的輸出圖像。
具體實(shí)施例方式下面的詳細(xì)描述參考附圖,附圖以說(shuō)明性方式示出可以實(shí)踐本發(fā)明的特定細(xì)節(jié)和實(shí)施例。這些實(shí)施例被足夠詳細(xì)地描述以使得本領(lǐng)域技術(shù)人員能夠?qū)嵺`本發(fā)明??梢岳闷渌麑?shí)施例且可以在不偏離本發(fā)明的范圍的條件下做出結(jié)構(gòu)、邏輯和電學(xué)變化。各個(gè)實(shí)施例沒(méi)有必要相互排他,因?yàn)橐恍?shí)施例可以與一個(gè)或更多其他實(shí)施例組合以形成新的實(shí)施例。術(shù)語(yǔ)“耦合”或“連接”分別旨在包括直接“耦合”或直接“連接”以及間接“耦合” 或間接“連接”。此處使用用詞“示例性”來(lái)表示“用作示例、實(shí)例或說(shuō)明”。此處描述為“示例性” 的任意實(shí)施例或設(shè)計(jì)沒(méi)有必要解讀為比其他實(shí)施例或設(shè)計(jì)更優(yōu)選或有利。
圖像處理設(shè)備可以包括存儲(chǔ)器,該存儲(chǔ)器例如可以在終端用戶設(shè)備實(shí)施的處理中使用。在實(shí)施例中使用的存儲(chǔ)器可以是易失性存儲(chǔ)器,例如DRAM (動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器); 或非易失性存儲(chǔ)器,例如PROM (可編程只讀存儲(chǔ)器)、EPROM (可擦除PROM)、EEPROM (電學(xué)可擦除PR0M);或閃存,例如,浮柵存儲(chǔ)器、電荷捕獲存儲(chǔ)器、MRAM (磁阻隨機(jī)存取存儲(chǔ)器)或 PCRAM (相變隨機(jī)存取存儲(chǔ)器)。在一個(gè)實(shí)施例中,“電路”可以理解成任意種類(lèi)的邏輯實(shí)現(xiàn)實(shí)體,其可以是專(zhuān)用目的電子電路或執(zhí)行存儲(chǔ)在存儲(chǔ)器中的軟件、固件或其任意組合的處理器。因而,在一個(gè)實(shí)施例中,“電路”可以是硬布線邏輯電路或諸如可編程處理器的可編程邏輯電路,例如是微處理器(例如,復(fù)雜指令集計(jì)算機(jī)(CISC)處理器或精簡(jiǎn)指令集計(jì)算機(jī)(RISC)處理器)?!半娐贰边€可以是執(zhí)行軟件的處理器,所述軟件例如任意種類(lèi)的計(jì)算機(jī)程序,例如,使用諸如例如Java的虛擬機(jī)代碼的計(jì)算機(jī)程序。根據(jù)備選實(shí)施例,下面將更詳細(xì)描述的相應(yīng)功能的任意其他種類(lèi)的實(shí)現(xiàn)也可以理解為“電路”。為設(shè)備提供各種實(shí)施例,且為方法提供各種實(shí)施例。應(yīng)當(dāng)理解,方法也具有設(shè)備的基本屬性,且反之亦然。因此,為簡(jiǎn)單起見(jiàn),可以省略這些屬性的重復(fù)描述。價(jià)格驅(qū)動(dòng)的產(chǎn)品(例如,諸如移動(dòng)電話或多媒體播放器/錄像機(jī)的幾乎所有非專(zhuān)用照相機(jī)實(shí)現(xiàn)的消費(fèi)設(shè)備)中的照相機(jī)模塊可以以稱(chēng)為“滾動(dòng)快門(mén)”的電子方式實(shí)現(xiàn)快門(mén)機(jī)制。不像在經(jīng)典照相機(jī)設(shè)備中,其中傳感器(或膠片)曝光可以通過(guò)機(jī)械卷簾控制,而電子快門(mén)可以通過(guò)激勵(lì)且隨后去激勵(lì)相應(yīng)傳感器元件這樣做。盡管所謂的同步快門(mén)可以同時(shí)激勵(lì)和去激勵(lì)所有的光敏單元,滾動(dòng)快門(mén)可以通過(guò)逐行曝光傳感器工作。同步快門(mén)可能涉及讀出邏輯,因?yàn)榭赡茚槍?duì)所有行需要同步發(fā)生到影子存儲(chǔ)器的轉(zhuǎn)移,因而增加了設(shè)備復(fù)雜性且進(jìn)而增加了成本?;跐L動(dòng)快門(mén)的解決方案幾乎可以在整個(gè)幀周期上擴(kuò)展讀出時(shí)間,因而允許片上相對(duì)低速和小的緩沖器。因此,實(shí)際上,在除了消費(fèi)數(shù)碼照片中的最高質(zhì)量片段之外的所有中,基于滾動(dòng)快門(mén)的系統(tǒng)可以是流行的解決方案。成本和復(fù)雜性的優(yōu)點(diǎn)可以在某一價(jià)格體現(xiàn),但是因?yàn)楦餍锌赡茉诓煌瑫r(shí)間點(diǎn)暴露于光,快速移動(dòng)的對(duì)象(或照相機(jī)移動(dòng)/搖攝)可能導(dǎo)致明顯的偽像。在常用設(shè)備中,這被考慮且廣泛地認(rèn)為是質(zhì)量和成本的折中。在常用設(shè)備中,上述偽像的減小可以通過(guò)減小用于幀的讀出時(shí)間實(shí)現(xiàn),因而折中了滾動(dòng)快門(mén)機(jī)制的成本優(yōu)勢(shì)。根據(jù)各個(gè)實(shí)施例,可以提供用于減小偽像而不折中滾動(dòng)快門(mén)傳感器的成本優(yōu)勢(shì)的設(shè)備和方法。圖I示出說(shuō)明同步快門(mén)的圖像采集的圖示100。例如,獲取數(shù)字圖像的場(chǎng)景可以由相對(duì)于照相機(jī)從左向右移動(dòng)的球104 (以暗灰色示出)組成。同步快門(mén)可以立即記錄該場(chǎng)景,換句話說(shuō),在曝光時(shí)間期間記錄該場(chǎng)景,如箭頭102所指示。因而,球104可以在圖像的圖像平面106上表達(dá)為像素108 (以淺灰色示出)。盡管球可能是移動(dòng)的,像素108的形狀可以幾乎是球104的形狀,因?yàn)樗邢袼乜梢酝瑫r(shí)被獲取。圖2示出說(shuō)明滾動(dòng)快門(mén)的圖像采集的圖示200。滾動(dòng)快門(mén)可以逐行記錄圖像;因而,移動(dòng)的球可以示意為傳感器上的修剪橢圓體,如下面更詳細(xì)解釋。例如,在時(shí)間T,使用滾動(dòng)快門(mén)機(jī)制,可以采集第一行圖像的像素,如第一箭頭206 所示。沒(méi)有第一行的像素可以對(duì)應(yīng)于時(shí)間T的球204的位置,使得僅可以采集背景像素(以白色示出),且至此采集的數(shù)字圖像202可能僅包括第一行白色像素。例如,在時(shí)間T+1,使用滾動(dòng)快門(mén)機(jī)制,可以采集第二行圖像的像素,如第二箭頭 212所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球210可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘诙兄胁杉瘜?duì)應(yīng)于球210的像素,使得第二行中球的表達(dá)214可以被采集且可以添加到至此采集的數(shù)字圖像208中。例如,在時(shí)間T+2,使用滾動(dòng)快門(mén)機(jī)制,可以采集第三行圖像的像素,如第三箭頭 212所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球218可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘谌兄胁杉瘜?duì)應(yīng)于球218的像素,使得第三行中球的表達(dá)222可以被采集且可以添加到至此采集的數(shù)字圖像216。例如,在時(shí)間T+3,使用滾動(dòng)快門(mén)機(jī)制,可以采集第四行圖像的像素,如第四箭頭 228所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球226可以存在于比前一時(shí)間步驟更靠右的位置。可以在第四行中采集對(duì)應(yīng)于球226的像素,使得第四行中球的表達(dá)230可以被采集且可以添加到至此采集的數(shù)字圖像224。例如,在時(shí)間T+4,使用滾動(dòng)快門(mén)機(jī)制,可以采集第五行圖像的像素,如第五箭頭 236所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球234可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘谖逍兄胁杉瘜?duì)應(yīng)于球234的像素,使得第五行中球的表達(dá)238可以被采集且可以添加到至此采集的數(shù)字圖像232。例如,在時(shí)間T+5,使用滾動(dòng)快門(mén)機(jī)制,可以采集第六行圖像的像素,如第六箭頭 244所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球242可以存在于比前一時(shí)間步驟更靠右的位置。可以在第六行中采集對(duì)應(yīng)于球242的像素,使得第六行中球的表達(dá)246可以被采集且可以添加到至此采集的數(shù)字圖像240。例如,在時(shí)間T+6,使用滾動(dòng)快門(mén)機(jī)制,可以采集第七行圖像的像素,如第七箭頭 252所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球250可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘谄咝兄胁杉瘜?duì)應(yīng)于球250的像素,使得第七行中球的表達(dá)254可以被采集且可以添加到至此采集的數(shù)字圖像248。例如,在時(shí)間T+7,使用滾動(dòng)快門(mén)機(jī)制,可以采集第八行圖像的像素,如第八箭頭 260所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球258可以存在于比前一時(shí)間步驟更靠右的位置。可以在第八行中采集對(duì)應(yīng)于球258的像素,使得第八行中球的表達(dá)262可以被采集且可以添加到至此采集的數(shù)字圖像256。例如,在時(shí)間T+8,使用滾動(dòng)快門(mén)機(jī)制,可以采集第九行圖像的像素,如第九箭頭 268所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球266可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘诰判兄胁杉瘜?duì)應(yīng)于球266的像素,使得第九行中球的表達(dá)270可以被采集且可以添加到至此采集的數(shù)字圖像264。例如,在時(shí)間T+9,使用滾動(dòng)快門(mén)機(jī)制,可以采集第十行圖像的像素,如第十箭頭 276所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球274可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘谑兄胁杉瘜?duì)應(yīng)于球274的像素,使得第十行中球的表達(dá)276可以被采集且可以添加到至此采集的數(shù)字圖像272。例如,在時(shí)間T+10,使用滾動(dòng)快門(mén)機(jī)制,可以采集第i^一行圖像的像素,如第i^一箭頭284所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球282可以存在于比前一時(shí)間步驟更靠右的位置。可以在第十一行中采集對(duì)應(yīng)于球282的像素,使得第十一行中球的表達(dá)284 可以被采集且可以添加到至此采集的數(shù)字圖像280。 例如,在時(shí)間T+11,使用滾動(dòng)快門(mén)機(jī)制,可以采集第十二行圖像的像素,如第十二箭頭292所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球290可以存在于比前一時(shí)間步驟更靠右的位置。第十二行中沒(méi)有像素可以對(duì)應(yīng)于球290,使得對(duì)應(yīng)于背景的一行白色像素可以被添加到至此采集的數(shù)字圖像288。圖3示出根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備300。圖像處理設(shè)備300可以包括第一圖像采集器302,配置成采集第一空間分辨率的第一圖像;第二圖像采集器304,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率可以高于第一空間分辨率;確定器 306,配置成基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置;以及復(fù)制電路308,配置成基于確定的位置將第二圖像的預(yù)定部分復(fù)制到輸出圖像中的位置。第一圖像采集器302、第二圖像采集器304、確定器306和復(fù)制電路 308例如可以經(jīng)由諸如例如線纜或計(jì)算機(jī)總線的電學(xué)連接310或經(jīng)由任意其他合適的電學(xué)連接彼此耦合以交換電學(xué)信號(hào)。根據(jù)各個(gè)實(shí)施例,第一圖像和第二圖像可以是彩色圖像,例如RGB (紅一綠一藍(lán))彩色圖像。根據(jù)各個(gè)實(shí)施例,第一圖像和第二圖像可以是黑白圖像。根據(jù)各個(gè)實(shí)施例,輸出圖像可以具有第二空間分辨率。根據(jù)各個(gè)實(shí)施例,預(yù)定相似度標(biāo)準(zhǔn)可以是或可以包括用于將第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。根據(jù)各個(gè)實(shí)施例,預(yù)定相似度標(biāo)準(zhǔn)可以是或可以包括第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是最小化第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或最小化第一圖像的像素值和第二圖像的像素值之差的平方和。圖4示出根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備400。類(lèi)似于圖3的圖像處理設(shè)備 300,圖像處理設(shè)備400可以包括第一圖像采集器302、第二圖像采集器304、確定器305和復(fù)制電路308。如下面更詳細(xì)描述,圖像處理設(shè)備400還可以包括放大電路(upscaling circuit) 402。如下面更詳細(xì)描述,圖像處理設(shè)備400還可以包括圖像傳感器配置器404。 如下面更詳細(xì)描述,圖像處理設(shè)備400還可以包括分割電路406。如下面更詳細(xì)描述,圖像處理設(shè)備400還可以包括運(yùn)動(dòng)向量采集器408。如下面更詳細(xì)描述,圖像處理設(shè)備400還可以包括發(fā)生電路410。第一圖像采集器302、第二圖像采集器304、確定器306、復(fù)制電路 308、放大電路402、圖像傳感器配置器404、分割電路406、運(yùn)動(dòng)向量采集器408和發(fā)生電路 410例如可以經(jīng)由諸如例如線纜或計(jì)算機(jī)總線的電學(xué)連接310或經(jīng)由任意其他合適的電學(xué)連接彼此耦合以交換電學(xué)信號(hào)。根據(jù)各個(gè)實(shí)施例,放大電路402可以配置成將第一圖像放大到第二空間分辨率。 根據(jù)各個(gè)實(shí)施例,確定器306可以進(jìn)一步配置成基于另一預(yù)定相似度標(biāo)準(zhǔn)確定放大的第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的放大的第一圖像的一部分的位置。根據(jù)各個(gè)實(shí)施例,復(fù)制電路308還可以配置成,對(duì)于沒(méi)有復(fù)制第二圖像的任何部分的輸出圖像的區(qū)域,復(fù)制放大的第一圖像的區(qū)域(例如到?jīng)]有復(fù)制第二圖像的任何部分的輸出圖像的區(qū)域)。根據(jù)各個(gè)實(shí)施例,輸出圖像的區(qū)域可以對(duì)應(yīng)于或可以等同于放大的第一圖像的區(qū)域。根據(jù)各個(gè)實(shí)施例,該另一預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是用于將放大的第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。根據(jù)各個(gè)實(shí)施例,該另一預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是放大的第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或放大的第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,該另一預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是最小化放大的第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或最小化放大的第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,第一圖像可以具有第一時(shí)間分辨率且第二圖像可以具有第二時(shí)間分辨率。根據(jù)各個(gè)實(shí)施例,第一時(shí)間分辨率可以高于第二時(shí)間分辨率。根據(jù)各個(gè)實(shí)施例,第二圖像采集器304可以包括滾動(dòng)快門(mén)傳感器。根據(jù)各個(gè)實(shí)施例,第一圖像采集器302和第二圖像采集器304可以包括公共傳感器。根據(jù)各個(gè)實(shí)施例,圖像傳感器配置器404可以配置成將用于采集第一圖像的公共傳感器配置為第一空間分辨率且將用于采集第二圖像的公共傳感器配置為第二空間分辨率。根據(jù)各個(gè)實(shí)施例,分割電路406可以配置成將第二圖像分割成預(yù)定大小的多個(gè)塊。根據(jù)各個(gè)實(shí)施例,其中第二圖像的預(yù)定部分可以對(duì)應(yīng)于或可以是該多個(gè)塊中的塊。根據(jù)各個(gè)實(shí)施例,運(yùn)動(dòng)向量采集器408可以配置成基于執(zhí)行第二圖像相對(duì)于第一圖像的運(yùn)動(dòng)估算來(lái)采集至少一個(gè)運(yùn)動(dòng)向量。根據(jù)各個(gè)實(shí)施例,發(fā)生電路410可以配置成基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。根據(jù)各個(gè)實(shí)施例,發(fā)生電路410可以包含復(fù)制電路308。圖5示出說(shuō)明根據(jù)一個(gè)實(shí)施例的圖像處理方法的流程圖500。在502中,可以采集第一空間分辨率的第一圖像。在504,可以采集第二空間分辨率的第二圖像,其中第二空間分辨率可以高于第一空間分辨率。在506中,可以基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置。在508中,基于確定的位置,第二圖像的預(yù)定部分可以復(fù)制到輸出圖像中的位置。根據(jù)各個(gè)實(shí)施例,第一圖像和第二圖像可以是彩色圖像,例如RGB (紅一綠一藍(lán))彩色圖像。根據(jù)各個(gè)實(shí)施例,第一圖像和第二圖像可以是黑白圖像。根據(jù)各個(gè)實(shí)施例,輸出圖像可以具有第二空間分辨率。根據(jù)各個(gè)實(shí)施例,預(yù)定相似度標(biāo)準(zhǔn)可以是或可以包括用于將第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。根據(jù)各個(gè)實(shí)施例,預(yù)定相似度標(biāo)準(zhǔn)可以是或可以包括第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是最小化第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或最小化第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,圖像處理方法還可包括將第一圖像放大到第二空間分辨率。根據(jù)各個(gè)實(shí)施例,確定第一圖像的一部分可以通過(guò)基于另一預(yù)定相似度標(biāo)準(zhǔn)確定放大的第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的放大的第一圖像的一部分的位置來(lái)執(zhí)行。根據(jù)各個(gè)實(shí)施例,對(duì)于沒(méi)有復(fù)制第二圖像的任何部分的輸出圖像的區(qū)域,可以復(fù)制放大的第一圖像的區(qū)域(例如,到?jīng)]有復(fù)制第二圖像的任何部分的輸出圖像的區(qū)域)。根據(jù)各個(gè)實(shí)施例,輸出圖像的區(qū)域可以對(duì)應(yīng)于或可以等同于放大的第一圖像的區(qū)域。根據(jù)各個(gè)實(shí)施例,該另一預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是用于將放大的第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。根據(jù)各個(gè)實(shí)施例,該另一預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是放大的第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或放大的第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,該另一預(yù)定相似度標(biāo)準(zhǔn)可以包括或可以是最小化放大的第一圖像的像素值和第二圖像的像素值之間的絕對(duì)差之和以及/或最小化放大的第一圖像的像素值和第二圖像的像素值之差的平方和。根據(jù)各個(gè)實(shí)施例,第一圖像可以具有第一時(shí)間分辨率且第二圖像可以具有第二時(shí)間分辨率。根據(jù)各個(gè)實(shí)施例,第一時(shí)間分辨率可以高于第二時(shí)間分辨率。 根據(jù)各個(gè)實(shí)施例,第二圖像可以通過(guò)滾動(dòng)快門(mén)傳感器采集。根據(jù)各個(gè)實(shí)施例,第一圖像和第二圖像可以通過(guò)公共傳感器采集。根據(jù)各個(gè)實(shí)施例,為了采集第一圖像,公共傳感器可以配置成第一空間分辨率,且為了采集第二圖像,公共傳感器可以配置成第二空間分辨率。根據(jù)各個(gè)實(shí)施例,第二圖像可以分割成預(yù)定大小的多個(gè)塊。根據(jù)各個(gè)實(shí)施例,第二圖像的預(yù)定部分可以對(duì)應(yīng)于或可以是或可以包括該多個(gè)塊中的塊。根據(jù)各個(gè)實(shí)施例,可以基于執(zhí)行第二圖像相對(duì)于第一圖像的運(yùn)動(dòng)估算來(lái)采集至少一個(gè)運(yùn)動(dòng)向量。根據(jù)各個(gè)實(shí)施例,可以基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。圖6不出根據(jù)一個(gè)實(shí)施例的圖像處理設(shè)備600。圖像處理設(shè)備600可以包括第一圖像采集器602,配置成采集第一空間分辨率的第一圖像;第二圖像采集器604,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率可以高于第一空間分辨率;放大電路 606,配置成將第一圖像放大到第二空間分辨率;運(yùn)動(dòng)向量采集器608,配置成基于執(zhí)行第二圖像相對(duì)于放大的第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及發(fā)生電路610,配置成基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。 第一圖像采集器602、第二圖像采集器604、放大電路606、運(yùn)動(dòng)向量采集器608以及發(fā)生電路610例如可以經(jīng)由諸如例如線纜或計(jì)算機(jī)總線的電學(xué)連接612或經(jīng)由任意其他合適的電學(xué)連接彼此耦合以交換電學(xué)信號(hào)。圖7示出說(shuō)明根據(jù)一個(gè)實(shí)施例的圖像處理方法的流程圖700。在702中,可以采集第一空間分辨率的第一圖像。在704,可以采集第二空間分辨率的第二圖像,其中第二空間分辨率可以高于第一空間分辨率。在706中,第一圖像可以放大到第二空間分辨率。在 708中,可以基于執(zhí)行第二圖像相對(duì)于放大的第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量。 在710中,可以基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。根據(jù)各個(gè)實(shí)施例,可以提供一種計(jì)算機(jī)程序產(chǎn)品,當(dāng)在計(jì)算機(jī)上執(zhí)行時(shí),該計(jì)算機(jī)程序產(chǎn)品可以執(zhí)行上述方法之一。根據(jù)各個(gè)實(shí)施例,可以提供用于在照相機(jī)產(chǎn)生的圖像中減小滾動(dòng)快門(mén)造成的偽像的方法和設(shè)備。根據(jù)各個(gè)實(shí)施例,關(guān)于場(chǎng)景的時(shí)間信息可以被采集且期望的偽像可以基于該信息糾正。根據(jù)各個(gè)實(shí)施例,(例如首先)可以獲取低分辨率圖像(其可以對(duì)應(yīng)于上面和下面描述的第一圖像)。因?yàn)樗胶痛怪狈直媛士梢酝瑯訙p小,相比于全分辨率幀,所得的幀可以在短得多的時(shí)間周期讀出。例如,幀可以在水平和垂直方向使用因子8而欠采樣,因而導(dǎo)致讀出時(shí)間約為全分辨率讀出的1/64。由于短讀出時(shí)間,低分辨率幀(換句話說(shuō)參考幀或第一圖像)可以幾乎不顯示任意滾動(dòng)快門(mén)造成的偽像,且因而可以用作用于可以(例如,在記錄參考幀之后立即)獲取的全分辨率幀的模型。在下文中,將描述示出較短讀出周期如何可以導(dǎo)致明顯減小的偽像的圖像。注意, 一行的讀出可以加速,以及將讀出的行的數(shù)目可以減小。用于說(shuō)明性目的,在下面描述的說(shuō)明中,可以假設(shè)僅為2的欠采樣因子。此外,為清楚起見(jiàn),對(duì)于下面描述的說(shuō)明,欠采樣圖像中的對(duì)象的速度減小為原來(lái)的1/2。圖8示出說(shuō)明根據(jù)一個(gè)實(shí)施例的第一圖像的圖像采集的圖示800。例如,可以采集第一圖像(換句話說(shuō)低分辨率參考圖像)。例如,在時(shí)間T,使用滾動(dòng)快門(mén)機(jī)制,可以采集第一行第一圖像的像素,如第一箭頭 806所示。可以存在球804 (以暗灰色示出)??梢栽诘谝恍械谝粓D像中采集對(duì)應(yīng)于球804 的像素,使得第一行中球的表達(dá)可以被采集且可以添加到至此采集的第一圖像802。在所示示例中,第一行中沒(méi)有像素可以對(duì)應(yīng)于球,使得可以僅采集一行背景像素(以白色示出)。例如,在時(shí)間T+0. 5 (注意與采集例如如上述參考圖2所述的可能是具有全分辨率的第二圖像相比,花費(fèi)較少的時(shí)間來(lái)采集一行圖像),使用滾動(dòng)快門(mén)機(jī)制,可以采集第二行第一圖像的像素,如第二箭頭814所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球812可以存在于比前一時(shí)間步驟更靠右的位置。可以在第二行第一圖像中采集對(duì)應(yīng)于球812的像素,使得第二行中球的表達(dá)816 (以淺灰色示出)可以被采集且可以添加到至此采集的第一圖像810。例如,在時(shí)間T+1,使用滾動(dòng)快門(mén)機(jī)制,可以采集第三行第一圖像的像素,如第三箭頭822所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球820可以存在于比前一時(shí)間步驟更靠右的位置。可以在第三行第一圖像中采集對(duì)應(yīng)于球820的像素,使得第三行中球的表達(dá) 824可以被采集且可以添加到至此采集的第一圖像818。例如,在時(shí)間T+1. 5,使用滾動(dòng)快門(mén)機(jī)制,可以采集第四行第一圖像的像素,如第四箭頭830所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球828可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘谒男械谝粓D像中采集對(duì)應(yīng)于球828的像素,使得第四行中球的表達(dá)832可以被采集且可以添加到至此采集的第一圖像826。例如,在時(shí)間T+2,使用滾動(dòng)快門(mén)機(jī)制,可以采集第五行第一圖像的像素,如第五箭頭838所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球836可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘谖逍械谝粓D像中采集對(duì)應(yīng)于球836的像素,使得第五行中球的表達(dá) 840可以被采集且可以添加到至此采集的第一圖像834。例如,在時(shí)間T+2. 5,使用滾動(dòng)快門(mén)機(jī)制,可以采集第六行第一圖像的像素,如第六箭頭846所示。同時(shí)球可能已經(jīng)移動(dòng)到右邊,使得現(xiàn)在球844可以存在于比前一時(shí)間步驟更靠右的位置??梢栽诘诹械谝粓D像中采集對(duì)應(yīng)于球844的像素。在所示示例中,第六行第一圖像中沒(méi)有像素可以對(duì)應(yīng)于球,使得僅白色行可以被采集且可以添加到至此采集的第一圖像842。因?yàn)榕c第二圖像相比第一圖像的空間分辨率減小,用于采集一行第一圖像的時(shí)間可以小于用于采集一行第二圖像的時(shí)間,且第一圖像的行數(shù)可以小于第二圖像的行數(shù)。與第二圖像相比,用于采集第一圖像花費(fèi)的較短的時(shí)間(例如,與如參考圖2描述的用于第二圖像的12個(gè)時(shí)間間隔相比,如參考圖8描述的用于第一圖像的3個(gè)時(shí)間間隔)可以被認(rèn)為是第一圖像的較高時(shí)間分辨率。因此,采集的第一圖像可以比第二圖像更好地類(lèi)似于移動(dòng)對(duì)象(例如球)的形狀。圖9示出說(shuō)明根據(jù)一個(gè)實(shí)施例的輸出圖像的產(chǎn)生的圖示900。根據(jù)各個(gè)實(shí)施例, 低分辨率參考圖像902 (第一圖像)可以與變形的高的分辨率圖像904 (第二圖像或細(xì)節(jié)圖像)組合(如第一箭頭908和第二箭頭910所指示),導(dǎo)致具有明顯減小的偽像的高分辨率圖像906 (輸出圖像)。例如,輸出圖像906可以包括對(duì)應(yīng)于第二圖像的像素值914的像素值 916且還可以包括對(duì)應(yīng)于第一圖像的像素值912的像素值918。根據(jù)各個(gè)實(shí)施例,滾動(dòng)快門(mén)造成的偽像可以通過(guò)將具有高時(shí)間分辨率的圖像與具有高空間分辨率的圖像組合成具有高時(shí)間和空間分辨率的圖像而克服。根據(jù)各個(gè)實(shí)施例,照相機(jī)傳感器可以借助于數(shù)字控制和數(shù)據(jù)接口附連到應(yīng)用處理系統(tǒng)。根據(jù)各個(gè)實(shí)施例,照相機(jī)可以支持讀出時(shí)間和分辨率參數(shù)的重編程。根據(jù)各個(gè)實(shí)施例,兩個(gè)(或更多)圖像可以被獲取(全目標(biāo)分辨率中的一個(gè)(第二圖像))且轉(zhuǎn)移到系統(tǒng)存儲(chǔ)器。根據(jù)各個(gè)實(shí)施例,ISP (圖像信號(hào)處理)功能性可以將參考圖像(第一圖像)和全分辨率圖像(第二圖像)二者的原始RGB(拜爾圖案RGB)數(shù)據(jù)轉(zhuǎn)換成插值RGB數(shù)據(jù)(RGB像素)。根據(jù)各個(gè)實(shí)施例,參考圖像(第一圖像)可以借助于諸如雙線性、雙三次或正弦函數(shù)的插值方法放大到全分辨率(以獲得放大的第一圖像)。為了實(shí)現(xiàn)近實(shí)時(shí)幀速率,可以為此操作提供專(zhuān)用硬件。根據(jù)各個(gè)實(shí)施例,首先可以分配和初始化可以存儲(chǔ)結(jié)果圖像的緩沖器。根據(jù)各個(gè)實(shí)施例,在下一階段,可以以逐行方式產(chǎn)生結(jié)果圖像(輸出圖像)結(jié)果圖像的每一行可以通過(guò)組合若干基礎(chǔ)操作創(chuàng)建。高分辨率源(第二圖像)圖像的行可以分裂為 “均勻”步幅。這些均勻塊可以通過(guò)分析相鄰像素的梯度發(fā)現(xiàn)。在對(duì)部分進(jìn)行偏移、縮放或彎曲的同時(shí),這些部分可以復(fù)制到結(jié)果圖像(輸出圖像)的相應(yīng)行(或相近行)。根據(jù)各個(gè)實(shí)施例,在這些塊中的每一個(gè)的轉(zhuǎn)移操作之后,可以計(jì)算結(jié)果圖像(輸出圖像)和放大的低分辨率參考圖像(放大的第一圖像)的現(xiàn)在填充的部分的均方誤差??梢蕴峁├迷撝到Y(jié)合梯度下降方法用于發(fā)現(xiàn)與均方誤差函數(shù)中的局部最小相關(guān)的圖像(在確
根據(jù)各個(gè)實(shí)施例,運(yùn)動(dòng)向量f可以按照以下方式米集。根據(jù)各個(gè)實(shí)施例,首先,圖像B可以放大到圖像A的(空間)分辨率。這例如可以利用雙線性插值、雙三次插值、正弦插值或任意其他常用插值完成。根據(jù)各個(gè)實(shí)施例,然后可以在圖像A中的像素周?chē)懈顗K。 根據(jù)各個(gè)實(shí)施例,塊的大小可以在每個(gè)方向(水平或垂直)中介于10至20像素之間,例如為16像素,或者是2的任意其他次冪,這使得實(shí)現(xiàn)起來(lái)容易。根據(jù)各個(gè)實(shí)施例,可以使用不是正方形大小的塊,而是例如在水平方向的像素?cái)?shù)目不同于在垂直方向的像素?cái)?shù)目的矩形塊。根據(jù)各個(gè)實(shí)施例,可能試圖發(fā)現(xiàn)與該塊盡可能好地匹配的圖像B中的區(qū)域。根據(jù)各個(gè)實(shí)施例,匹配度可以基于比如誤差(平方)和的測(cè)量確定。例如,簡(jiǎn)單搜索算法可以開(kāi)始于圖像A中的塊的位置,無(wú)遺漏地在圖像B上移動(dòng),且可以針對(duì)每個(gè)位置計(jì)算匹配度。例如,具有最高匹配度的位置可以是圖像B中的塊的位置。根據(jù)各個(gè)實(shí)施例,可以基于圖像A中的塊的位置和圖像B中的相應(yīng)位置采集向量f。應(yīng)當(dāng)注意,該方法可能是計(jì)算昂貴的。根據(jù)
各個(gè)實(shí)施例,通過(guò)做出各種假設(shè),計(jì)算努力可以數(shù)量級(jí)地減小。根據(jù)各個(gè)實(shí)施例,可以使用圖像處理、測(cè)量技術(shù)和視頻編碼中常用的備選方法,例如,最佳塊匹配方法、頻域中的相位關(guān)聯(lián)和相似方法、例如Horn-Schunk方法的用于計(jì)算光流的方法。根據(jù)各個(gè)實(shí)施例,在已經(jīng)發(fā)現(xiàn)向量(可以稱(chēng)為運(yùn)動(dòng)估算)之后,例如可以通過(guò)將圖像A的像素復(fù)制到輸出圖像中的相應(yīng)位置(這可以稱(chēng)為運(yùn)動(dòng)補(bǔ)償)創(chuàng)建輸出圖像。根據(jù)各個(gè)實(shí)施例,不被圖像A的復(fù)制像素填充的位置可以填充以放大圖像B的像素。根據(jù)各個(gè)實(shí)施例,為了獲得源于圖像A的區(qū)域和源于圖像B的區(qū)域的平滑過(guò)渡,過(guò)渡地帶中的像素可以由來(lái)自圖像B的像素淡入淡出。根據(jù)各個(gè)實(shí)施例,可以獲得可以從滾動(dòng)快門(mén)偽像矯正的所得圖像(輸出圖像)。在下文中,示出各個(gè)實(shí)施例的模擬的圖像。在模擬場(chǎng)景中,汽車(chē)可以從左向右移動(dòng)。圖10示出根據(jù)一個(gè)實(shí)施例的第二圖像1000。在可以是全分辨率圖像的第二圖像 1000中,示出由于汽車(chē)的移動(dòng)導(dǎo)致的變形。因而,汽車(chē)1002看上去就好像汽車(chē)的下部與汽車(chē)的上部相比向左移動(dòng),這可能是由于圖像1000的上面的行和圖像1000的下面的行的讀
保結(jié)果圖像的最大覆蓋的同時(shí))。根據(jù)各個(gè)實(shí)施例,在處理發(fā)現(xiàn)局部最小之后未被覆蓋的像素可以填充以從低分辨率參考圖像(第一圖像)獲得的相應(yīng)像素值。從下面描述的圖像中可以看出,最終的圖像(輸出圖像)因此可以包含移動(dòng)對(duì)象附近的小偽像。根據(jù)各個(gè)實(shí)施例,高(空間)分辨率圖像(第二圖像,例如圖像A)可以被操縱,使得它接近低(空間)分辨率圖像(第一圖像,例如圖像B)。由于在一個(gè)或兩個(gè)圖像的曝光期間一個(gè)或更多對(duì)象的運(yùn)動(dòng)的曝光,可能出現(xiàn)兩個(gè)圖像中的差異。根據(jù)各個(gè)實(shí)施例,對(duì)于圖像A中的每一個(gè)像素pa。(其中i和j可以是圖像中的坐標(biāo)),向量
砭可以被采集,使得通過(guò)該向量移動(dòng)像素給出圖像B中的“相應(yīng)”像素pbkl,換句話說(shuō)出之間消逝的時(shí)間所致。圖11示出根據(jù)一個(gè)實(shí)施例的第一圖像1100(低分辨率參考圖像)。因?yàn)榈谝粓D像 1100的時(shí)間分辨率高于第二圖像1000的時(shí)間分辨率,圖像1100中示出的汽車(chē)1102不顯示 (或僅僅顯示)像第二圖像1000中的汽車(chē)1002那樣的變形。圖12示出根據(jù)一個(gè)實(shí)施例的放大的第一圖像1200。放大的第一圖像1200例如可以利用正弦插值通過(guò)放大圖11的低分辨率參考圖像1100獲得。類(lèi)似于第一圖像1100,汽車(chē)1202不顯示變形。圖13示出根據(jù)一個(gè)實(shí)施例的輸出圖像1300 (所得圖像)。注意圖像1300中示出的汽車(chē)1302比圖像1000顯示更少的變形,且比放大的第一圖像1200中示出的汽車(chē)1202
具有更高的空間分辨率。盡管已經(jīng)參考特定實(shí)施例特別示出和描述了本發(fā)明,本領(lǐng)域技術(shù)人應(yīng)當(dāng)理解可以在不偏離如所附權(quán)利要求限定的本發(fā)明的精神和范圍的條件下做出形式和細(xì)節(jié)中的各種修改。本發(fā)明的范圍因而由所附權(quán)利要求指示且落在權(quán)利要求的意義和等價(jià)范圍內(nèi)的所有變化因此旨在被包含。
權(quán)利要求
1.一種圖像處理設(shè)備,包含第一圖像采集器,配置成采集第一空間分辨率的第一圖像;第二圖像采集器,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;確定器,配置成基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置;以及復(fù)制電路,配置成基于確定的位置將第二圖像的預(yù)定部分復(fù)制到輸出圖像中的位置。
2.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,其中輸出圖像具有第二空間分辨率。
3.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,其中預(yù)定相似度標(biāo)準(zhǔn)是用于將第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。
4.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,還包含放大電路,配置成將第一圖像放大到第二空間分辨率;其中該確定器還配置成基于另一預(yù)定相似度標(biāo)準(zhǔn)確定放大的第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的放大的第一圖像的一部分的位置。
5.根據(jù)權(quán)利要求4所述的圖像處理設(shè)備,其中復(fù)制電路還配置成,對(duì)于沒(méi)有復(fù)制第二圖像的任何部分的輸出圖像的區(qū)域,復(fù)制放大的第一圖像的區(qū)域;其中該輸出圖像的該區(qū)域?qū)?yīng)于該放大的第一圖像的該區(qū)域。
6.根據(jù)權(quán)利要求4所述的圖像處理設(shè)備,其中該另一預(yù)定相似度標(biāo)準(zhǔn)是用于將放大的第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。
7.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,其中第一圖像具有第一時(shí)間分辨率且第二圖像具有第二時(shí)間分辨率;并且其中第一時(shí)間分辨率高于第二時(shí)間分辨率。
8.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,其中第二圖像采集器包含滾動(dòng)快門(mén)傳感器。
9.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,其中第一圖像采集器和第二圖像采集器包含公共傳感器。
10.根據(jù)權(quán)利要求9所述的圖像處理設(shè)備,還包含圖像傳感器配置器,配置成將用于采集第一圖像的公共傳感器配置為第一空間分辨率且將用于采集第二圖像的公共傳感器配置為第二空間分辨率。
11.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,還包含分割電路,配置成將第二圖像分割成預(yù)定大小的多個(gè)塊;其中第二圖像的預(yù)定部分對(duì)應(yīng)于該多個(gè)塊中的塊。
12.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備,還包含運(yùn)動(dòng)向量采集器,配置成基于執(zhí)行第二圖像相對(duì)于第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及發(fā)生電路,配置成基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。
13.一種圖像處理方法,包含采集第一空間分辨率的第一圖像;采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置;以及基于確定的位置,將第二圖像的預(yù)定部分復(fù)制到輸出圖像中的位置。
14.根據(jù)權(quán)利要求13所述的圖像處理方法,其中輸出圖像具有第二空間分辨率。
15.根據(jù)權(quán)利要求13所述的圖像處理方法,其中預(yù)定相似度標(biāo)準(zhǔn)是用于將第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。
16.根據(jù)權(quán)利要求13所述的圖像處理方法,還包含將第一圖像放大到第二空間分辨率;其中確定第一圖像的一部分通過(guò)基于另一預(yù)定相似度標(biāo)準(zhǔn)確定放大的第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的放大的第一圖像的一部分的位置來(lái)執(zhí)行。
17.根據(jù)權(quán)利要求16所述的圖像處理方法,還包含對(duì)于沒(méi)有復(fù)制第二圖像的任何部分的輸出圖像的區(qū)域,復(fù)制放大的第一圖像的區(qū)域; 其中該輸出圖像的該區(qū)域?qū)?yīng)于該放大的第一圖像的該區(qū)域。
18.根據(jù)權(quán)利要求16所述的圖像處理方法,其中該另一預(yù)定相似度標(biāo)準(zhǔn)是用于將放大的第一圖像與第二圖像進(jìn)行比較的標(biāo)準(zhǔn)。
19.根據(jù)權(quán)利要求13所述的圖像處理方法,其中第一圖像具有第一時(shí)間分辨率且第二圖像具有第二時(shí)間分辨率;并且其中第一時(shí)間分辨率高于第二時(shí)間分辨率。
20.根據(jù)權(quán)利要求13所述的圖像處理方法,其中第二圖像通過(guò)滾動(dòng)快門(mén)傳感器采集。
21.根據(jù)權(quán)利要求13所述的圖像處理方法,其中第一圖像和第二圖像通過(guò)公共傳感器采集。
22.根據(jù)權(quán)利要求13所述的圖像處理方法,還包含將第二圖像分割成預(yù)定大小的多個(gè)塊;其中第二圖像的預(yù)定部分對(duì)應(yīng)于該多個(gè)塊中的塊。
23.根據(jù)權(quán)利要求13所述的圖像處理方法,還包含基于執(zhí)行第二圖像相對(duì)于第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。
24.—種圖像處理設(shè)備,包括第一圖像采集器,配置成采集第一空間分辨率的第一圖像;第二圖像采集器,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;放大電路,配置成將第一圖像放大到第二空間分辨率;運(yùn)動(dòng)向量采集器,配置成基于執(zhí)行第二圖像相對(duì)于放大的第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及發(fā)生電路,配置成基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。
25.—種圖像處理方法,包含采集第一空間分辨率的第一圖像;采集第二空間分辨率的第二圖像,其中第二空間分辨率高于第一空間分辨率;將第一圖像放大到第二空間分辨率;基于執(zhí)行第二圖像相對(duì)于放大的第一圖像的運(yùn)動(dòng)估算采集至少一個(gè)運(yùn)動(dòng)向量;以及基于如下而產(chǎn)生輸出圖像基于采集的至少一個(gè)運(yùn)動(dòng)向量執(zhí)行第二圖像的運(yùn)動(dòng)補(bǔ)償。
全文摘要
本發(fā)明涉及圖像處理設(shè)備和圖像處理方法。在一個(gè)實(shí)施例中,提供一種圖像處理設(shè)備。該圖像處理設(shè)備可以包含第一圖像采集器,配置成采集第一空間分辨率的第一圖像;第二圖像采集器,配置成采集第二空間分辨率的第二圖像,其中第二空間分辨率可以高于第一空間分辨率;確定器,配置成基于預(yù)定相似度標(biāo)準(zhǔn)確定第一圖像中對(duì)應(yīng)于第二圖像的預(yù)定部分的第一圖像的一部分的位置;以及復(fù)制電路,配置成基于確定的位置將第二圖像的預(yù)定部分復(fù)制到輸出圖像中的位置。
文檔編號(hào)H04N5/21GK102611842SQ20111038042
公開(kāi)日2012年7月25日 申請(qǐng)日期2011年11月25日 優(yōu)先權(quán)日2010年11月26日
發(fā)明者A.格施托特納, A.瓦瑟鮑爾, J.哈斯, M.梅因德?tīng)?申請(qǐng)人:英特爾移動(dòng)通信有限公司