像470可包含各種內(nèi)插技術(shù),其包含:雙線 性、雙三次或更復(fù)雜的內(nèi)插方法。為說(shuō)明實(shí)例雙線性內(nèi)插方法,經(jīng)內(nèi)插圖像470的像素411 將留存經(jīng)融合圖像450的像素401的像素值;經(jīng)內(nèi)插圖像470的像素412將留存經(jīng)融合圖 像450的像素402的像素值;經(jīng)內(nèi)插圖像470的像素413將留存經(jīng)融合圖像450的像素403 的像素值;及經(jīng)內(nèi)插圖像470的像素414將留存經(jīng)融合圖像450的像素404的像素值。用 數(shù)字表示,將由等式2給出像素411的像素值:
[酬
[0032] 其中yM為像素411的像素值,為來(lái)自重復(fù)圖案01的第一像素子集(所說(shuō)明的 實(shí)施例中的像素211)的像素值,汗^ 1為來(lái)自重復(fù)圖案01的第一像素子集的像素值的貢獻(xiàn), jg1為來(lái)自重復(fù)圖案01的第二像素子集(所說(shuō)明的實(shí)施例中的像素212)的像素值,ll^1 為來(lái)自重復(fù)圖案01的第二像素子集的像素值的貢獻(xiàn),;為來(lái)自重復(fù)圖案01的第三像素子 集(所說(shuō)明的實(shí)施例中的像素213)的像素值,壞為來(lái)自重復(fù)圖案01的第三像素子集的 像素值的貢獻(xiàn),X;; 1為來(lái)自重復(fù)圖案01的第四像素子集(所說(shuō)明的實(shí)施例中的像素214)的 像素值,且為來(lái)自重復(fù)圖案01的第四像素子集的像素值的貢獻(xiàn)。
[0033] 類似地,將由等式3給出經(jīng)內(nèi)插圖像470的像素412的像素值:
[0034] /=+w°"x7+w7x"+w7x:
[0035] 其中y°2為像素412的像素值,為來(lái)自重復(fù)圖案02的第一像素子集(所說(shuō)明的 實(shí)施例中的像素221)的像素值,為來(lái)自重復(fù)圖案02的第一像素子集的像素值的貢獻(xiàn), 為來(lái)自重復(fù)圖案〇2的第二像素子集(所說(shuō)明的實(shí)施例中的像素222)的像素值, 為來(lái)自重復(fù)圖案02的第二像素子集的像素值的貢獻(xiàn),為來(lái)自重復(fù)圖案02的第三像素子 集(所說(shuō)明的實(shí)施例中的像素223)的像素值,為來(lái)自重復(fù)圖案02的第三像素子集的 像素值的貢獻(xiàn),X;; 2為來(lái)自重復(fù)圖案02的第四像素子集(所說(shuō)明的實(shí)施例中的像素224)的 像素值,且為來(lái)自重復(fù)圖案02的第四像素子集的像素值的貢獻(xiàn)。
[0036] 因此,為了利用雙線性內(nèi)插,由等式4給出經(jīng)內(nèi)插圖像470中的像素421的像素 值:
[0038] 其中yk為像素411與像素412之間的經(jīng)內(nèi)插像素421的經(jīng)內(nèi)插像素值,且E k為定 位在當(dāng)所述子圖像被捕獲時(shí)經(jīng)內(nèi)插像素421將定位的地方的像素的像素值。換句話說(shuō),在 此特定實(shí)例中,E k為像素221的像素值,因?yàn)橄袼?21占據(jù)當(dāng)子圖像310到340被捕獲時(shí)經(jīng) 內(nèi)插像素421將具有的位置(參見(jiàn)圖2)。
[0039] 在圖4B中所說(shuō)明的功能之后,過(guò)程150持續(xù)到圖5中所說(shuō)明的功能。圖5說(shuō)明根 據(jù)本發(fā)明的實(shí)施例通過(guò)將經(jīng)內(nèi)插圖像470與全分辨率圖像580合并而產(chǎn)生HDR輸出圖像 590。為了將經(jīng)內(nèi)插圖像470與全分辨率圖像580合并,運(yùn)動(dòng)掩碼被應(yīng)用于經(jīng)內(nèi)插圖像470 及全分辨率圖像580的對(duì)應(yīng)像素。由于經(jīng)內(nèi)插圖像470及全分辨率圖像580具有相同分辨 率,因此經(jīng)內(nèi)插圖像470中的每一像素在全分辨率圖像580中具有占據(jù)相同位置的對(duì)應(yīng)像 素。舉例來(lái)說(shuō),在經(jīng)內(nèi)插圖像470的左上角處的像素在全分辨率圖像580的左上角中具有 對(duì)應(yīng)像素。
[0040] 在將經(jīng)內(nèi)插圖像470與全分辨率圖像580合并中可應(yīng)用各種運(yùn)動(dòng)掩碼。在一個(gè)實(shí) 例中,零均值歸一化互相關(guān)("ZNCC")函數(shù)被應(yīng)用于對(duì)應(yīng)像素。如所屬領(lǐng)域中已知,ZNCC 函數(shù)在圖像接近匹配時(shí)產(chǎn)生更大值,而在圖像不相似時(shí)產(chǎn)生更低值。在將經(jīng)內(nèi)插圖像470 與全分辨率圖像580合并時(shí),當(dāng)運(yùn)動(dòng)掩碼低于運(yùn)動(dòng)閾值時(shí),與指派到最終HDR輸出圖像590 中的對(duì)應(yīng)全分辨率像素的權(quán)重相比較,指派更多權(quán)重到經(jīng)內(nèi)插像素。在一個(gè)實(shí)施例中,所述 運(yùn)動(dòng)閾值為ZNCC函數(shù)的值。在將經(jīng)內(nèi)插圖像470與全分辨率圖像580合并時(shí),當(dāng)運(yùn)動(dòng)掩碼 達(dá)到或超過(guò)運(yùn)動(dòng)閾值時(shí),與指派到最終HDR輸出圖像590中的對(duì)應(yīng)全分辨率像素的權(quán)重相 比較,指派更多權(quán)重到經(jīng)內(nèi)插像素。當(dāng)運(yùn)動(dòng)掩碼達(dá)到或超過(guò)運(yùn)動(dòng)閾值時(shí),指示全分辨率圖像 580 (其在捕獲子圖像310到340之后被捕獲)包含從在捕獲子圖像310到340與捕獲所述 全分辨率圖像之間經(jīng)過(guò)的時(shí)間的大量運(yùn)動(dòng)。因此,最終HDR輸出圖像590的像素值傾向于 基于所述子圖像的經(jīng)內(nèi)插圖像470的像素值,所述子圖像在接近圖像捕獲的起始(其開(kāi)始 于捕獲所述子圖像)時(shí)被捕獲。所述經(jīng)內(nèi)插圖像(基于最初捕獲的子圖像310到340)及 全分辨率圖像580 (在捕獲所述子圖像之后捕獲)的這種加權(quán)通過(guò)在所述全分辨率圖像包 含不可接受的運(yùn)動(dòng)量時(shí)優(yōu)選最初捕獲的子圖像像素值來(lái)抵制最終HDR輸出圖像590中的運(yùn) 動(dòng)假象。然而,當(dāng)后續(xù)全分辨率圖像包含可接受的運(yùn)動(dòng)量時(shí),所述HDR圖像像素受益于所述 全分辨率圖像的優(yōu)選曝光的貢獻(xiàn)。
[0041] 上文所解釋的過(guò)程是在計(jì)算機(jī)軟件及硬件方面描述。所描述的技術(shù)可構(gòu)成有形的 或非暫時(shí)性機(jī)器(例如,計(jì)算機(jī))可讀存儲(chǔ)媒體內(nèi)體現(xiàn)的機(jī)器可執(zhí)行指令,當(dāng)由機(jī)器執(zhí)行 時(shí),將導(dǎo)致所述機(jī)器執(zhí)行所描述的操作。此外,所述過(guò)程可在硬件內(nèi)體現(xiàn),例如,專用集成電 路("ASIC")或其它硬件。
[0042] 有形的非暫時(shí)性機(jī)器可讀存儲(chǔ)媒體包含提供(即,存儲(chǔ))呈機(jī)器(例如,計(jì)算機(jī)、 網(wǎng)絡(luò)裝置、個(gè)人數(shù)字助理、制造工具、具有一或多個(gè)處理器的集合的任何裝置等等)可存取 的形式的信息的任何機(jī)制。舉例來(lái)說(shuō),機(jī)器可讀存儲(chǔ)媒體包含可記錄/不可記錄媒體(例 如,只讀存儲(chǔ)器(R0M)、隨機(jī)存取存儲(chǔ)器(RAM)、磁盤(pán)存儲(chǔ)媒體、光學(xué)存儲(chǔ)媒體、快閃存儲(chǔ)器 裝置等等)。
[0043] 不希望本發(fā)明的所說(shuō)明的實(shí)施例的以上描述(包含摘要中所描述的內(nèi)容)為窮盡 性或?qū)⒈景l(fā)明限于所揭示的具體形式。盡管本文描述本發(fā)明的特定實(shí)施例及針對(duì)本發(fā)明的 實(shí)例是出于說(shuō)明性目的,但所屬領(lǐng)域的技術(shù)人員將認(rèn)識(shí)到,本發(fā)明范圍內(nèi)的各種修改是可 能的。
[0044] 依據(jù)以上詳細(xì)描述可對(duì)本發(fā)明做出這些修改。所附權(quán)利要求書(shū)中使用的術(shù)語(yǔ)不應(yīng) 解釋為將本發(fā)明限于本說(shuō)明書(shū)中所揭示的特定實(shí)施例。而是,本發(fā)明的范圍全部由所附權(quán) 利要求書(shū)確定,將根據(jù)權(quán)利要求解釋的既定原則解釋所附權(quán)利要求書(shū)。
【主權(quán)項(xiàng)】
1. 一種產(chǎn)生圖像的方法,所述方法包括: 在第一曝光期間用圖像傳感器的第一像素子集捕獲第一子圖像; 在第二曝光期間用所述圖像傳感器的第二像素子集捕獲第二子圖像,所述第二曝光與 所述第一曝光相比更長(zhǎng); 在第三曝光期間用所述圖像傳感器的第三像素子集捕獲第三子圖像,所述第三曝光與 所述第二曝光相比更長(zhǎng); 在第四曝光期間用所述圖像傳感器的第四像素子集捕獲第四子圖像,所述第四曝光與 所述第三曝光相比更長(zhǎng),其中所述第一、第二、第三及第四像素子集安置在重復(fù)圖案中,且 其中所述第一、第二、第三及第四曝光周期在相同起始時(shí)間開(kāi)始; 通過(guò)分析所述第一、第二、第三及第四子圖像而選擇所述第一、第二、第三及第四曝光 之間的優(yōu)選曝光; 在所述優(yōu)選曝光處捕獲全分辨率圖像,其中所述全分辨率圖像由所述第一、第二、第三 及第四像素子集同時(shí)捕獲;及 基于所述子圖像及所述全分辨率圖像產(chǎn)生最終HDR輸出圖像。2. 根據(jù)權(quán)利要求1所述的方法,其進(jìn)一步包括: 將所述第一、第二、第三及第四子圖像融合以產(chǎn)生經(jīng)融合圖像; 產(chǎn)生在所述經(jīng)融合圖像的每一像素位置處所述子圖像對(duì)所述經(jīng)融合圖像的貢獻(xiàn)的權(quán) 重圖; 通過(guò)內(nèi)插所述經(jīng)融合圖像及所述權(quán)重圖而產(chǎn)生經(jīng)內(nèi)插圖像,其中所述經(jīng)內(nèi)插圖像具有 與所述全分辨率圖像相同的分辨率;及 將所述經(jīng)內(nèi)插圖像與所述全分辨率圖像合并以產(chǎn)生所述最終HDR輸出圖像。3. 根據(jù)權(quán)利要求2所述的