專利名稱:圖像處理設(shè)備、照相機(jī)設(shè)備、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種圖像處理設(shè)備,該設(shè)備從攝取的圖像中檢測(cè)面部并具 有校正圖像失真的功能,本發(fā)明還涉及一種照相機(jī)設(shè)備、圖像處理方法和 程序。
背景纟支術(shù)
包括從由攝4象元件(成像傳感器):^聶取的圖4象中檢測(cè)#皮才聶對(duì)象面部的 面部檢測(cè)器的照相機(jī)設(shè)備已經(jīng)獲得實(shí)際應(yīng)用。
當(dāng)圖^^L提供給面部檢測(cè)器時(shí),這種照相機(jī)設(shè)備通常使用通過(guò)縮小由 成像傳感器攝取的圖像而獲得的圖像。
另外,在面部檢測(cè)器中進(jìn)行面部檢測(cè)通常比由成像傳感器進(jìn)行攝像的 幀速率慢,而且來(lái)自面部檢測(cè)器的檢測(cè)結(jié)果是在實(shí)際(實(shí)時(shí))攝取的圖像 之前幾幀的^J^遲的信息。
發(fā)明內(nèi)容
當(dāng)圖^^皮提供給面部檢測(cè)器時(shí),上述技術(shù)通常使用通過(guò)縮小由成像傳 感器攝取的圖像而獲得的圖像。然而,例如,在使用廣角鏡頭以廣角攝取 圖像的情況下,攝取到小尺寸的被攝對(duì)象圖像,且自然地?cái)z取到小尺寸的 面部圖像。
因此,當(dāng)由廣角攝像獲得的整個(gè)圖像區(qū)域被縮小并被提供給面部檢測(cè) 器時(shí),存在的缺點(diǎn)是只能檢測(cè)距照相機(jī)設(shè)備相當(dāng)近的范圍內(nèi)的面部。
例如,當(dāng)被攝對(duì)象對(duì)于攝像而言具有很寬的寬度(比如采用普通數(shù)字靜止圖片照相機(jī)(DSC )等獲得一,體圖片等的情況)時(shí),由于鏡頭視 角窄,到被攝對(duì)象的距離自然要遠(yuǎn)(分開(kāi))。此時(shí),不能檢測(cè)相似地作為 被攝對(duì)象的面部。
在上述情況下,可以考慮放大圖像以將其提供給面部檢測(cè)器。然而, 這樣需要增大用于面部檢測(cè)的圖像存儲(chǔ)器的容量,導(dǎo)致成本增加。
另外,此時(shí),用于搜索面部的時(shí)間隨著對(duì)應(yīng)于用于面部檢測(cè)的圖傳存 儲(chǔ)器的容量增加而按指數(shù)規(guī)律地增加,因此導(dǎo)致檢測(cè)時(shí)間增加。
另夕卜,可以考慮改變面部檢測(cè)器的最小檢測(cè)面部尺寸,以檢測(cè)更小的 面部。
然而,通常存在檢測(cè)小尺寸面部的限制,因此經(jīng)常無(wú)法檢測(cè)出小尺寸 面部。
另夕卜,如上所述,在面部檢測(cè)器中進(jìn)行面部檢測(cè)通常比由成像傳感器 進(jìn)行攝像的幀速率慢,且來(lái)自面部檢測(cè)器的檢測(cè)結(jié)果是在實(shí)際(實(shí)時(shí))攝 取的圖像之前幾幀的被延遲的信息。
因此,當(dāng)作為被攝對(duì)象的AiE在運(yùn)動(dòng)時(shí),或者當(dāng)進(jìn)行攝像的人正在運(yùn) 動(dòng)時(shí),不能正確執(zhí)行使用面部檢測(cè)結(jié)果的曝光控制(AE (自動(dòng)曝光)、逆 光校正等),以致產(chǎn)生這樣的缺點(diǎn)主a供靜止圖像使用。
也可以考慮實(shí)現(xiàn)多個(gè)面部檢測(cè)器來(lái)縮短面部檢測(cè)時(shí)間,但增加了系統(tǒng) 成本。
希望提供一種圖像處理設(shè)備、照相機(jī)設(shè)備、圖像處理方法以及程序, 它們能夠?qū)γ娌繖z測(cè)器可檢測(cè)到的全部面部尺寸進(jìn)行面部檢測(cè)而不會(huì)增 加成本,能夠不依賴于面部尺寸進(jìn)行曝光控制,并且于是能夠改善圖像質(zhì) 量。
根據(jù)本發(fā)明第一實(shí)施例,提供一種圖像處理設(shè)備,包括面部檢測(cè)器, 用來(lái)基于檢測(cè)信息,*定的圖像中檢測(cè)面部;以及處理單元,用來(lái)設(shè)置 所述面部檢測(cè)器的檢測(cè)信息,至少接收失真校正前的圖像和失真校正后的 圖像中的失真校正前的輸入圖像,分割所述輸入圖像的整個(gè)圖像區(qū)域,并 以時(shí)分方式將每一個(gè)分割的圖像提供給所述面部檢測(cè)器,所述面部檢測(cè)器 在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最小尺寸面部進(jìn)行面部 檢測(cè)。
優(yōu)選地,處理單元分割整個(gè)圖像區(qū)域,以便在分割邊界線上具有圖像交疊區(qū)域
優(yōu)選地,處理單元在面部檢測(cè)器中設(shè)置包括面部尺寸的檢測(cè)信息,從 而防止檢測(cè)的面部尺寸在被分割和被縮小的圖像之間彼此一致。
優(yōu)選地,處理單元基于由面部檢測(cè)器獲得的面部檢測(cè)結(jié)果信息來(lái)針對(duì) 檢測(cè)的面部進(jìn)行控制,以便只檢測(cè)面部的周圍圖像區(qū)域。
優(yōu)選地,處理單元具有這樣的功能將用于檢測(cè)面部的區(qū)域設(shè)置到與 所述面部尺寸成比例的范圍。
優(yōu)選地,處理單元具有這樣的功能將用于面部檢測(cè)器檢測(cè)面部的區(qū) 域設(shè)置到考慮了根據(jù)過(guò)去面部位置關(guān)系估計(jì)的運(yùn)動(dòng)量的范圍。
優(yōu)選地,處理單元控制面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并 僅以發(fā)生了運(yùn)動(dòng)的區(qū)域作為對(duì)象來(lái)檢測(cè)面部。
根據(jù)本發(fā)明第二實(shí)施例,提供一種照相機(jī)設(shè)備,包括攝像元件;光 學(xué)系統(tǒng),用于在攝像元件上形成被攝對(duì)象的圖像;以及圖像處理設(shè)備,能 夠使用失真校正參數(shù)對(duì)由攝像元件通過(guò)廣角鏡頭攝取的原始圖像進(jìn)行失 真校正,其中,圖像處理設(shè)備包括面部檢測(cè)器,用來(lái)基于檢測(cè)信息,從給 定的圖像中檢測(cè)面部,以及處理單元,用來(lái)設(shè)置面部檢測(cè)器的檢測(cè)信息, 至少接收失真校正前的圖像和失真校正后的圖像中的失真校正前的輸入 圖像,分割輸入圖像的整個(gè)圖像區(qū)域,并以時(shí)分方式將每一個(gè)分割的圖像 提供給面部檢測(cè)器,以及面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大 尺寸面部到最小尺寸面部進(jìn)行面部檢測(cè)。
根據(jù)本發(fā)明第三實(shí)施例,提供一種用于基于設(shè)置在面部檢測(cè)器中的檢 測(cè)信息從給定的圖像中檢測(cè)面部的圖像處理方法,圖像處理方法包括步 驟設(shè)置檢測(cè)信息;至少分割失真校正前和失真校正后的圖像中的失真校 正前的整個(gè)圖像區(qū)域;以及以時(shí)分方式將每一個(gè)分割的圖像提供給面部檢 測(cè)器,面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最小尺 寸面部進(jìn)行面部檢測(cè)。
根據(jù)本發(fā)明的第四實(shí)施例,提供一種用于使計(jì)算機(jī)進(jìn)行圖像處理的程 序,圖像處理用于基于設(shè)置在面部檢測(cè)器中的檢測(cè)信息從給定的圖像中檢 測(cè)面部,圖像處理包括設(shè)置檢測(cè)信息的步驟;至少分割失真校正前和失 真校正后的圖像中的失真校正前的整個(gè)圖像區(qū)域的步驟;以及以時(shí)分方式 將每一個(gè)分割的圖像提供給面部檢測(cè)器的步驟;面部檢測(cè)器在可檢測(cè)范圍 中的整個(gè)圖像中從最大尺寸面部到最小尺寸面部進(jìn)行面部檢測(cè)。根據(jù)本發(fā)明,處理單元在面部檢測(cè)器中設(shè)置檢測(cè)信息。然后,處理單 元例如在失真校正前分割整個(gè)圖像區(qū)域,并且以時(shí)分方式將每一個(gè)分割后 的圖像提供給面部檢測(cè)器。
然后,面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最 小尺寸面部進(jìn)行面部檢測(cè)。
根據(jù)本發(fā)明,面部檢測(cè)有可能在不導(dǎo)致成本增加的情況下覆蓋可由面 部檢測(cè)器檢測(cè)的全部面部尺寸。
因?yàn)榭梢詸z測(cè)到小尺寸面部,有可能不依賴面部尺寸而進(jìn)行曝光控 制,因此實(shí)現(xiàn)了圖1象質(zhì)量的改善。
圖1是示出采用根據(jù)本發(fā)明實(shí)施例的圖像處理設(shè)備的照相機(jī)設(shè)備的
結(jié)構(gòu)的例子的框圖2是示意性示出面部檢測(cè)中的圖像和控制流程的圖3是示出設(shè)置由微型計(jì)算#測(cè)的檢測(cè)區(qū)域和面部尺寸的例子的
圖4是示出以標(biāo)準(zhǔn)視角攝取的圖像以及以廣角攝取的圖像的例子的
圖5是示出當(dāng)進(jìn)行面部檢測(cè)時(shí)以標(biāo)準(zhǔn)視角攝取的圖像以及以廣角攝 取的圖像的例子的圖6是有助于說(shuō)明檢測(cè)從最大尺寸面部到最小尺寸面部的全部面部 的方法的圖7是有助于說(shuō)明在檢測(cè)覆蓋全部像素大小的面部的方法中縮短檢 測(cè)時(shí)間的方法的圖8是有助于說(shuō)明針對(duì)已檢測(cè)的面部縮短檢測(cè)時(shí)間的方法的圖9是示出進(jìn)行分割并檢測(cè)面部,然后針對(duì)已檢測(cè)的面部在面部區(qū)域 中重復(fù)進(jìn)行面部檢測(cè)的例子的圖10是示出進(jìn)行分割并檢測(cè)面部,然后在針對(duì)已檢測(cè)的面部在面部 區(qū)域中進(jìn)行面部檢測(cè)的同時(shí),在后臺(tái)檢測(cè)分割后面部的例子的圖ll是示出當(dāng)檢測(cè)到特定面部時(shí),根據(jù)原始圖像中過(guò)去面部的位置和尺寸估計(jì)運(yùn)動(dòng)量,并移動(dòng)檢測(cè)位置且放大或縮少原始圖像中的檢測(cè)區(qū)域
的例子的圖;以及
圖12是有助于說(shuō)明通過(guò)運(yùn)動(dòng)檢測(cè)縮短檢測(cè)時(shí)間的方法的圖。
具體實(shí)施例方式
下文中將參考
本發(fā)明的優(yōu)選實(shí)施例。
圖1是示出釆用根據(jù)本發(fā)明實(shí)施例的圖像處理設(shè)備的照相機(jī)設(shè)備的 結(jié)構(gòu)的例子的框圖。
如圖l所示,根據(jù)本實(shí)施例的照相機(jī)設(shè)備10包括光學(xué)系統(tǒng)11、攝像 元件(成像傳感器)12、照相機(jī)信號(hào)處理部分13、失真校正電路14、輸 出處理部分15、開(kāi)關(guān)16、縮小電路和圖^^"儲(chǔ)器17、面部檢測(cè)器18以 及作為控制部分的微型計(jì)算機(jī)(micon) 19。
在這些組成元件中,開(kāi)關(guān)16、縮小電路和圖像存儲(chǔ)器17以及微型計(jì) 算機(jī)19形成圖像處理設(shè)備的處理單元。
附帶地,在本實(shí)施例中,鏡頭失真像差的失真校正參數(shù)將被簡(jiǎn)稱為失 真校正械。
根據(jù)本實(shí)施例的照相機(jī)設(shè)備10具有基于由廣角鏡頭攝取的圖^^面 部檢測(cè)器18中檢測(cè)面部的控制功能(算法)。照相機(jī)設(shè)備10在失真校正 之前對(duì)攝取的圖像進(jìn)行分割并以時(shí)分方式控制面部檢測(cè)器18,此后基于 檢測(cè)出的面部在失真校正之前剪切圖像并控制面部檢測(cè)器18。
另外,照相機(jī)設(shè)備10具有這樣的功能以檢測(cè)出運(yùn)動(dòng)的區(qū)域作為對(duì) 象進(jìn)行上述面部檢測(cè)。
另外,照相機(jī)設(shè)備10具有這樣的功能當(dāng)從失真校正前的攝取的圖 像中檢測(cè)面部時(shí),之后在某些情況下對(duì)失真校正后的圖像進(jìn)行面部檢測(cè)。
具有這些功能的照相機(jī)設(shè)備10被配置為這樣的照相機(jī)其能夠從通 過(guò)廣角鏡頭攝取的圖像的失真校正前的整個(gè)圖像區(qū)域中檢測(cè)面部,并且也 能夠從失真校正后的閨像中檢測(cè)面部。
根據(jù)本實(shí)施例的照相機(jī)設(shè)備10具有這樣的功能進(jìn)行電子剪切(平 轉(zhuǎn)、俯仰和變焦)、合成等,同時(shí)通過(guò)使用失真校正參數(shù)來(lái)對(duì)通過(guò)廣角攝 像獲得的圖像的失真進(jìn)行校正。此時(shí),微型計(jì)算機(jī)19可以具有預(yù)先存儲(chǔ)在存儲(chǔ)器(諸如內(nèi)置ROM (只讀存儲(chǔ)器)/RAM (隨M取存儲(chǔ)器)等)中的失真校正參數(shù),可以 通過(guò)孩t型計(jì)算機(jī)19的操作獲得失真校正參數(shù),或者可以用來(lái)從照相機(jī)i殳 備10通過(guò)傳輸線連接到的主機(jī)(未示出)通過(guò)外部通信接收失真校正參 數(shù)。
光學(xué)系統(tǒng)11例如包括由超廣角鏡頭形成的廣角鏡頭lll,并經(jīng)過(guò)廣角 鏡頭111在攝像元件12的攝像表面上形成被攝對(duì)象圖像。
攝像元件12例如由成像傳感器形成,它是一種CCD(電荷耦合器件) 或CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)器件。
攝像元件12通過(guò)以矩陣形式設(shè)置在半導(dǎo)體基底上的光學(xué)傳感器檢測(cè) 經(jīng)過(guò)光學(xué)系統(tǒng)11的被攝對(duì)象圖像,產(chǎn)生信號(hào)電荷,通過(guò)垂直信號(hào)線和水 平信號(hào)線讀取信號(hào)電荷,然后將被攝對(duì)象的數(shù)字圖像信息輸出到照相機(jī)信 號(hào)處理部分13。
照相機(jī)信號(hào)處理部分13對(duì)數(shù)字圖傳_信號(hào)進(jìn)行顏色插值、白平衡、 YCbCr轉(zhuǎn)換處理、壓縮、存檔等,然后將數(shù)字圖像信號(hào)作為沒(méi)有失真校 正的圖像(下文中簡(jiǎn)稱原始圖像)IMNC輸出到失真校正電路14并經(jīng)由 開(kāi)關(guān)16輸出到縮小電路和圖^^儲(chǔ)器17。
失真校正電路14通過(guò)失真校正^對(duì)來(lái)自照相機(jī)信號(hào)處理部分13 的原始圖像IMNC進(jìn)行失真校正,然后將結(jié)果輸出到輸出處理部分15。
輸出處理部分15對(duì)通iM"原始圖像IMNC進(jìn)行失真校正、剪切、合 成等而獲得的圖像數(shù)據(jù)進(jìn)行伽馬處理、屏蔽處理、格式轉(zhuǎn)換等,其中,該 圖像數(shù)據(jù)是從失真校正電路14輸出的。輸出處理部分15將結(jié)果輸出到外 部,并且還將結(jié)果作為校正后的圖像IMAC輸出到開(kāi)關(guān)16。
開(kāi)關(guān)16具有連接到照相積i信號(hào)處理部分13的輸出部分的觸點(diǎn)a、連 接到輸出處理部分15的輸出部分的觸點(diǎn)c以及連接到縮小電路和圖#^ 儲(chǔ)器17的輸入部分的觸點(diǎn)b。
開(kāi)關(guān)16在微型計(jì)算機(jī)19的控制下,通過(guò)照相機(jī)信號(hào)處理部分13將 原始圖像(未進(jìn)行失真校正的圖像)或由輸出處理部分15進(jìn)行過(guò)失真校 正的圖像輸入到縮小電路和圖#^儲(chǔ)器17。
縮小電路和圖像存儲(chǔ)器17具有縮小電路171和圖像存儲(chǔ)器172。
縮小電路171在圖像存儲(chǔ)器172中存儲(chǔ)由照相機(jī)信號(hào)處理部分13對(duì)原始圖像(未失真校正的圖像)中的整個(gè)區(qū)域或分割和剪切后的區(qū)域進(jìn)行
縮小而獲得的圖像,或者存儲(chǔ)由輸出處理部分15進(jìn)行失真校正后的圖像, 而這種圖像經(jīng)由開(kāi)關(guān)16以任意的縮小比率輸入,或者存儲(chǔ)經(jīng)過(guò)分割并簡(jiǎn) 單剪切區(qū)域而獲得的圖像。
縮小電路171使用由微型計(jì)算機(jī)19設(shè)置的用于設(shè)置圖像分割和剪切 區(qū)域的信息以及關(guān)于縮小比率的信息,分割失真校正前的原始圖像IMNC 或失真校正后的圖像IMAC的整個(gè)圖像區(qū)域(4/9/16/25/36部分分割等)。 縮小電路171以時(shí)分方式將每一個(gè)分割的圖像提供給面部檢測(cè)器18。
順便提及,此時(shí),縮小后的圖像尺寸可以由面部檢測(cè)器18進(jìn)行處理。
面部檢測(cè)器18基于存儲(chǔ)于圖#^儲(chǔ)器172內(nèi)的圖像,使用由微型計(jì) 算機(jī)19設(shè)置的關(guān)于要檢測(cè)面部尺寸、區(qū)域等的信息檢測(cè)面部。
順便提及,面部檢測(cè)器18可以由軟件和硬件中的任一個(gè)來(lái)實(shí)現(xiàn),且 面部檢測(cè)器18的算法、電路結(jié)構(gòu)等可以是公知的或現(xiàn)有的算法、電路結(jié) 構(gòu)。
微型計(jì)算機(jī)19具有這樣的功能將表示要進(jìn)行失真校正的原始圖像 的部分的失真校正參數(shù)提供給失真校正電路14,從而控制對(duì)原始圖像的 失真校正。
另外,微型計(jì)算機(jī)19具有這樣的功能控制開(kāi)關(guān)16的選擇,設(shè)置圖 像中待分割和剪切的區(qū)域,并在縮小電路171中設(shè)置縮小比率,從而控制 圖像分割和剪切處理以及縮小處理。
微型計(jì)算機(jī)19具有這樣的功能設(shè)置面部檢測(cè)器18中要檢測(cè)的面部 尺寸、區(qū)域等,從而控制面部檢測(cè)處理。微型計(jì)算機(jī)19獲得位置、面部 尺寸等的檢測(cè)的結(jié)果。
微型計(jì)算機(jī)19控制開(kāi)關(guān)16、縮小電路和圖傳存儲(chǔ)器17以及面部檢 測(cè)器18,以便通過(guò)分割失真校正前的或失真校正后的整個(gè)圖像區(qū)域 (4/9/16/25/36部分分割等)并以時(shí)分方式將每一個(gè)分割的圖像提供到面 部檢測(cè)器18,來(lái)在失真校正前或失真校正后的全部圖像中從最大尺寸面 部到最小尺寸面部(在面部檢測(cè)器18的可檢測(cè)范圍內(nèi))對(duì)全部面部進(jìn)行 檢測(cè)。
微型計(jì)算機(jī)19執(zhí)行控制,以便即使當(dāng)分割邊界線上存在面部時(shí),也 可以通過(guò)進(jìn)行分割時(shí)具有交疊區(qū)域來(lái)檢測(cè)出面部。微型計(jì)算機(jī)19執(zhí)行控制,以便能夠通過(guò)設(shè)置面部檢測(cè)器18使得在面 部檢測(cè)器18中檢測(cè)到的面部尺寸在被分割和被縮小圖像之間彼此不一 致,來(lái)縮短檢測(cè)時(shí)間。
微型計(jì)算機(jī)19具有這樣的功能基于由面部檢測(cè)器18獲得的面部檢 測(cè)結(jié)果信息執(zhí)行控制,以便通過(guò)針對(duì)已檢測(cè)的面部此后僅僅檢測(cè)面部周圍 圖l象區(qū)域來(lái)縮短已檢測(cè)的面部的檢測(cè)時(shí)間。
在這種情況下,微型計(jì)算機(jī)19具有這樣的功能將被檢測(cè)區(qū)域設(shè)置 到與面部尺寸成比例的范圍。
另外,微型計(jì)算機(jī)19具有這樣的功能根據(jù)被檢測(cè)區(qū)域內(nèi)過(guò)去的面 部位置關(guān)系來(lái)估計(jì)運(yùn)動(dòng)量,并將被檢測(cè)區(qū)域設(shè)置到考慮該運(yùn)動(dòng)量的某個(gè)范 圍。
另外,微型計(jì)算機(jī)19具有這樣的功能執(zhí)行控制,以便通過(guò)檢測(cè)失 真校正前或失真校正后的整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅將發(fā)生了運(yùn)動(dòng)的區(qū) 域作為對(duì)象進(jìn)行面部檢測(cè),來(lái)縮短檢測(cè)時(shí)間。
順便提及,在這種情況下,運(yùn)動(dòng)檢測(cè)結(jié)果(運(yùn)動(dòng)矢量等)不用于面部 檢測(cè)。
下面將更具體地說(shuō)明根據(jù)本實(shí)施例的用于由廣角攝像獲得的圖像的 面部檢測(cè)功能、攝取的圖像等。
首先參考圖2和圖3說(shuō)明面部檢測(cè)的概要(要點(diǎn))。
<面部檢測(cè)^&要>
圖2是示意性示出面部檢測(cè)中的圖像和控制流程的圖。圖3是示出設(shè) 置由微型計(jì)算機(jī)險(xiǎn)測(cè)的檢測(cè)區(qū)域和面部尺寸的例子的圖。
從照相機(jī)信號(hào)處理部分13輸出的原始圖像IMNC的像素?cái)?shù)目通常大 于用于面部檢測(cè)的圖^^儲(chǔ)器172的像素?cái)?shù)目。
因此,為了^^、始圖像IMNC的像素?cái)?shù)目與用于面部檢測(cè)的圖^# 儲(chǔ)器172的像素?cái)?shù)目一致,縮小原始圖像IMNC,并且將縮小后的圖像 IMRD存儲(chǔ)在用于面部檢測(cè)的圖^^儲(chǔ)器中。
順便提及, 一般而言,用于面部檢測(cè)的圖傳存儲(chǔ)器172的像素?cái)?shù)目經(jīng) 常是固定的,與成像傳感器12的像素?cái)?shù)目或從照相機(jī)信號(hào)處理部分13 輸出的原始圖像IMNC的像素?cái)?shù)目無(wú)關(guān)。
12同時(shí),在由成像傳感器12攝取的圖像和從照 相機(jī)信號(hào)處理部分輸出的原始圖像IMNC之間,通過(guò)攝像獲得的區(qū)域(視 角)本身并不存在差異,它們之間僅存在分辨率的差異,并且當(dāng)圖像^皮縮 小并存儲(chǔ)在用于面部檢測(cè)的圖像存儲(chǔ)器172中時(shí),這種差異幾乎變?yōu)榱恪?br>
如圖3所示,微型計(jì)算機(jī)19在面部檢測(cè)器18中設(shè)置圖#^儲(chǔ)器172 的用于面部檢測(cè)的檢測(cè)區(qū)域DTA,要檢測(cè)的面部尺寸SZ1到SZn等,然 后使面部檢測(cè)器18開(kāi)始檢測(cè)。
順便提及,此時(shí),因?yàn)樵诤芏嗲闆r下通??梢灾付ǘ鄠€(gè)檢測(cè)區(qū)域和面 部尺寸,面部檢測(cè)器18允許連續(xù)地執(zhí)行這些指定。
面部檢測(cè)器18根據(jù)設(shè)定的檢測(cè)區(qū)域DTA、要檢測(cè)的面部尺寸SZ (1 到n)等,從用于面部檢測(cè)的圖#^儲(chǔ)器172內(nèi)的圖<線行面部檢測(cè)。在 完成檢測(cè)之后,面部檢測(cè)器18將用于面部檢測(cè)的圖像存儲(chǔ)器172內(nèi)的位 置以及面部檢測(cè)后的面部尺寸信息輸出到微型計(jì)算機(jī)19。
可選地,微型計(jì)算機(jī)19讀取圖像存儲(chǔ)器172內(nèi)的位置和面部尺寸信息。
順便提及,如前所示,面部檢測(cè)器18可由軟件和硬件中任一個(gè)來(lái)實(shí) 現(xiàn),并且面部檢測(cè)器18的算法、電路結(jié)構(gòu)等可以是公知的或現(xiàn)有的算法、 電路結(jié)構(gòu)。
在這種情況下,面部檢測(cè)器18僅作為示例示出,用于加深理解下文 所述的內(nèi)容。
將參考圖4和圖5對(duì)以標(biāo)準(zhǔn)視角攝取的圖像和以廣角攝取的圖像進(jìn)行 說(shuō)明。
<以標(biāo)準(zhǔn)視角攝取的圖像和以廣角攝取的圖
圖4是示出以標(biāo)準(zhǔn)視角攝取的圖像以及以廣角攝取的圖像的例子的圖。
圖5是示出當(dāng)進(jìn)行面部檢測(cè)時(shí)以標(biāo)準(zhǔn)視角攝取的圖像以及以廣角攝 取的圖像的例子的圖。
如圖4所示,在以廣角攝取的圖像IMWA中,以小尺寸攝取被攝對(duì) 象OBJ的圖像,并且自然以小尺寸攝取面部圖像。
因此,即使具有相同的系統(tǒng)配置(原始圖像尺寸、縮小電路的縮小比 率和面部檢測(cè)器),以標(biāo)準(zhǔn)視角攝取的圖像IMSD中可檢測(cè)的面部尺寸在廣角攝像中是不可檢測(cè)的。
圖5示出執(zhí)行面部檢測(cè)時(shí)的例子。
順便提及,在圖5中,作為例子,當(dāng)縮小電路171中的縮小比率(像 素?cái)?shù)目的比率)是l/4時(shí),不必說(shuō),實(shí)際的縮小比率由正在使用的原始圖 像IMNC的像素?cái)?shù)目和可以由面部檢測(cè)器18處理的圖像的像素?cái)?shù)目之間 的比率來(lái)確定。
接下來(lái)參考圖6,說(shuō)明檢測(cè)從最大尺寸面部到最小尺寸面部的全部面 部的方法。
<第一方法檢測(cè)從最大尺寸面部到最小尺寸面部的全部面部的方法>
圖6是有助于說(shuō)明檢測(cè)從最大尺寸面部到最小尺寸面部的全部面部 的方法的圖。
原始圖像IMNC的整個(gè)圖像被分割(1/4/9/16/25部分分割等)(在圖 6例子中為4部分分割)??s小電路171將每一個(gè)分割圖像IMD1到IMD4 縮小為可以由面部檢測(cè)器18以時(shí)分方式進(jìn)行處理的若干4象素,然后將該 結(jié)果提供給面部檢測(cè)器18。因此,在原始圖像IMNC的整個(gè)圖像中檢測(cè) 從檢測(cè)最大尺寸面部到最小尺寸面部的全部面部。
即,原始圖1象IMNC縮小到可以由面部檢測(cè)器18處理的若干l象素, 這防止了當(dāng)原始圖像IMNC被分割和縮小時(shí)面部過(guò)度縮小并且因?yàn)檫^(guò)度 縮小而導(dǎo)致變形且無(wú)法檢測(cè)到面部。另外,當(dāng)剪切原始圖像時(shí),圖像尺寸 可以按照原樣被提供給面部檢測(cè)器18。
因此,可真正地在原始圖像IMNC的整個(gè)圖像中覆蓋從最大尺寸面 部到最小尺寸面部的全部面部。
順便提及,由微型計(jì)算機(jī)19設(shè)置原始圖像IMNC的分割數(shù)目、剪切 位置、用于將分割后圖像IMD1到IMD4縮小為可以由面部檢測(cè)器18處 理的若干像素的縮小比率等。
另外,微型計(jì)算機(jī)19獲得通過(guò)分時(shí)處理執(zhí)行的檢測(cè)的結(jié)果,將全部 分割處理后的面部檢測(cè)結(jié)果合并,并且當(dāng)執(zhí)行交疊區(qū)域OLPA中剪切位 置處對(duì)相同面部多次檢測(cè)時(shí),拒絕面部檢測(cè)結(jié)果。
另外,在圖6的例子中進(jìn)行了4部分分割;然而,當(dāng)按照像素?cái)?shù)目之 間的比率,原始圖像IMNC的像素?cái)?shù)目是可以由面部檢測(cè)器18檢測(cè)的像 素?cái)?shù)目的16倍時(shí),其足夠進(jìn)行4部分分割,并且當(dāng)希望檢測(cè)甚至更小尺寸的面部時(shí),類似地可以進(jìn)行16部分分割。不必說(shuō),分割的數(shù)目和縮小 比率是任意的。
接下來(lái),將參考圖7說(shuō)明檢測(cè)從最大尺寸面部到最小尺寸面部的全部 面部的檢測(cè)方法中縮短檢測(cè)時(shí)間的方法。
<第二方法縮短檢測(cè)時(shí)間的方法>
圖7是有助于說(shuō)明在檢測(cè)覆蓋全部像素大小的面部的方法中縮短檢 測(cè)時(shí)間的方法的圖。
首先,原始圖^ME沒(méi)有被分割的情況下縮小為可以由面部檢測(cè)器18 處理的若干像素,并且檢測(cè)出可以由面部檢測(cè)器18檢測(cè)的從最大面部尺 寸到最小面部尺寸的面部。
接下來(lái),面部檢測(cè)器18的設(shè)置受到控制,使得當(dāng)在被分割和被縮小 的圖像中或簡(jiǎn)單剪切的圖像中檢測(cè)面部時(shí),先前執(zhí)行面部檢測(cè)的面部尺寸 與下次執(zhí)行面部檢測(cè)的面部尺寸不一致,也就是說(shuō),下一次僅檢測(cè)出小尺 寸面部。因此,縮短了檢測(cè)時(shí)間。
圖7顯示其例子。
在圖7的例子中,"80x80"、 "60x60"、 "50x50"、 "40><40"、 "28 x28"和"20x20"被顯示為面部檢測(cè)尺寸,這些尺寸是可由面部檢測(cè)器 18處理的圖像尺寸。
作為縮小為1/4的圖像的面部檢測(cè)尺寸,顯示出"160x 160"、 "120 xl20,,、 "100x 100"、 "80x80"、 "56x56"和"40x40"。
作為沒(méi)有被縮小的剪切圖像的面部檢測(cè)尺寸,顯示出"80x80"、 "60 x60,'、 "50x50"、 "40x40,,、 "28x28"和"20 x20,,。
在圖7的例子中,進(jìn)行如下操作,以便當(dāng)在被分割和被縮小的圖像中 或簡(jiǎn)單剪切的圖像中檢測(cè)面部時(shí),先前執(zhí)行面部檢測(cè)的面部尺寸與下次執(zhí) 行面部檢測(cè)的面部尺寸不一致。
<1>:在縮小為1/4的圖像中的最大尺寸面部("160xl60")和最小 尺寸面部("40 x 40")之間進(jìn)行檢測(cè)。
<2>:僅檢測(cè)比在上述<1>過(guò)程中可檢測(cè)的最小尺寸面部還小的面部 ("28x28"和"20x20',)。
<3>: "40x40"尺寸以及更大尺寸的面部已由面部檢測(cè)器18在上述<1>過(guò)程中被檢測(cè)出來(lái),因此在這次檢測(cè)過(guò)程中忽略這些面部。
在圖7的例子中進(jìn)行4個(gè)部分的分割;然而,當(dāng)按照像素?cái)?shù)目之間的 比率,原始圖像的像素?cái)?shù)目是可由面部檢測(cè)器18處理的像素?cái)?shù)目的16 倍時(shí),這樣做U夠的分割為l部分,然后在4部分分割中僅檢測(cè)在1 部分分割中無(wú)法檢測(cè)的小尺寸面部,并更進(jìn)一步地在16部分分割中僅檢 測(cè)在4部分分割中無(wú)法檢測(cè)的小尺寸面部。
順便提及,不必說(shuō),已檢測(cè)的面部尺寸是任意的,而與被分割圖像等 無(wú)關(guān)。
<第三方法檢測(cè)圖#^象>
不必說(shuō),可以用失真校正后的整個(gè)圖像作為對(duì)象來(lái)執(zhí)行上述面部檢測(cè) 方法,且可以用不是由廣角攝像獲得的圖像,即未失真圖像作為對(duì)象來(lái)執(zhí) 行上述面部檢測(cè)方法,而且類似的方法可以用不是由廣角攝像獲得的輸出 圖像,即沒(méi)有失真的攝像4Hf下的輸出圖像作為對(duì)象。
接下來(lái)參考圖8到圖ll說(shuō)明一種縮短已檢測(cè)到的面部的檢測(cè)時(shí)間的 方法。
<第四方法針對(duì)檢測(cè)到的面部縮短檢測(cè)時(shí)間的方法>
圖8是有助于i兌明針對(duì)已檢測(cè)的面部縮短檢測(cè)時(shí)間的方法的圖。
圖9是示出進(jìn)行分割并檢測(cè)面部,然后針對(duì)已檢測(cè)的面部在面部區(qū)域 中重復(fù)進(jìn)行面部檢測(cè)的例子的圖。
圖10是示出進(jìn)行分割并檢測(cè)面部,然后在針對(duì)已檢測(cè)的面部在面部 區(qū)域中進(jìn)行面部檢測(cè)的同時(shí),在后臺(tái)檢測(cè)分割后面部的例子的圖。
圖ll是示出當(dāng)檢測(cè)到特定面部時(shí),根據(jù)原始圖像中過(guò)去面部的位置 和尺寸估計(jì)運(yùn)動(dòng)量,并移動(dòng)檢測(cè)位置且放大或縮少原始圖像中的檢測(cè)區(qū)域 的例子的圖。
通常,可以由面部檢測(cè)器18檢測(cè)的全部面部尺寸的檢測(cè)經(jīng)常比由攝 像元件12執(zhí)行攝像的幀速率慢,并且除非攝取圖像的被攝對(duì)象或人如在 靜止圖像等的情況下一樣沒(méi)有發(fā)生移動(dòng),否則重復(fù)使用這種慢的檢測(cè)進(jìn)行 面部檢測(cè)是不實(shí)用的。
因此,本實(shí)施例通過(guò)一,測(cè)到面部,就僅在該面部的周圍圖像區(qū)域 進(jìn)行面部檢測(cè)來(lái)縮短檢測(cè)時(shí)間。具體地說(shuō),基于已經(jīng)進(jìn)行了面部檢測(cè)的原始圖像中的位置和面部尺 寸,按照為被檢測(cè)面部尺寸預(yù)先設(shè)定的比率確定出檢測(cè)區(qū)域,并且僅檢測(cè) (多個(gè))已預(yù)先設(shè)定的要檢測(cè)的面部尺寸。此后,重復(fù)該過(guò)程(下文稱為 特定面部檢測(cè))。
從而,可以使得檢測(cè)時(shí)間明顯少于上述檢測(cè)可以由面部檢測(cè)器檢測(cè)的 全部面部尺寸的方法的檢測(cè)時(shí)間,并且即使在執(zhí)行攝像的被攝對(duì)象或人正 在移動(dòng)的情況下,當(dāng)執(zhí)行攝像的被攝對(duì)象或人正在以某一移動(dòng)速度移動(dòng) 時(shí),可以在跟上執(zhí)行攝像的被攝對(duì)象或人的同時(shí)檢測(cè)到面部。
圖8示出其例子。
在圖8的例子中,假設(shè)在對(duì)原始圖像中全部尺寸的面部進(jìn)行檢測(cè)時(shí)檢 測(cè)到了面部。
在這種情況下,檢測(cè)特定面部的區(qū)域按照針對(duì)已檢測(cè)面部尺寸預(yù)先設(shè) 定的比率放大,并且確定在原始圖像中的剪切區(qū)域和縮小比率。
然后,僅檢測(cè)針對(duì)已檢測(cè)面部尺寸預(yù)先設(shè)定的面部尺寸的面部。
在圖8的例子中,僅有面部尺寸"50x50"、 "40x40"和"28 x 28" 的面部,皮檢測(cè)。
順<更提及,在面部被檢測(cè)出的時(shí)刻,如圖9所示,可以停止上述第一、 第二和/或第三個(gè)檢測(cè)可由面部檢測(cè)器18檢測(cè)的全部面部尺寸的方法,或 如圖10所示,可以以時(shí)分方式,用第一、第二和/或第三方法在后臺(tái)繼續(xù) 進(jìn)行檢測(cè)。
另外,在檢測(cè)特定面部時(shí)刻的面部數(shù)目是任意的。
另外,如圖ll所示,在檢測(cè)到特定面部時(shí),根據(jù)原始圖像中過(guò)去的 面部的位置和尺寸估計(jì)出運(yùn)動(dòng)量,并可以進(jìn)行檢測(cè)位置的移動(dòng)和原始圖像 中檢測(cè)區(qū)域的放大或縮小。
順便提及,不必說(shuō),當(dāng)估計(jì)結(jié)果超過(guò)原始圖像區(qū)域時(shí),當(dāng)然將檢測(cè)區(qū) 域調(diào)整到原始圖像的邊緣。另外,此時(shí)可采用用于估計(jì)移動(dòng)量的任意算法。
接下來(lái)將參考圖12說(shuō)明一種通過(guò)運(yùn)動(dòng)檢測(cè)縮短上述第一、第二和第 三方法的檢測(cè)時(shí)間的方法。
<第五方法通過(guò)運(yùn)動(dòng)檢測(cè)縮短檢測(cè)時(shí)間的方法>
圖12是有助于說(shuō)明通過(guò)運(yùn)動(dòng)檢測(cè)縮短檢測(cè)時(shí)間的方法的圖。
17事實(shí)上,在通過(guò)上述第一、第二和第三方法進(jìn)行的面部檢測(cè)中,通過(guò) 檢測(cè)運(yùn)動(dòng)并將面部檢測(cè)限制到運(yùn)動(dòng)發(fā)生的區(qū)域中,限制了用于檢測(cè)面部的 區(qū)域和分割的數(shù)目,因此可更快地檢測(cè)面部。
順便提及,此時(shí),運(yùn)動(dòng)檢測(cè)可由軟件和硬件中的任一個(gè)來(lái)實(shí)現(xiàn),并且 運(yùn)動(dòng)檢測(cè)的算法、電路結(jié)構(gòu)等可以是任意一種。
另夕卜,在這種方法中,運(yùn)動(dòng)檢測(cè)結(jié)果(運(yùn)動(dòng)矢量等)不用于面部檢測(cè)。
在這種情況下,以運(yùn)動(dòng)檢測(cè)器為例。
首先,由運(yùn)動(dòng)檢測(cè)器檢測(cè)原始圖像中的運(yùn)動(dòng)。
此時(shí),當(dāng)發(fā)生運(yùn)動(dòng)時(shí),利用第一、第二和/或第三方法僅檢測(cè)在已發(fā) 生運(yùn)動(dòng)的區(qū)域中的面部。
由此,在第一、第二和/或第三方法中并不在全部已分割區(qū)域中檢測(cè) 面部。因此可大大地縮短檢測(cè)時(shí)間,并在被攝對(duì)象移動(dòng)之后立即快速地從 大尺寸面部到小尺寸面部進(jìn)行面部檢測(cè)。
圖12示出其例子。
在圖12的例子中,在原始圖像IMNC中檢測(cè)運(yùn)動(dòng),例如,用正方框 FLM包圍已發(fā)生運(yùn)動(dòng)的區(qū)域,并且僅對(duì)該區(qū)域中的面部進(jìn)行檢測(cè)。
在這種情況下,在分割用于面部檢測(cè)的區(qū)域之后可以進(jìn)行面部檢測(cè)。
順便提及,不必說(shuō),利用這種方法檢測(cè)到面部之后,可以執(zhí)行上述第 四方法。
<第五方法的檢測(cè)圖^^"象>
不必說(shuō),可以用失真校正后的整個(gè)圖像作為對(duì)象來(lái)執(zhí)行第五方法,且 可以用不是由廣角攝像獲得的圖像,即未失真圖像作為對(duì)象來(lái)執(zhí)行笫五方 法,而且可以用不是由廣角攝像獲得的輸出圖像,即未失真的攝像*下 的輸出圖4象作為對(duì)象來(lái)4吏用類似的方法。
如上所述,根據(jù)本實(shí)施例,微型計(jì)算機(jī)(控制部分)19執(zhí)行控制, 以便在失真校正之前或失真校正之后分割整個(gè)圖像區(qū)域(4/9/16/25/36部 分分割),并且以時(shí)分方式將每一個(gè)分割后的圖像提供給面部檢測(cè)器18。 所以,可在面部檢測(cè)器18的可檢測(cè)的范圍中檢測(cè)從檢測(cè)最大尺寸面部到 最小尺寸面部的全部面部。 說(shuō),可在攝取的圖像中對(duì)可由面部檢測(cè)器檢測(cè)的從最小面部尺寸到最大面部尺寸的全部面部進(jìn)行檢測(cè),并檢測(cè)小尺寸面部。
由此,可進(jìn)行獨(dú)立于面部尺寸的最佳膝光控制(AE和逆光校正), 并且改善群體照片等的圖片質(zhì)量。
另外,可加快面部檢測(cè)的速度,并且改善面部檢測(cè)的實(shí)時(shí)性。
另外,可大大地增加廣角攝像中的面部檢測(cè)范圍,使用"廣角攝像+ 面部檢測(cè)"大大地改善了實(shí)用性和適銷性,這種使用大大地?cái)U(kuò)大了監(jiān)測(cè)照 相機(jī)、DSC等的應(yīng)用。
另外,一^S^測(cè)到面部,可以很快地檢測(cè)到特定面部,從而提高了實(shí) 時(shí)性。甚至在作為被攝對(duì)象的人移動(dòng)時(shí),或甚至執(zhí)行攝像的人移動(dòng)時(shí),可 對(duì)面部檢測(cè)器18可檢測(cè)范圍內(nèi)從最大尺寸面部到最小尺寸面部的全部面 部進(jìn)行檢測(cè),增加了面部檢測(cè)速度,并改善面部檢測(cè)的實(shí)時(shí)性。
另外,因?yàn)橐唬瑴y(cè)到面部就可以4艮快地檢測(cè)到特定面部,所以當(dāng)面 部繼之以電子平轉(zhuǎn)、俯仰或變焦后進(jìn)行失真校正時(shí),仍可進(jìn)行顯示。
應(yīng)當(dāng)注意,本發(fā)明的基本意圖是不但用于能夠進(jìn)行廣角攝像的照相 機(jī),還用于通用照相機(jī)(諸如普通的DSC、監(jiān)測(cè)照相機(jī)等),而無(wú)論其是 否具有光學(xué)變焦、固定焦距等。
上述面部檢測(cè)功能也適用于不是由廣角攝像獲得的圖像,就是說(shuō),未 失真的圖像。
另外,上述面部檢測(cè)功能也適用于不是由廣角輸出攝4象獲得的輸出圖 像,就是說(shuō),在未失真攝像M下的輸出圖像。
當(dāng)上述技術(shù)用于這種情況時(shí),可實(shí)現(xiàn)這樣的照相機(jī)它能夠從由成4象 傳感器攝取的整個(gè)圖像區(qū)域中檢測(cè)面部并且還能夠從輸出圖像(在進(jìn)行縮 小處理等后)中檢測(cè)面部。
順便提及,上述詳細(xì)說(shuō)明的方法還可形成一種對(duì)應(yīng)于上述過(guò)程的程 序,并用來(lái)由例如CPU (中央處理單元)等計(jì)算機(jī)執(zhí)行。
另外,這種程序可用來(lái)記錄在例如半導(dǎo)體存儲(chǔ)器、磁盤、光盤、Floppy (注冊(cè)商標(biāo))軟盤等的記錄介質(zhì)上,并由其中設(shè)置了該記錄介質(zhì)的計(jì)算機(jī) 進(jìn)行存取和執(zhí)行。
本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)理解,取決于設(shè)計(jì)要求及其它因素,可以進(jìn)行 各種變型、合并、子合并以及改動(dòng),只要它們?cè)谒綑?quán)利要求書(shū)的范圍及 其等同內(nèi)容之內(nèi)
權(quán)利要求
1. 一種圖像處理設(shè)備,包括面部檢測(cè)器,用來(lái)基于檢測(cè)信息,從給定的圖像中檢測(cè)面部;以及處理單元,用來(lái)設(shè)置所述面部檢測(cè)器的檢測(cè)信息,至少接收失真校正前的圖像和失真校正后的圖像中的失真校正前的輸入圖像,分割所述輸入圖像的整個(gè)圖像區(qū)域,并以時(shí)分方式將每一個(gè)分割的圖像提供給所述面部檢測(cè)器,所述面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最小尺寸面部進(jìn)行面部檢測(cè)。
2. 根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述處理單元分割 所述整個(gè)圖像區(qū)域,以便在分割邊界線上具有圖像交疊區(qū)域。
3. 根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述處理單元在所 述面部檢測(cè)器中設(shè)置包括面部尺寸的所述檢測(cè)信息,從而防止檢測(cè)的面部 尺寸在被分割和被縮小的圖像之間彼此一致。
4. 根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述處理單元基于 由所述面部檢測(cè)器獲得的面部檢測(cè)結(jié)果信息來(lái)針對(duì)檢測(cè)的面部進(jìn)行控制, 以<更只檢測(cè)面部的周圍圖1象區(qū)域。
5. 根據(jù)權(quán)利要求4所述的圖像處理設(shè)備,其中,所述處理單元具有 這樣的功能將用于檢測(cè)面部的區(qū)域設(shè)置到與所述面部尺寸成比例的范 圍。
6. 根據(jù)權(quán)利要求4所述的圖像處理設(shè)備,其中,所述處理單元具有 這樣的功能將用于所述面部檢測(cè)器檢測(cè)面部的區(qū)域設(shè)置到考慮了根據(jù)過(guò) 去面部位置關(guān)系估計(jì)的運(yùn)動(dòng)量的范圍。
7. 根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述處理單元控制 所述面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅以發(fā)生了運(yùn)動(dòng)的區(qū)域 作為對(duì)象來(lái)檢測(cè)面部。
8. 根據(jù)權(quán)利要求3所述的圖像處理設(shè)備,其中,所述處理單元控制 所述面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅以發(fā)生了運(yùn)動(dòng)的區(qū)域 作為對(duì)象來(lái)檢測(cè)面部。
9. 根據(jù)權(quán)利要求4所述的圖像處理設(shè)備,其中,所述處理單元控制所述面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅以發(fā)生了運(yùn)動(dòng)的區(qū)域 作為對(duì)象來(lái)檢測(cè)面部。
10. —種照相機(jī)i殳備,包括 攝像元件;光學(xué)系統(tǒng),用于在所述攝像元件上形成被攝對(duì)象的圖像;以及圖像處理設(shè)備,能夠使用失真校正M對(duì)由所述攝像元件通過(guò)廣角鏡 頭攝取的原始圖像進(jìn)行失真校正,其中,所述圖像處理設(shè)備包括面部檢測(cè)器,用來(lái)基于檢測(cè)信息,從給定的圖像中檢測(cè)面部,以及處理單元,用來(lái)設(shè)置所述面部檢測(cè)器的檢測(cè)信息,至少接收失真 校正前的圖像和失真校正后的圖像中的失真校正前的輸入圖像,分割所述 輸入圖像的整個(gè)圖像區(qū)域,并以時(shí)分方式將每一個(gè)分割的圖像提供給所述 面部檢測(cè)器,以及所述面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部 到最小尺寸面部進(jìn)行面部檢測(cè)。
11. 根據(jù)權(quán)利要求10所述的照相機(jī)設(shè)備,其中,所述處理單元分割 所述整個(gè)圖像區(qū)域,以便在分割邊界線上具有圖像交疊區(qū)域。
12. 根據(jù)權(quán)利要求10所述的照相機(jī)設(shè)備,其中,所述處理單元在所 述面部檢測(cè)器中設(shè)置包括面部尺寸的所述檢測(cè)信息,從而防止檢測(cè)的面部 尺寸在被分割和被縮小的圖像之間彼此一致。
13. 根據(jù)權(quán)利要求10所述的照相機(jī)設(shè)備,其中,所述處理單元基于 由所述面部檢測(cè)器獲得的面部檢測(cè)結(jié)果信息來(lái)針對(duì)檢測(cè)的面部進(jìn)行控制, 以l更只檢測(cè)面部的周圍圖^象區(qū)域。
14. 根據(jù)權(quán)利要求13所述的照相機(jī)設(shè)備,其中,所述處理單元具有 這樣的功能將用于檢測(cè)面部的區(qū)域設(shè)置到與面部尺寸成比例的范圍。
15. 根據(jù)權(quán)利要求13所述的照相機(jī)設(shè)備,其中,所述處理單元具有 這樣的功能將用于所述面部檢測(cè)器檢測(cè)面部的區(qū)域設(shè)置到考慮了根據(jù)過(guò) 去面部位置關(guān)系估計(jì)的運(yùn)動(dòng)量的范圍。
16. 根據(jù)權(quán)利要求10所述的照相機(jī)設(shè)備,其中,所述處理單元控制所述面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅以發(fā)生了運(yùn)動(dòng)的區(qū)域 作為對(duì)象來(lái)檢測(cè)面部。
17. 根據(jù)權(quán)利要求12所述的照相機(jī)設(shè)備,其中,所述處理單元控制 所述面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅以發(fā)生了運(yùn)動(dòng)的區(qū)域 作為對(duì)象來(lái)檢測(cè)面部。
18. 根據(jù)權(quán)利要求13所述的照相機(jī)設(shè)備,其中,所述處理單元控制 所述面部檢測(cè)器來(lái)檢測(cè)整個(gè)圖像區(qū)域中的運(yùn)動(dòng),并僅以發(fā)生了運(yùn)動(dòng)的區(qū)域 作為對(duì)象來(lái)檢測(cè)面部。
19. 一種用于基于設(shè)置在面部檢測(cè)器中的檢測(cè)信息從給定的圖像中 檢測(cè)面部的圖像處理方法,所述圖像處理方法包括步驟設(shè)置所述檢測(cè)信息;至少分割失真校正前和失真校正后的圖像中的失真校正前的整個(gè)圖 4象區(qū)域;以及以時(shí)分方式,將每一個(gè)分割的圖傳炎供給所述面部檢測(cè)器,所述面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最 小尺寸面部進(jìn)行面部檢測(cè)。
20. —種用于使計(jì)算機(jī)進(jìn)行圖像處理的程序,所述圖像處理用于基于 設(shè)置在面部檢測(cè)器中的檢測(cè)信息從給定的圖像中檢測(cè)面部,所述圖像處理 包括步驟i殳置所述檢測(cè)信息;至少分割失真校正前和失真校正后的圖像中的失真校正前的整個(gè)圖 4象區(qū)域;以及以時(shí)分方式,將每一個(gè)分割的圖像提供給所述面部檢測(cè)器,所述面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最 小尺寸面部進(jìn)行面部檢測(cè)。
全文摘要
這里公開(kāi)了一種圖像處理設(shè)備、照相機(jī)設(shè)備、圖像處理方法和程序。所述圖像處理設(shè)備包括面部檢測(cè)器,用來(lái)基于檢測(cè)信息從給定圖像中檢測(cè)面部;以及處理單元,用來(lái)設(shè)置面部檢測(cè)器的檢測(cè)信息,至少接收失真校正前的圖像和失真校正后的圖像中的失真校正前的輸入圖像,分割所述輸入圖像的整個(gè)圖像區(qū)域,并以時(shí)分方式將每一個(gè)分割的圖像提供給所述面部檢測(cè)器,所述面部檢測(cè)器在可檢測(cè)范圍中的整個(gè)圖像中從最大尺寸面部到最小尺寸面部進(jìn)行面部檢測(cè)。
文檔編號(hào)H04N5/225GK101510956SQ200910005350
公開(kāi)日2009年8月19日 申請(qǐng)日期2009年2月12日 優(yōu)先權(quán)日2008年2月15日
發(fā)明者依田光二 申請(qǐng)人:索尼株式會(huì)社