專(zhuān)利名稱(chēng)：圖像處理裝置和圖像處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及可以將分別包含親子或兄弟等臉部相似的各個(gè)被攝體的各圖像數(shù)據(jù)精準(zhǔn)地分類(lèi)成不同分組的技術(shù)。
背景技術(shù)：
近年，存儲(chǔ)器的容量越來(lái)越大，數(shù)碼相機(jī)可以記錄非常多的圖像數(shù)據(jù)。在這種情況下，圖像數(shù)據(jù)的記錄數(shù)量越多，則檢索希望的圖像數(shù)據(jù)或?qū)z索到的圖像數(shù)據(jù)進(jìn)行整理的操作就越困難。因此，為了降低操作的困難性，特開(kāi)2005-174308號(hào)公報(bào)(稱(chēng)為專(zhuān)利文獻(xiàn)1)例如公開(kāi)了一項(xiàng)技術(shù)，利用人臉檢測(cè)技術(shù)，檢測(cè)圖像中包含的人臉區(qū)域(下稱(chēng)“人臉區(qū)”)，將檢測(cè)出人臉的圖像數(shù)據(jù)與特定的分類(lèi)相關(guān)聯(lián)，使多個(gè)圖像數(shù)據(jù)以被攝體為單位分組。但是，在專(zhuān)利文獻(xiàn)1所述的技術(shù)中，由于將檢測(cè)出相同或相似人臉區(qū)的各個(gè)圖像數(shù)據(jù)分在同一組，所以在規(guī)定人物的分組內(nèi)，有時(shí)臉部與該規(guī)定人物相似的其他人的圖像數(shù)據(jù)也被分在其中。試想以下情況，例如將圖像數(shù)據(jù)分為以下兩類(lèi)作為被攝體含有規(guī)定人物的第1 圖像數(shù)據(jù)；和作為被攝體含有與該規(guī)定人物有親子或兄弟關(guān)系的其他人的第2圖像數(shù)據(jù)。在這種情況下，只要第1圖像和第2圖像兩方的數(shù)據(jù)均在同一時(shí)期拍攝例如是現(xiàn)在拍攝的，就可以將它們分在不同的組，因?yàn)楸粩z體雙方的年齡不同。也就是說(shuō)，在對(duì)從第1 圖像檢測(cè)出的第1人臉區(qū)和從第2圖像檢測(cè)的第2人臉區(qū)進(jìn)行比較的情況下，雙方會(huì)因年齡差異產(chǎn)生不同特征點(diǎn)，具體而言，例如臉的長(zhǎng)寬比、眼睛相對(duì)于整個(gè)臉的高度、眼睛的大小、皺紋數(shù)量、發(fā)際后退的程度等都會(huì)有所不同。所以，根據(jù)這些特征點(diǎn)的差異，可以將第1 圖像和第2圖像的各自的數(shù)據(jù)分在不同的組。但是，在例如規(guī)定人物是父母，第1圖像中包含的被攝體是4歲時(shí)的父母，其他人是子女，第2圖像中包含的被攝體是4歲時(shí)的子女的情況下，專(zhuān)利文獻(xiàn)1所述的技術(shù)就很難將它們分在不同的組。也就是說(shuō)，在這種情況下，由于兩個(gè)被攝體的年齡是相同的，因此不出現(xiàn)上述因年齡差異產(chǎn)生的特征點(diǎn)差異。而且，親子在年齡相同時(shí)，面容酷似的情況很多。 所以此時(shí)無(wú)法將第1圖像和第2圖像的各數(shù)據(jù)分離，第1圖像和第2圖像中的父母或子女有時(shí)會(huì)被分在同一個(gè)組。因此，正在尋求一種方法，可以實(shí)現(xiàn)精準(zhǔn)分類(lèi)，將分別包含親子或兄弟等臉部相似的不同被攝體的各圖像數(shù)據(jù)分在不同的組中。

發(fā)明內(nèi)容
本發(fā)明的目的在于將分別包含臉部相似的不同被攝體的各個(gè)圖像數(shù)據(jù)精準(zhǔn)地分類(lèi)至不同的分組中。為了實(shí)現(xiàn)上述目的，本發(fā)明的第1方面所涉及的圖像處理裝置，包括人臉檢測(cè)機(jī)構(gòu)，將拍攝日期能確定的攝像圖像數(shù)據(jù)作為對(duì)象圖像數(shù)據(jù)使用，將該對(duì)象圖像內(nèi)的包含被攝體臉部的區(qū)域作為人臉區(qū)檢測(cè)；年齡識(shí)別機(jī)構(gòu)，根據(jù)由所述人臉檢測(cè)機(jī)構(gòu)檢測(cè)出的所述人臉區(qū)，識(shí)別所述對(duì)象圖像內(nèi)的所述被攝體的年齡；類(lèi)似圖像檢索機(jī)構(gòu)，對(duì)于拍攝日期能分別確定的多個(gè)已有圖像數(shù)據(jù)，從屬于多個(gè)分組中的某個(gè)分組的所述已有圖像數(shù)據(jù)中，將具有的人臉區(qū)類(lèi)似于由所述人臉檢測(cè)機(jī)構(gòu)檢測(cè)出的所述人臉區(qū)的所述已有圖像數(shù)據(jù)，作為類(lèi)似圖像數(shù)據(jù)檢索出來(lái)；年齡確認(rèn)機(jī)構(gòu)，確認(rèn)由所述年齡識(shí)別機(jī)構(gòu)識(shí)別的所述對(duì)象圖像內(nèi)的所述被攝體的年齡是否在第1范圍內(nèi)；比較機(jī)構(gòu)，在由所述年齡確認(rèn)機(jī)構(gòu)確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的年齡是在第1范圍內(nèi)的情況下，求出所述對(duì)象圖像數(shù)據(jù)的第1拍攝日期與由所述類(lèi)似圖像檢索機(jī)構(gòu)檢索出的所述類(lèi)似圖像數(shù)據(jù)的第2拍攝日期之間的差值，并對(duì)所述差值與第2范圍進(jìn)行比較；和分類(lèi)機(jī)構(gòu)，在由所述比較機(jī)構(gòu)比較的結(jié)果為所述差值在第2范圍內(nèi)的情況下，將所述對(duì)象圖像數(shù)據(jù)分到與所述類(lèi)似圖像數(shù)據(jù)所屬的分組相同的分組中。此外，為了實(shí)現(xiàn)上述目的，本發(fā)明的第2方面所涉及的圖像處理方法是對(duì)拍攝日期能確定的攝像圖像數(shù)據(jù)進(jìn)行分類(lèi)的圖像處理裝置的圖像處理方法，其包括以下處理將拍攝日期能確定的攝像圖像數(shù)據(jù)作為對(duì)象圖像數(shù)據(jù)使用，將該對(duì)象圖像內(nèi)的包含被攝體臉部的區(qū)域作為人臉區(qū)檢測(cè)；根據(jù)所述檢測(cè)出的人臉區(qū)，識(shí)別所述對(duì)象圖像內(nèi)的所述被攝體的年齡；對(duì)于拍攝日期能分別確定的多個(gè)已有圖像數(shù)據(jù)，從屬于多個(gè)分組中的某個(gè)分組的所述已有圖像數(shù)據(jù)中，將具有的人臉區(qū)類(lèi)似于所述檢測(cè)出的人臉區(qū)的所述已有圖像數(shù)據(jù)， 作為類(lèi)似圖像數(shù)據(jù)檢索出來(lái)；確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的所述被識(shí)別出的年齡是否在第1范圍內(nèi)；在確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的所述被識(shí)別出的年齡是在第1范圍內(nèi)的情況下，求出所述對(duì)象圖像數(shù)據(jù)的第1拍攝日期與所述檢索出的類(lèi)似圖像數(shù)據(jù)的第2拍攝日期之間的差值，并對(duì)所述差值與第2范圍進(jìn)行比較；和在所述比較的結(jié)果為所述差值在第2范圍內(nèi)的情況下，將所述對(duì)象圖像數(shù)據(jù)分到與所述類(lèi)似圖像數(shù)據(jù)所屬的分組相同的分組中。


圖1是本發(fā)明的一個(gè)實(shí)施方式所涉及的圖像處理裝置的硬件構(gòu)成框圖。圖2是表示用來(lái)實(shí)行分組判斷處理的圖1的圖像處理裝置的功能構(gòu)成的框圖。圖3是說(shuō)明圖2的圖像處理裝置實(shí)行的分組判斷處理的流程圖。圖4是由圖2的圖像處理裝置的圖像處理部分組的圖像的概要圖。
具體實(shí)施方式
下面，參照附圖，對(duì)本發(fā)明的一個(gè)實(shí)施方式進(jìn)行說(shuō)明。圖1是作為本發(fā)明所涉及的圖像處理裝置的一個(gè)實(shí)施方式的攝影裝置1的硬件構(gòu)成框圖。攝像裝置1例如可以由數(shù)碼相機(jī)構(gòu)成。攝像裝置1 包括CPU (Central Processing Unit) 11、R0M (Read Only Memory) 12、 RAM (Random Access Memory) 13、總線14、輸入輸出接口 15、攝像部16、操作部17、顯示部 18、存儲(chǔ)部19、通信部20和驅(qū)動(dòng)器21等。CPUll按照R0M12所記錄的程序、或從存儲(chǔ)部19裝載到RAM13的程序，實(shí)行各種處理。此外，在RAM13中適當(dāng)保存CPUll實(shí)行各種處理時(shí)需要的數(shù)據(jù)等。在本實(shí)施方式中，R0M12或存儲(chǔ)部19中保存例如實(shí)現(xiàn)后述的圖2中的人臉檢測(cè)部 61和分組部66的各項(xiàng)功能的程序。CPUll按照這些程序?qū)嵭刑幚?，可以?shí)現(xiàn)后述的圖2中的人臉檢測(cè)部61和分組部66的各項(xiàng)功能。CPU11、R0M12和RAM13通過(guò)總線14相互連接。該總線14還與輸入輸出接口 15連接。輸入輸出接口 15與攝像部16、操作部17、顯示部18、存儲(chǔ)部19和通信部20連接。攝像部16包括未圖示的光學(xué)鏡頭部和圖像傳感器等。為了拍攝被攝體，光學(xué)鏡頭部由將光聚集起來(lái)的透鏡、例如聚焦透鏡和變焦透鏡等構(gòu)成。聚焦透鏡是使被攝體像在圖像傳感器的受光面上成像的透鏡。變焦透鏡是在一定范圍內(nèi)使焦距自由改變的透鏡。光學(xué)鏡頭部還設(shè)有外圍電路，該外圍電路根據(jù)需要對(duì)焦點(diǎn)、曝光、白平衡等設(shè)定參數(shù)進(jìn)行調(diào)整。圖像傳感器由光電轉(zhuǎn)換元件、AFE (Analog Front End)等構(gòu)成。光電轉(zhuǎn)換元件例如是由 CMOS (Complementary Metal Oxide Semiconductor)型光電轉(zhuǎn)換元件等構(gòu)成。光電轉(zhuǎn)換元件中從光學(xué)鏡頭部射入被攝體像。因此，光電轉(zhuǎn)換元件每隔一定時(shí)間，就對(duì)被攝體像進(jìn)行光電轉(zhuǎn)換(攝像)，蓄積圖像信號(hào)，將蓄積的圖像信號(hào)作為模擬信號(hào)依次供給至AFE。AFE對(duì)上述模擬的圖像信號(hào)實(shí)行A/D(Analog/Digital)轉(zhuǎn)換處理等各種信號(hào)處理。通過(guò)各種信號(hào)處理生成數(shù)字信號(hào)，作為攝像部16的輸出信號(hào)輸出。另外，以下將攝像部16的輸出信號(hào)稱(chēng)為“圖像數(shù)據(jù)”。所以，圖像數(shù)據(jù)由攝像部16 輸出，適當(dāng)提供給CPU11。操作部17由各種按鈕等構(gòu)成，受理使用者的指示操作。顯示部18由液晶顯示器等構(gòu)成，顯示各種圖像。存儲(chǔ)部19由DRAM (Dynamic Random Access Memory)等構(gòu)成，暫時(shí)保存攝像部16 輸出的圖像數(shù)據(jù)。此外，存儲(chǔ)部19還保存各種圖像處理所需的各種數(shù)據(jù)，例如圖像數(shù)據(jù)、各種標(biāo)志位的值、閾值等。通信部20通過(guò)包含因特網(wǎng)的網(wǎng)絡(luò)，控制與其它裝置(未圖示)之間的通信。輸入輸出接口 15根據(jù)需要與驅(qū)動(dòng)器21連接，適當(dāng)安裝由磁盤(pán)、光盤(pán)、磁光盤(pán)、或半導(dǎo)體存儲(chǔ)器等組成的移動(dòng)存儲(chǔ)介質(zhì)31。通過(guò)驅(qū)動(dòng)器21從移動(dòng)存儲(chǔ)介質(zhì)31讀出的程序在必要時(shí)會(huì)被裝入存儲(chǔ)部19。此外，移動(dòng)存儲(chǔ)介質(zhì)31與存儲(chǔ)部19同樣，可以保存存儲(chǔ)部19中存儲(chǔ)的圖像數(shù)據(jù)等各種數(shù)據(jù)。具有這種結(jié)構(gòu)的攝像裝置1可以實(shí)行以下一連串的處理。也就是說(shuō)，攝像裝置1利用要進(jìn)行分組的對(duì)象的圖像(下稱(chēng)為“對(duì)象圖像”)數(shù)據(jù)， 將包含被攝體臉部的區(qū)域作為人臉區(qū)，從該對(duì)象圖像中檢測(cè)。攝像裝置1根據(jù)人臉區(qū)，識(shí)別被攝體的年齡。攝像裝置1從已被分在規(guī)定分組中的圖像(下稱(chēng)“已有圖像”)數(shù)據(jù)中，提取人臉區(qū)類(lèi)似于被檢測(cè)出的人臉區(qū)的已有圖像數(shù)據(jù)。如果對(duì)象圖像的被攝體的年齡在規(guī)定范圍內(nèi)、對(duì)象圖像數(shù)據(jù)的拍攝日期在以提取的已有圖像數(shù)據(jù)的拍攝日期為基準(zhǔn)的規(guī)定范圍內(nèi)，則攝像裝置1就將對(duì)象圖像數(shù)據(jù)分到與已有圖像數(shù)據(jù)相同的分組中，除此以外的情況下，分到與已有圖像數(shù)據(jù)不同的分組。以下，將這一連串的處理稱(chēng)為“分組判斷處理”。圖2是用來(lái)實(shí)行此類(lèi)分組判斷處理的攝像裝置1的功能構(gòu)成框圖。如圖2所示，攝像裝置1包括圖像存儲(chǔ)部41和圖像處理部42。圖像存儲(chǔ)部41包括對(duì)象圖像存儲(chǔ)部51和已有圖像存儲(chǔ)部52。圖像處理部42包括人臉檢測(cè)部61、年齡識(shí)別部62、類(lèi)似圖像檢索部63、年齡確認(rèn)部64、日期比較部65和分組部66。在本實(shí)施方式中，圖像存儲(chǔ)部41也就是對(duì)象圖像存儲(chǔ)部51和已有圖像存儲(chǔ)部52 在圖1所示的結(jié)構(gòu)中，是由RAM13或存儲(chǔ)部19或移動(dòng)存儲(chǔ)介質(zhì)31內(nèi)的一個(gè)區(qū)域構(gòu)成。對(duì)象圖像存儲(chǔ)部51將攝像部16等拍攝被攝體后得到的圖像的數(shù)據(jù)作為對(duì)象圖像數(shù)據(jù)保存。這時(shí)，對(duì)象圖像存儲(chǔ)部51將表示對(duì)象圖像的拍攝日期的元信息(meta information)，與該對(duì)象圖像數(shù)據(jù)對(duì)應(yīng)起來(lái)保存。具體而言，在本實(shí)施方式中，對(duì)象圖像數(shù)據(jù)包含在Exif (Exchangeable Image File Format)格式的規(guī)定文件中。另外，以下將包含這種對(duì)象圖像數(shù)據(jù)的文件稱(chēng)為“對(duì)象圖像文件”。對(duì)象圖像文件中除了包含對(duì)象圖像數(shù)據(jù)以外，還可以包含與該對(duì)象圖像有關(guān)的各種元信息。所以，在本實(shí)施方式中，拍攝時(shí)的日期信息被作為表示拍攝日期的元信息包含在對(duì)象圖像文件中。另外，這種對(duì)象圖像文件被保存在對(duì)象圖像存儲(chǔ)部51。另外，對(duì)象圖像存儲(chǔ)部51當(dāng)作對(duì)象圖像保存的數(shù)據(jù)不一定非得是攝像部16拍攝的攝像圖像數(shù)據(jù)，只要是可以判別攝像日期的數(shù)據(jù)即可，此外，例如也可以是通過(guò)通信部20 從外部取得的圖像數(shù)據(jù)。已有圖像存儲(chǔ)部52以組為單位將多個(gè)圖像數(shù)據(jù)分別作為已有圖像數(shù)據(jù)保存，該多個(gè)圖像數(shù)據(jù)預(yù)先被分在個(gè)人的不同年齡的某個(gè)分組中。這時(shí)，已有圖像存儲(chǔ)部52是將表示已有圖像的拍攝日期的元信息與該已有圖像數(shù)據(jù)對(duì)應(yīng)起來(lái)保存。更具體講就是，在本實(shí)施方式中，已有圖像的數(shù)據(jù)格式與對(duì)象圖像的數(shù)據(jù)形式相同，都是Exif格式。不過(guò)，為了將包含已有圖像數(shù)據(jù)和表示其拍攝日期的元信息等Exif格式的規(guī)定文件與“對(duì)象圖像文件”明確區(qū)分，以下將其稱(chēng)為“已有圖像文件”。相對(duì)于這種圖像存儲(chǔ)部41，圖像處理部42也就是人臉檢測(cè)部61至分組部66各部在圖1所示的構(gòu)成中，是由CPUll這種的硬件和存放在R0M12等中的程序(軟件)的組合構(gòu)成。人臉檢測(cè)部61在后述的分類(lèi)指示操作等的規(guī)定的定時(shí)，將對(duì)象圖像數(shù)據(jù)從對(duì)象圖像存儲(chǔ)部51中讀出，將該對(duì)象圖像內(nèi)包含被攝體臉部的區(qū)域作為人臉區(qū)檢測(cè)。具體而言就是，在本實(shí)施方式中，人臉檢測(cè)部61通過(guò)JP特開(kāi)2001-16573號(hào)公報(bào)等所述的特征點(diǎn)提取處理，先從該對(duì)象圖像中提取人臉的特征點(diǎn)，例如眉、眼、鼻、口的各端點(diǎn)、臉的輪廓點(diǎn)、頭的頂點(diǎn)和下巴的下端點(diǎn)等。人臉檢測(cè)部61從這樣檢測(cè)出的特征點(diǎn)中獲取周邊的邊緣信息，從而在該對(duì)象圖像中，將眉、眼、鼻、口的各區(qū)劃定為特征區(qū)。然后，人臉檢測(cè)部61對(duì)眉、眼、鼻、口的各區(qū)以及它們的分界定出輪廓，取得它們的位置信息，由此來(lái)檢測(cè)人臉區(qū)。另外，適合于人臉檢測(cè)部61的人臉區(qū)的檢測(cè)方法不只限于本實(shí)施方式，可以采用公知的或今后開(kāi)發(fā)的任意方法。人臉檢測(cè)部61將人臉區(qū)的檢測(cè)結(jié)果以及對(duì)象圖像數(shù)據(jù)向年齡識(shí)別部62輸出。這里，作為人臉區(qū)的檢測(cè)結(jié)果，例如是可根據(jù)對(duì)象圖像確定人臉區(qū)的信息，更具體一些就是可確定人臉區(qū)位置的位置信息，該信息從人臉檢測(cè)部61輸出。此外，人臉檢測(cè)部61還將對(duì)象圖像數(shù)據(jù)及其拍攝日期信息向類(lèi)似圖像檢索部63 輸出。另外，在由于對(duì)象圖像中不含被攝體等理由導(dǎo)致人臉區(qū)檢測(cè)不出的情況下，表示該主旨的信息會(huì)與對(duì)象圖像數(shù)據(jù)及其拍攝日期信息一起，從人臉檢測(cè)部61經(jīng)由年齡識(shí)別部62和年齡確認(rèn)部64輸出到分組部66。年齡識(shí)別部62根據(jù)對(duì)象圖像中的由人臉檢測(cè)部61檢測(cè)出的人臉區(qū)的數(shù)據(jù)，識(shí)別該對(duì)象圖像中包含的被攝體的年齡。具體而言就是，在本實(shí)施方式中，年齡識(shí)別部62通過(guò)JP特開(kāi)平6-333023號(hào)公報(bào)所述的年齡推定處理，根據(jù)人臉區(qū)的數(shù)據(jù)，檢測(cè)表示人臉特征的數(shù)據(jù)(下稱(chēng)“人臉特征數(shù)據(jù)”)。人臉特征數(shù)據(jù)有表示臉的長(zhǎng)寬比、眼睛相對(duì)于整個(gè)臉的高度、眼睛的大小、皺紋數(shù)量、 發(fā)際后退的程度等的數(shù)據(jù)。然后，年齡識(shí)別部62根據(jù)這些人臉特征數(shù)據(jù)，將其與已有的人臉各部的模型數(shù)據(jù)組合起來(lái)，生成新的人臉區(qū)數(shù)據(jù)。然后，年齡識(shí)別部62根據(jù)新的人臉區(qū)數(shù)據(jù)，識(shí)別被攝體的年齡。另外，適合于年齡識(shí)別部62的年齡識(shí)別方法不只限于本實(shí)施方式的方法，可以采用公知的或今后開(kāi)發(fā)的任意方法。年齡識(shí)別部62將對(duì)象圖像數(shù)據(jù)和已識(shí)別的年齡信息向年齡確認(rèn)部64輸出。類(lèi)似圖像檢索部63從已有圖像存儲(chǔ)部52保存的多個(gè)已有圖像數(shù)據(jù)中，檢索具有與人臉檢測(cè)部61檢測(cè)出的對(duì)象圖像人臉區(qū)類(lèi)似的人臉區(qū)的已有圖像(下稱(chēng)“類(lèi)似圖像”) 的數(shù)據(jù)。這里，作為判定人臉區(qū)是否類(lèi)似的方法，本實(shí)施方式可以采用以下方法對(duì)人臉區(qū)內(nèi)的多個(gè)特征點(diǎn)逐個(gè)計(jì)算類(lèi)似度，使用該多個(gè)特征點(diǎn)的類(lèi)似度，綜合判斷人臉區(qū)是否類(lèi)似。 不過(guò)，判斷人臉區(qū)是否類(lèi)似的方法不只限于本實(shí)施方式的方法，可以采用公知的或今后開(kāi)發(fā)的任意方法。類(lèi)似圖像檢索部63將類(lèi)似圖像數(shù)據(jù)的檢索結(jié)果通知年齡確認(rèn)部64。詳細(xì)內(nèi)容以后敘述，有時(shí)得到該檢索結(jié)果的年齡確認(rèn)部64會(huì)要求取得類(lèi)似圖像的拍攝日期以及表示類(lèi)似圖像數(shù)據(jù)所屬的分組的信息(下稱(chēng)“類(lèi)似圖像信息”)。在這種情況下，類(lèi)似圖像檢索部63會(huì)從已有圖像存儲(chǔ)部52取得類(lèi)似圖像信息，與對(duì)象圖像數(shù)據(jù)及其拍攝日期信息一起，輸出到年齡確認(rèn)部64。年齡確認(rèn)部64在類(lèi)似圖像檢索部63檢索到類(lèi)似圖像數(shù)據(jù)的情況下(表達(dá)這一意思的檢索結(jié)果被通知的情況下)，會(huì)確認(rèn)由年齡識(shí)別部62識(shí)別出的對(duì)象圖像的被攝體的年齡是否在規(guī)定范圍(下稱(chēng)“對(duì)象年齡范圍”)內(nèi)。具體而言，本實(shí)施方式將對(duì)象年齡范圍設(shè)為0至5歲的范圍。也就是說(shuō)，年齡確認(rèn)部64會(huì)確認(rèn)對(duì)象圖像的被攝體的年齡是否在0歲至5歲的范圍內(nèi)，也就是確認(rèn)是否在5歲以下。如上所述，年齡確認(rèn)部64在確認(rèn)對(duì)象圖像的被攝體的年齡在對(duì)象年齡范圍(0至 5歲)以?xún)?nèi)的情況下，如上述那樣向類(lèi)似圖像檢索部63要求取得類(lèi)似圖像信息。當(dāng)接到該取得要求的類(lèi)似圖像檢索部63輸出類(lèi)似圖像信息也就是類(lèi)似圖像的拍攝日期和表示類(lèi)似圖像數(shù)據(jù)所屬分組的信息時(shí)，年齡確認(rèn)部64就會(huì)得到該類(lèi)似圖像信息。然后，年齡確認(rèn)部 64會(huì)將對(duì)象圖像數(shù)據(jù)及其拍攝日期信息以及類(lèi)似圖像信息(從類(lèi)似圖像檢索部63取得的表示類(lèi)似圖像數(shù)據(jù)的拍攝日期以及分組的信息)輸出到日期比較部65。相對(duì)于此，年齡確認(rèn)部64在確認(rèn)對(duì)象圖像的被攝體的年齡不在對(duì)象年齡范圍(0 至5歲)的情況下，會(huì)向分組部66輸出對(duì)象圖像數(shù)據(jù)及其拍攝日期信息。此外，年齡確認(rèn)部64在由類(lèi)似圖像檢索部63未檢索出類(lèi)似圖像數(shù)據(jù)的情況下 (表示該主旨的檢索結(jié)果未被通知的情況下)，不實(shí)行年齡確認(rèn)處理，將對(duì)象圖像數(shù)據(jù)及其拍攝日期的信息輸出至分組部66。日期比較部65在確認(rèn)對(duì)象圖像的被攝體的年齡在對(duì)象年齡范圍(0至5歲)以?xún)?nèi)時(shí)，會(huì)從年齡確認(rèn)部64獲得對(duì)象圖像數(shù)據(jù)及其拍攝日期信息以及類(lèi)似圖像信息(從類(lèi)似圖像檢索部63取得的類(lèi)似圖像的拍攝日期和表示分組的信息)。所以，日期比較部65會(huì)比較對(duì)象圖像數(shù)據(jù)的拍攝日期與類(lèi)似圖像數(shù)據(jù)的拍攝日期。具體而言，在本實(shí)施方式中，日期比較部65會(huì)計(jì)算對(duì)象圖像數(shù)據(jù)的拍攝日期與類(lèi)似圖像數(shù)據(jù)的拍攝日期之間的時(shí)間差，判定該時(shí)間差是否在指定時(shí)間以下。指定時(shí)間是指使用者可以通過(guò)對(duì)操作部17的操作任意指定的時(shí)間。日期比較部65在判定對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差為指定時(shí)間以下時(shí)，會(huì)向分組部66輸出對(duì)象圖像數(shù)據(jù)和該對(duì)象圖像的類(lèi)似圖像數(shù)據(jù)所屬的分組信息。另外，日期比較部65在判定對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差超過(guò)指定時(shí)間時(shí)，會(huì)對(duì)對(duì)象圖像數(shù)據(jù)的拍攝日期和其它類(lèi)似圖像數(shù)據(jù)的拍攝日期進(jìn)行比較。這種日期比較部65的比較處理會(huì)反復(fù)執(zhí)行，直到拍攝日期的時(shí)間差在指定時(shí)間以下的類(lèi)似圖像出現(xiàn)，或類(lèi)似圖像不存在。分組部66將對(duì)象圖像數(shù)據(jù)分到規(guī)定的分組，將對(duì)象圖像數(shù)據(jù)作為屬于所分類(lèi)的分組的數(shù)據(jù)保存在已有圖像存儲(chǔ)部52。具體而言，在本實(shí)施方式中，在判定對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差為指定時(shí)間以下時(shí)，日期比較部65會(huì)向分組部66輸出對(duì)象圖像數(shù)據(jù)和該對(duì)象圖像的類(lèi)似圖像數(shù)據(jù)所屬的分組信息。在這種情況下，分組部66會(huì)例如對(duì)對(duì)象圖像數(shù)據(jù)附加與類(lèi)似圖像數(shù)據(jù)相同的分類(lèi)標(biāo)簽信息，使對(duì)象圖像數(shù)據(jù)分到類(lèi)似圖像數(shù)據(jù)所屬的分組中。然后，分組部66將對(duì)象圖像數(shù)據(jù)作為該分組數(shù)據(jù)保存到已有圖像存儲(chǔ)部52中。另外，對(duì)于其它處理，以后將參照?qǐng)D3的流程圖進(jìn)行記述。下面，參照?qǐng)D3，對(duì)圖2的攝像裝置1實(shí)行的分組判斷處理進(jìn)行說(shuō)明。圖3是說(shuō)明分組判斷處理的流程的流程圖。分組判斷處理例如在使用者對(duì)操作部17進(jìn)行對(duì)象圖像數(shù)據(jù)分類(lèi)指示操作時(shí)，以該操作為契機(jī)被啟動(dòng)。也就是說(shuō)，會(huì)實(shí)行如下處理。在圖3的步驟S11，人臉檢測(cè)部61會(huì)從對(duì)象圖像存儲(chǔ)部51讀出對(duì)象圖像數(shù)據(jù)，試圖從該對(duì)象圖像中檢測(cè)人臉圖像。在步驟S12，分組部66會(huì)判定是否能從對(duì)象圖像中檢測(cè)出人臉區(qū)。在由于對(duì)象圖像中不含被攝體等理由導(dǎo)致人臉檢測(cè)部61未檢測(cè)出人臉區(qū)的情況下，步驟S12中判定為否，結(jié)束分組判斷處理。此時(shí)，該對(duì)象圖像數(shù)據(jù)沒(méi)被分到任何一組，被保存在已有圖像存儲(chǔ)部52。相對(duì)于此，在人臉檢測(cè)部61檢測(cè)出人臉區(qū)的情況下，步驟S12中會(huì)判定為是，處理進(jìn)入步驟S13。在步驟S13，年齡識(shí)別部62會(huì)根據(jù)人臉檢測(cè)部61檢測(cè)出的人臉區(qū)的數(shù)據(jù)，識(shí)別對(duì)象圖像的被攝體的年齡。在步驟S14，類(lèi)似圖像檢索部63會(huì)從已有圖像存儲(chǔ)部52保存的多個(gè)已有圖像數(shù)據(jù)中，將人臉區(qū)類(lèi)似于由人臉檢測(cè)部61檢測(cè)出的人臉區(qū)的已有圖像數(shù)據(jù)作為對(duì)象圖像的類(lèi)似圖像檢索出來(lái)。在步驟S15，分組部66會(huì)判定能否檢索出類(lèi)似圖像。在類(lèi)似圖像檢索部63未檢索到類(lèi)似圖像時(shí)，步驟S15中判定為否，分組判斷處理結(jié)束。此時(shí)，該對(duì)象圖像數(shù)據(jù)沒(méi)被分到任何一組，被保存在已有圖像存儲(chǔ)部52。相對(duì)于此，在類(lèi)似圖像檢索部63檢索到一個(gè)以上的類(lèi)似圖像時(shí)，在步驟S15中判定為是，處理進(jìn)入步驟S16。在步驟S16，年齡確認(rèn)部64判定年齡識(shí)別部62識(shí)別出的對(duì)象圖像的被攝體的年齡是否在規(guī)定的對(duì)象年齡范圍內(nèi)。如上所述，對(duì)象年齡范圍是進(jìn)行分組判斷處理時(shí)使用者可通過(guò)操作部17指定的年齡范圍，例如，本實(shí)施方式設(shè)定了 0至5歲的范圍。在對(duì)象圖像的被攝體的年齡不在規(guī)定的對(duì)象年齡范圍內(nèi)時(shí)，也就是超過(guò)5歲時(shí)， 步驟S16中判定為否，處理進(jìn)入步驟S20。在步驟S20中，分組部66例如對(duì)對(duì)象圖像數(shù)據(jù)附加“其它分組”的標(biāo)簽信息，使對(duì)象圖像數(shù)據(jù)分到“其它分組”中，這樣，分組判斷處理就會(huì)結(jié)束。此時(shí)，該對(duì)象圖像數(shù)據(jù)會(huì)與它的拍攝日期信息一起作為其它分組保存在已有圖像存儲(chǔ)部52。相反，在對(duì)象圖像的被攝體的年齡在規(guī)定的對(duì)象年齡范圍內(nèi)時(shí)，也就是5歲以下的情況下，步驟S16中判定為是，處理進(jìn)入步驟S17。在步驟S17中，日期比較部65會(huì)對(duì)類(lèi)似圖像檢索部63檢索到的類(lèi)似圖像數(shù)據(jù)的拍攝日期與對(duì)象圖像數(shù)據(jù)的拍攝日期進(jìn)行比較。具體而言就是，日期比較部65計(jì)算對(duì)象圖像數(shù)據(jù)的拍攝日期與類(lèi)似圖像數(shù)據(jù)的拍攝日期之間的時(shí)間差。在步驟S18中，日期比較部65會(huì)判定對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差是否在指定時(shí)間以下。所謂對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的該時(shí)間差超過(guò)指定時(shí)間的情況是指，對(duì)象圖像的被攝體與類(lèi)似圖像的被攝體在間隔超過(guò)指定時(shí)間的較長(zhǎng)期間，例如若指定時(shí)間是2年則間隔就是超過(guò)2年的期間，臉部仍然相似?？傊侵?，二者很可能是親子或兄弟等不同的人，一個(gè)是對(duì)象圖像的被攝體，另一個(gè)是類(lèi)似圖像的被攝體。因此，在對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的該時(shí)間差超過(guò)指定時(shí)間的情況下，在步驟S18中判定為否，返回步驟S14的處理，重新檢索其它類(lèi)似圖像，重復(fù)以后的處理。假設(shè)此后，對(duì)于其它類(lèi)似圖像，在執(zhí)行步驟S14至S18的處理后，對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的該時(shí)間差是在指定時(shí)間以下。這意味著對(duì)象圖像的被攝體與類(lèi)似圖像的被攝體是在指定時(shí)間以?xún)?nèi)的短時(shí)間內(nèi)臉部相似。總之，可以判斷對(duì)象圖像的被攝體與類(lèi)似圖像的被攝體是同一個(gè)人。因此，在對(duì)象圖像與類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的該時(shí)間差在指定時(shí)間以下的情況下，在步驟S18中會(huì)判定為是，處理進(jìn)入步驟S19。在步驟S19中，分組部66會(huì)將對(duì)象圖像數(shù)據(jù)分在與類(lèi)似圖像數(shù)據(jù)相同的組中，將對(duì)象圖像數(shù)據(jù)作為該分組所屬數(shù)據(jù)保存在已有圖像存儲(chǔ)部52。具體而言就是，分組部66會(huì)例如對(duì)對(duì)象圖像數(shù)據(jù)附加與類(lèi)似圖像數(shù)據(jù)相同的分類(lèi)標(biāo)簽信息，使對(duì)象圖像數(shù)據(jù)分到與類(lèi)似圖像數(shù)據(jù)相同的分組中。然后，分組部66將對(duì)象圖像數(shù)據(jù)作為該分組的數(shù)據(jù)保存到已有圖像存儲(chǔ)部52中。這樣，分組判斷處理就此結(jié)束。進(jìn)一步，參照?qǐng)D4，對(duì)分組判斷處理進(jìn)行具體說(shuō)明。圖4是對(duì)分組判斷處理的具體處理結(jié)果進(jìn)行說(shuō)明的說(shuō)明圖。在圖4的例子中，由攝像部16拍攝后得到的對(duì)象圖像71a、71b、71c、71d. · ·的各數(shù)據(jù)被作為對(duì)象圖像數(shù)據(jù)，保存在對(duì)象圖像存儲(chǔ)部41。此外，在圖4中，各對(duì)象圖像71a、 71b、71c、71d的右上分別寫(xiě)有各自的拍攝日期，可確定這些對(duì)象圖像的拍攝日期信息也被保存在對(duì)象圖像存儲(chǔ)部51。此外，對(duì)象圖像71a、71c各自包含的被攝體72a、72c分別是孩子；對(duì)象圖像71b包含的被攝體72b是父母。另外，對(duì)象圖像71d包含的被攝體72d是與該親子沒(méi)有關(guān)系的其他人。此外，在已有圖像存儲(chǔ)部52中預(yù)先設(shè)定了 “2006年孩子4歲組”，預(yù)先設(shè)置了保存屬于該組的圖像數(shù)據(jù)的存儲(chǔ)部81a(下稱(chēng)“孩子組存儲(chǔ)部81a”)。被攝體包含4歲孩子的1 個(gè)以上的已有圖像(僅圖示了已有圖像82a)數(shù)據(jù)，與它的拍攝日期信息一起被保存在孩子組存儲(chǔ)部81a。已有圖像存儲(chǔ)部52中還預(yù)先設(shè)定了 “1986年父母4歲組”，預(yù)先設(shè)置了保存屬于該組的圖像數(shù)據(jù)的存儲(chǔ)部81b(下稱(chēng)“父母組存儲(chǔ)部81b”)。被攝體包含4歲時(shí)的父母的1 個(gè)以上的已有圖像(僅圖示了已有圖像82b)數(shù)據(jù)與它的拍攝日期信息一起被保存在父母組存儲(chǔ)部81b。已有圖像存儲(chǔ)部52中還預(yù)先設(shè)定了“其它組”，預(yù)先設(shè)置了保存屬于該組的圖像數(shù)據(jù)的存儲(chǔ)部81c (下稱(chēng)“其它組存儲(chǔ)部81c”)。
11
也就是說(shuō)，在圖4的例子中，對(duì)象圖像713、7113、71(3、71(1...的各個(gè)數(shù)據(jù)被分到 “2006年孩子4歲組”、“1986年父母4歲組”、“其它組”這3個(gè)組中的一個(gè)。在圖3的步驟Sll的處理中，對(duì)象圖像71a的數(shù)據(jù)從對(duì)象圖像存儲(chǔ)部51被讀出， 由人臉檢測(cè)部61試圖檢測(cè)人臉區(qū)。此時(shí)，如圖4所示，由于檢測(cè)到人臉區(qū)73a，所以在步驟S12的處理中會(huì)判定為是， 在步驟S13的處理中，由年齡識(shí)別部62根據(jù)該人臉區(qū)73a識(shí)別出對(duì)象圖像的被攝體(孩子)的年齡為4歲。在步驟S14的處理中，由類(lèi)似圖像檢索部63從已有圖像存儲(chǔ)部52所保存的多個(gè)已有圖像數(shù)據(jù)中，將人臉區(qū)類(lèi)似于人臉區(qū)73a的已有圖像數(shù)據(jù)作為對(duì)象圖像的類(lèi)似圖像檢索出來(lái)。在這種情況下，檢索對(duì)象和檢索順序不特別限定，這里，為了便于說(shuō)明，可以認(rèn)為孩子組存儲(chǔ)部81a、父母組存儲(chǔ)部81b和其它組81c是檢索對(duì)象，并按照該順序進(jìn)行檢索。這里，人臉區(qū)類(lèi)似于人臉區(qū)73a的已有圖像數(shù)據(jù)有孩子組存儲(chǔ)部81a保存的已有圖像8 等數(shù)據(jù)；和父母組存儲(chǔ)部81b保存的已有圖像82b等數(shù)據(jù)。不過(guò)，由于孩子組存儲(chǔ)部81a會(huì)被優(yōu)先檢索，所以，例如已有圖像82a的數(shù)據(jù)會(huì)作為對(duì)象圖像71a的類(lèi)似圖像數(shù)據(jù)被檢索出來(lái)。此時(shí)，在步驟S15的處理中會(huì)判定為是，在步驟S16的處理中，由年齡確認(rèn)部64判定對(duì)象圖像71a的被攝體(孩子)的年齡(=4歲)是否在規(guī)定的對(duì)象年齡范圍內(nèi)。這里，如上所述，對(duì)象年齡的范圍設(shè)定為0至5歲的范圍，所以，在步驟S16的處理中會(huì)判定為是，處理進(jìn)入步驟S17。在步驟S17的處理中，由日期比較部65計(jì)算對(duì)象圖像71a的數(shù)據(jù)拍攝日期與類(lèi)似圖像8 的數(shù)據(jù)拍攝日期之間的時(shí)間差。如圖4所示，對(duì)象圖像71a的數(shù)據(jù)拍攝日期是2006年3月。另一方面，類(lèi)似圖像 8 的數(shù)據(jù)拍攝日期在圖4中沒(méi)有明確圖示，但由于該類(lèi)似圖像8 的數(shù)據(jù)屬于“2006年孩子4歲組”，所以，至少在2006年中，上述時(shí)間差最大也才9個(gè)月。這里，按時(shí)間差為9個(gè)月來(lái)進(jìn)行說(shuō)明。在步驟S18的處理中，日期比較部65判定對(duì)象圖像71a和類(lèi)似圖像8 的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差是否在指定時(shí)間以下。這里，如上所述，指定時(shí)間是使用者可以任意指定的時(shí)間，由于這里進(jìn)行親子分類(lèi)即可，所以，設(shè)定了某種程度上較長(zhǎng)的期間例如10年。在這種情況下，9個(gè)月的時(shí)間差與10年的指定時(shí)間相比，明顯是很短的期間。這就意味著對(duì)象圖像71a的被攝體和類(lèi)似圖像8 的被攝體在指定時(shí)間以下的短期間(這里是 9個(gè)月)內(nèi)，臉部是相似的。總之，可以判斷對(duì)象圖像71a的被攝體和類(lèi)似圖像82a的被攝體是同一個(gè)人，也就是“孩子”。所以，這里，在步驟S18的處理中會(huì)判定為是，在步驟S19的處理中，對(duì)象圖像71a 的數(shù)據(jù)會(huì)被分組部66分到“2006年孩子4歲組”，保存在孩子組存儲(chǔ)部81a中。由此，分組判斷處理結(jié)束。其后，分組判斷處理再次開(kāi)始，在步驟Sll的處理中，對(duì)象圖像71c的數(shù)據(jù)從對(duì)象圖像存儲(chǔ)部51中被讀出，由人臉檢測(cè)部61嘗試檢測(cè)人臉區(qū)。
此時(shí)，對(duì)象圖像71c的數(shù)據(jù)被實(shí)施與對(duì)象圖像71a的數(shù)據(jù)實(shí)施的處理完全相同的處理。也就是說(shuō)，最終在步驟S19的處理中，對(duì)象圖像71c的數(shù)據(jù)會(huì)被分組部66分到“2006 年孩子4歲組”，保存在孩子組存儲(chǔ)部81a中。由此，分組判斷處理結(jié)束。再后來(lái)，分組判斷處理再次開(kāi)始，在步驟Sll的處理中，對(duì)象圖像71b的數(shù)據(jù)從對(duì)象圖像存儲(chǔ)部51中被讀出，由人臉檢測(cè)部61嘗試檢測(cè)人臉區(qū)。此時(shí)，如圖4所示，由于檢測(cè)出人臉區(qū)73b，所以在步驟S12的處理中會(huì)判定為是， 在步驟S13的處理中，由年齡識(shí)別部62根據(jù)該人臉區(qū)7 識(shí)別出對(duì)象圖像的被攝體(父母)的年齡為4歲。在步驟S14的處理中，由類(lèi)似圖像檢索部63從已有圖像存儲(chǔ)部52所保存的多個(gè)已有圖像數(shù)據(jù)中，將人臉區(qū)類(lèi)似于人臉區(qū)73b的已有圖像數(shù)據(jù)作為對(duì)象圖像的類(lèi)似圖像檢索出來(lái)。這里，人臉區(qū)類(lèi)似于人臉區(qū)7 的已有圖像數(shù)據(jù)有孩子組存儲(chǔ)部81a所保存的已有圖像8 等數(shù)據(jù)；和父母組存儲(chǔ)部81b所保存的已有圖像82b等數(shù)據(jù)。不過(guò)，如上所述，由于孩子組存儲(chǔ)部81a會(huì)被優(yōu)先檢索，所以，例如已有圖像8 的數(shù)據(jù)會(huì)作為對(duì)象圖像71b的類(lèi)似圖像數(shù)據(jù)被檢索出來(lái)。此時(shí)，在步驟S15的處理中會(huì)判定為是，在步驟S16的處理中，由年齡確認(rèn)部64判定對(duì)象圖像71b的被攝體(父母)的年齡(=4歲)是否在規(guī)定的對(duì)象年齡范圍內(nèi)。這里，如上所述，對(duì)象年齡的范圍設(shè)定的是0至5歲的范圍，所以，在步驟S16的處理中會(huì)判定為是，從而處理進(jìn)入步驟S17。在步驟S17的處理中，由日期比較部65計(jì)算對(duì)象圖像71b的數(shù)據(jù)拍攝日期與類(lèi)似圖像8 的數(shù)據(jù)拍攝日期之間的時(shí)間差。如圖4所示，對(duì)象圖像71b的數(shù)據(jù)拍攝日期是1986年1月。類(lèi)似圖像8 的數(shù)據(jù)拍攝日期在圖4中沒(méi)有明確表示，但由于該類(lèi)似圖像82a的數(shù)據(jù)屬于“2006年孩子4歲組”，所以，至少在2006年中，上述時(shí)間差最小也超過(guò)19年。這里，按時(shí)間差為19年來(lái)進(jìn)行說(shuō)明。在步驟S18的處理中，由日期比較部65判定對(duì)象圖像71b和類(lèi)似圖像8 的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差是否在指定時(shí)間以下。在這種情況下，19年的時(shí)間差與10年的指定時(shí)間相比，明顯是很長(zhǎng)的期間。這就意味著對(duì)象圖像71b的被攝體和類(lèi)似圖像82a的被攝體在超過(guò)10年的指定時(shí)間的較長(zhǎng)期間(這里是19年)內(nèi)，臉部是相似的?？傊艽罂赡苁歉改甘菍?duì)象圖像71b的被攝體，孩子是類(lèi)似圖像8 的被攝體。在這種情況下，很難正確將對(duì)象圖像71b的數(shù)據(jù)分組。所以，在這種情況下，在步驟S18中會(huì)被判定為否，返回至步驟S14的處理，重新檢索其它類(lèi)似圖像，重復(fù)后來(lái)的處理。例如，在步驟S14的處理中，這次父母組存儲(chǔ)部81b保存的已有圖像82b的數(shù)據(jù)會(huì)作為對(duì)象圖像71b的類(lèi)似圖像數(shù)據(jù)被檢索出來(lái)。此時(shí)，在步驟S15的處理中會(huì)判定為是，在步驟S16的處理中，由年齡確認(rèn)部64判定對(duì)象圖像71b的被攝體(父母)的年齡(=4歲)是否在規(guī)定的對(duì)象年齡范圍內(nèi)。這里，如上所述，對(duì)象年齡的范圍設(shè)定的是0至5歲的范圍，所以，在步驟S16的處理中會(huì)判定為是，處理進(jìn)入步驟S17。 在步驟S17的處理中，由日期比較部65計(jì)算對(duì)象圖像71b的數(shù)據(jù)拍攝日期與類(lèi)似圖像82b的數(shù)據(jù)拍攝日期之間的時(shí)間差。如圖4所示，對(duì)象圖像71b的數(shù)據(jù)拍攝日期是1986年1月。類(lèi)似圖像82b的數(shù)據(jù)拍攝日期在圖4中沒(méi)有明確表示，但由于該類(lèi)似圖像82b的數(shù)據(jù)屬于“1986年父母4歲組”， 所以，至少在1986年中，上述時(shí)間差最大也才11個(gè)月。這里，按時(shí)間差為11個(gè)月來(lái)進(jìn)行說(shuō)明。在步驟S18的處理中，由日期比較部65判定對(duì)象圖像71b和類(lèi)似圖像8 的兩個(gè)數(shù)據(jù)間的拍攝日期的時(shí)間差是否在指定時(shí)間以下。在這種情況下，11個(gè)月的時(shí)間差與10年的指定時(shí)間相比，明顯是很短的期間。這就意味著對(duì)象圖像71b的被攝體和類(lèi)似圖像82b的被攝體在指定時(shí)間以下的短期間(這里是11個(gè)月)內(nèi)，臉部相似?？傊褪牵梢耘袛鄬?duì)象圖像71b的被攝體和類(lèi)似圖像82b的被攝體是同一個(gè)人，也就是“父母”。所以，這里在步驟S18的處理中會(huì)被判定為是，在步驟S19的處理中，對(duì)象圖像71b 的數(shù)據(jù)會(huì)被分組部66分到“ 1986年父母4歲組”，并保存在父母組存儲(chǔ)部81b中。由此，分組判斷處理結(jié)束。再后來(lái)，分組判斷處理再次開(kāi)始，在步驟Sll的處理中，對(duì)象圖像71d的數(shù)據(jù)從對(duì)象圖像存儲(chǔ)部51中被讀出，由人臉檢測(cè)部61嘗試檢測(cè)人臉區(qū)。此時(shí)，如圖4所示，由于檢測(cè)出人臉區(qū)73d，所以在步驟S12的處理中會(huì)判定為是， 在步驟S13的處理中，由年齡識(shí)別部62根據(jù)該人臉區(qū)73d識(shí)別出對(duì)象圖像的被攝體(父母)的年齡為14歲。在步驟S14的處理中，由類(lèi)似圖像檢索部63從已有圖像存儲(chǔ)部52所保存的多個(gè)已有圖像數(shù)據(jù)中，將人臉區(qū)類(lèi)似于人臉區(qū)73d的已有圖像數(shù)據(jù)作為對(duì)象圖像的類(lèi)似圖像檢索出來(lái)。這里，圖4中沒(méi)有圖示，類(lèi)似圖像數(shù)據(jù)被保存在其他組存儲(chǔ)部81c，該數(shù)據(jù)被檢索出來(lái)。此時(shí)，在步驟S15的處理中會(huì)判定為是，在步驟S16的處理中，由年齡確認(rèn)部64判定對(duì)象圖像71d的被攝體(父母)的年齡(=14歲)是否在規(guī)定的對(duì)象年齡范圍內(nèi)。這里，如上所述，由于對(duì)象年齡的范圍設(shè)定的是0至5歲的范圍，所以在步驟S16 的處理中會(huì)判定為否，處理進(jìn)入步驟S20。在步驟S20的處理中，由分組部66將對(duì)象圖像71d的數(shù)據(jù)分到“其它組”，保存在其它組存儲(chǔ)部81c。由此，分組判斷處理結(jié)束。以上，如參照?qǐng)D1至圖4對(duì)本發(fā)明的實(shí)施方式進(jìn)行的說(shuō)明那樣，攝像裝置1包括 人臉檢測(cè)部61、年齡識(shí)別部62、類(lèi)似圖像檢索部63、年齡確認(rèn)部64、日期比較部65和分組部66 (參照?qǐng)D2)。人臉檢測(cè)部61將拍攝時(shí)間可確定的攝像圖像數(shù)據(jù)用作對(duì)象圖像數(shù)據(jù)，將該對(duì)象圖像內(nèi)包含被攝體臉部的區(qū)域作為人臉區(qū)檢測(cè)。年齡識(shí)別部62根據(jù)人臉區(qū)，對(duì)對(duì)象圖像內(nèi)的被攝體的年齡進(jìn)行識(shí)別。
類(lèi)似圖像檢索部63對(duì)于拍攝時(shí)間分別可以確定的多個(gè)已有圖像數(shù)據(jù)，從屬于多個(gè)分組中任意一組的數(shù)據(jù)中，將人臉區(qū)與人臉檢測(cè)部61檢測(cè)出的人臉區(qū)類(lèi)似的已有圖像數(shù)據(jù)，作為類(lèi)似圖像數(shù)據(jù)進(jìn)行檢索。年齡確認(rèn)部64確認(rèn)由年齡識(shí)別部62識(shí)別出的對(duì)象圖像內(nèi)的被攝體的年齡是否在規(guī)定的第1范圍(對(duì)象年齡范圍)內(nèi)。日期比較部65在確認(rèn)對(duì)象圖像內(nèi)的被攝體的年齡在第1范圍內(nèi)時(shí)，求出對(duì)象圖像數(shù)據(jù)的拍攝日期與類(lèi)似圖像數(shù)據(jù)的拍攝日期之間的時(shí)間差，對(duì)該時(shí)間差與規(guī)定的第2范圍 (指定時(shí)間)進(jìn)行比較。分組部66在由日期比較部65進(jìn)行比較的結(jié)果是時(shí)間差在第2范圍內(nèi)的情況下， 將對(duì)象圖像數(shù)據(jù)分到與類(lèi)似圖像數(shù)據(jù)相同的分組。這里，時(shí)間差在第2范圍內(nèi)的情況是指對(duì)象圖像的被攝體與類(lèi)似圖像的被攝體在第2范圍以下的短時(shí)間內(nèi)，臉部是類(lèi)似的?？傊?，可以判斷對(duì)象圖像的被攝體和類(lèi)似圖像的被攝體是同一個(gè)人。因此，在這種情況下，對(duì)象圖像數(shù)據(jù)被分到與類(lèi)似圖像數(shù)據(jù)相同的分組。相反，時(shí)間差不在第2范圍內(nèi)的情況是指對(duì)象圖像的被攝體與類(lèi)似圖像的被攝體在間隔超過(guò)第2范圍的較長(zhǎng)期間，例如若第2范圍是10年則間隔就是超過(guò)10年的期間， 臉部仍然類(lèi)似?？傊吆芸赡苁怯H子或兄弟等不同的人，一個(gè)是對(duì)象圖像的被攝體，另一個(gè)是類(lèi)似圖像的被攝體。在這種情況下，由于很難正確對(duì)對(duì)象圖像數(shù)據(jù)進(jìn)行分組，所以對(duì)象圖像數(shù)據(jù)不會(huì)被分到與類(lèi)似圖像數(shù)據(jù)相同的分組。這樣，就可以將分別包含臉部相似的不同被攝體的各個(gè)圖像數(shù)據(jù)精準(zhǔn)地分到各個(gè)分組中。另外，本發(fā)明不限于上述實(shí)施方式，能達(dá)到本發(fā)明目的的變形、改良等都是包含在本發(fā)明中的。例如，在上述實(shí)施方式中，對(duì)象圖像數(shù)據(jù)是靜態(tài)圖像數(shù)據(jù)，但并不限定于此，也可以是動(dòng)態(tài)圖像數(shù)據(jù)。在這種情況下，雖然沒(méi)有圖示，但攝像裝置1只要將構(gòu)成動(dòng)態(tài)圖像的幀圖像等中的、包含被攝體的規(guī)定的1幅數(shù)據(jù)或者該動(dòng)態(tài)圖像的縮圖數(shù)據(jù)作為處理對(duì)象，實(shí)行圖4等的分組判斷處理即可。此外，在上述實(shí)施方式中，對(duì)象圖像存儲(chǔ)部51和已有圖像存儲(chǔ)部52構(gòu)成為包含在攝像裝置1的存儲(chǔ)部19中，但并不限定于此，也可以例如經(jīng)由通信部20，從設(shè)于外部服務(wù)器等中的對(duì)象圖像存儲(chǔ)部51和已有圖像存儲(chǔ)部52，通過(guò)互聯(lián)網(wǎng)線路，輸入輸出對(duì)象圖像數(shù)據(jù)和已有圖像數(shù)據(jù)。此外，在上述的實(shí)施方式中，日期比較部65對(duì)由類(lèi)似圖像檢索部63提取出的已有圖像數(shù)據(jù)的拍攝日期與通過(guò)人臉檢測(cè)部61檢測(cè)出人臉區(qū)的對(duì)象圖像數(shù)據(jù)的拍攝日期之間的時(shí)間差是否在指定時(shí)間以?xún)?nèi)進(jìn)行了判定。此時(shí)的指定時(shí)間在本實(shí)施方式中雖然設(shè)定的是2年和10年，但并不是限定于此， 也可以由使用者任意設(shè)定。不過(guò)，由日期比較部65判別的指定期間依賴(lài)于年齡識(shí)別部62進(jìn)行的年齡識(shí)別精度。這樣，在指定期間設(shè)定短期間的情況下，可以盡可能地提高年齡識(shí)別部62進(jìn)行的年齡識(shí)別精度。
15
此外，在上述的實(shí)施方式中，年齡確認(rèn)部64對(duì)由年齡識(shí)別部62識(shí)別出的對(duì)象圖像的被攝體的年齡是否在規(guī)定的對(duì)象年齡范圍內(nèi)進(jìn)行了判定。在這種情況下，對(duì)象年齡范圍在上述實(shí)施方式中設(shè)定的是0至5歲的范圍，但如上所述，并不限定于此，也可以由使用者任意設(shè)定。例如，有時(shí)不希望相差2歲的兄弟在小學(xué)時(shí)的各圖像數(shù)據(jù)被分在同一分組。在這種情況下，使用者可以將由日期比較部65判斷的指定時(shí)間設(shè)定為2年，將由年齡確認(rèn)部64 判斷的對(duì)象年齡范圍設(shè)定在6至12歲的范圍。這樣，就可以將臉部相似的兄弟在小學(xué)時(shí)的圖像數(shù)據(jù)分別分到兄組和弟組。此外，在上述實(shí)施方式中，對(duì)象年齡范圍固定使用單一年齡范圍，但并不限定于此，也可以將多個(gè)年齡范圍適當(dāng)組合，或者適當(dāng)替換使用。此外，上述實(shí)施方式的分組判斷處理雖然是按圖4的流程圖實(shí)行的，并不限定于此。也就是說(shuō)，在本說(shuō)明書(shū)中，記述記錄介質(zhì)中保存的程序的步驟當(dāng)然包含按照其順序、依照時(shí)序執(zhí)行的處理，但也不一定非得按時(shí)序執(zhí)行處理，并行或單獨(dú)執(zhí)行的處理也包含在內(nèi)。具體而言，例如年齡確認(rèn)部64進(jìn)行年齡確認(rèn)的步驟S16就沒(méi)必要按照?qǐng)D2的順序執(zhí)行處理。另外，通過(guò)省略年齡確認(rèn)部64進(jìn)行年齡確認(rèn)的步驟S16的處理，就可以將能包含所有年齡的被攝體的圖像數(shù)據(jù)作為對(duì)象，在判定對(duì)象圖像和類(lèi)似圖像的兩個(gè)數(shù)據(jù)間的拍攝日期的該時(shí)間差是否在指定時(shí)間以下之后，利用分組部66進(jìn)行分組。此外，在上述的實(shí)施方式中，類(lèi)似圖像檢測(cè)部63在從已有圖像存儲(chǔ)部52所保存的多個(gè)已有圖像數(shù)據(jù)中檢索不到其它類(lèi)似圖像數(shù)據(jù)的情況下，會(huì)結(jié)束分組判斷處理。此時(shí)，該對(duì)象圖像數(shù)據(jù)被保存在已有圖像存儲(chǔ)部52，沒(méi)有被分到任何一組，但如上所述，也并不是限定于此，可以將對(duì)象圖像數(shù)據(jù)分到新的分組，在已有圖像存儲(chǔ)部52中保存。此外，在上述的實(shí)施方式中，在因被攝體未包含在對(duì)象圖像等理由使人臉檢測(cè)部 61檢測(cè)不出人臉區(qū)的情況下，會(huì)結(jié)束分組判斷處理。此時(shí)，該對(duì)象圖像數(shù)據(jù)被保存在已有圖像存儲(chǔ)部52，沒(méi)有被分到任何一組，但如上所述，也并不是限定于此，可以將對(duì)象圖像數(shù)據(jù)分到新的分組，并保存在已有圖像存儲(chǔ)部52 中。此外，例如在上述實(shí)施方式中，對(duì)適合本發(fā)明的圖像處理裝置構(gòu)成為數(shù)碼相機(jī)等攝像處理裝置的例子進(jìn)行了說(shuō)明。但本發(fā)明并不只限于攝像處理裝置，一般也適用于可以執(zhí)行上述圖像處理的電子機(jī)器，有無(wú)攝像功能無(wú)妨(也可以從其它裝置取得對(duì)象圖像數(shù)據(jù))。具體而言，本發(fā)明例如可以應(yīng)用在個(gè)人電腦、數(shù)碼攝像機(jī)、便攜式導(dǎo)航裝置、和便攜式游戲機(jī)等。上述的一連串處理既可以依靠硬件實(shí)行，也可以依靠軟件實(shí)行。在依靠軟件實(shí)行一連串處理時(shí)，構(gòu)成該軟件的程序是從網(wǎng)絡(luò)或記錄介質(zhì)被裝入計(jì)算機(jī)等。計(jì)算機(jī)可以是組裝于專(zhuān)用硬件的計(jì)算機(jī)，也可以是安裝各種程序?qū)崿F(xiàn)各種功能的計(jì)算機(jī)，例如一般的個(gè)人電腦。
包含程序的記錄介質(zhì)可以由圖1的移動(dòng)存儲(chǔ)介質(zhì)31構(gòu)成，也可以由以預(yù)先組裝于裝置本體的狀態(tài)提供給使用者的記錄介質(zhì)等構(gòu)成。移動(dòng)存儲(chǔ)介質(zhì)例如由磁盤(pán)(包含軟盤(pán))、光盤(pán)、或磁光盤(pán)等構(gòu)成。光盤(pán)由例如CD_R0M(Compact Disk-Read Only Memory)、 DVD (Digital Versatile Disk)等構(gòu)成。磁光盤(pán)例如由MD (Mini-Disk)等構(gòu)成。此外，以預(yù)先組裝于裝置本體的狀態(tài)提供的記錄介質(zhì)例如是由記錄有程序的圖1的R0M12或圖1的存儲(chǔ)部19所包含的硬件等構(gòu)成。
權(quán)利要求
1.一種圖像處理裝置，包括人臉檢測(cè)機(jī)構(gòu)，將拍攝日期能確定的攝像圖像數(shù)據(jù)作為對(duì)象圖像數(shù)據(jù)使用，將該對(duì)象圖像內(nèi)的包含被攝體臉部的區(qū)域作為人臉區(qū)檢測(cè)出來(lái)；年齡識(shí)別機(jī)構(gòu)，根據(jù)由所述人臉檢測(cè)機(jī)構(gòu)檢測(cè)出的所述人臉區(qū)，識(shí)別所述對(duì)象圖像內(nèi)的所述被攝體的年齡；類(lèi)似圖像檢索機(jī)構(gòu)，對(duì)于拍攝日期能分別確定的多個(gè)已有圖像數(shù)據(jù)，從屬于多個(gè)分組中的某個(gè)分組的所述已有圖像數(shù)據(jù)中，將具有的人臉區(qū)類(lèi)似于由所述人臉檢測(cè)機(jī)構(gòu)檢測(cè)出的所述人臉區(qū)的所述已有圖像數(shù)據(jù)，作為類(lèi)似圖像數(shù)據(jù)檢索出來(lái)；年齡確認(rèn)機(jī)構(gòu)，確認(rèn)由所述年齡識(shí)別機(jī)構(gòu)識(shí)別的所述對(duì)象圖像內(nèi)的所述被攝體的年齡是否在第1范圍內(nèi)；比較機(jī)構(gòu)，在由所述年齡確認(rèn)機(jī)構(gòu)確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的年齡是在第1 范圍內(nèi)的情況下，求出所述對(duì)象圖像數(shù)據(jù)的第1拍攝日期與由所述類(lèi)似圖像檢索機(jī)構(gòu)檢索出的所述類(lèi)似圖像數(shù)據(jù)的第2拍攝日期之間的差值，并對(duì)所述差值與第2范圍進(jìn)行比較；和分類(lèi)機(jī)構(gòu)，在由所述比較機(jī)構(gòu)比較的結(jié)果為所述差值在第2范圍內(nèi)的情況下，將所述對(duì)象圖像數(shù)據(jù)分到與所述類(lèi)似圖像數(shù)據(jù)所屬的分組相同的分組中。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，在由所述比較機(jī)構(gòu)比較的結(jié)果為所述差值在所述第2范圍以外的情況下，反復(fù)執(zhí)行以下處理，即所述類(lèi)似圖像檢索機(jī)構(gòu)檢索其它的類(lèi)似圖像數(shù)據(jù)，所述比較機(jī)構(gòu)將所述其它的類(lèi)似圖像數(shù)據(jù)的拍攝日期作為所述第2拍攝日期求出所述差值，并對(duì)所述差值與所述第2范圍進(jìn)行比較，該處理反復(fù)執(zhí)行直到所述差值處于所述第2范圍內(nèi)、或者由所述類(lèi)似圖像檢索機(jī)構(gòu)作為其它的類(lèi)似圖像的數(shù)據(jù)檢索的已有圖像數(shù)據(jù)已不存在為止，所述分類(lèi)機(jī)構(gòu)，在由所述類(lèi)似圖像檢索機(jī)構(gòu)作為其它的類(lèi)似圖像數(shù)據(jù)檢索的已有圖像數(shù)據(jù)已不存在的情況下，禁止對(duì)所述對(duì)象圖像數(shù)據(jù)進(jìn)行分類(lèi)，或者生成新的分組，將所述對(duì)象圖像數(shù)據(jù)分到新的分組中。
3.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述分類(lèi)機(jī)構(gòu)在由所述年齡確認(rèn)機(jī)構(gòu)確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的年齡在所述第1范圍以外的情況下，將所述對(duì)象圖像數(shù)據(jù)分到與包含所述第1范圍內(nèi)的年齡的被攝體的已有圖像數(shù)據(jù)所屬的分組不同的分組中。
4.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于，所述分類(lèi)機(jī)構(gòu)在由所述人臉檢測(cè)機(jī)構(gòu)沒(méi)有檢測(cè)到所述人臉區(qū)的情況下，禁止對(duì)所述對(duì)象圖像數(shù)據(jù)進(jìn)行分類(lèi)，或者生成新的分組，將所述對(duì)象圖像數(shù)據(jù)分到新的分組中。
5.一種對(duì)拍攝日期能確定的攝像圖像數(shù)據(jù)進(jìn)行分類(lèi)的圖像處理裝置的圖像處理方法， 包括以下處理將拍攝日期能確定的攝像圖像數(shù)據(jù)作為對(duì)象圖像數(shù)據(jù)使用，將該對(duì)象圖像內(nèi)的包含被攝體臉部的區(qū)域作為人臉區(qū)檢測(cè)出來(lái)；根據(jù)所述檢測(cè)出的人臉區(qū)，識(shí)別所述對(duì)象圖像內(nèi)的所述被攝體的年齡； 對(duì)于拍攝日期能分別確定的多個(gè)已有圖像數(shù)據(jù)，從屬于多個(gè)分組中的某個(gè)分組的所述已有圖像數(shù)據(jù)中，將具有的人臉區(qū)類(lèi)似于所述檢測(cè)出的人臉區(qū)的所述已有圖像數(shù)據(jù)，作為類(lèi)似圖像數(shù)據(jù)檢索出來(lái)；確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的所述被識(shí)別出的年齡是否在第1范圍內(nèi)； 在確認(rèn)所述對(duì)象圖像內(nèi)的所述被攝體的所述被識(shí)別出的年齡是在第1范圍內(nèi)的情況下，求出所述對(duì)象圖像數(shù)據(jù)的第1拍攝日期與所述檢索出的類(lèi)似圖像數(shù)據(jù)的第2拍攝日期之間的差值，并對(duì)所述差值與第2范圍進(jìn)行比較；和在所述比較的結(jié)果為所述差值在第2范圍內(nèi)的情況下，將所述對(duì)象圖像數(shù)據(jù)分到與所述類(lèi)似圖像數(shù)據(jù)所屬的分組相同的分組中。
全文摘要
本發(fā)明提供一種圖像處理裝置和圖像處理方法，人臉檢測(cè)部檢測(cè)對(duì)象圖像內(nèi)的人臉區(qū)。年齡識(shí)別部根據(jù)人臉區(qū)，識(shí)別對(duì)象圖像內(nèi)的被攝體的年齡。類(lèi)似圖像檢索部從多個(gè)已有圖像數(shù)據(jù)中，將人臉區(qū)類(lèi)似于檢測(cè)出的人臉區(qū)的已有圖像數(shù)據(jù)，作為類(lèi)似圖像數(shù)據(jù)進(jìn)行檢索。年齡確認(rèn)部確認(rèn)被攝體的年齡是否在第1范圍內(nèi)。日期比較部在確認(rèn)被攝體的年齡在第1范圍內(nèi)的情況下，求出對(duì)象圖像數(shù)據(jù)的拍攝日期與類(lèi)似圖像數(shù)據(jù)的拍攝日期之間的時(shí)間差，比較該時(shí)間差與第2范圍。分類(lèi)單元在由日期比較部比較的結(jié)果為時(shí)間差在第2范圍內(nèi)的情況下，將對(duì)象圖像數(shù)據(jù)分到與類(lèi)似圖像數(shù)據(jù)相同的分組。這樣一來(lái)，圖像處理裝置就會(huì)精準(zhǔn)地將分別包含臉部相似的不同被攝體的各個(gè)圖像數(shù)據(jù)分到不同的分組。
文檔編號(hào)G06K9/62GK102393907SQ20111017873
公開(kāi)日2012年3月28日 申請(qǐng)日期2011年6月29日 優(yōu)先權(quán)日2010年6月30日
發(fā)明者栗山祐司 申請(qǐng)人:卡西歐計(jì)算機(jī)株式會(huì)社