專利名稱：圖像再現(xiàn)裝置、圖像再現(xiàn)程序、記錄介質(zhì)、圖像再現(xiàn)方法
技術(shù)領(lǐng)域：
本發(fā)明涉及能夠同時(shí)顯示整體圖像和將面部部分放大后的面部圖像 的圖像再現(xiàn)裝置、圖像再現(xiàn)程序、記錄介質(zhì)、圖像再現(xiàn)方法。
背景技術(shù)：
近年來，在例如數(shù)字照相機(jī)或監(jiān)視攝像機(jī)系統(tǒng)等中，檢測圖像中的 面部部分的面部檢測技術(shù)受到關(guān)注。并且，還提出了各種在再^圖像時(shí) 利用通過面部檢測技術(shù)檢測到的面部部分的提案。
作為這種技術(shù)的一個(gè)例子，在日本特開2004 —193933號(hào)公報(bào)中記載 了如下的圖像放大顯示方法利用面部檢測技術(shù)從攝影圖像中檢測面部 區(qū)域，在再現(xiàn)電子影集時(shí)，優(yōu)選放大顯示檢測到的面部部分。
并且，在日本特開2005—354333號(hào)公報(bào)中記載了一種圖像再現(xiàn)裝 置，該圖像再現(xiàn)裝置在進(jìn)行幻燈片放映(slide show)時(shí)，圖像內(nèi)的面部 自動(dòng)拉近顯示。由此，為了防止在直接以幻燈片放映來顯示圖像時(shí)引起 的單調(diào)的顯示，不會(huì)使觀看者感到厭煩，而進(jìn)行了努力研究。此外，在 該公報(bào)的圖9和0069段落等中記載了如下技術(shù)從整體圖像中提取面部 圖像，將提取出的面部圖像重疊在整體圖像上的提取出該面部的位置上， 進(jìn)行幻燈片放映顯示。從而，受關(guān)注的人物的面部在該面部所位于的位 置(即重疊在整體圖像中的面部部分)上被放大顯示。 .
此外，還提出了同時(shí)拍攝廣角圖像和遠(yuǎn)角圖像的技術(shù)和顯示的技術(shù)。 作為這類技術(shù)，例如在日本特開2004—15517號(hào)公報(bào)中記載了一種影像 集中顯示裝置，該影像集中顯示裝置針對(duì)同一被攝體，將監(jiān)視區(qū)域整體 的縮小圖像和關(guān)注部分的放大圖像同時(shí)顯示到監(jiān)視畫面上。
專利文獻(xiàn)l:日本特開2004—193933號(hào)公報(bào)
專利文獻(xiàn)2:日本特開2005—354333號(hào)公報(bào)專利文獻(xiàn)3:日本特開2004—15517號(hào)公報(bào)
如上所述，提出了各種利用面部檢測技術(shù)來識(shí)別攝影圖像的面部部 分并放大顯示面部部分的顯示裝置，但若在已提出的顯示裝置的基礎(chǔ)上， 還提供發(fā)展了被攝體的面部圖像顯示的再現(xiàn)方法，則能夠改善容易變單 調(diào)的圖像顯示，能夠利用靜態(tài)圖像再現(xiàn)的機(jī)會(huì)當(dāng)然也將會(huì)增多。
并且，作為顯示面部圖像時(shí)的一個(gè)課題之一，可以舉出如下問題 當(dāng)整體圖像是拍攝了多個(gè)人物的圖像時(shí)，即使同時(shí)顯示多個(gè)面部圖像， 仍不能簡單地將面部圖像與整體圖像中的人物之間對(duì)應(yīng)起來的情況較
多。 .
此外，在進(jìn)行團(tuán)體比賽的運(yùn)動(dòng)等的攝影場景中，若不對(duì)面部圖像進(jìn) 行某些處理就進(jìn)行顯示，則不能容易地掌握面部圖像的人物屬于對(duì)抗的 多個(gè)組中的哪一組。

發(fā)明內(nèi)容
本發(fā)明是鑒于上述情況而進(jìn)行的，其目的在于，提供一種能夠容易 地掌握整體圖像的人物與面部圖像的人物之間的對(duì)應(yīng)的圖像再現(xiàn)裝置、 圖像再現(xiàn)程序、記錄介質(zhì)、圖像再現(xiàn)方法。
并且，本發(fā)明的目的在于，提供一種圖像再現(xiàn)裝置，該圖像再現(xiàn)裝 置能夠容易地掌握面部圖像的人物屬于整體圖像中的多個(gè)組的哪一組。
為了達(dá)到上述目的，第一方面的圖像再現(xiàn)裝置，其具備面部信息 提取部，其提取圖像中的多個(gè)面部部分的信息；面部圖像制作部，其根
據(jù)所提取的多個(gè)面部部分的信息，由上述圖像來制作與上述圖像中的該
面部部分相比放大了的多個(gè)面部圖像；以及合成圖像制作部，其將表示 上述圖像整體的整體圖像和上述多個(gè)面部圖像組合來制作合成圖像，上 述合成圖像制作部將上述多個(gè)面部圖像彼此的相對(duì)位置決定成與上述整 體圖像中的各面部部分彼此的相對(duì)位置對(duì)應(yīng)，且以該面部圖像不會(huì)覆蓋 該整體圖像中的面部部分的方式來制作上述合成圖像。
并且，第二發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置 中，上述合成圖像制作部以使顯示上述多個(gè)面部圖像的區(qū)域和顯示上述整體圖像的區(qū)域?yàn)椴煌瑓^(qū)域的方式來制作合成圖像。
而且，第三發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置 中，所述圖像再現(xiàn)裝置還具備用于輸入放大率的操作部，上述面部圖像 制作部以使面部圖像相對(duì)于上述整體圖像中的面部部分的放大率與^f輸 入的放大率對(duì)應(yīng)的方式來制作面部圖像。
第四發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置中，上 述合成圖像制作部附加明示上述面部圖像與上述整體面部圖像中的哪個(gè) 面部部分對(duì)應(yīng)的信息來制作合成圖像。
第五發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置中，所 述圖像再現(xiàn)裝置還具有判斷上述各面部部分的攝影距離的距離判斷部， 上述面部圖像制作部以使面部圖像的顯示尺寸成為與對(duì)應(yīng)于該面部圖像 的面部部分的攝影距離對(duì)應(yīng)的尺寸的方式來制作面部圖像。
第六發(fā)明的圖像再現(xiàn)裝置，在上述第五發(fā)明的圖像再現(xiàn)裝置中，上 述面部圖像制作部以當(dāng)上述攝影距離相對(duì)較近時(shí)顯示尺寸相對(duì)較大、當(dāng) 該攝影距離相對(duì)較遠(yuǎn)時(shí)顯示尺寸相對(duì)較小的方式來制作面部圖像。
第七發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置中，所 述圖像再現(xiàn)裝置還具有用于進(jìn)行將面部圖像設(shè)為不顯示的輸入操作的操 作部，上述合成圖像制作部從制作合成圖像時(shí)的對(duì)象中除去被進(jìn)行了不 顯示的輸入操作的面部圖像，來制作合成圖像。 '
第八發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置中，上 述合成圖像制作部將上述面部圖像旋轉(zhuǎn)為與上述整體圖像中的面部部分 不同的斜度，然后制作合成圖像。
第九發(fā)明的圖像再現(xiàn)裝置，在上述第八發(fā)明的圖像再現(xiàn)裝置中，上 述面部信息提取部還提取上述圖像中的面部部分的斜度作為面部部分的 信息，上述合成圖像制作部根據(jù)所提取的面部部分的斜度使上述面部圖 像旋轉(zhuǎn)以使該面部部分正立，然后制作合成圖像。
第十發(fā)明的圖像再現(xiàn)裝置，在上述第一發(fā)明的圖像再現(xiàn)裝置中，上 述面部圖像制作部制作被旋轉(zhuǎn)成與上述整體圖像中的面部部分不同的斜 度的面部圖像。第十一發(fā)明的圖像再現(xiàn)裝置，其具有面部信息提取部，其提取圖 像中的多個(gè)面部部分的信息；面部圖像制作部，其根據(jù)所提取的多個(gè)面 部部分的信息，由上述圖像來制作與上述圖像中的該面部部分相比放大 了的多個(gè)面部圖像；顏色判斷部，其判斷位于上述面部部分附近的區(qū)域 的顏色；以及合成圖像制作部，其根據(jù)判斷出的顏色將上述多個(gè)面部圖 像分類成組，將被分類的每組中所匯總的上述多個(gè)面部圖像和表示上述 圖像整體的整體圖像組合，來制作一個(gè)合成圖像，上述合成圖像制作部 以使上述面部圖像不覆蓋上述整體圖像中的面部部分的方式來制作上述 合成圖像。
第十二發(fā)明的圖像再現(xiàn)裝置，在上述第十一發(fā)明的圖像再現(xiàn)裝置中， 上述合成圖像制作部附加明示上述面部圖像與上述整體圖像中的哪個(gè)面 部部分對(duì)應(yīng)的信息來制作合成圖像。
第十三發(fā)明的圖像再現(xiàn)程序使計(jì)算機(jī)執(zhí)行如下步驟提取圖像中的 多個(gè)面部部分的信息的步驟；判斷上述各面部部分的攝影距離的步驟； 根據(jù)所提取的多個(gè)面部部分的信息，由上述圖像來制作與上述圖像中的 該面部部分相比放大了的多個(gè)面部圖像，使得面部圖像的顯示尺寸成為 與對(duì)應(yīng)于該面部圖像的面部部分的攝影距離對(duì)應(yīng)的尺寸的步驟；以及將 上述多個(gè)面部圖像彼此的相對(duì)位置決定成與表示上述圖像整體的整體圖 像中的各面部部分彼此的相對(duì)位置對(duì)應(yīng)，且以該面部圖像不覆蓋整體圖 像中的面部部分的方式將上述整體圖像和上述多個(gè)面部圖像組合來制作 一個(gè)合成圖像的步驟。
第十四發(fā)明的記錄介質(zhì)可由計(jì)算機(jī)讀取，且記錄用于使計(jì)算機(jī)執(zhí)行 如下步驟的圖像再現(xiàn)程序提取圖像中的多個(gè)面部部分的信息的步驟； 判斷上述各面部部分的攝影距離的步驟；根據(jù)所提取的多個(gè)面部部分的 信息，由上述圖像來制作與上述圖像中的該面部部分相比放大了的多個(gè) 面部圖像，使得面部圖像的顯示尺寸成為與對(duì)應(yīng)于該面部圖像的面部部 分的攝影距離對(duì)應(yīng)的尺寸的步驟；以及將上述多個(gè)面部圖像彼此的相對(duì) 位置決定成與表示上述圖像整體的整體圖像中的各面部部分彼此的相對(duì) 位置對(duì)應(yīng)，且以該面部圖像不覆蓋整體圖像中的面部部分的方式將上述整體圖像和上述多個(gè)面部圖像組合來制作一個(gè)合成圖像的步驟。
第十五發(fā)明的圖像再現(xiàn)方法包括如下步驟提取圖像中的多個(gè)面部 部分的信息的步驟；判斷上述各面部部分的攝影距離的步驟；根據(jù)所提
取的多個(gè)面部部分的信息，由上述圖像來制作與上述圖像中的該面部部 分相比放大了的多個(gè)面部圖像，使得面部圖像的顯示尺寸成為與對(duì)應(yīng)于
該面部圖像的面部部分的攝影距離對(duì)應(yīng)的尺寸的步驟；以及將上述多個(gè) 面部圖像彼此的相對(duì)位置決定成與表示上述圖像整體的整體圖像中的各 面部部分彼此的相對(duì)位置對(duì)應(yīng)，且以該面部圖像不覆蓋整體圖像中的面 部部分的方式將上述整體圖像和上述多個(gè)面部圖像組合來制作一個(gè)合成 圖像的步驟。
根據(jù)本發(fā)明的圖像再現(xiàn)裝置、圖像再現(xiàn)程序、記錄介質(zhì)、圖像再現(xiàn) 方法，可以容易掌握整體圖像的人物和面部圖像的人物之間的對(duì)應(yīng)。
并且，根據(jù)本發(fā)明的圖像再現(xiàn)裝置，可以容易地掌握面部圖像的人 物屬于整體圖像中的多個(gè)組的哪一組。


圖1是示出本發(fā)明的實(shí)施方式1中的圖像再現(xiàn)裝置的結(jié)構(gòu)的框圖。 圖2是示出在上述實(shí)施方式1中、左右分割顯示中的整體圖像和多
個(gè)面部圖像的顯示例的圖。 '
圖3是示出在上述實(shí)施方式1中、將特定的面部圖像相對(duì)地放大顯
示的例子的圖。
圖4是示出在上述實(shí)施方式1中、將特定的面部圖像相對(duì)地縮小顯 示的例子的圖。
圖5是示出在上述實(shí)施方式1中、重疊顯示中的整體圖像和多個(gè)面 部圖像的顯示例的圖。
圖6是示出在上述實(shí)施方式1中、顯示不需要的面部圖像的情況的圖。
圖7是示出在上述實(shí)施方式1中、不顯示不需要的面部圖像后的情 況的圖。圖8是示出在上述實(shí)施方式1中、進(jìn)行了第1遠(yuǎn)近強(qiáng)調(diào)的重疊顯示 的例子的圖。
圖9是示出在上述實(shí)施方式1中、進(jìn)行了第2遠(yuǎn)近強(qiáng)調(diào)的重疊顯示 的例子的圖。 .
圖IO是示出在上述實(shí)施方式1中、中心分割顯示中的整體圖像和多
個(gè)面部圖像的顯示例的圖。
圖11是示出在上述實(shí)施方式1中、對(duì)面部圖像進(jìn)行斜度校正之前的 例子的圖。
圖12是示出在上述實(shí)施方式1中、對(duì)面部圖像進(jìn)行斜度校正之后的 例子的圖。
圖13是示出在上述實(shí)施方式1中、上下分割顯示中的整體圖像和多 個(gè)面部圖像的顯示例的圖。
圖14是示出在上述實(shí)施方式1中、根據(jù)進(jìn)行了顏色判斷的結(jié)果來對(duì) 面部圖像進(jìn)行組顯示的例子的圖。
圖15是示出在上述實(shí)施方式1中、對(duì)某個(gè)人物顯示面部光標(biāo)和人物 光標(biāo)時(shí)的情況的圖。
圖16是示出在上述實(shí)施方式1中、對(duì)其他人物顯示面部光標(biāo)和人物 光標(biāo)時(shí)的情況的圖。
圖17是示出上述實(shí)施方式1中的圖像再現(xiàn)裝置的處理流程的流程圖。
圖18是示出在上述實(shí)施方式1中、與圖17的步驟S17中的顯示模 式對(duì)應(yīng)的顯示處理的流程圖。
圖19是示出在上述實(shí)施方式1中、圖17的步驟S18中的放大縮小 處理的流程圖。
圖20是示出在上述實(shí)施方式1中、圖17的步驟S19中的部分不顯 示處理的流程圖。
圖21是示出在上述實(shí)施方式1中、圖17的步驟S20中的遠(yuǎn)近強(qiáng)調(diào) 顯示處理的流程圖。
圖22是示出在上述實(shí)施方式1中、圖17的步驟S21中的斜度校正處理的流程圖。
圖23是示出在上述實(shí)施方式1中、圖17的步驟S22中的利用顏色
進(jìn)行區(qū)分的處理的流程圖。 . 標(biāo)號(hào)說明
11圖像再現(xiàn)裝置；11 CPU; lla再現(xiàn)控制部；12 ROM; 13 RAM; 14讀出部；15圖像存儲(chǔ)部；16顯示圖像制作部；16a合成圖像制作部； 16b面部圖像制作部；16c整體圖像制作部；17顯示處理部；18顯示部； 18a顯示畫面；19操作部；21面部信息提取部；22距離判斷部；23顏
色判斷部。
具體實(shí)施例方式
下面參照

本發(fā)明的實(shí)施方式。 [實(shí)施方式1]
圖1 圖23示出本發(fā)明的第一實(shí)施方式，圖1是示出圖像再現(xiàn)裝置
的結(jié)構(gòu)的框圖。
該圖像再現(xiàn)裝置1構(gòu)成為具有CPU 11、 ROM 12、 RAM 13、讀出部 14、圖像存儲(chǔ)部15、顯示圖像制作部16、顯示處理部17、顯示部18、 操作部19、面部信息提取部21、距離判斷部22、以及顏色判斷部23。
其中，CPU 11、 ROM 12、 RAM 13、讀出部14、圖像存儲(chǔ)部15、顯 示圖像制作部16、顯示處理部17、面部信息提取部21、距離判斷部22、 以及顏色判斷部23經(jīng)由總線可相互通信地連接。并且，顯示處理部17 連接到顯示部18上。操作部19連接到CPU 11上。
CPU 11是統(tǒng)一控制該圖像再現(xiàn)裝置1的控制部，CPU 11具有用于 進(jìn)行與圖像再現(xiàn)相關(guān)的控制的再現(xiàn)控制部lla。
ROM 12是非易失性存儲(chǔ)器，其保存了由CPU 11執(zhí)行的控制程序和 在該圖像再現(xiàn)裝置1內(nèi)使用的各種數(shù)據(jù)等。
RAM 13是CPU 11作業(yè)中使用的易失性存儲(chǔ)器，用于存儲(chǔ)圖像數(shù)據(jù)等。
圖像存儲(chǔ)部15構(gòu)成為例如閃存等非易失性記錄介質(zhì)，記錄有多個(gè)圖像。
讀出部14讀出在圖像存儲(chǔ)部15中存儲(chǔ)的例如壓縮狀態(tài)的圖像數(shù)據(jù)，
在實(shí)施解壓縮處理之后，傳送并寫入到RAM13等中。
顯示圖像制作部16構(gòu)成為具備合成圖像制作部16a、面部圖像制作 部16b、以及整體圖像制作部16c。面部圖像制作部16b根據(jù)由面部信息 提取部21以后述方式提取的面部部分的信息，從自圖像存儲(chǔ)部15讀出 并被展開于RAM 13中的圖像中提取面部部分，調(diào)整成適合于在顯示部 18內(nèi)以適當(dāng)尺寸進(jìn)行部分顯示的尺寸，制作面部圖像。整體圖像制作部 16c將在上述RAM 13中展開的圖像(例如1000萬像素的圖像)的大致 整體(在此說是"大致整體"是因?yàn)?，在攝影圖像和顯示圖像之間的長寬 比不同時(shí)等，攝影圖像的一部分有時(shí)不能顯示到顯示圖像上。)轉(zhuǎn)換為用 于顯示到顯示部18上的整體圖像(例如23萬像素的圖像)。合成圖像制 作部16a將由整體圖像制作部16c制作的整體圖像和由面部圖像制作部 16b制作的面部圖像組合，制作作為合成圖像的1個(gè)顯示用的圖像。顯示 圖像制作部16進(jìn)行如下處理將由合成圖像制作部16a制作的顯示用的 圖像再次寫入到RAM 13中。上述說明中，在合成圖像制作部16a進(jìn)行 合成前，將整體圖像和面部圖像的尺寸調(diào)整成顯示用尺寸，但不限于此， 也可以對(duì)合成處理后的合成圖像實(shí)施顯示用的尺寸調(diào)整(resize)'處理。
顯示處理部17讀出由顯示圖像制作部16制作并存儲(chǔ)于RAM 13中 的顯示用的圖像數(shù)據(jù)，將該圖像數(shù)據(jù)轉(zhuǎn)換成用于輸出到顯示部18的信號(hào)， 將轉(zhuǎn)換后的信號(hào)輸出到顯示部18。
顯示部18根據(jù)從顯示處理部17輸入的信號(hào)來顯示圖像，顯示部18 例如構(gòu)成為包括LCD或CRT、或有機(jī)EL等。
操作部19包括用于進(jìn)行與該圖像再現(xiàn)裝置1相關(guān)的各種操作的操作 開關(guān)、操作按鈕、電壓開關(guān)等。該操作部19還包括用于設(shè)定是否進(jìn)行面 部圖像顯示的按鈕、用于放大/縮小面部圖像的按鈕、用于移動(dòng)后述的光 標(biāo)(面部光標(biāo)、人物光標(biāo)等)的按鈕、用于設(shè)定與面部圖像顯示相關(guān)的 顯示模式的按鈕、用于將不需要的面部圖像設(shè)為不顯示的按鈕、用于指 示遠(yuǎn)近強(qiáng)調(diào)的按鈕、用于指示斜度校正的按鈕、以及用于指示利用顏色進(jìn)行區(qū)分的按鈕等。
面部信息提取部21判斷存儲(chǔ)于圖像存儲(chǔ)部15中的圖像文件的文件 頭部中是否存在通過面部檢測得到的面部部分的信息，在存在信息的情 況下，進(jìn)行讀出(提取)該面部部分的信息的處理。在此，面部部分的 信息包括圖像中的面部部分的位置和尺寸的信息。并且，在文件頭部中
不存在面部部分的信息的情況下，面部信息提取部21對(duì)從圖像存儲(chǔ)部15 讀出并在RAM 13中展開的圖像進(jìn)行分析，判斷是否存在面部部分，在 判斷為存在面部部分的情況下，檢測(提取)該面部部分的尺寸和位置， 作為面部部分的信息。另外，此處設(shè)定為在文件頭部中記錄有面部部分 的信息的情況下使用該信息，僅在沒有記錄有面部部分的信息的情況下 進(jìn)行面部檢測，取得面部部分的信息；當(dāng)然也可以設(shè)定成無論文件頭部 中是否記錄有面部部分的信息，都必須進(jìn)行面部檢測。并且，該面部信 息提取部21還起到斜度判斷部的作用，其根據(jù)面部部分的左右眼和鼻子 的位置關(guān)系來判斷面部的斜度。
距離判斷部22用于判斷通過數(shù)字照相機(jī)等攝像裝置拍攝到多個(gè)人 物時(shí)的、該攝像裝置到多個(gè)人物的距離關(guān)系(在此，所謂"距離關(guān)系"包 括僅表示遠(yuǎn)近的情況)。該距離判斷部22所使用的技術(shù)有很多種，舉出 如下2個(gè)例子 一種方法是分析圖像來判斷距離；另一種方法是在拍攝 時(shí)預(yù)先檢測距離信息并存儲(chǔ)，讀出該距離信息，以判斷距離。對(duì)于第一 種方法，更詳細(xì)地說，是在存在檢測到面部的人物彼此重疊的部分的情 況下，掌握該重疊的前后關(guān)系，從而對(duì)多個(gè)人的遠(yuǎn)近關(guān)系賦予順序。第 二種方法如上所述，是以通過數(shù)字照相機(jī)等攝像裝置記錄距離信息為前 提。即，在畫面中央以外的位置上也可以進(jìn)行對(duì)焦的所謂多點(diǎn)AF照相機(jī) 中，在攝影準(zhǔn)備動(dòng)作中，首先檢測畫面中的各面部部分。并且，對(duì)檢測 到的各面部部分的位置進(jìn)行對(duì)焦檢測(對(duì)比度AF)，從而檢測到各面部 部分的攝影距離。而且，之后對(duì)圖像進(jìn)行實(shí)際攝影，在將實(shí)際拍攝的圖 像作為文件寫入到記錄介質(zhì)中時(shí)，將檢測出的面部部分的位置、尺寸以 及攝影距離寫入到文件頭部中。此外，當(dāng)在圖像再現(xiàn)裝置1中再現(xiàn)圖像 時(shí)，距離判斷部22從文件頭部讀出面部部分的位置和尺寸、攝影距離，根據(jù)它們中的攝影距離來判斷各人物的距離關(guān)系。
顏色判斷部23判斷圖像中包含的被檢測到面部的人物的、位于面部 部分附近的區(qū)域的顏色，例如衣服的顏色或帽子的顏色等。
接著，圖2是表示左右分割顯示中的整體圖像和多個(gè)面部圖像的顯示例。
左右分割顯示是該圖像再現(xiàn)裝置1被設(shè)定為左右分割模式時(shí)進(jìn)行的
顯示。當(dāng)顯示部18的顯示畫面18a例如為橫長時(shí)，左右分割顯示是指如 下的顯示方法將該顯示畫面18a左右分割，在分割出的一方、例如左 側(cè)一半上顯示整體圖像a，在分割出的另一方、例如右側(cè)一半上顯示面部 圖像bl b6。在該顯示方法中，整體圖像a中的人物的面部和面部圖像 bl b6不重疊。
在該圖2所示的例子中，在整體圖像a上顯示6位人物Pl P6，是 這些人物P1 P6正在進(jìn)行團(tuán)體操(所謂的人體金字塔)的圖像。并且， 人物P1位于最上層，人物P2位于中層左側(cè)，人物P3位于中層右側(cè)，人 物P4位于下層左側(cè)，人物P5位于下層中央，人物P6位于下層右側(cè)。
另一方面，在顯示畫面18a的右半部分上顯示人物Pl的面部圖像 bl、人物P2的面部圖像b2、人物P3的面部圖像b3、人物P4的面部圖 像b4、人物P5的面部圖像b5、人物P6的面部圖像b6。而且，這些面部 圖像bl b6分別配置成與整體圖像a中的各人物的面部配置為大致相同 的配置(即，多個(gè)面部圖像bl b6彼此的相對(duì)位置與整體圖像a中的各 人物P1 P6的面部部分彼此的相對(duì)位置對(duì)應(yīng))來進(jìn)行顯示。在此，為了 使"多個(gè)面部圖像彼此的相對(duì)位置與整體圖像中的多個(gè)面部部分彼此的 相對(duì)位置對(duì)應(yīng)"，優(yōu)選某個(gè)面部部分和其他面部部分之間的左右方向以及 上下方向的位置關(guān)系在各對(duì)應(yīng)的面部圖像彼此中不反轉(zhuǎn)。即，面部圖像 bl顯示于最上層，面部圖像b2顯示于中層左側(cè)，面部圖像b3顯示于中 層右側(cè)，面部圖像b4顯示于下層左側(cè)，面部圖像b5顯示于下層中央， 面部圖像b6顯示于下層右側(cè)。另外，在該例子中顯示成面部圖像彼此不 重疊。
通過采用這種顯示方法，能夠一眼判斷出面部被作為面部圖像而拉近顯示的人物位于整體圖像中的哪個(gè)位置。并且，整體圖像的顯示區(qū)域 和面部圖像的顯示區(qū)域分開，所以可以容易地識(shí)別面部圖像。
接著，圖3是示出將特定的面部圖像相對(duì)地放大顯示的例子的圖。 面部圖像上能夠顯示例如由粗框或色框(紅色框等)或高亮度顯示
等構(gòu)成的光標(biāo)c。該光標(biāo)c可以移動(dòng)到多個(gè)面部圖像bl b6中的任何一 個(gè)上。并且，該圖3中光標(biāo)c位于面部圖像b5。此時(shí)，通過對(duì)操作部19 的按鈕進(jìn)行操作，能夠放大或縮小面部圖像b5的位置的圖像，而不變更 顯示尺寸。在該圖3中示出進(jìn)行了放大操作、顯示與圖2所示的圖像相 比放大了的面部圖像b5的例子。該放大的面部圖像b5是由面部圖像制 作部16b根據(jù)接收到來自操作部19的放大操作的再現(xiàn)控制部lla的控制 而制作的。
同樣地，圖4是示出將特定的面部圖像相對(duì)地縮小顯示的例子的圖。 在該圖4所示的例子中，通過操作部19進(jìn)行縮小操作，光標(biāo)c的位
置的面部圖像b5被相對(duì)地縮小顯示。
由于可進(jìn)行這樣的處理，從而可以應(yīng)對(duì)想觀看面部周圍的情況或想
進(jìn)一步拉近面部來進(jìn)行觀看的情況。由此，可以觀察周圍的狀況或面部
的表情等。
另外，上述說明了將光標(biāo)c對(duì)準(zhǔn)到特定的面部圖像上，僅放大或縮 小該光標(biāo)位置的圖像的例子，但也可以指定全部面部圖像、同時(shí)放大/縮 小這些所有的面部圖像。并且，在放大顯示整體圖像、或在已經(jīng)進(jìn)行放 大顯示的情況下，也可以進(jìn)行相對(duì)地縮小顯示。此外，還可以使整體圖 像和面部圖像的放大縮小連動(dòng)。 '
接著，圖5是示出重疊顯示中的整體圖像和多個(gè)面部圖像的顯示例 的圖。
重疊顯示是該圖像再現(xiàn)裝置1被設(shè)定為重疊顯示模式時(shí)進(jìn)行的顯 示。重疊顯示是如下的顯示方法在顯示部18的顯示畫面18a上顯示整 體圖像a，并且在該整體圖像a上重疊顯示面部圖像(該圖5所示的例子 中為面部圖像bll b13)。
該圖5所示的例子中，在整體圖像a上顯示了被檢測到面部的3位人物P11 P13，是這些人物P11 P13正在進(jìn)行田徑比賽(relay)的圖 像。并且，人物Pll位于畫面上的左側(cè)，人物P12位于畫面上的中間， 人物P13位于畫面上的右側(cè)。 '
從這些人物的面部位置附近彈出作為明示面部圖像與整體圖像中的 哪一個(gè)面部部分對(duì)應(yīng)的信息的彈出框，在從人物Pll彈出的彈出框內(nèi)顯 示人物Pll的面部圖像bll，在從人物P12彈出的彈出框內(nèi)顯示人物P12 的面部圖像b12，在從人物P13彈出的彈出框內(nèi)顯示人物P13的面部圖像 b13。此時(shí)，各彈出框的配置與各人物的面部的配置大致相同，且配置成 不會(huì)與各人物的面部重疊。并且，在該圖5所示的例子中也顯示成面部 圖像彼此不重疊。
通過采用這種使用彈出框的顯示方法，能夠一眼明確地判斷出面部 被作為面部圖像而拉近顯示的人物位于整體圖像中的哪個(gè)位置。
接著，參照圖6和圖7說明將不需要的面部圖像設(shè)為不顯示的例子。 在此，圖6是示出顯示不需要的面部圖像的情況的圖，圖7是示出不顯 示不需要的面部圖像后的情況的圖。 '
圖6和圖7所示的圖像的攝影場景與圖5相同。即，該場景是在進(jìn) 行田徑比賽的主要人物P11 P13的背景上拍攝了很多位觀眾的場景。此 時(shí)，面部檢測是自動(dòng)進(jìn)行的處理，所以也對(duì)主要人物P11 P13之外的觀 眾即P14進(jìn)行面部檢測。該情況下，若進(jìn)行自動(dòng)顯示面部圖像的處理， 則如圖6所示，從人物P14的面部附近彈出彈出框，在該彈出框內(nèi)顯示 人物P14的面部圖像b14。相對(duì)于此，在只想顯示主要人物P11 P13的 面部圖像bll bl3的情況下，將未圖示的光標(biāo)等對(duì)準(zhǔn)到面部圖像b14之 后，對(duì)操作部19的按鈕進(jìn)行操作，從而能夠?qū)⒃撁娌繄D像bl4設(shè)為不顯 示，圖7中示出此時(shí)的情況。
另外，這種面部圖像的不顯示在如圖2所示的左右分割顯示中也可 以同樣地進(jìn)行。 .
這樣，由于能夠?qū)⒉恍枰拿娌繄D像設(shè)為不顯示，所以能夠僅將想 要觀看的面部作為面部圖像來觀看。
接著，圖8是示出進(jìn)行了第1遠(yuǎn)近強(qiáng)調(diào)的重疊顯示的例子的圖。該圖8所示的圖像的攝影場景也與上述的圖5相同。而且，在該圖
8所示的例子中進(jìn)行了面部圖像彼此的遠(yuǎn)近強(qiáng)調(diào)。即，距離判斷部22判 斷出人物Pll的位置最靠前(從照相機(jī)觀看距離近)，然后是人物P13， 人物P12的位置最遠(yuǎn)。合成圖像制作部16a根據(jù)來自該距離判斷部22的 信息，將面部圖像彼此的邊緣部重疊顯示，從而由該重疊的前后關(guān)系來 強(qiáng)調(diào)面部圖像彼此的遠(yuǎn)近關(guān)系。即，合成圖像制作部16a將面部圖像bU 重疊在面部圖像M2的左側(cè)靠前方，將面部圖像b13重疊在面部圖像b12 的右側(cè)靠前方，以這種方式將面部圖像重疊在整體圖像上。另外，在該 遠(yuǎn)近強(qiáng)調(diào)中，為了更加容易地取得面部圖像與人物之間的對(duì)應(yīng)，沒有顯 示彈出部分，當(dāng)然顯示也無防。
通過進(jìn)行這樣的顯示，即使在顯示面積較少的情況下，也能夠較大 地顯示面部圖像，并且容易了解面部圖像彼此的遠(yuǎn)近關(guān)系，所以可以更 加容易地掌握例如正在進(jìn)行田徑比賽的人物P11 P13的順序。
接著，圖9是示出進(jìn)行了第2遠(yuǎn)近強(qiáng)調(diào)的重疊顯示的例子的圖。 該圖9所示的圖像的攝影場景也與上述的圖5相同。而且，'在該圖 9所示的例子中，采用與圖8所示的方式不同的方式進(jìn)行面部圖像彼此的 遠(yuǎn)近強(qiáng)調(diào)。即，面部圖像制作部16b根據(jù)來自上述的距離判斷部22的信 息制作各面部圖像，使面部圖像bll的顯示尺寸最大、面部圖像bl3的 顯示尺寸中等、面部圖像b12的顯示尺寸最小。而且，合成圖像制作部 16a將這些面部圖像bll M3以面部圖像彼此不重疊且與各人物P11 P13的面部的配置為大致相同的配置的方式重疊在整體圖像a上。
通過進(jìn)行這樣的顯示，能夠容易地掌握面部圖像彼此的遠(yuǎn)近關(guān)系。 而且，能夠使顯示張持有度。
另外，在該第2遠(yuǎn)近強(qiáng)調(diào)中也沒有顯示彈出部分，當(dāng)然顯示也無防。 并且，在此，在攝影距離相對(duì)較近時(shí)，面部圖像的顯示尺寸相對(duì)較大， 在攝影距離相對(duì)較遠(yuǎn)時(shí)，面部圖像的顯示尺寸相對(duì)較小，但不限于此。 例如，當(dāng)由于攝影距離遠(yuǎn)而導(dǎo)致面部圖像的顯示尺寸過小時(shí)，矢去了作 為面部圖像來顯示的意義，所以可以考慮對(duì)顯示尺寸設(shè)置下限等適當(dāng)進(jìn) 行對(duì)應(yīng)。接著，圖IO是示出中心分割顯示中的整體圖像和多個(gè)面部圖像的顯 示例的圖。
中心分割顯示是該圖像再現(xiàn)裝置1被設(shè)定為中心分割顯示模式時(shí)進(jìn) 行的顯示。
在該中心分割顯示中，在顯示畫面18a的中央顯示整體圖像a，以包 圍該整體圖像a的方式顯示面部圖像b21 b28。此時(shí)的各面部圖像b21 b28也配置成與整體圖像a中的各對(duì)應(yīng)人物的配置大致相同。這樣的顯示 適合于人物圍成環(huán)的方式分布的圖像。因此，作為適用場景的例子，可 以舉出人坐在桌子周圍吃飯的場景或開會(huì)的場景等。
接著，參照圖11和圖12說明進(jìn)行面部圖像的斜度校正的例子。在 此，圖11是示出對(duì)面部圖像進(jìn)行斜度校正之前的例子的圖，圖12是示 出對(duì)面部圖像進(jìn)行斜度校正之后的例子的圖。
圖11和圖12所示的圖像的攝影場景是3位人物P31 P33進(jìn)行倒立 的場景。
當(dāng)對(duì)這種圖像進(jìn)行面部檢測并自動(dòng)顯示面部時(shí)，如圖11所示，由于 進(jìn)行倒立，所以顯示上下反轉(zhuǎn)的面部圖像b31 b33。于是，在將該圖像 再現(xiàn)裝置1設(shè)定為斜度校正模式的情況下，面部信息提取部21'檢測在 RAM中展開的圖像中的各面部部分的左右眼以及鼻子的位置關(guān)系，判斷 面部正立時(shí)的方向。并且，合成圖像制作部16a根據(jù)該判斷結(jié)果，將面 部圖像b31 b33旋轉(zhuǎn)使得面部成為正立的方向，并制作出圖12所示的 面部圖像b31' b33，，然后與整體圖像合成，構(gòu)成圖12所示的顯示圖像。 另外，在此合成圖像制作部16a使面部圖像旋轉(zhuǎn)，但替代于此，也可以 采用如下方式合成圖像制作部16a根據(jù)上述判斷結(jié)果，制作使面部部 分旋轉(zhuǎn)以使面部部分成為正立的方向的面部圖像。從而，即使是整體圖 像中傾斜的面部，也能夠顯示正立方向的面部作為面部圖像，所以能夠 容易地判斷面部或面部表情等。
另外，在進(jìn)行這種斜度校正的情況下，以適當(dāng)?shù)慕嵌刃D(zhuǎn)面部圖像， 所以如圖11和圖12所示，可以將面部圖像的框設(shè)為圓形。該情況下， 可以將四邊形框傾斜顯示等狀態(tài)防患于未然。并且，當(dāng)然也可以在其他顯示模式中進(jìn)行該斜度校正。而且，在此將傾斜的面部設(shè)為正立方向時(shí) 的面部圖像，但不必一定限于設(shè)為正立方向的面部圖像。例如，在橫向 的人物還將其面部傾斜的情況下，即使進(jìn)行旋轉(zhuǎn)以使人物整體直立，面 部仍傾斜，所以在該情況下面部保持為稍微傾斜的狀態(tài)也無防。
圖13是示出上下分割顯示中的整體圖像和多個(gè)面部圖像的顯示例 的圖。
上下分割顯示是該圖像再現(xiàn)裝置1被設(shè)定為上下分割顯示模式時(shí)進(jìn) 行的顯示。上下分割顯示是如下的顯示方法在將該顯示畫面18a上下 分割出的一方、例如上側(cè)顯示整體圖像a，并且在分割出的另一方、例如 下側(cè)顯示面部圖像b31' b33'。另外，該圖13所示的圖像的攝影場景與 圖12所示的場景相同，也同樣地進(jìn)行斜度校正。
這種上下分割顯示當(dāng)然也可以用于圖13所示那樣圖像再現(xiàn)裝置1的 顯示畫面18a為橫長的情況，但在圖像再現(xiàn)裝置1例如為手持型圖像再 現(xiàn)裝置、且通過改變保持的姿勢而可以成為縱長的顯示畫面18a,的情況 下，可以更加有效地利用。而且，整體圖像的顯示區(qū)域和面部圖像的顯 示區(qū)域分開，所以能夠容易地進(jìn)行面部圖像的識(shí)別。
接著，圖14是示出在根據(jù)顏色判斷的結(jié)果來對(duì)面部圖像進(jìn)行組顯示 的例子的圖。
該圖14所示的顯示是該圖像再現(xiàn)裝置1被設(shè)定為利用顏色進(jìn)行區(qū)分 的顯示模式(也可稱為組顯示模式)時(shí)進(jìn)行的顯示。圖14所示的圖像的 攝影場景是將多位人物分為2個(gè)組進(jìn)行足球等球賽的場景。各組身穿不 同顏色的隊(duì)服，顏色判斷部23對(duì)位于面部部分附近的區(qū)域進(jìn)行顏色判斷， 進(jìn)行根據(jù)判斷出的顏色將面部部分分成多個(gè)組的處理。
在此，例如屬于身穿紅色隊(duì)服的組的人物為人物Plr、 P2r、 P3r、...， 屬于身穿白色隊(duì)服的組的人物為人物Plw、 P2w、 P3w、…。
此時(shí)， 一個(gè)組例如身穿紅色隊(duì)服的組的成員的面部圖像blr...重疊排 列于顯示畫面18a的左上部，另一組例如身穿白色隊(duì)服的組的成員的面 部圖像blw...重疊排列于顯示畫面18a的右上部。在此，之所以將面部 圖像重疊是由于被檢測出面部的人數(shù)多，如果不將全體人員的面部圖像重疊則難以進(jìn)行顯示。并且，重疊時(shí)的順序優(yōu)選為與整體圖像a中的各 人物的位置對(duì)應(yīng)的順序，但可以是除此之外的順序，例如與到各人物的
距離對(duì)應(yīng)的順序。該圖14所示的例子中，作為一例，人物Plr的面部圖 像blr與人物Plw的面部圖像blw配置于各重疊的面部圖像的最前面。 并且，在該圖14所示的例子中，不僅將面部圖像的重疊沿左右方向錯(cuò)開， 還沿上下方向錯(cuò)開。
若使用這種顯示方法，則能夠進(jìn)行面部圖像的分組，能夠容易地掌 握各面部圖像的人物屬于哪個(gè)組。
接著，參照圖15和圖16說明使用了面部光標(biāo)和人物光標(biāo)的整體圖 像中的人物與面部圖像之間的對(duì)應(yīng)。圖15是示出對(duì)某個(gè)人物顯示面部光 標(biāo)和人物光標(biāo)時(shí)的情況的圖，圖16是示出對(duì)其他人物顯示面部光標(biāo)和人 物光標(biāo)時(shí)的情況的圖。
首先，圖15和圖16所示的圖像的攝影場景與上述的圖14相同。而 且，在圖15所示的例子中，人物光標(biāo)Cl位于人物Plw的面部部分，并 且面部光標(biāo)C2位于該人物Plw的面部圖像blw上。這些人物光標(biāo)Cl 與面部光標(biāo)C2的組合是明示面部圖像與整體圖像中的哪個(gè)面部部分對(duì) 應(yīng)的信息。在此，人物光標(biāo)Cl和面部光標(biāo)C2與上述的光標(biāo)c同樣，顯 示為例如粗框、色框(紅色框等)或?yàn)楦吡炼蕊@示等。另外，人物光標(biāo) Cl的顯示狀態(tài)和面部光標(biāo)C2的顯示狀態(tài)可以不同。并且，人物光標(biāo)C1 可以自由地在整體圖像內(nèi)的期望位置移動(dòng)，也可以分散地僅在整體圖像 內(nèi)的面部部分的位置移動(dòng)。
接著，在圖15所示的狀態(tài)中，通過對(duì)操作部19的按鈕進(jìn)行操作， 例如在整體圖像a中使人物光標(biāo)Cl移動(dòng)到人物P2r的面部部分。通過這 樣，如圖16所示，面部光標(biāo)C2自動(dòng)地移動(dòng)到該人物P2r的面部圖像b2r 的位置，該面部光標(biāo)C2所位于的面部圖像b2r自動(dòng)地顯示到最f面。
另一方面，在圖15所示的狀態(tài)中，通過對(duì)操作部19的按鈕進(jìn)行操 作，使面部光標(biāo)C2從面部圖像blw的位置移動(dòng)到面部圖像b2r的位置。 通過這樣，如圖16所示，面部圖像b2r自動(dòng)地顯示到最前面，并且人物 光標(biāo)C1自動(dòng)從人物Plw的面部部分的位置移動(dòng)到人物P2r的面部部分的位置。
通過進(jìn)行這種顯示，在想要觀看整體圖像中的特定人物的面部的情
況下，只要將人物光標(biāo)Cl對(duì)準(zhǔn)到該特定人物的面部部分，面部光標(biāo)C2
就自動(dòng)移動(dòng)到該特定人物的面部圖像上，該面部圖像就顯示到最前面， 所以能夠簡單地進(jìn)行觀看。另一方面，在想要知道某個(gè)面部圖像的人物
在整體圖像中位于哪里時(shí)，只要將面部光標(biāo)C2對(duì)準(zhǔn)到該面部圖像上，人 物光標(biāo)C1就自動(dòng)移動(dòng)到該面部圖像的人物的面部部分的位置上，所以能 夠簡單地知道該人物位于哪里。
接著，圖17是示出圖像再現(xiàn)裝置1的處理流程的流程圖。 當(dāng)開始該處理時(shí)，首先通過操作部19選擇圖像(步驟Sll)。 然后，根據(jù)再現(xiàn)控制部lla的控制，讀出部14讀出從圖像存儲(chǔ)部15 選擇的圖像，進(jìn)行解壓縮處理，寫入到RAM13 (步驟S12)。
接著，判斷是否由用戶通過操作部19進(jìn)行了顯示面部圖像的指示 (步驟S13)，在判斷為沒有進(jìn)行過指示的情況下，將選出的圖像以通常 方式再現(xiàn)(即，僅顯示整體圖像，不顯示面部圖像)(步驟S14)。
并且，在步驟S13中判斷為進(jìn)行了顯示面部圖像的指示的情況下， 面部信息提取部21從圖像文件的頭部提取面部信息(步驟S15)。另外， 該步驟S15的處理在如下情況下進(jìn)行在數(shù)字照相機(jī)等攝像裝i中進(jìn)行 面部檢測，面部部分的信息被記錄到文件的頭部中的情況。另一方面， 當(dāng)在攝像裝置側(cè)沒有進(jìn)行面部檢測的情況下，在該圖像再現(xiàn)裝置1內(nèi)進(jìn) 行面部檢測的處理，提取面部部分的信息。
接著，設(shè)定顯示模式(步驟S16)。在此，當(dāng)用戶通過操作部19選 擇了例如圖2等所示的左右分割顯示模式、圖5等所示的重疊顯示模式、 圖10所示的中心分割顯示模式、圖13所示的上下分割顯示模式等中的 任意一個(gè)模式時(shí)，設(shè)定該顯示模式，在用戶沒有進(jìn)行設(shè)定輸入的情況下， 設(shè)定預(yù)定的顯示模式。
并且，按照后述方式進(jìn)行與顯示模式對(duì)應(yīng)的顯示(步驟S17)。 接著，進(jìn)行放大縮小處理(步驟S18)，進(jìn)行部分不顯示的處理(步 驟S19)，進(jìn)行遠(yuǎn)近強(qiáng)調(diào)顯示的處理(步驟S20)，進(jìn)行斜度校正的處理(步驟S21)，進(jìn)行基于顏色的區(qū)分處理(步驟S22)，判斷是否通過操作部19 進(jìn)行了結(jié)束指示(步驟S23)，在還沒有進(jìn)行結(jié)束指示的情況下，返回到 步驟Sll，重復(fù)進(jìn)行上述的處理，在進(jìn)行了結(jié)束指示的情況下，結(jié)束該處 理。
接著，圖18是示出與圖17的步驟S17中的顯示模式對(duì)應(yīng)的顯示處 理的流程圖。 ，
當(dāng)開始該處理時(shí)，首先判斷是否設(shè)定了重疊顯示(步驟S31)，在判 斷為設(shè)定了重疊顯示的情況下，進(jìn)行圖5等所示的重疊顯示(步驟S32)。
并且，在該步驟S31中判斷為沒有設(shè)定重疊顯示的情況下，則已設(shè) 定為分割顯示，因而接著判斷所設(shè)定的分割顯示的種類(步驟S33)。
在步驟S33中判斷出分割種類為左右分割的情況下，進(jìn)行圖2等所 示的左右分割顯示(步驟S34)，在判斷出分割種類為上下分割的情況下， 進(jìn)行圖13所示的上下分割顯示(步驟S35)，在判斷出分割種類為中心分 割的情況下，進(jìn)行圖IO所示的中心分割顯示(步驟S36)。
這樣，在進(jìn)行了步驟S32、步驟S34、步驟S35或步驟S36中的任一 個(gè)處理之后，從該處理返回到圖17所示的處理。
接著，圖19是示出圖17的步驟S18中的放大縮小處理的流程圖。
當(dāng)開始該處理時(shí)，首先判斷是否通過操作部19進(jìn)行了移動(dòng)光標(biāo)的操 作(步驟S41)。
在此，在判斷為移動(dòng)了光標(biāo)的情況下，根據(jù)移動(dòng)操作，將光標(biāo)顯示 到特定的面部圖像上(步驟S42)。
接著，判斷是否通過操作部19進(jìn)行了拉近操作(步驟S43)，在判 斷為進(jìn)行了拉近操作的情況下，將顯示有光標(biāo)的面部圖像放大顯示(步 驟S44)。
該步驟S44的處理結(jié)束或在步驟S43中判斷為沒有進(jìn)行拉近操作的 情況下，接著判斷是否通過操作部19進(jìn)行了拉遠(yuǎn)(down)操作(步驟 S45)。
在此，在判斷為進(jìn)行了拉遠(yuǎn)操作的情況下，將顯示有光標(biāo)的面部圖 像縮小顯示(步驟S46)。在該步驟S46的處理結(jié)束的情況下、在步驟S41中判斷為光標(biāo)沒有 移動(dòng)的情況下、或在步驟S45中判斷為沒有進(jìn)行拉遠(yuǎn)操作的情況下，從 該處理返回到圖17的處理。
圖20是示出圖17的步驟S19中的部分不顯示的處理的流程圖。 當(dāng)開始該處理時(shí)，首先判斷是否通過操作部19進(jìn)行了移動(dòng)光標(biāo)的操 作(步驟S51)。
在此，在判斷為移動(dòng)了光標(biāo)的情況下，根據(jù)移動(dòng)操作，將光標(biāo)顯示 到特定的面部圖像上(步驟S52)。
接著，判斷是否通過操作部19進(jìn)行了不顯示操作(步驟SP)，在 判斷為進(jìn)行了不顯示操作的情況下，將顯示有光標(biāo)的面部圖像設(shè)為不顯 示(步驟S54)。
在該步驟S54的處理結(jié)束的情況下、在步驟S51中判斷為沒有移動(dòng) 光標(biāo)的情況下、或在步驟S53中判斷為沒有進(jìn)行不顯示操作的情況下， 從該處理返回到圖17的處理。
圖21是示出圖17的步驟S20中的遠(yuǎn)近強(qiáng)調(diào)顯示處理的流程圖。 當(dāng)開始該處理時(shí)，首先判斷是否通過操作部19進(jìn)行了遠(yuǎn)近強(qiáng)調(diào)的指 示(步驟S61)。
在此，在判斷為進(jìn)行了遠(yuǎn)近強(qiáng)調(diào)的指示的情況下，判斷與各面部圖 像對(duì)應(yīng)的人物的遠(yuǎn)近(步驟S62)。
并且，根據(jù)步驟S62的遠(yuǎn)近判斷結(jié)果，進(jìn)行例如圖8或圖9所示的 遠(yuǎn)近強(qiáng)調(diào)顯示的處理(步驟S63)。 '
在該步驟S63的處理結(jié)束的情況下、或在步驟S61中判斷為沒有進(jìn) 行遠(yuǎn)近強(qiáng)調(diào)的指示的情況下，從該處理返回到圖17所示的處理。
圖22是示出圖17的步驟S21中的斜度校正處理的流程圖。
當(dāng)開始該處理時(shí)，首先判斷是否通過操作部19進(jìn)行了斜度校正的指 不 (步驟S71)。
在此，在判斷為進(jìn)行了斜度校正的指示的情況下，分析圖像中的各 面部部分的左右眼的位置和鼻子的位置等，從而進(jìn)行斜度判斷(步驟 S72)。并且，根據(jù)步驟S72的斜度判斷結(jié)果，判斷面部圖像中是否存在斜 度(步驟S73)，在判斷為存在斜度的情況下，進(jìn)行例如參照圖11和圖 12所說明的斜度校正(步驟S74)。
在該步驟S74的處理結(jié)束了的情況下、在步驟S71中判斷為沒有進(jìn) 行過斜度校正的指示的情況下、或在步驟S73中判斷為沒有斜度的情況 下，從該處理返回到圖17所示的處理。
圖23是示出圖17的步驟S22中的基于顏色的區(qū)分處理的流程圖。
當(dāng)開始該處理時(shí)，首先判斷是否通過操作部19進(jìn)行了基于顏色的區(qū) 分的指示(步驟S81)。
在此，在判斷為進(jìn)行了基于顏色的區(qū)分的指示的情況下，判斷圖像 中的各面部部分的附近區(qū)域的顏色(步驟S82)。
并且，根據(jù)步驟S82的顏色判斷結(jié)果，進(jìn)行區(qū)分顯示(組顯示)，其 中，將面部圖像分類成組，按照每個(gè)組集中顯示面部圖像(步驟S83)。
接著，判斷是否通過操作部19進(jìn)行了顯示光標(biāo)的指示(步驟S84)。
在此，在判斷為進(jìn)行了顯示光標(biāo)的指示的情況下，如上述圖15、圖 16等所示，在整體圖像上顯示人物光標(biāo)Cl，并且在與顯示有人物光標(biāo) Cl的人物對(duì)應(yīng)的面部圖像上顯示面部光標(biāo)C2 (步驟S85)。
然后，判斷是否通過操作部19進(jìn)行了移動(dòng)任何一個(gè)光標(biāo)的操作(步 驟S86)。
在此，在判斷為進(jìn)行了移動(dòng)任何一個(gè)光標(biāo)的操作的情況下，判斷移 動(dòng)的是否為面部光標(biāo)C2 (步驟S87)。
在此，在判斷為移動(dòng)的是面部光標(biāo)C2的情況下，將通過該面部光標(biāo) C2的移動(dòng)操作所選擇的面部圖像顯示到重疊的面部圖像組的最前面(步 驟S88)，并且在所選擇的面部圖像上顯示面部光標(biāo)C2 (步驟S89)。
接著，判斷與所選擇的面部對(duì)應(yīng)的整體圖像中的人物(步驟S90)。 將人物光標(biāo)C1移動(dòng)到判斷出的人物的面部部分上(步驟S91)。
另一方面，在步驟S87中判斷為移動(dòng)的不是面部光標(biāo)C2的情況下， 則移動(dòng)的是人物光標(biāo)C1，所以在通過該人物光標(biāo)C1的移動(dòng)操作所選擇 的位置上顯示人物光標(biāo)C1 (步驟S92)，并且判斷與所選擇的人物對(duì)應(yīng)的面部圖像(步驟S93)。
然后，將判斷出的面部圖像顯示在重疊的面部圖像組的最前面(步
驟S94)，并且將面部光標(biāo)C2移動(dòng)到判斷出的面部圖像上進(jìn)行顯示(步 驟S95)。
這樣，在步驟S91或步驟S95的處理結(jié)束了的情況下、在步驟S81 中判斷為沒有進(jìn)行顏色區(qū)分的指示的情況下、在步驟S84中判斷為沒有 進(jìn)行顯示光標(biāo)的指示的情況下、或在步驟S86中判斷為沒有進(jìn)行移動(dòng)光 標(biāo)的操作的情況下，從該處理返回到圖17所示的處理。
根據(jù)這種實(shí)施方式1，在將根據(jù)面部檢測的結(jié)果得到的多個(gè)面部圖 像和整體圖像一起顯示時(shí)，面部圖像彼此的位置關(guān)系大致與整體圖像中 的與各面部圖像對(duì)應(yīng)的面部部分的位置關(guān)系對(duì)應(yīng)，所以視覺上可以容易 地掌握正在顯示的面部圖像是哪個(gè)人物的面部圖像。
并且，能夠從多個(gè)顯示模式中選擇希望的顯示模式，所以可以從選 擇項(xiàng)中進(jìn)行最適合于圖像的顯示。
而且，能夠?qū)⑾Ｍ拿娌繄D像放大或縮小顯示，所以能夠應(yīng)對(duì)想要 進(jìn)一步放大觀看時(shí)或想要進(jìn)一步觀看周圍狀況時(shí)。
此外，能夠?qū)⑾Ｍ拿娌繄D像設(shè)為不顯示，所以可以不顯示通過面 部檢測自動(dòng)顯示的面部圖像內(nèi)的不需要的面部圖像。
另外，能夠根據(jù)距離判斷的結(jié)果進(jìn)行面部圖像的遠(yuǎn)近強(qiáng)調(diào)，所以能 夠進(jìn)一步容易地掌握整體圖像中的人物彼此的位置關(guān)系。
并且，能夠根據(jù)需要進(jìn)行斜度校正，所以對(duì)于在整體圖像中傾斜的 面部，也可以作為正立方向的面部圖像而容易觀看。
而且，能夠根據(jù)面部部分的附近區(qū)域的顏色將面部圖像分組，所以 在拍攝了多個(gè)組的整體圖像中，能夠按照每個(gè)組容易觀看地顯示面部圖 像。
另外，在以上的實(shí)施方式中，說明了圖17 圖23的流程圖由進(jìn)行 軟件處理的CPU 11和進(jìn)行硬件處理的讀出部14、顯示圖像制作部16、 顯示處理部17、顯示部18、面部信息提取部21、距離判斷部22、顏色 判斷部23等的組合來執(zhí)行的情況。但是，對(duì)于將軟件處理和硬件處理如何組合不限于上述方式，可以設(shè)為任意的設(shè)計(jì)事項(xiàng)。并且，由CPU11進(jìn)
行的軟件處理還可以通過如下方式實(shí)現(xiàn)由CPU 11讀出在ROM，12中存 儲(chǔ)的軟件程序，CPU11自身依照讀出的軟件程序進(jìn)行上述動(dòng)作，或者， CPU11使其他構(gòu)成要件進(jìn)行上述動(dòng)作，從而執(zhí)行軟件處理。因此，上述 的軟件程序自身實(shí)現(xiàn)CPUll的功能，所以該程序也構(gòu)成本發(fā)明。并且， 存儲(chǔ)了該程序的記錄介質(zhì)也構(gòu)成本發(fā)明。在此，作為記錄介質(zhì)，可以使 用閃存、IC卡等半導(dǎo)體存儲(chǔ)器、硬盤或磁盤等磁記錄介質(zhì)、CD—ROM 或DVD等光學(xué)記錄介質(zhì)、MD等光磁記錄介質(zhì)等任意的記錄介質(zhì)。此外， 進(jìn)行上述處理的方法也構(gòu)成本發(fā)明。
并且，在上述的各實(shí)施方式中，說明了將本發(fā)明應(yīng)用于圖像再現(xiàn)裝 置上的例子，但不限于此，例如也可以適用于例如數(shù)字照相機(jī)等攝像裝 置中內(nèi)置的圖像再現(xiàn)部、便攜電話的照相機(jī)部中內(nèi)置的圖像再現(xiàn)部或其 他設(shè)備中內(nèi)置的圖像再現(xiàn)部。
而且，本發(fā)明不限于上述的實(shí)施方式，在實(shí)施階段，可以在不脫離 本發(fā)明宗旨的范圍內(nèi)對(duì)構(gòu)成要件進(jìn)行變形并具體化。并且，通過上述實(shí) 施方式中公開的多個(gè)構(gòu)成要素的適當(dāng)組合，能夠形成各種發(fā)明。例如， 可以從實(shí)施方式所示的全部構(gòu)成要件中刪除幾個(gè)構(gòu)成要件。此外，還可 以將不同的實(shí)施方式中的構(gòu)成要件適當(dāng)組合。像這樣，可以在不脫離發(fā) 明宗旨的范圍內(nèi)進(jìn)行各種變形或應(yīng)用。
本發(fā)明能夠良好地應(yīng)用于能夠同時(shí)顯示整體圖像和將面部部分放大 的面部圖像的圖像再現(xiàn)裝置、圖像再現(xiàn)程序、記錄介質(zhì)和圖像再現(xiàn)方法。
權(quán)利要求
1.一種圖像再現(xiàn)裝置，其具備提取圖像中的面部部分的信息的面部信息提取部，所述圖像再現(xiàn)裝置的特征在于，其具備面部圖像制作部，其根據(jù)所提取的多個(gè)面部部分的信息，由上述圖像來制作與上述圖像中的該面部部分相比放大了的多個(gè)面部圖像；以及合成圖像制作部，其將表示上述圖像整體的整體圖像和上述多個(gè)面部圖像組合來制作合成圖像，上述合成圖像制作部將上述多個(gè)面部圖像彼此的相對(duì)位置決定成與上述整體圖像中的各面部部分彼此的相對(duì)位置對(duì)應(yīng)，來制作上述合成圖像。
2. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，上述合成圖像制作部以使顯示上述多個(gè)面部圖像的區(qū)域和顯示上述整體圖像的區(qū)域 為不同區(qū)域的方式來制作合成圖像。
3. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，所述圖像再現(xiàn)裝置還具備用于輸入放大率的操作部，上述面部圖像制作部以使面部圖像相對(duì)于上述整體圖像中的面部部 分的放大率與所輸入的放大率對(duì)應(yīng)的方式來制作面部圖像。
4. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，上述合成圖 像制作部附加明示上述面部圖像與上述整體面部圖像中的哪個(gè)面部部分 相對(duì)應(yīng)的信息來制作合成圖像。
5. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，所述圖像再 現(xiàn)裝置還具有判斷上述各面部部分的攝影距離的距離判斷部，上述面部圖像制作部以使面部圖像的顯示尺寸成為與對(duì)應(yīng)于該面部 圖像的面部部分的攝影距離對(duì)應(yīng)的尺寸的方式來制作面部圖像。
6. 根據(jù)權(quán)利要求5所述的圖像再現(xiàn)裝置，其特征在于，上述面部圖 像制作部以當(dāng)上述攝影距離相對(duì)較近時(shí)顯示尺寸相對(duì)較大、當(dāng)該攝影距 離相對(duì)較遠(yuǎn)時(shí)顯示尺寸相對(duì)較小的方式來制作面部圖像。
7. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，所述圖像再現(xiàn)裝置還具有用于進(jìn)行將面部圖像設(shè)為不顯示的輸入操作的操作部，上述合成圖像制作部從制作合成圖像時(shí)的對(duì)象中除去被進(jìn)行了不顯 示的輸入操作的面部圖像，來制作合成圖像。
8. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，上述合成圖 像制作部將上述面部圖像旋轉(zhuǎn)為與上述整體圖像中的面部部分不同的斜 度，然后制作合成圖像。
9. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，上述合成圖 像制作部以使該面部圖像不覆蓋該整體圖像中的面部部分的方式來制作 上述合成圖像。
10. 根據(jù)權(quán)利要求8所述的圖像再現(xiàn)裝置，其特征在于，上述面部信息提取部還提取上述圖像中的面部部分的斜度作為面部部分的信息，上述合成圖像制作部根據(jù)所提取的面部部分的斜度使上述面部圖像 旋轉(zhuǎn)以使該面部部分正立，然后制作合成圖像。
11. 根據(jù)權(quán)利要求1所述的圖像再現(xiàn)裝置，其特征在于，上述面部圖 像制作部制作被旋轉(zhuǎn)成與上述整體圖像中的面部部分不同的斜度的面部 圖像。
12. —種圖像再現(xiàn)裝置，其具備提取圖像中的面部部分的信息的面部信息提取部，所述圖像再現(xiàn)裝置的特征在于，其具備面部圖像制作部，其根據(jù)所提取的多個(gè)面部部分的信息，由上述圖 像來制作與上述圖像中的該面部部分相比放大了的多個(gè)面部圖像；顏色判斷部，其判斷位于上述面部部分附近的區(qū)域的顏色；以及合成圖像制作部，其根據(jù)判斷出的顏色將上述多個(gè)面部圖像分類成 組，將被分類的每組中所匯總的上述多個(gè)面部圖像和表示上述圖像整體 的整體圖像組合，來制作合成圖像，上述合成圖像制作部以使上述面部圖像不覆蓋上述整體圖像中的面 部部分的方式來制作上述合成圖像。
13. 根據(jù)權(quán)利要求12所述的圖像再現(xiàn)裝置，其特征在于，上述合成 圖像制作部附加明示上述面部圖像與上述整體圖像中的哪個(gè)面部部分對(duì) 應(yīng)的信息來制作合成圖像。
14.一種圖像再現(xiàn)方法，該圖像再現(xiàn)方法提取圖像中的多個(gè)面部部分的信息來再現(xiàn)圖像，其特征在于，所述圖像再現(xiàn)方法包括； 判斷上述各面部部分的攝影距離的步驟；根據(jù)所提取的多個(gè)面部部分的信息，由上述圖像來制作與上述圖像 中的該面部部分相比放大了的多個(gè)面部圖像，使面部圖像的顯示尺寸成 為與對(duì)應(yīng)于該面部圖像的面部部分的攝影距離對(duì)應(yīng)的尺寸的步驟；以及將上述多個(gè)面部圖像彼此的相對(duì)位置決定成與表示上述圖像整體的 整體圖像中的各面部部分彼此的相對(duì)位置對(duì)應(yīng)，且以該面部圖像不覆蓋 整體圖像中的面部部分的方式將上述整體圖像和上述多個(gè)面部圖像組合 來制作一個(gè)合成圖像的步驟。
全文摘要
本發(fā)明提供一種能夠容易地掌握整體圖像的人物和面部圖像的人物之間的對(duì)應(yīng)的圖像再現(xiàn)裝置。圖像再現(xiàn)裝置(1)具備整體圖像制作部(16c)，其由圖像制作顯示用的整體圖像；面部信息提取部(21)，其提取圖像中的多個(gè)面部部分的信息；面部圖像制作部(16b)，其根據(jù)面部部分的信息，制作比整體圖像中的面部部分放大了的顯示用的面部圖像；合成圖像制作部(16a)，其將整體圖像和多個(gè)面部圖像組合，制作一個(gè)合成圖像，合成圖像制作部(16a)將多個(gè)面部圖像彼此的相對(duì)位置決定成與整體圖像中的各面部部分彼此的相對(duì)位置對(duì)應(yīng)，且以面部圖像不會(huì)覆蓋該整體圖像中的面部部分的方式制作合成圖像。
文檔編號(hào)H04N1/21GK101287056SQ20081009244
公開日2008年10月15日 申請日期2008年4月11日 優(yōu)先權(quán)日2007年4月12日
發(fā)明者和爾由紀(jì) 申請人:奧林巴斯映像株式會(huì)社