專利名稱：信息處理裝置、成像裝置、信息處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本公開涉及信息處理裝置。更具體而言，本公開涉及被設(shè)計為控制成像操作的信息處理裝置、成像裝置和信息處理方法以及使得計算機執(zhí)行該方法的程序。
背景技術(shù)：
近年來，對諸如人之類的被攝體成像、生成圖像(圖像數(shù)據(jù))并將所生成的圖像(圖像數(shù)據(jù))記錄為圖像內(nèi)容(圖像文件)的信息處理裝置(諸如數(shù)字靜止相機之類的成像裝置)已被廣泛使用。在信息處理裝置執(zhí)行成像操作時，為了清楚地記錄要記錄的圖像(圖像數(shù)據(jù))，適當?shù)卦O(shè)定與成像操作有關(guān)的參數(shù)是重要的。由于此原因，已提出了適當?shù)卦O(shè)定與成像操作有關(guān)的參數(shù)的多種技術(shù)。例如，已提出了分析在被攝體成像操作期間獲得的音頻信號的特征量并且基于所分析的音頻信號的特征量來控制圖像處理參數(shù)的成像裝置(例如參見2010-147587號日本未實審專利申請公布)。

發(fā)明內(nèi)容
根據(jù)現(xiàn)有技術(shù)中的上述技術(shù)，可以利用在成像操作期間獲得的音頻信號來控制與被攝體成像操作有關(guān)的參數(shù)。然而，可能有這樣的情況，即，例如，成像范圍中包括的對象物以外的對象物(即，不包括在成像范圍中的對象物)生成聲音。此外，還可能有這樣的情況，即，在成像范圍中包括的對象物之中，主對象物(捕捉圖像的人所聚焦的對象物)以外的對象物生成聲音。由于此原因，考慮到生成聲音的對象物和除了生成聲音的對象物以外的對象物之間的關(guān)系來適當?shù)剡x擇用于成像操作的設(shè)定，是重要的。希望適當?shù)剡x擇用于成像操作的設(shè)定。根據(jù)本公開的第一實施例，提供了一種信息處理裝置，其信息處理方法以及用于使得計算機執(zhí)行該方法的程序，該信息處理裝置包括:控制單元，被配置為執(zhí)行用于基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于成像單元的成像操作的設(shè)定的控制。這樣，有如下效果:基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于成像單元的成像操作的設(shè)定。在第一實施例中，信息處理裝置可還包括:第一判定單元，被配置為基于由聲音獲得單元獲得的周邊聲音來判定生成聲音的對象物；以及第二判定單元，被配置為基于由成像單元生成的圖像來判定圖像中包括的對象物，并且控制單元可基于第一判定單元的判定結(jié)果和第二判定單元的判定結(jié)果來選擇設(shè)定。這樣，有如下效果:基于第一判定單元的判定結(jié)果和第二判定單元的判定結(jié)果來選擇用于成像單元的成像操作的設(shè)定。在第一實施例中，控制單元可被配置為基于作為由第一判定單元判定的對象物的第一對象物和作為由第二判定單元判定的對象物的第二對象物之間的比較結(jié)果來選擇設(shè)定。這樣，有如下效果:基于由第一判定單元判定的對象物(第一對象物)和由第二判定單元判定的對象物(第二對象物)之間的比較結(jié)果來決定用于成像單元的成像操作的設(shè)定。在第一實施例中，控制單元可被配置為基于第一對象物來選擇作為與設(shè)定有關(guān)的參數(shù)的第一參數(shù)，基于第二對象物來選擇作為與設(shè)定有關(guān)的參數(shù)的第二參數(shù)，并且基于第一對象物是否與第二對象物一致來利用第一參數(shù)和第二參數(shù)中的任何一個選擇設(shè)定。這樣，有如下效果:基于第一對象物是否與第二對象物一致來利用第一參數(shù)和第二參數(shù)中的任何一個選擇用于成像單元的成像操作的設(shè)定。在第一實施例中，控制單元可被配置為當?shù)谝粚ο笪锱c第二對象物一致時利用第一參數(shù)選擇設(shè)定，并且當?shù)谝粚ο笪锊慌c第二對象物一致時利用第二參數(shù)選擇設(shè)定。這樣，有如下效果:當?shù)谝粚ο笪锱c第二對象物一致時利用第一參數(shù)選擇用于成像單元的成像操作的設(shè)定，并且當?shù)谝粚ο笪锊慌c第二對象物一致時利用第二參數(shù)選擇用于成像單元的成像操作的設(shè)定。在第一實施例中，第一判定單元可被配置為判定第一對象物以及與第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個，并且控制單元可被配置為基于與第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正第一參數(shù)。這樣，有如下效果:基于與第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正第一參數(shù)。在第一實施例中，第二判定單元可被配置為判定第二對象物以及與第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個，并且控制單元可被配置為基于與第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正第二參數(shù)。這樣，有如下效果:基于與第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正第二參數(shù)。在第一實施例中，信息處理裝置可還包括:被攝體距離獲得單元，被配置為獲得與由成像單元生成的圖像中包括的每個對象物有關(guān)的被攝體距離，其中控制單元可被配置為基于在由成像單元生成的圖像中是否包括與不同于與第一對象物有關(guān)的被攝體距離的被攝體距離有關(guān)的另一對象物來利用第一參數(shù)和第二參數(shù)中的任何一個選擇設(shè)定。這樣，有如下效果:基于在由成像單元生成的圖像中是否包括與不同于與第一對象物有關(guān)的被攝體距離的被攝體距離有關(guān)的另一對象物來利用第一參數(shù)和第二參數(shù)中的任何一個選擇用于成像單元的成像操作的設(shè)定。在第一實施例中，第二判定單元可被配置為判定在由成像單元生成的圖像中是否包括特定對象物，并且控制單元可被配置為基于在由成像單元生成的圖像中是否包括特定對象物來利用第一參數(shù)和第二參數(shù)中的任何一個選擇設(shè)定。這樣，有如下效果:基于在由成像單元生成的圖像中是否包括特定對象物來利用第一參數(shù)和第二參數(shù)中的任何一個選擇用于成像單元的成像操作的設(shè)定。在第一實施例中，第二判定單元可被配置為判定是否包括作為特定對象物的人臉。這樣，有如下效果:判定是否包括人臉作為特定對象物。根據(jù)本公開的第二實施例，提供了一種成像裝置、其控制方法和使得計算機執(zhí)行該方法的程序，該成像裝置包括:聲音獲得單元，被配置為獲得周邊聲音；成像單元，被配置為對被攝體成像并且生成圖像；以及控制單元，被配置為執(zhí)行用于基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于成像單元的成像操作的設(shè)定的控制。這樣，有如下效果:基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于成像單元的成像操作的設(shè)定。
根據(jù)本公開，能夠?qū)崿F(xiàn)可以適當?shù)剡x擇用于成像操作的設(shè)定的優(yōu)良效果。


圖1是示出根據(jù)本公開的第一實施例的成像裝置的內(nèi)部配置示例的框圖；圖2是示出根據(jù)本公開的第一實施例的成像裝置的功能配置示例的框圖；圖3是示意性示出根據(jù)本公開的第一實施例的圖像判定信息存儲單元上存儲的內(nèi)容的示例的圖；圖4是示意性示出根據(jù)本公開的第一實施例的聲音判定信息存儲單元上存儲的內(nèi)容的示例的圖；圖5是示意性示出根據(jù)本公開的第一實施例的參數(shù)校正信息存儲單元上存儲的內(nèi)容的示例的圖；圖6是示出根據(jù)本公開的第一實施例的程序線圖存儲單元上存儲的程序線圖的示例的圖；圖7A和7B是簡要示出根據(jù)本公開的第一實施例的作為成像裝置的成像對象的被攝體與成像范圍之間的關(guān)系的圖；圖8A和8B是簡要示出根據(jù)本公開的第一實施例的作為成像裝置的成像對象的被攝體與成像范圍之間的關(guān)系的圖；圖9A和9B是示出根據(jù)本公開的第一實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖1OA至IOC是示出根據(jù)本公開的第一實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖1IA和IlB是示出根據(jù)本公開的第一實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖12是示出根據(jù)本公開的第一實施例的成像裝置進行的相機控制參數(shù)決定處理的處理過程的示例的流程圖；圖13A和13B是示出根據(jù)本公開的第二實施例的成像單元生成的圖像與圖像的深度圖之間的關(guān)系的圖；圖14A和14B是簡要示出根據(jù)本公開的第二實施例的作為成像裝置的成像對象的被攝體與成像范圍之間的關(guān)系的圖；圖15A和15B是簡要示出根據(jù)本公開的第二實施例的作為成像裝置的成像對象的被攝體與成像范圍之間的關(guān)系的圖；圖16A和16B是示出根據(jù)本公開的第二實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖17A和17B是示出根據(jù)本公開的第二實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖18A和18B是示出根據(jù)本公開的第二實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖19是示出根據(jù)本公開的第二實施例的成像裝置進行的相機控制參數(shù)選擇處理的處理過程的示例的流程圖20A和20B是簡要示出根據(jù)本公開的第三實施例的作為成像裝置的成像對象的被攝體與成像范圍之間的關(guān)系的圖；圖21A和21B是示出根據(jù)本公開的第三實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖22A和22B是示出根據(jù)本公開的第三實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；圖23A和23B是示出根據(jù)本公開的第三實施例的成像單元生成的圖像與控制單元選擇的相機控制參數(shù)之間的關(guān)系的圖；并且圖24是示出根據(jù)本公開的第三實施例的成像裝置進行的相機控制參數(shù)選擇處理的處理過程的示例的流程圖。
具體實施例方式以下，將對用于實現(xiàn)本公開的實施例(以下稱為實施例)給出描述。將按以下順序給出描述。1.第一實施例(相機控制參數(shù)選擇控制:基于成像裝置周圍的聲音和成像單元生成的圖像來決定相機控制參數(shù)的示例)2.第二實施例(相機控制參數(shù)決定控制:基于在成像范圍中是否包括具有不同被攝體距離的多個對象物來決定相機控制參數(shù)的示例)3.第三實施例(相機控制參數(shù)決定控制:基于在成像范圍中是否包括人來決定相機控制參數(shù)的示例)第一實施例成像裝置的配置示例圖1是示出根據(jù)本公開的第一實施例的成像裝置100的內(nèi)部配置示例的框圖。成像裝置100設(shè)有透鏡組111、光圈112、光學(xué)系統(tǒng)控制單元113、快門單元121、快門控制單元122、成像元件131以及AFE (模擬前端)132。此外，成像裝置100設(shè)有圖像處理單元133、測光單元135、內(nèi)容存儲單元140、麥克風151、A/D (模擬/數(shù)字)轉(zhuǎn)換單元152以及音頻分析處理單元153。另外，成像裝置100設(shè)有非易失性存儲器160、操作接收單元170、顯示單元180和主控制單元190。此外，成像裝置100例如是由對被攝體成像、生成圖像數(shù)據(jù)(圖像)并將所生成的圖像記錄為圖像內(nèi)容(靜止圖像內(nèi)容或電影內(nèi)容)的數(shù)字靜止相機實現(xiàn)的。另外，成像裝置100是所附權(quán)利要求中記載的信息處理裝置和成像裝置的一個示例。透鏡組111是收集來自被攝體的入射光的透鏡組，并且由透鏡組收集的光經(jīng)由光圈112入射在成像元件131上。透鏡組111是由用于調(diào)整焦點的聚焦透鏡、用于調(diào)整圖像中包括的被攝體的倍率的變焦透鏡等等構(gòu)成的，并且具體布置配置將不在圖中示出并且不在這里描述。此外，透鏡組111中包括的透鏡被光學(xué)系統(tǒng)控制單元113驅(qū)動以相對于被攝體在前后方向上移動。這樣，實現(xiàn)聚焦功能和變焦功能。光圈112調(diào)整通過透鏡組111的入射光的光強度，并且經(jīng)調(diào)整的光入射在成像元件131上。也就是說，光圈112調(diào)整通過透鏡組111的入射光的光強度，并且要提供給成像元件131的光強度(即曝光)被決定。此外，光圈112被光學(xué)系統(tǒng)控制單元113驅(qū)動以調(diào)整光圈的孔徑。光學(xué)系統(tǒng)控制單元113基于來自主控制單元190的指令驅(qū)動透鏡組111中包括的透鏡和光圈112。此外，光學(xué)系統(tǒng)控制單元113獲得透鏡組111中包括的透鏡的位置和光圈112的狀態(tài)(打開或閉合狀態(tài))并將位置和狀態(tài)順次輸出到主控制單元190?？扉T單元121利用在垂直方向上移動的遮光罩打開和阻擋入射在成像元件131上的來自被攝體的入射光的光路，并且被快門控制單元122驅(qū)動。例如，當光路被打開時，快門單元121將來自被攝體的入射光提供到成像元件131。快門控制單元122基于來自主控制單元190的指令驅(qū)動快門單元121。成像元件131通過對來自被攝體的入射光執(zhí)行光電轉(zhuǎn)換來生成電信號(模擬信號)，并將所生成的電信號作為圖像信號提供給AFE 132。作為成像元件131，例如可以使用CCD(電荷耦合器件)、CMOS(互補金屬氧化物半導(dǎo)體)之類的。此外，作為成像元件131，可以使用通過接收透過具有不同出射光瞳的部分的光來基于相位差檢測方案(相位差A(yù)F(自動聚焦))執(zhí)行焦點檢測的成像元件。執(zhí)行相位差A(yù)F的成像元件輸出相位差檢測信號以及圖像信號(模擬信號)。由于此原因，圖像處理單元133可基于從成像元件131輸出的相位差檢測信號來計算與從成像元件131輸出的圖像信號相對應(yīng)的圖像中的每個區(qū)域的被攝體距離。此外，被攝體距離指的是從成像裝置100到被攝體的距離。AFE 132基于來自主控制單元190的指令對從成像元件131提供來的圖像信號(模擬信號)執(zhí)行預(yù)定的信號處理，并將被執(zhí)行了預(yù)定信號處理的圖像信號轉(zhuǎn)換成數(shù)字信號。此外，AFE 132將所生成的圖像信號(數(shù)字信號)提供給圖像處理單元133。例如，AFE132對圖像信號(模擬信號)執(zhí)行諸如噪聲去除和信號放大之類的信號處理作為該預(yù)定信號處理。此外，AFE 132基于從主控制單元190提供來的基準時鐘生成與成像元件131的成像操作有關(guān)的定時脈沖并將所生成的定時脈沖提供給成像元件131。圖像處理單元133基于來自主控制單元190的指令對從AFE 132提供來的圖像信號(數(shù)字信號)執(zhí)行預(yù)定的信號處理并生成圖像數(shù)據(jù)(圖像信號)。圖像處理單元133隨后對所生成的圖像數(shù)據(jù)進行壓縮并將壓縮的圖像數(shù)據(jù)提供給內(nèi)容存儲單元140。例如，圖像處理單元133對從AFE 132提供來的圖像信號(數(shù)字信號)執(zhí)行諸如白平衡校正、伽馬校正、黑電平校正、圖像壓縮、像素插值處理、顏色轉(zhuǎn)換處理之類的信號處理作為該預(yù)定的信號處理。此外，圖像處理單元133利用所生成的圖像數(shù)據(jù)(圖像信號)執(zhí)行預(yù)定的計算處理，并且執(zhí)行關(guān)于對比度、亮度、飽和度、白平衡、銳度等等的圖像處理。測光單元135是用于執(zhí)行自動曝光處理的測光單元并且用于測量被攝體周圍的亮度。也就是說，測光單元135可測量被攝體的曝光狀態(tài)，其中該被攝體的圖像被成像元件131形成為光學(xué)圖像。內(nèi)容存儲單元140基于來自主控制單元190的指令在其上存儲從圖像處理單元133提供來的圖像數(shù)據(jù)作為圖像內(nèi)容(圖像文件)。麥克風151是成像裝置100中內(nèi)置的麥克風，并且來自成像裝置100的周邊的聲音被輸入到其中。然后，麥克風151將輸入的周邊聲音轉(zhuǎn)換成電信號(模擬信號)并將通過該轉(zhuǎn)換生成的電信號作為音頻信號(模擬信號)提供給A/D轉(zhuǎn)換單元152。A/D轉(zhuǎn)換單兀152將從麥克風151輸出的音頻信號(模擬信號)轉(zhuǎn)換成數(shù)字信號并將通過該轉(zhuǎn)換生成的音頻信號(數(shù)字信號)輸出到音頻分析處理單元153。音頻分析處理單元153通過分析從A/D轉(zhuǎn)換單元152提供來的音頻信號來從音頻信號中提取特征量并將所提取的特征量輸出到主控制單元190。音頻分析處理單元153是由能夠提取音頻信號的音量和頻率分布作為音頻信號的特征量的譜分析儀電路實現(xiàn)的。非易失性存儲器160是即使在未供應(yīng)電力時也能夠維持存儲的內(nèi)容的半導(dǎo)體存儲器。作為非易失性存儲器160，例如可以使用閃存或EEPROM (電可擦除可編程只讀存儲器)。操作接收單元170是接收由用戶執(zhí)行的操作的操作接收單元并且根據(jù)接收到的操作內(nèi)容向主控制單元190輸出控制信號(操作信號)。操作接收單元170對應(yīng)于快門按鈕171 (在圖7A等等中示出)、模式撥盤之類的。模式撥盤是用于設(shè)定各種成像模式的操作構(gòu)件。當利用模式撥盤設(shè)定特定的成像模式(例如聲音/圖像判定模式)，設(shè)定本公開的第一實施例中示出的成像模式?？扉T按鈕171是用于執(zhí)行用于記錄靜止圖像的各種操作(半按操作和全按操作)的按鈕。當執(zhí)行半按操作時，開始AF(自動聚焦)處理、AE(自動曝光)處理、AWB(自動白平衡處理)、EF(電子閃光燈)處理等等。此外，當執(zhí)行全按操作時，執(zhí)行用于將從成像元件131讀取的圖像信號(模擬信號)作為圖像內(nèi)容(圖像文件)記錄在內(nèi)容存儲單元140上的各種處理。顯示單元180是基于來自主控制單元190的指令顯示從圖像處理單元133輸出的圖像數(shù)據(jù)的顯示面板(例如液晶取景器)。例如，顯示單元180顯示用于執(zhí)行各種設(shè)定的設(shè)定畫面和由成像元件131生成的圖像(所謂的直通圖像、實時取景圖像)。作為顯示單元180，可以使用諸如LCD(液晶顯示器)或有機EL(電致發(fā)光)面板之類的顯示面板。主控制單元190基于存儲在存儲器(例如非易失性存儲器160)上的控制程序控制成像裝置100中的每個組件。主控制單元190例如是由微處理器構(gòu)成的。成像裝置的功能配置示例圖2是示出根據(jù)本公開的第一實施例的成像裝置100的功能配置示例的框圖。成像裝置100設(shè)有操作接收單元210、成像單元220、圖像處理單元230、記錄控制單元240、圖像判定單元250、聲音獲得單元260、聲音判定單元270、控制單元280以及內(nèi)容存儲單元290。此外，成像裝置100設(shè)有圖像判定信息存儲單元310、聲音判定信息存儲單元320、參數(shù)校正信息存儲單元330以及程序線圖存儲單元340。另外，操作接收單元210例如對應(yīng)于圖1中所示的操作接收單元170，并且內(nèi)容存儲單元290例如對應(yīng)于圖1中所示的內(nèi)容存儲單元140。成像單元220對被攝體成像，基于來自控制單元180的指令生成圖像(圖像數(shù)據(jù))，并將所生成的圖像提供給圖像處理單元230、圖像判定單元250和控制單元280。此夕卜，成像單元220基于由控制單元280選擇的設(shè)定來執(zhí)行成像操作。另外，成像單元220例如對應(yīng)于圖1中所示的透鏡組111、光圈112、光學(xué)系統(tǒng)控制單元113、快門單元121、快門控制單元122、成像元件131和AFE 132。圖像處理單元230基于來自控制單元280的指令對從成像單元220提供來的圖像(圖像數(shù)據(jù))執(zhí)行預(yù)定的信號處理，并將被執(zhí)行了信號處理的圖像(圖像數(shù)據(jù))提供給記錄控制單元240。此外，圖像處理單元230例如對應(yīng)于圖1中所示的圖像處理單元133。
記錄控制單元240基于來自控制單元280的指令對從圖像處理單元230提供來的圖像(圖像數(shù)據(jù))進行壓縮并使得內(nèi)容存儲單元290在其中記錄壓縮的圖像(圖像數(shù)據(jù))作為圖像內(nèi)容(圖像文件)。此外，記錄控制單元240例如對應(yīng)于圖1中所示的圖像處理單元133和主控制單元190。圖像判定單元250利用存儲在圖像判定信息存儲單元310上的圖像判定信息判定由成像單元220生成的圖像中包括的對象物的類型，并將判定結(jié)果輸出到控制單元280。例如，使用匹配處理的判定方法可被用作用于判定對象物的類型的判定方法。匹配處理是如下的處理:比較作為比較對象的兩個圖像的特征量，并且基于比較結(jié)果計算出兩個圖像的特征量的相似度，并基于相似度判定兩個圖像是否彼此一致。例如，當計算出的相似度小于閾值時判定作為比較對象的兩個圖像彼此不一致，并且例如當計算出的相似度等于或大于閾值時判定作為比較對象的兩個圖像彼此一致。作為匹配處理，可以使用基于其中記錄了每個對象物(例如馬、魚或人臉)的亮度分布信息的模板與實際圖像之間的匹配的判定方法(例如參見2004-133637號日本未實審專利申請公布)。此外，當作為判定對象的對象物是人臉(特定對象物)時，可以使用基于與圖像中包括的膚色相對應(yīng)的部分、人臉等等的特征量的判定方法、此外，例如可以使用利用圖像中的亮度的梯度強度和梯度方向來檢測圖像中包括的對象物(人體、動物、火車、車輛等等)的檢測方法(例如參見2010-67102號日本未實審專利申請公布)。此外，圖像判定單元250判定對象物移動狀態(tài)和被攝體距離?？赏ㄟ^執(zhí)行構(gòu)成在時間軸上相鄰的兩個圖像的像素之間的匹配處理(即，用于判定相同對象物的區(qū)域的匹配處理)并且計算在這些圖像之間移動的像素的數(shù)目來判定對象物移動狀態(tài)。可例如基于所判定的圖像中的對象物的大小來計一算對象物被攝體距離。如上所述，控制單元280可基于從成像單元220(成像元件131)輸出的各種信息來計算被攝體距離。此外，圖像判定單元250例如對應(yīng)于圖1中所示的主控制單元190。另外，圖像判定單元250是所附權(quán)利要求中的第二判定單元的示例。聲音獲得單元260獲得來自成像裝置100的周邊的聲音并將所獲得的聲音數(shù)據(jù)(聲音)輸出到聲音判定單元270。此外，聲音獲得單元260例如對應(yīng)于圖1中所示的麥克風 151。聲音判定單元270利用存儲在聲音判定信息存儲單元320上的聲音判定信息基于從聲音獲得單元260輸出的聲音數(shù)據(jù)判定生成聲音的被攝體，并將判定結(jié)果輸出到控制單元280。例如，聲音判定單元270從輸出自聲音獲得單元260的聲音數(shù)據(jù)中提取特征量并將所提取的特征量與存儲在聲音判定信息存儲單元320上的聲音判定信息(與聲音有關(guān)的特征量)相比較以計算相似度。然后，當計算出的相似度超過閾值時，聲音判定單元270判定存在相似度超過閾值的與聲音判定信息相關(guān)聯(lián)的對象物。例如，從聲音獲得單元260輸出的聲音數(shù)據(jù)通過A/D轉(zhuǎn)換處理被采樣并被轉(zhuǎn)換成數(shù)字數(shù)據(jù)。此外，按適當?shù)臅r間間隔對數(shù)字數(shù)據(jù)執(zhí)行諸如頻率分析之類的處理，并將數(shù)字數(shù)據(jù)轉(zhuǎn)換成表示頻譜或聲音的其他聲學(xué)特征的參數(shù)。這樣，提取與聲音有關(guān)的時間序列特征量(time-series feature amounts)。此夕卜，利用存儲在聲音判定信息存儲單元320上的聲音判定信息(與聲音有關(guān)的特征量)執(zhí)行與所提取的時間序列特征量的匹配處理，并且將判定結(jié)果輸出作為匹配處理的結(jié)果。此夕卜，可能使用其他現(xiàn)有方法作為音頻分析方法和音頻識別方法。另外，聲音獲得單元260可判定所判定的對象物的移動狀態(tài)和被攝體距離?？苫趯ο笪镌谝苿拥耐瑫r生成的特有聲音的特征量之類的來判定對象物的移動狀態(tài)?？苫诼曇舻囊袅恐惖膩砼卸▽ο笪锏谋粩z體距離。此外，聲音判定單元270例如對應(yīng)于圖1中所示的A/D轉(zhuǎn)換單元152、音頻分析處理單元153和主控制單元190。此外，聲音判定單元270是所附權(quán)利要求中的第一判定單元的示例?？刂茊卧?80基于各種控制程序來控制成像裝置100中的每個組件。例如，控制單元280執(zhí)行控制以基于由聲音獲得單元260獲得的周邊聲音和由成像單元220生成的圖像來決定成像單元220的成像操作期間的設(shè)定。具體而言，控制單元280基于聲音判定單元270的判定結(jié)果和圖像判定單元250的判定結(jié)果來決定成像單元220的成像操作期間的設(shè)定。也就是說，控制單元280基于由聲音判定單元270判定的對象物(第一對象物)和由圖像判定單元250判定的對象物(第二對象物)之間的比較結(jié)果來決定成像單元220的成像操作期間的設(shè)定。在這種情況下，控制單元280基于第一對象物選擇與設(shè)定有關(guān)的參數(shù)(第一參數(shù))并且基于第二對象物選擇與設(shè)定有關(guān)的參數(shù)(第二參數(shù))。此外，控制單元280可基于與第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正第一參數(shù)?？刂茊卧?80可基于與第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正第二參數(shù)。然后，控制單元280基于第一對象物和第二對象物是否與彼此一致，利用第一參數(shù)和第二參數(shù)中的任何一個，選擇成像單元220的成像操作期間的設(shè)定。具體而言，控制單元280在第一對象物和第二對象物與彼此一致時利用第一參數(shù)選擇成像單元220的成像操作期間的設(shè)定。另一方面，控制單元280在第一對象物和第二對象物不與彼此一致時利用第二參數(shù)選擇成像單元220的成像操作期間的設(shè)定。此外，控制單元280例如對應(yīng)于圖1中所示的主控制單元190。圖像判定信息存儲單元310存儲被圖像判定單元250用于判定處理的圖像判定信息(與圖像有關(guān)的特征量)，并將所存儲的圖像判定信息提供給圖像判定單元250。將參考圖3詳細描述圖像判定信息存儲單元310上存儲的內(nèi)容。此外，圖像判定信息存儲單元310例如對應(yīng)于圖1中所示的非易失性存儲器160。聲音判定信息存儲單元320存儲被聲音判定單元270用于判定處理的聲音判定信息(與聲音有關(guān)的特征量)，并將所存儲的聲音判定信息提供給聲音判定單元270。此外，將參考圖4詳細描述聲音判定信息存儲單元320上存儲的內(nèi)容。另外，聲音判定信息存儲單元320例如對應(yīng)于圖1中所示的非易失性存儲器160。參數(shù)校正信息存儲單元330存儲被控制單元280用于相機控制參數(shù)校正處理的參數(shù)校正信息，并將所存儲的參數(shù)校正信息提供給控制單元280。此外，將參考圖5詳細描述參數(shù)校正信息存儲單元330上存儲的內(nèi)容。另外，參數(shù)校正信息存儲單元330例如對應(yīng)于圖1中所示的非易失性存儲器160。程序線圖存儲單元340存儲被控制單元280用于相機控制參數(shù)決定處理的程序線圖，并將所存儲的程序線圖提供給控制單元280。此外，將參考圖6詳細描述程序線圖。另夕卜，程序線圖存儲單元340例如對應(yīng)于圖1中所示的非易失性存儲器160。圖像判定信息存儲單元上存儲的內(nèi)容的示例
圖3是示意性示出根據(jù)本公開的第一實施例的圖像判定信息存儲單元310上存儲的內(nèi)容的示例的圖。圖像判定信息存儲單元310存儲用于判定成像單元220生成的圖像中包括的對象物的類型的判定信息(與圖像有關(guān)的判定信息)。圖像判定信息存儲單元310以彼此關(guān)聯(lián)的方式存儲對象物的類型311、特征量312和相機控制參數(shù)313。對象物的類型311是成像單元220生成的圖像中包括的對象物的類型。根據(jù)本公開的第一實施例，馬、魚、人臉等等將被示為作為判定對象的對象物的類型的示例。特征量312是用于判定成像單元220生成的圖像中包括的對象物的類型的判定信息(圖像識別數(shù)據(jù))。也就是說，圖像判定單元250利用特征量312判定成像單元220生成的圖像中包括的對象物的類型。如上所述，例如可以使用基于其中記錄了每個被攝體(例如馬、魚或人臉)的亮度分布信息的模板與實際圖像之間的匹配的判定方法作為判定方法。當基于匹配的判定方法如上所述被用作判定方法時，其中記錄了每個被攝體的亮度分布信息的模板被存儲為特征量 312。相機控制參數(shù)313是在成像單元220的成像操作期間設(shè)定的相機控制參數(shù)。例如，關(guān)于程序線圖存儲單元340上存儲的程序線圖中的位置的信息被存儲為相機控制參數(shù)313。聲音判定信息存儲單元上存儲的內(nèi)容的示例圖4是示意性示出根據(jù)本公開的第一實施例的聲音判定信息存儲單元320上存儲的內(nèi)容的示例的圖。聲音判定信息存儲單元320存儲用于判定生成由聲音獲得單元260獲得的聲音的對象物的類型的判定信息(與聲音有關(guān)的判定信息)。聲音判定信息存儲單元320以彼此關(guān)聯(lián)的方式存儲對象物的類型321、特征量322和相機控制參數(shù)323。對象物的類型321是生成由聲音獲得單元260獲得的聲音的對象物的類型。此外，圖4示出了奔跑的馬、瀑布、車輛等等作為充當判定對象的對象物的類型的示例。特征量322是用于判定生成由聲音獲得單元260獲得的聲音的對象物的類型的判定信息(聲音識別數(shù)據(jù))。也就是說，聲音判定單元270利用特征量322判定生成由聲音獲得單元260獲得的聲音的對象物的類型。為了簡化描述，圖4以虛擬方式利用字符示出了對象物生成的聲音作為特征量。如上所述，基于與每個對象物(例如馬、魚或人臉)生成的聲音有關(guān)的時間序列特征量和與聲音獲得單元260獲得的聲音有關(guān)的時間序列特征量之間的匹配的判定方法可被用作判定方法。當基于匹配的判定方法如上所述被用作判定方法時，與每個被攝體生成的聲音有關(guān)的時間序列特征量被存儲為特征量322。相機控制參數(shù)323是在成像單元220的成像操作期間設(shè)定的相機控制參數(shù)。例如，關(guān)于程序線圖存儲單元340上存儲的程序線圖中的位置的信息被存儲為相機控制參數(shù)323。圖3中所示的相機控制參數(shù)313是基于圖像信息選擇的相機控制參數(shù)，而相機控制參數(shù)323是基于聲音信息選擇的相機控制參數(shù)。參數(shù)校正信息存儲單元上存儲的內(nèi)容的示例圖5是示意性示出根據(jù)本公開的第一實施例的參數(shù)校正信息存儲單元330上存儲的內(nèi)容的示例的圖。參數(shù)校正信息存儲單元330存儲用于校正由控制單元280選擇的相機控制參數(shù)(第一參數(shù))的參數(shù)校正信息。參數(shù)校正信息存儲單元330在其上以彼此關(guān)聯(lián)的方式存儲對象物的類型331和參數(shù)校正信息332。對象物的類型331是生成由聲音獲得單元260獲得的聲音的對象物的類型。根據(jù)本公開的第一實施例，高速移動的物體、低速移動的物體等等被示為作為判定對象的對象物的類型的示例。參數(shù)校正信息332是用于基于生成由聲音獲得單元260獲得的聲音的對象物的類型來校正相機控制參數(shù)(第一參數(shù))的信息。也就是說，控制單元280利用參數(shù)校正信息332校正基于由聲音獲得單兀260獲得的聲音選擇的相機控制參數(shù)(第一參數(shù))。將參考圖6詳細描述相機控制參數(shù)(第一參數(shù))。程序線6是示出根據(jù)本公開的第一實施例的程序線圖存儲單元340上存儲的程序線圖的示例的圖。此外，程序線圖(程序AE(自動曝光))被用于根據(jù)被攝體的亮度決定光圈和快門速度。在圖6中所示的程序線圖341中，垂直軸表示透鏡的光圈值(AV)，并且水平軸表示快門速度(TV:時間值)。此外，斜線(示為虛線)表示曝光值(EV)。如上所述，控制單元280利用由聲音判定單元270判定的被攝體和存儲在程序線圖存儲單元340上的程序線圖，選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))。此外，控制單元280利用由圖 像判定單元250判定的被攝體和存儲在程序線圖存儲單元340上的程序線圖，選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))。例如，假定聲音判定信息存儲單元320以彼此關(guān)聯(lián)的方式存儲“馬”作為對象物的類型321并且存儲“程序線圖341中的位置342”作為相機控制參數(shù)323。在這種情況下，當聲音判定單元270判定的被攝體是馬時，控制單元280選擇與程序線圖341中的位置342相對應(yīng)的相機控制參數(shù)(第一參數(shù))。此外，控制單元280根據(jù)被攝體(馬)的速度，對這樣基于聲音信息決定的相機控制參數(shù)(第一參數(shù))進行校正。被攝體的速度可由聲音判定單元270判定。例如，聲音判定單元270可以利用聲音判定信息存儲單元320中的聲音判定信息識別快速奔跑的馬(高速移動的物體)和緩慢奔跑的馬(低速移動的物體)。例如，當聲音判定單元270檢測到快速奔跑的馬時，最好提升快門速度。由于此原因，控制單元280選擇其位置342被移動到程序線圖341中的實線345上的位置343的相機控制參數(shù)(第一參數(shù))。另一方面，當聲音判定單元270檢測到緩慢奔跑的馬時，例如最好降低快門速度。由于此原因，控制單元280選擇其位置342被移動到程序線圖341中的實線345上的位置344的相機控制參數(shù)(第一參數(shù))。如上所述，控制單元280可利用程序線圖基于聲音信息來決定相機控制參數(shù)(光圈值、快門速度、曝光值)。此外，控制單元280還可按相同的方式基于圖像信息來選擇相機控制參數(shù)。根據(jù)本公開的第一實施例，將示出由聲音判定信息存儲單元320利用相機控制參數(shù)323選擇第一參數(shù)并且利用由聲音判定單元270選擇的對象物的速度來校正該參數(shù)的示例。然而，也可應(yīng)用另外的配置，其中，例如，基于由測光單元135獲得的亮度信息來決定與程序線圖中的位置相對應(yīng)的參數(shù)并且利用由聲音判定單元270判定的對象物的速度來校正該參數(shù)。此外，這同樣可應(yīng)用到基于圖像信息校正相機控制參數(shù)。如上所述，控制單元280可利用對象物的移動狀態(tài)和被攝體距離中的至少一個基于聲音信息來校正相機控制參數(shù)。此外，控制單元280可利用對象物的移動狀態(tài)和被攝體距離中的至少一個基于圖像信息來校正相機控制參數(shù)。此外，稍后將在本公開的第二實施例中描述在虛線349上從位置346到位置348的移動。使用成像裝置的成像狀態(tài)的示例圖7A至SB是簡要示出根據(jù)本公開的第一實施例的作為成像裝置100的成像對象的被攝體與成像范圍之間的關(guān)系的圖。圖7A和8A示出了成像裝置100和被攝體的側(cè)視圖。此外，圖7B和8B示出了作為成像裝置100的成像對象的被攝體的成像范圍。圖7A和7B示出了當奔跑的馬401及其周邊(例如山脈402)是被攝體時的被攝體與成像范圍之間的關(guān)系。將基于如下假設(shè)給出描述:在圖7A和7B中所示的示例中，由于成像裝置100與奔跑的馬401之間的距離相對較短，所以聲音獲得單元260能夠獲得奔跑的馬401的奔跑聲音(在圖7A中示為“馬蹄聲”)。這里，如圖7B中所示，在成像范圍405中不包括奔跑的馬401，而在成像范圍406中包括奔跑的馬401。由于此原因，當成像范圍406被成像單元220成像時，基于由聲音獲得單元260獲得的聲音確定的對象物(奔跑的馬)與基于由成像單元220生成的圖像確定的對象物(馬)一致(基本一致)。然而，當成像范圍405被成像單元220成像時，基于由聲音獲得單元260獲得的聲音確定的對象物(奔跑的馬)不與基于由成像單元220生成的圖像確定的對象物(山脈、草地)一致。如果例如僅基于由聲音獲得單元260獲得的聲音來選擇相機控制參數(shù)，則相機控制參數(shù)是利用由不包括在成像范圍中的對象物生成的聲音來選擇的。由于此原因，擔心不能對與成像范圍405相對應(yīng)的圖像設(shè)定適當?shù)南鄼C控制參數(shù)。從而，根據(jù)本公開的第一實施例，利用聲音信息和圖像信息兩者來選擇相機控制參數(shù)。圖8A和8B示出了當停歇的馬411及其周邊(例如山脈412)是被攝體時被攝體與成像范圍之間的關(guān)系。這里，將基于如下假設(shè)給出描述:在圖8A和SB中所示的示例中，雖然成像裝置100與停歇的馬411之間的距離相對較短，但由于停歇的馬411不生成聲音，所以聲音獲得單元260不會獲得與停歇的馬411有關(guān)的聲音。此外，還假設(shè)除馬以外的對象物不生成聲音。這里，如圖8B中所示，在成像范圍415中不包括停歇的馬411，而在成像范圍416中包括停歇的馬411。然而，即使當成像范圍416被成像單元220成像時,聲音獲得單元260也不獲得聲音(與停歇的馬411有關(guān)的聲音)。由于此原因，基于由聲音獲得單元260獲得的聲音確定的對象物(無)與基于由成像單元220生成的圖像確定的對象物(馬)不一致。此外，當成像范圍415被成像單元220成像時，基于由聲音獲得單元260獲得的聲音確定的對象物(無)與基于由成像單元220生成的圖像確定的對象物(山脈、草地)不一致。在兩種情況下，如果例如僅基于由聲音獲得單元260獲得的聲音來選擇相機控制參數(shù)，則與圖7A和7B中所示的示例中同樣地，擔心不能設(shè)定適當?shù)南鄼C控制參數(shù)。
被攝體與相機控制參數(shù)之間的關(guān)系的示例圖9A至IlB是示出根據(jù)本公開的第一實施例的成像單元220生成的圖像與控制單元280選擇的相機控制參數(shù)之間的關(guān)系的圖。這里，圖9A中所示的圖像421是與圖7B中所示的成像范圍406相對應(yīng)的圖像。此夕卜，圖1OA中所示的圖像422是與圖7B中所示的成像范圍405和圖8B中所示的成像范圍415相對應(yīng)的圖像。另外，圖1lA中所示的圖像423是與圖8B中所示的成像范圍416相對應(yīng)的圖像。在對圖9A中所示的圖像421的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(奔跑的馬)與基于由成像單元220生成的圖像確定的對象物(馬)一致(基本一致)，如圖9B中所示。在這種情況下，控制單元280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))作為用于成像操作的設(shè)定。這里，假設(shè)圖1OA中所示的圖像422是與圖7B中所示的成像范圍405相對應(yīng)的圖像。在這種情況下，在對圖1OA中所示的圖像422的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(奔跑的馬)不與基于由成像單元220生成的圖像確定的對象物(草地、山脈)一致，如圖1OB中所示。在這種情況下，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))作為用于成像操作的設(shè)定。此外，假設(shè)圖1OA中所示的圖像422是與圖8B中所示的成像范圍415相對應(yīng)的圖像。在這種情況下，在對圖1OA中所示的圖像422的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(無)不與基于由成像單元220生成的圖像確定的對象物(草地、山脈)一致，如圖1OC中所示。在這種情況下，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))作為用于成像操作的設(shè)定。此外，在圖1lA中所示的圖像423的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(無)不與基于由成像單元220生成的圖像確定的對象物(馬)一致，如圖1lB中所示。在這種情況下，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))作為用于成像操作的設(shè)定。另外，還可以假設(shè)處于停歇狀態(tài)的馬在叫(比如撕叫)。例如，當在圖1lA和IlB中所示的示例中馬在叫(比如撕叫)時，基于由聲音獲得單元260獲得的聲音確定的對象物(馬)與基于由成像單元220生成的圖像確定的對象物(馬)一致。在這種情況下，控制單元280可選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))作為用于成像操作的設(shè)定。成像裝置的操作示例圖12是示出根據(jù)本公開的第一實施例的成像裝置100進行的相機控制參數(shù)決定處理的處理過程的示例的流程圖。首先，控制單元280判定是否對快門按鈕171執(zhí)行了半按操作(步驟S901)，并且當未對快門按鈕171執(zhí)行半按操作時繼續(xù)監(jiān)視。當對快門按鈕171執(zhí)行了半按操作時(步驟S901)，聲音獲得單元260獲得來自成像裝置100的周邊的聲音(步驟S902)。此外，步驟S902是所附權(quán)利要求中的用于獲得聲音的過程的示例。接下來，聲音判定單元270判定生成由聲音獲得單元260獲得的聲音的對象物的類型(步驟S903)。隨后，控制單元280利用判定結(jié)果選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))(步驟S904)。
隨后，控制單元280判定是否對快門按鈕171執(zhí)行了全按操作(步驟S905)。當未執(zhí)行全按操作時(步驟S905)，控制單元280判定對快門按鈕171執(zhí)行的半按操作是否已被釋放(步驟S912)，并且當半按操作已被釋放時返回到步驟S901。另一方面，當對快門按鈕171執(zhí)行的半按操作未被釋放時(步驟S912)控制單元280返回到步驟S902。當對快門按鈕171執(zhí)行了全按操作時(步驟S905)，成像單元220對被攝體成像并且生成圖像(步驟S906)。此外，步驟S906是所附權(quán)利要求中的用于獲得圖像的過程的示例。隨后，圖像判定單元250判定由成像單元220生成的圖像中包括的對象物的類型(步驟S907)。然后，控制單元280利用判定結(jié)果選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))(步驟S908)。隨后，控制單元280將聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果相比較并且判定這些判定結(jié)果是否彼此一致(或基本一致)(步驟S909)。也就是說，判定由聲音判定單元270判定的對象物是否與由圖像判定單元250判定的對象物一致(或基本一致)。這里，如果由聲音判定單元270判定的對象物是“奔跑的馬”，并且由圖像判定單元250判定的對象物是“馬”，則對象物彼此一致。也就是說，對象物彼此一致的情況是雖然其狀態(tài)不同但對象物的類型相同的情況。當聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(或基本一致)時(步驟S909)，控制單元280執(zhí)行用于利用第一參數(shù)執(zhí)行成像操作的控制(步驟S910)。也就是說，當判定結(jié)果彼此一致(或基本一致)時(步驟S910)，基于聲音信息的相機控制參數(shù)(第一參數(shù))被選擇為用于成像操作的設(shè)定(步驟S910)。然后，基于第一參數(shù)執(zhí)行成像操作。由成像操作生成的圖像作為圖像內(nèi)容被存儲在內(nèi)容存儲單元290上。當聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果不一致時(步驟S909)，控制單元280執(zhí)行用于利用第二參數(shù)執(zhí)行成像操作的控制(步驟S911)。也就是說，當判定結(jié)果彼此不一致時(步驟S910)，基于圖像信息的相機控制參數(shù)(第二參數(shù))被選擇為用于成像操作的設(shè)定(步驟S911)。然后，基于第二參數(shù)執(zhí)行成像操作。由成像操作生成的圖像作為圖像內(nèi)容被存儲在內(nèi)容存儲單元290上。此外，步驟S909至S911對應(yīng)于所附權(quán)利要求中的用于選擇設(shè)定的過程的示例。例如，當如圖9A和9B中所示奔跑的馬401被包括在成像范圍中時，聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(或基本一致)(步驟S909)。由于此原因，控制單元280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))并且執(zhí)行利用該相機控制參數(shù)(第一參數(shù))執(zhí)行成像操作的控制(步驟S910)。基于聲音信息的相機控制參數(shù)(第一參數(shù))如圖6中所示是被進行了用于提升快門速度的校正(從位置342到位置343的校正)的參數(shù)。例如，當如圖1OA至IOC中所示奔跑的馬401不被包括在成像范圍中時(包括馬生成奔跑聲的情況和馬不生成奔跑聲的情況兩者)，聲音判定單元270的判定結(jié)果不與圖像判定單元250的判定結(jié)果一致(步驟S909)。由于此原因，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用該相機控制參數(shù)(第二參數(shù))執(zhí)行成像操作的控制(步驟S911)。此外，基于圖像信息的相機控制參數(shù)(第二參數(shù))是根據(jù)由圖像判定單元250判定的對象物的類型(草地、山脈)設(shè)定的參數(shù)。例如，當如圖1lA和IlB中所示停歇的馬411被包括在成像范圍中時(同時馬沒有叫)，聲音判定單元270的判定結(jié)果不與圖像判定單元250的判定結(jié)果一致(步驟S909)。由于此原因，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用該相機控制參數(shù)(第二參數(shù))執(zhí)行成像操作的控制(步驟S911)。當聲音獲得單元260如上所述未獲得聲音時，不選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))。此外，在此示例中選擇的基于圖像信息的相機控制參數(shù)(第二參數(shù))是根據(jù)由圖像判定單元250判定的對象物的類型(馬)來設(shè)定的參數(shù)。如上所述，根據(jù)本公開的第一實施例，分析由聲音獲得單元260獲得的聲音和由成像單元220生成的圖像，并且利用分析結(jié)果選擇相機控制參數(shù)。這樣，可以在設(shè)定最佳相機控制參數(shù)的同時執(zhí)行成像操作。例如，當生成聲音的對象物被包括在成像范圍中時，可以在設(shè)定針對該對象物的最佳相機控制參數(shù)的同時執(zhí)行成像操作。這樣，可以在考慮到成像范圍中包括的對象物生成的聲音的情況下，容易地獲得具有真實感的圖像。即使當生成聲音的對象物存在于成像范圍之外時，也可以基于成像范圍中的圖像信息來設(shè)定適當?shù)南鄼C控制參數(shù)。也就是說，可以在考慮到生成聲音的對象物和除了生成聲音的對象物以外的對象物之間的關(guān)系的情況下來適當?shù)剡x擇用于成像操作的設(shè)定。雖然以上描述是對位于山脈前方的馬被例示為生成聲音的對象物的本公開的第一實施例給出的，但本公開的第一實施例也可應(yīng)用到不生成聲音的對象物和生成聲音的對象物都存在的另外狀態(tài)。例如，本公開的第一實施例可應(yīng)用到不生成聲音的對象物存在且生成聲音的對象物存在于不生成聲音的對象物前面的狀態(tài)。例如，本公開的第一實施例可應(yīng)用到機場中的飛機、賽車場中的車輛等等被成像的情況。第二實施例在本公開的第一實施例中，示出了當圖像中包括生成聲音的對象物時考慮到聲音來選擇要用于成像操作的相機控制參數(shù)的示例。然而，還有這樣的情況，其中，即使當圖像中包括生成聲音的對象物時，生成聲音的對象物以外的對象物才是主對象物(例如捕捉圖像的人所聚焦的對象物)。從而，在本公開的第二實施例中，將示出如果圖像中不僅包括生成聲音的對象物而且也包括除生成聲音的對象物以外的對象物，則選擇基于圖像信息的相機控制參數(shù)的示例。此外，根據(jù)本公開的第二實施例的成像裝置的配置與圖1和2中所示的示例中的基本相同。由于此原因，將省略對與本公開的第一實施例中共同的部分的一部分描述。判定多個對象物的示例圖13A和13B是示出根據(jù)本公開的第二實施例的成像單元220生成的圖像430和圖像430的深度圖(cbpth map)之間的關(guān)系的圖。圖13A示出了成像單元220生成的圖像430。圖像430被假設(shè)為是在魚(例如鮭魚)431跳出水中的時刻在瀑布432的瀑布潭附近捕捉的圖像。由于此原因，在圖像430中包括懸浮在空中的魚431。圖13B以直方圖的形式示出了成像單元220生成的圖像430的深度圖。圖13B中所示的直方圖是示出與圖像430中包括的被攝體有關(guān)的被攝體距離的分布狀態(tài)的直方圖。這里，控制單元280基于由成像單元220生成的圖像和圖像生成時的各種信息(例如透鏡位置、聚焦位置)計算與圖像有關(guān)的被攝體距離。例如，控制單元280可生成所謂的深度圖并且基于深度圖獲得與每個區(qū)域有關(guān)的被攝體距離。這里，深度圖是由表示被攝體距離的數(shù)據(jù)構(gòu)成的圖。作為用于生成深度圖的方法，可以使用諸如TOF(飛行時間)方案和模糊量分析(離焦深度)之類的各種方法。例如，TOF方案是基于直到從光源發(fā)射的光被對象物反射并到達傳感器為止的光延遲時間和光的速度來計算到被攝體的距離的方法。當執(zhí)行相位差A(yù)F的成像元件被用作成像元件131時，控制單元280可基于從成像元件輸出的相位差檢測信號來生成深度圖。也就是說，控制單元280獲得與由成像單元220生成的圖像中包括的每個對象物有關(guān)的被攝體距離。此外，控制單元280是所附權(quán)利要求中的被攝體距離獲得單元的示例。例如，圖像430如圖13A中所示包括浮在空中的魚431、存在于魚431后方的瀑布432及其瀑布潭。由于此原因，從成像裝置100到瀑布432和瀑布潭的距離比從成像裝置100到魚431的距離遠。當如上所述在圖像中包括具有不同被攝體距離的多個對象物時，在表示被攝體距離分布狀態(tài)的直方圖中對于每個對象物形成山狀形狀。具體而言，如圖13B中所示，形成了與相對靠近成像裝置100的魚431相對應(yīng)的山狀形狀435和與相對遠離成像裝置100的瀑布432及其瀑布潭相對應(yīng)的山狀形狀436。當如上所述在直方圖中存在多個山狀形狀并且例如有多個山狀形狀等于或大于虛線所示的閾值437時，可以判定存在多個對象物。然而，如果直方圖中的多個山狀形狀對應(yīng)于與存在于遠處位置的對象物有關(guān)的山脈(例如作為背景的山脈)，則可不判定存在多個對象物。例如，當?shù)扔诨虼笥谔摼€所示的閾值438的山狀形狀存在時，可以在不考慮與山狀形狀相對應(yīng)的對象物的存在性的情況下作出判定。以下，將對用于選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))的方法給出描述。根據(jù)本公開的第二實施例，控制單元280利用計算出的被攝體距離和圖像判定單元250的判定結(jié)果選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))。具體而言，當判定存在多個對象物時，控制單元280基于為每個對象物計算的被攝體距離，為每個對象物選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))。即使在這種情況下，也可以利用參數(shù)校正信息存儲單元330上存儲的參數(shù)校正信息來校正基于圖像信息的相機控制參數(shù)(第二參數(shù))。例如，有這樣的情況，即，圖像判定信息存儲單元310以彼此關(guān)聯(lián)的方式存儲“魚”作為對象物的類型311并且存儲程序線圖341中的位置346作為相機控制參數(shù)313。在這種情況下，當圖像判定單元250判定的對象物是魚時，控制單元280選擇與程序線圖341中的位置346相對應(yīng)的相機控制參數(shù)(第二參數(shù))。此外，控制單元280根據(jù)對象物(魚)的被攝體距離來校正如上所述基于圖像信息選擇的相機控制參數(shù)(第二參數(shù))。例如，當被攝體距離較短時，最好提升快門速度。由于此原因，控制單元280選擇其位置346在程序線圖341中的虛線349上移動到左側(cè)的位置347的相機控制參數(shù)(第二參數(shù))。另一方面，例如，當被攝體距離較長時，最好降低快門速度。由于此原因，控制單元280選擇其位置346在程序線圖341中的虛線349上移動到右側(cè)的位置348的相機控制參數(shù)(第二參數(shù))。如上所述，控制單元280可利用程序線圖選擇基于圖像信息的相機控制參數(shù)(光圈值、快門速度、曝光值)。
使用成像裝置的成像狀態(tài)的示例圖14A至15B是簡要示出根據(jù)本公開的第二實施例的由成像裝置100成像的被攝體與成像范圍之間的關(guān)系的圖。圖14A和15A示出了成像裝置100和被攝體的側(cè)視圖。此外，圖14B和15B示出了由成像裝置100成像的被攝體的成像范圍。圖14A和14B示出了當從水中跳出的魚(例如鮭魚)441、瀑布442及其瀑布潭的周邊是被攝體時的被攝體與成像范圍之間的關(guān)系。以下，將基于如下假設(shè)給出描述:在圖14A和14B中所示的示例中，由于成像裝置100與瀑布442之間的距離相對較短，所以聲音獲得單元260能夠獲得瀑布442的流動聲(在圖14A中示為“奔流聲”)。這里，如圖14B中所示，在成像范圍445中不包括魚441，而在成像范圍446中包括從水中跳出的魚441。由于此原因，當成像范圍446被成像單元220成像時，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(瀑布、魚)一致(即，部分一致)。此外，當成像范圍445被成像單元220成像時，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(瀑布)一致。這里，本公開的第一實施例被描述為當基于由聲音獲得單元260獲得的聲音確定的對象物與基于由成像單元220生成的圖像確定的對象物一致時選擇基于聲音信息的相機控制參數(shù)的示例。然而，當成像范圍446被成像單元220成像時，很有可能可對作為主對象物的從水中跳出的魚441而不是作為背景的瀑布442執(zhí)行成像操作。也就是說，假設(shè)基于由成像單元220生成的圖像確定的對象物(魚)比基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)更重要。在這種情況下，擔心例如當僅基于由聲音獲得單元260獲得的聲音來選擇相機控制參數(shù)時,不能對成像范圍446中包括的被攝體的圖像設(shè)定適當?shù)南鄼C控制參數(shù)。從而，本公開的第二實施例將被描述為即使基于聲首確定的對象物與基于圖像確定的對象物一致，當在成像范圍中還存在另一對象物時，則選擇基于圖像信息的相機控制參數(shù)的示例。圖15A和15B示出了當瀑布452及瀑布潭的周邊是被攝體時被攝體與成像范圍之間的關(guān)系。以下，將基于如下假設(shè)給出描述:在圖15A和15B中所示的示例中，由于成像裝置100與瀑布452之間的距離相對較短，所以聲音獲得單元260能夠獲得瀑布452的流動聲(在圖15A中表示為“奔流聲”)。這里，如圖15B中所示，在成像范圍455中包括瀑布452。在這種情況下，可以按與圖14B中所示的成像范圍445中相同的方式選擇相機控制參數(shù)。被攝體與相機控制參數(shù)之間的關(guān)系的示例圖16A至18B是示出根據(jù)本公開的第二實施例的成像單元220生成的圖像與控制單元280選擇的相機控制參數(shù)之間的關(guān)系的圖。這里，圖16A中所示的圖像461是與圖14B中所示的成像范圍446相對應(yīng)的圖像。此外，圖17A中所示的圖像462是與圖14B中所示的成像范圍445相對應(yīng)的圖像。另外，圖18A中所示的圖像463是與圖15B中所示的成像范圍455相對應(yīng)的圖像。如圖16B中所示，在對圖16A中所示的圖像461的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(魚、瀑布)一致(部分一致)。然而，在成像單元220生成的圖像中包括與不同于與一致對象物(瀑布)有關(guān)的被攝體距離(長)的被攝體距離(短)有關(guān)的另一對象物(魚)。在這種情況下，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))作為用于成像操作的設(shè)定。如圖17B中所示，在對圖17A中所示的圖像462的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(瀑布)一致。此外，在成像單元220生成的圖像中不包括另一對象物，該另一對象物與不同于與一致對象物(瀑布)有關(guān)的被攝體距離的被攝體距離有關(guān)。在這種情況下，控制單元280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))作為用于成像操作的設(shè)定。如圖18B中所示，在對圖18A中所示的圖像463的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(瀑布)一致。此外，在成像單元220生成的圖像中不包括與不同于與一致對象物(瀑布)有關(guān)的被攝體距離的被攝體距離有關(guān)的另一對象物。在這種情況下，控制單元280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))作為用于成像操作的設(shè)定。如上所述，控制單元280基于在成像單元220生成的圖像中是否包括與不同于與第一對象物有關(guān)的被攝體距離的被攝體距離有關(guān)的另一對象物來選擇相機控制參數(shù)。成像裝置的操作示例圖19是示出根據(jù)本公開的第二實施例的成像裝置100進行的相機控制參數(shù)決定處理的處理過程的示例的流程圖。由于圖19示出了圖12的修改例，所以將對與圖12中共同的組件給予相同的標號，并且將省略一部分描述。在判定成像單元220生成的圖像中包括的對象物的類型之后(步驟S907)，控制單元280計算成像范圍中包括的每個對象物的被攝體距離(步驟S921)。隨后，控制單元280基于計算出的被攝體距離和圖像判定單元250的判定結(jié)果選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))(步驟S922)。當聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(或基本一致)時(步驟S909)，控制單元280判定在成像范圍中是否存在除了一致對象物以外的對象物(步驟S923)。當在成像范圍中不存在除了一致對象物以外的對象物時(步驟S923)，控制單元280執(zhí)行用于利用第一參數(shù)執(zhí)行成像操作的控制(步驟S910)。另一方面，當在成像范圍中存在除了一致對象物以外的對象物時(步驟S923)，控制單元280執(zhí)行用于利用第二參數(shù)執(zhí)行成像操作的控制(步驟S911)。當例如如圖9A中所示奔跑的馬401被包括在成像范圍中時，聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(基本一致)(步驟S909)。此外，由于奔跑的馬401的背景(草地、山脈)如上所述不被判定為另一對象物，所以不存在除奔跑的馬401以外的對象物(步驟S923)。由于此原因，控制單元280以與本公開的第一實施例中相同的方式選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第一參數(shù))來執(zhí)行成像操作的控制(步驟S910)?；诼曇粜畔⒌南鄼C控制參數(shù)(第一參數(shù))是如圖6中所示的被執(zhí)行了用于提升快門速度的校正(從位置342到位置343的校正)的參數(shù)。當例如如圖1OA中所示奔跑的馬401未被包括在成像范圍中時(包括兩種情況:包括馬奔跑聲的情況和不包括馬奔跑聲的情況)，聲音判定單元270的判定結(jié)果不與圖像判定單元250的判定結(jié)果一致(步驟S909)。由于此原因，控制單元280以與本公開的第一實施例中相同的方式選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第二參數(shù))來執(zhí)行成像操作的控制。這里，根據(jù)本公開的第二實施例選擇的基于圖像信息的相機控制參數(shù)(第二參數(shù))是根據(jù)由圖像判定單元250判定的與對象物(草地、山脈)有關(guān)的被攝體距離來設(shè)定的參數(shù)。當例如如圖1lA中所示停歇的馬411被包括在成像范圍中(同時馬沒有叫)時，聲音判定單元270的判定結(jié)果不與圖像判定單元250的判定結(jié)果一致(步驟S909)。由于此原因，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第二參數(shù))來執(zhí)行成像操作的控制(步驟S911)。這里，根據(jù)本公開的第二實施例選擇的基于圖像信息的相機控制參數(shù)(第二參數(shù))是根據(jù)由圖像判定單元250判定的與對象物(馬)有關(guān)的被攝體距離來設(shè)定的參數(shù)。當例如如圖16A中所示瀑布442被包括在成像范圍中時，聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(部分一致)(步驟S909)。然而，如上所述，判定出存在除了瀑布442以外的對象物(魚441)(步驟S923)。由于此原因，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第二參數(shù))來執(zhí)行成像操作的控制(步驟S911)。由于在圖16A和16B中所示的示例中存在兩個對象物，因此兩個參數(shù)(基于魚441的參數(shù)和基于瀑布442及其瀑布潭的參數(shù))被決定為基于圖像信息的相機控制參數(shù)(第二參數(shù))。例如，基于魚441的參數(shù)是如圖6中所示被執(zhí)行了用于提升快門速度的校正(從位置346到位置347的校正)的參數(shù)。另一方面，基于瀑布442和瀑布潭的參數(shù)是如圖6中所示被執(zhí)行了用于降低快門速度的校正(從位置346到位置348的校正)的參數(shù)。由于如上所述兩個參數(shù)被選擇為基于圖像信息的相機控制參數(shù)(第二參數(shù))，所以控制單元280執(zhí)行用于利用這些參數(shù)中的任何一個來執(zhí)行成像操作的控制(步驟S911)。在位于成像范圍的中心的對象物被視為主對象物的設(shè)定的情況下，控制單元280執(zhí)行用于利用基于魚441的參數(shù)來執(zhí)行成像操作的控制。當例如如圖17A中所示只有瀑布442被包括在成像范圍中時，聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(步驟S909)。由于不存在除了瀑布442 (包括其瀑布潭)以外的對象物，所以判定不存在多個對象物(步驟S923)。由于此原因，控制單兀280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第一參數(shù))來執(zhí)行成像操作的控制(步驟S910)。由于圖18A和18B中所示的示例與圖17A和17B相同，這里將省略描述。如上所述，根據(jù)本公開的第二實施例，當不僅包括生成聲音的對象物，而且包括除了生成聲音的對象物以外的對象物時，選擇基于圖像信息的相機控制參數(shù)。這樣，即使當除了生成聲音并且也被包括在圖像中的對象物以外的對象物是主對象物時，也可以針對主對象物設(shè)定最佳的相機控制參數(shù)并且執(zhí)行成像操作。也就是說，可以在考慮到生成聲音的對象物和除了生成聲音的對象物以外的對象物之間的關(guān)系的情況下適當?shù)剡x擇用于成像操作的設(shè)定。雖然本公開的第二實施例在以上被描述為位于魚后方的瀑布是生成聲音的對象物的示例，但本公開的第二實施例可應(yīng)用到如下的另外狀態(tài):生成聲音的對象物存在于背景中，并且另一對象物存在于生成聲音的對象物前方。例如，本公開的第二實施例可應(yīng)用到如下狀態(tài):大量觀眾存在于在舞臺上存在的對象物(其不生成聲音)的后方，并且這大量觀眾生成聲音。第三實施例本公開的第一實施例被描述為在圖像中包括生成聲音的對象物時考慮到聲音來選擇用于成像操作的相機控制參數(shù)的示例。然而，即使當圖像中包括生成聲音的對象物(不是人)時，如果圖像中包括人，則也有該人是主對象物的情況。從而，本公開的第三實施例將被描述為如下示例:即使當圖像中包括生成聲音的對象物(不是人)時，如果圖像中包括人，則基于圖像信息的相機控制參數(shù)被用于成像操作。此外，根據(jù)本公開的第三實施例的成像裝置的配置與圖1和2中所示的示例基本相同。由于此原因，將省略與本公開的第一實施例中共同的組件的一部分描述。使用成像裝置的成像狀態(tài)的示例圖20A和20B是簡要示出根據(jù)本公開的第三實施例的成像裝置100要成像的被攝體與成像范圍之間的關(guān)系的圖。圖20A示出了成像裝置100和被攝體的側(cè)視圖。此外，圖20B示出了成像裝置100要成像的被攝體的成像范圍。圖20A和20B示出了當站在瀑布472前方的人471和瀑布472的周邊(瀑布潭和河)是被攝體時的被攝體與成像范圍之間的關(guān)系。將基于如下假設(shè)給出描述:在圖20A和20B中所示的示例中，由于成像裝置100與瀑布472之間的距離相對較短，所以聲音獲得單元260能夠獲得瀑布472的流動聲(在圖20A中表示為“奔流聲”)。這里，如圖20B中所示，瀑布472未被包括在成像范圍475中，而瀑布472被包括在成像范圍476和477中。因為此原因，由于成像范圍476被成像單元220成像，所以基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(人、瀑布)一致(即，部分一致)。此外，當成像范圍477被成像單元220成像時，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(瀑布)一致。這里，本公開的第一實施例被描述為當基于由聲音獲得單元260獲得的聲音確定的對象物與基于由成像單元220生成的圖像確定的對象物一致時選擇基于聲音信息的相機控制參數(shù)的示例。然而，可以認為很有可能當成像范圍476被成像單元220成像時，可能在站在背景中的瀑布472前方的人471被視為主對象物的同時執(zhí)行成像操作。也就是說，可以認為基于由成像單元220生成的圖像確定的對象物(人)比基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)更重要。在這種情況下，擔心例如當僅基于由聲音獲得單元260獲得的聲音來選擇相機控制參數(shù)時，對于成像范圍476中包括的被攝體的圖像，不能設(shè)定適當?shù)南鄼C控制參數(shù)。從而，本公開的第三實施例將被描述為如下示例:即使當基于聲音確定的對象物與基于圖像確定的對象物一致時，如果在成像范圍中有人，則選擇基于圖像信息的相機控制參數(shù)。在成像范圍475中包括人471。即使在這種情況下，也以相同的方式選擇基于圖像信息的相機控制參數(shù)。被攝體與相機控制參數(shù)之間的關(guān)系的示例
圖21A至23B是示出根據(jù)本公開的第三實施例的成像單元220生成的圖像與控制單元280選擇的相機控制參數(shù)之間的關(guān)系的圖。圖21A中所示的圖像481是與圖20B中所示的成像范圍476相對應(yīng)的圖像。此外，圖22A中所示的圖像482是與圖20B中所示的成像范圍475相對應(yīng)的圖像。另外，圖23A中所示的圖像483是與圖20B中所示的成像范圍477相對應(yīng)的圖像。如圖21B中所示，在對圖21A中所示的圖像481的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(人、瀑布)一致(部分一致)。然而，在成像單元220生成的圖像中包括人471的臉。在這種情況下，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))作為用于成像操作的設(shè)定。如圖22B中所示，在對圖22A中所示的圖像482的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(人、山脈)不一致。在這種情況下，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))作為用于成像操作的設(shè)定。如圖23B中所示，在對圖23A中所示的圖像483的成像操作期間，基于由聲音獲得單元260獲得的聲音確定的對象物(瀑布)與基于由成像單元220生成的圖像確定的對象物(瀑布)一致。此外，在成像單元220生成的圖像中不包括人臉。在這種情況下，控制單元280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))作為用于成像操作的設(shè)定。如上所述，控制單元280基于在成像單元220生成的圖像中是否包括特定對象物(例如人臉)來選擇相機控制參數(shù)。成像裝置的操作示例圖24是示出根據(jù)本公開的第三實施例的成像裝置100進行的相機控制參數(shù)決定處理的處理過程的示例的流程圖。由于圖24示出了圖12的修改例，所以將對與圖12中共同的組件給予相同的標號，并且將省略一部分描述。當聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(或基本一致)時(步驟S909)，控制單元280判定在成像范圍中是否存在人(人臉)(步驟S931)。當在成像范圍中不存在人(人臉)時(步驟S931)，控制單元280執(zhí)行用于利用第一參數(shù)執(zhí)行成像操作的控制(步驟S910)。另一方面，當在成像范圍中存在人(人臉)時(步驟S931)，控制單元280執(zhí)行用于利用第二參數(shù)執(zhí)行成像操作的控制(步驟S911)。在圖9A至IlB中所示的示例中執(zhí)行與本公開的第一實施例中相同的決定處理，因為在成像范圍中不包括人。類似地，在圖16A至18B中所示的示例中執(zhí)行與本公開的第二實施例中相同的決定處理，因為在成像范圍中不包括人。當例如如圖21A中所示瀑布472被包括在成像范圍中時，聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(部分一致)(步驟S909)。然而，如上所述判定在成像范圍中存在人471 (步驟S931)。由于此原因，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第二參數(shù))來執(zhí)行成像操作的控制(步驟S911)。在這種情況下，控制單元280執(zhí)行用于利用基于人471的參數(shù)(例如利用被攝體信息選擇的參數(shù))來執(zhí)行成像操作的控制(步驟S911)。
當例如如圖22A中所示瀑布472未被包括在成像范圍中時，聲音判定單元270的判定結(jié)果不與圖像判定單元250的判定結(jié)果一致(步驟S909)。由于此原因，控制單元280選擇基于圖像信息的相機控制參數(shù)(第二參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第二參數(shù))來執(zhí)行成像操作的控制(步驟S911)。即使在這種情況下，控制單元280也執(zhí)行用于利用基于人471的參數(shù)來執(zhí)行成像操作的控制(步驟S911)。當例如如圖23A中所示瀑布472被包括在成像范圍中時，聲音判定單元270的判定結(jié)果與圖像判定單元250的判定結(jié)果一致(部分一致)(步驟S909)。在這種情況下，判定在成像范圍中不存在人471 (步驟S931)。由于此原因，控制單元280選擇基于聲音信息的相機控制參數(shù)(第一參數(shù))并且執(zhí)行用于利用相機控制參數(shù)(第一參數(shù))來執(zhí)行成像操作的控制(步驟S910)。如上所述，根據(jù)本公開的第三實施例，即使當圖像中包括生成聲音的對象物時，如果在圖像中包括人，則也選擇基于圖像信息的相機控制參數(shù)。這樣，即使當在圖像中包括生成聲音的對象物的情況下人是主對象物時，也可以針對人設(shè)定最佳的相機控制參數(shù)并且執(zhí)行成像操作。也就是說，可以考慮到生成聲音的對象物與除了生成聲音的對象物以外的對象物之間的關(guān)系來適當?shù)剡x擇用于成像操作的設(shè)定。本公開的上述實施例被描述為利用聲音判定單元270的判定結(jié)果(例如對象物的速度)來校正基于由聲音判定單元270判定的對象物選擇的參數(shù)的示例。然而，可以利用圖像判定單元250的判定結(jié)果(例如對象物的速度)來校正基于由聲音判定單元270判定的對象物選擇的參數(shù)。此外，本公開的上述實施例被描述為利用圖像判定單元250的判定結(jié)果(例如對象物的速度)或被攝體距離(對象物的被攝體距離)來校正基于由圖像判定單元250判定的對象物選擇的參數(shù)的示例。然而，可以利用聲音判定單元270的判定結(jié)果(例如對象物的速度或被攝體距離)來校正基于由圖像判定單元250判定的對象物選擇的參數(shù)。此外，控制單元280可基于由聲音獲得單元260獲得的周邊聲音和由成像單元220生成的圖像來通過另外的決定方法選擇設(shè)定(用于成像單元220的成像操作的設(shè)定)。例如，當聲音判定單元270判定煙花聲音時，控制單元280可將基于由圖像判定單元250判定的對象物選擇的參數(shù)校正為對于煙花最佳的參數(shù)。例如，當聲音判定單元270判定煙花聲音時，控制單元280可將煙花模式設(shè)定為成像模式并且在設(shè)定煙花模式的同時基于由圖像判定單元250判定的對象物設(shè)定最佳參數(shù)。這樣，當對順次發(fā)射的煙花成像時，通過使快門按鈕171保持在半按狀態(tài)中，可以容易地設(shè)定針對煙花的最佳參數(shù)。此外，本公開的上述實施例被描述為從對快門按鈕171執(zhí)行半按操作的時刻到執(zhí)行全按操作的時刻的時段被視為聲音判定時段并且在其期間對快門按鈕171執(zhí)行全按操作的時段被視為圖像判定時段的示例。然而，通過將在其期間設(shè)定靜止圖像捕捉模式的時段視為聲音判定時段和圖像判定時段，可以順次執(zhí)行聲音判定處理和圖像判定處理。此外，聲音判定時段和圖像判定時段可被定期或不定期地設(shè)定，或者在成像操作期間被設(shè)定在能夠在其期間設(shè)定相機控制參數(shù)的另一時段中。雖然本公開的實施例被描述為光圈值、快門速度和曝光值被決定為相機控制參數(shù)的示例，但本公開的實施例可應(yīng)用到選擇另外的相機控制參數(shù)的情況。例如，根據(jù)對象物的最佳成像參數(shù)和最佳圖像處理參數(shù)可被預(yù)先存儲為與每個對象物相關(guān)聯(lián)，并且用于成像操作的設(shè)定可利用每個參數(shù)來選擇。雖然本公開的實施例被描述為成像裝置100設(shè)有成像單元的示例，但本公開的實施例可應(yīng)用到具有可脫離的成像單元的信息處理裝置。此外，本公開的實施例可應(yīng)用到諸如具有成像功能的移動電話或具有成像功能的移動終端設(shè)備之類的信息處理裝置。上述實施例是用于實現(xiàn)本公開的說明性示例，并且實施例中的項目與所附權(quán)利要求中的發(fā)明項目具有對應(yīng)關(guān)系。類似地，所附權(quán)利要求中的發(fā)明項目與本公開的實施例中以相同方式指稱的項目具有對應(yīng)關(guān)系。然而，本公開不限于這些實施例，而是可通過在不脫離本公開的范圍的情況下對實施例添加各種修改來實現(xiàn)。此外，上述實施例中描述的處理過程可被理解為包括該系列過程的方法，或者可被理解為用于使得計算機執(zhí)行該系列過程的程序或其上存儲該程序的記錄介質(zhì)。作為記錄介質(zhì)，可以使用CD (致密盤)、MD (袖珍盤)、DVD (數(shù)字多功能盤)、存儲卡、藍光盤(注冊商標)等等。另外，本公開可被配置如下。(I) 一種信息處理裝置，包括:控制單元，被配置為執(zhí)行用于基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于所述成像單元的成像操作的設(shè)定的控制。(2)根據(jù)⑴所述的信息處理裝置，還包括:第一判定單元，被配置為基于由所述聲音獲得單元獲得的周邊聲音來判定生成聲音的對象物；以及第二判定單元，被配置為基于由所述成像單元生成的圖像來判定所述圖像中包括的對象物，其中，所述控制單元被配置為基于所述第一判定單元的判定結(jié)果和所述第二判定單元的判定結(jié)果來選擇所述設(shè)定。(3)根據(jù)(2)所述的信息處理裝置，其中，所述控制單元被配置為基于作為由所述第一判定單元判定的對象物的第一對象物和作為由所述第二判定單元判定的對象物的第二對象物之間的比較結(jié)果來選擇所述設(shè)定。(4)根據(jù)(3)所述的信息處理裝置，其中，所述控制單元被配置為基于所述第一對象物來選擇作為與所述設(shè)定有關(guān)的參數(shù)的第一參數(shù)，基于所述第二對象物來選擇作為與所述設(shè)定有關(guān)的參數(shù)的第二參數(shù)，并且基于所述第一對象物是否與所述第二對象物一致來利用所述第一參數(shù)和所述第二參數(shù)中的任何一個選擇所述設(shè)定。(5)根據(jù)(4)所述的信息處理裝置，其中，所述控制單元被配置為當所述第一對象物與所述第二對象物一致時利用所述第一參數(shù)選擇所述設(shè)定，并且當所述第一對象物與所述第二對象物不一致時利用所述第二參數(shù)選擇所述設(shè)定。(6)根據(jù)(4)或(5)所述的信息處理裝置，其中，所述第一判定單元被配置為判定與所述第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個以及所述第一對象物，并且所述控制單元被配置為基于與所述第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正所述第一參數(shù)。(7)根據(jù)(4)至(6)的任何一個所述的信息處理裝置，其中，所述第二判定單元被配置為判定與所述第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個以及所述第二對象物，并且所述控制單元被配置為基于與所述第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正所述第二參數(shù)。(8)根據(jù)(4)至(7)的任何一個所述的信息處理裝置，還包括:被攝體距離獲得單元，被配置為獲得與由所述成像單元生成的圖像中包括的每個對象物有關(guān)的被攝體距離，其中所述控制單元被配置為基于在由所述成像單元生成的圖像中是否包括與不同于與所述第一對象物有關(guān)的被攝體距離的被攝體距離有關(guān)的另一對象物，來利用所述第一參數(shù)和所述第二參數(shù)中的任何一個選擇所述設(shè)定。(9)根據(jù)(4)至(7)的任何一個所述的信息處理裝置，其中所述第二判定單元被配置為判定在由所述成像單元生成的圖像中是否包括特定對象物，并且其中所述控制單元被配置為基于在由所述成像單元生成的圖像中是否包括所述特定對象物，來利用所述第一參數(shù)和所述第二參數(shù)中的任何一個選擇所述設(shè)定。(10)根據(jù)(9)所述的信息處理裝置，其中，所述第二判定單元被配置為判定是否包括作為所述特定對象物的人臉。(11) 一種成像裝置，包括:聲音獲得單元，被配置為獲得周邊聲音；成像單元，被配置為對被攝體成像并且生成圖像；以及控制單元，被配置為執(zhí)行用于基于由所述聲音獲得單元獲得的周邊聲音和由所述成像單元生成的圖像來選擇用于所述成像單元的成像操作的設(shè)定的控制。(12) 一種信息處理方法，包括:獲得來自信息處理裝置的周邊的聲音；獲得由成像單元生成的圖像；以及基于所獲得的聲音和所獲得的圖像來選擇用于所述成像單元的成像操作的設(shè)定。(13) 一種程序，使得計算機:獲得來自信息處理裝置的周邊的聲音；獲得由成像單元生成的圖像；以及基于所獲得的聲音和所獲得的圖像來選擇用于所述成像單元的成像操作的設(shè)定。本公開包含與2011年11月21日向日本專利局提交的日本優(yōu)先權(quán)專利申請JP2011-253547中公開的主題相關(guān)的主題，特此通過引用將該申請的全部內(nèi)容并入。本領(lǐng)域的技術(shù)人員應(yīng)當理解，取決于設(shè)計要求和其他因素，可以進行各種修改、組合、子組合和變更，只要它們處于所附權(quán)利要求或其等同物的范圍之內(nèi)即可。
權(quán)利要求
1.一種信息處理裝置，包括: 控制單元，被配置為執(zhí)行用于基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于所述成像單元的成像操作的設(shè)定的控制。
2.根據(jù)權(quán)利要求1所述的信息處理裝置，還包括: 第一判定單元，被配置為基于由所述聲音獲得單元獲得的周邊聲音來判定生成聲音的對象物；以及 第二判定單元，被配置為基于由所述成像單元生成的圖像來判定所述圖像中包括的對象物， 其中，所述控制單元被配置為基于所述第一判定單元的判定結(jié)果和所述第二判定單元的判定結(jié)果來選擇所述設(shè)定。
3.根據(jù)權(quán)利要求2所述的信息處理裝置， 其中，所述控制單元被配置為基于作為由所述第一判定單元判定的對象物的第一對象物和作為由所述第二判定單元判定的對象物的第二對象物之間的比較結(jié)果來選擇所述設(shè) 定。
4.根據(jù)權(quán)利要求3所述的信息處理裝置， 其中，所述控制單元被配置為基于所述第一對象物來選擇作為與所述設(shè)定有關(guān)的參數(shù)的第一參數(shù)，基于所述第二對象物來選擇作為與所述設(shè)定有關(guān)的參數(shù)的第二參數(shù)，并且基于所述第一對象物是否與所述第二對象物一致來利用所述第一參數(shù)和所述第二參數(shù)中的任何一個選擇所述設(shè)定。
5.根據(jù)權(quán)利要求4所述的信息處理裝置， 其中，所述控制單元被配置為當所述第一對象物與所述第二對象物一致時利用所述第一參數(shù)選擇所述設(shè)定，并且當所述第一對象物與所述第二對象物不一致時利用所述第二參數(shù)選擇所述設(shè)定。
6.根據(jù)權(quán)利要求4所述的信息處理裝置， 其中，所述第一判定單元被配置為判定與所述第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個以及所述第一對象物，并且 其中，所述控制單元被配置為基于與所述第一對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正所述第一參數(shù)。
7.根據(jù)權(quán)利要求4所述的信息處理裝置， 其中，所述第二判定單元被配置為判定與所述第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個以及所述第二對象物，并且 其中，所述控制單元被配置為基于與所述第二對象物有關(guān)的移動狀態(tài)和被攝體距離中的至少一個來校正所述第二參數(shù)。
8.根據(jù)權(quán)利要求4所述的信息處理裝置，還包括: 被攝體距離獲得單元，被配置為獲得與由所述成像單元生成的圖像中包括的每個對象物有關(guān)的被攝體距離， 其中，所述控制單元被配置為基于在由所述成像單元生成的圖像中是否包括與不同于與所述第一對象物有關(guān)的被攝體距離的被攝體距離有關(guān)的另一對象物，來利用所述第一參數(shù)和所述第二參數(shù)中的任何一個選擇所述設(shè)定。
9.根據(jù)權(quán)利要求4所述的信息處理裝置， 其中，所述第二判定單元被配置為判定在由所述成像單元生成的圖像中是否包括特定對象物，并且 其中，所述控制單元被配置為基于在由所述成像單元生成的圖像中是否包括所述特定對象物，來利用所述第一參數(shù)和所述第二參數(shù)中的任何一個選擇所述設(shè)定。
10.根據(jù)權(quán)利要求9所述的信息處理裝置， 其中，所述第二判定單元被配置為判定是否包括作為所述特定對象物的人臉。
11.一種成像裝置，包括: 聲音獲得單元，被配置為獲得周邊聲音； 成像單元，被配置為對被攝體成像并且生成圖像；以及 控制單元，被配置為執(zhí)行用于基于由所述聲音獲得單元獲得的所述周邊聲音和由所述成像單元生成的所述圖像來選擇用于所述成像單元的成像操作的設(shè)定的控制。
12.—種信息處理方法,包括: 獲得來自信息處理裝置的周邊的聲音； 獲得由成像單元 生成的圖像；以及 基于所獲得的聲音和所獲得的圖像來選擇用于所述成像單元的成像操作的設(shè)定。
13.一種程序，使得計算機: 獲得來自信息處理裝置的周邊的聲音； 獲得由成像單元生成的圖像；以及 基于所獲得的聲音和所獲得的圖像來選擇用于所述成像單元的成像操作的設(shè)定。
全文摘要
本發(fā)明公開了信息處理裝置、成像裝置、信息處理方法和程序。一種信息處理裝置包括控制單元，該控制單元被配置為執(zhí)行用于基于由聲音獲得單元獲得的周邊聲音和由成像單元生成的圖像來選擇用于成像單元的成像操作的設(shè)定的控制。
文檔編號H04N5/232GK103139466SQ20121045902
公開日2013年6月5日 申請日期2012年11月14日 優(yōu)先權(quán)日2011年11月21日
發(fā)明者石川拓也 申請人:索尼公司