變換或差分編碼等的技術(shù)來對從傳感器信號處理單元103輸出的RAW圖像的數(shù)據(jù)進行高效率編碼,將該數(shù)據(jù)轉(zhuǎn)換成壓縮RAW文件,并且將該RAW文件存儲在緩沖單元(存儲介質(zhì))115中??梢詫AW文件存儲在緩沖單元115中并且可以再次讀取所存儲的RAW文件。然而,RAW文件在被存儲在緩沖單元115中之后,可以被移動并存儲在另一存儲介質(zhì)中(可以將RAW文件從緩沖單元115刪除)。
[0043]利用記錄再現(xiàn)單元151將RAW文件以及上述的靜止圖像文件和運動圖像文件存儲在存儲介質(zhì)152中。存儲介質(zhì)152可以是內(nèi)置型大容量半導(dǎo)體存儲器、硬盤或可移除存儲卡等。記錄再現(xiàn)單元151可以從存儲介質(zhì)152讀取這些靜止圖像文件、運動圖像文件和RAW文件。
[0044]記錄再現(xiàn)單元151可以經(jīng)由通信單元153來相對于外部存儲器或服務(wù)器進行各種文件的寫入和讀取。通信單元153可以通過使用通信端子154來經(jīng)由無線或有線通信訪問因特網(wǎng)或外部裝置。
[0045]在開始再現(xiàn)操作的情況下,記錄再現(xiàn)單元151從存儲介質(zhì)152或經(jīng)由通信單元153獲取期望文件并再現(xiàn)該文件。如果要再現(xiàn)的文件是RAW文件,則記錄再現(xiàn)單元151將所獲取到的RAW文件存儲在緩沖單元115中。如果要再現(xiàn)的文件是靜止圖像文件,則記錄再現(xiàn)單元151將所獲取到的靜止圖像文件供給至靜止圖像解壓縮單元143。如果要再現(xiàn)的文件是運動圖像文件,則記錄再現(xiàn)單元151將所獲取到的運動圖像文件供給至運動圖像解壓縮單元144。
[0046]RAff解壓縮單元114讀取緩沖單元115中所存儲的RAW文件并且對壓縮后的RAW文件進行解碼和解壓縮。將RAW解壓縮單元114進行解壓縮后的RAW文件供給至顯像單元110并且輸入至顯像單元110中的簡單顯像單元111或高質(zhì)量圖像顯像單元112。
[0047]靜止圖像解壓縮單元143對所輸入的靜止圖像文件進行解碼和解壓縮并且將該文件作為要再現(xiàn)的靜止圖像供給至顯示處理單元122。運動圖像解壓縮單元144對所輸入的運動圖像文件進行解碼和解壓縮并且將該文件作為要再現(xiàn)的運動圖像供給至顯示處理單元122。
[0048]接著,參考附圖來詳細說明根據(jù)本典型實施例的攝像設(shè)備100的操作模式。圖2是示出攝像設(shè)備100的操作模式的轉(zhuǎn)變的狀態(tài)轉(zhuǎn)變圖。根據(jù)經(jīng)由操作單元162所輸入的用戶操作指示或控制單元161所進行的控制操作來進行這些模式的轉(zhuǎn)變。另外,基于操作來手動或自動進行這些模式的轉(zhuǎn)變。如圖2所示,適當?shù)厍袚Q靜止圖像拍攝模式(201)、靜止圖像再現(xiàn)模式(202)、運動圖像拍攝模式(203)和運動圖像再現(xiàn)模式(204)這四個模式。攝像設(shè)備100經(jīng)由空閑狀態(tài)(200)以這些模式其中之一進行工作。
[0049]接著,將說明攝像設(shè)備100的靜止圖像拍攝模式的操作。
[0050]圖3是示出根據(jù)本典型實施例的靜止圖像拍攝模式的處理的流程圖。圖3的流程圖示出控制單元161控制各處理塊的情況下所進行的處理過程。更具體地,在控制單元161將控制單元161的只讀存儲器(ROM)中所存儲的程序展開至隨機存取存儲器(RAM)并執(zhí)行該程序的情況下,進行該處理過程。
[0051]在圖3中,在步驟S300中,開始靜止圖像拍攝模式的處理。接著,在步驟S301中,控制單元161判斷攝像設(shè)備100的處理負荷是否低。如果控制單元161判斷為處理負荷低(步驟S301中為“是”),則操作進入步驟S320,并且攝像設(shè)備100以與負荷狀態(tài)相對應(yīng)的頻率轉(zhuǎn)變?yōu)榭臻e狀態(tài)。否則(步驟S301中為“否”),操作進入步驟S302。例如,在高速連續(xù)攝像操作期間,處理負荷高。因而,在這種情況下,操作不是進入步驟S320而是始終進入步驟S302。在進行正常單次攝像操作的情況下,在第一拍攝操作和第二拍攝操作之間,例如這些操作中的一半操作進入步驟S320。
[0052]在步驟S302中,照相機控制單元104控制攝像光學(xué)單元101和圖像傳感器單元102的操作,以使得在適當?shù)臈l件下進行攝像。例如,根據(jù)針對變焦或調(diào)焦的用戶指示來移動攝像光學(xué)單元101中所包括的透鏡。另外,根據(jù)與要拍攝的像素數(shù)有關(guān)的指示來設(shè)置圖像傳感器單元102所讀取的區(qū)域。另外,基于從如以下所述的評價值計算單元105和識別單元131所供給的評價值信息和被攝體信息來進行針對特定被攝體的諸如焦點調(diào)節(jié)和追蹤控制等的控制操作。
[0053]在步驟S303中,傳感器信號處理單元103對圖像傳感器單元102所獲得的轉(zhuǎn)換得到的電氣信號進行像素恢復(fù)所用的信號處理。即,通過使用相鄰像素的值,傳感器信號處理單元103對缺失像素和低可靠性像素的值進行插值。另外,傳感器信號處理單元103減去預(yù)定偏移值。在本典型實施例中,將在步驟S303之后從傳感器信號處理單元103輸出的圖像信息稱為表示原始(未顯像)圖像的RAW圖像。
[0054]接著,在步驟S304中,簡單顯像單元111對RAW圖像進行顯像。在該步驟S304中,控制單元161切換顯像單元110內(nèi)的開關(guān)單元121以選擇簡單顯像單元111進行了顯像的圖像信息的輸出。
[0055]簡單顯像單元111對RAW圖像進行去拜爾處理(去馬賽克處理)、即顏色插值處理,將該RAW圖像轉(zhuǎn)換成亮度信號和色差(或原色)信號,去除各信號中所包含的噪聲,校正光學(xué)失真,并且使該圖像最優(yōu)化。即,簡單顯像單元111進行所謂的顯像處理。接著,將說明簡單顯像單元111所進行的顯像處理(簡單顯像)。通過相比高質(zhì)量圖像顯像單元112所進行的處理、以更少的量進行處理,簡單顯像單元111實現(xiàn)了更快且更為簡單的顯像處理。例如,簡單顯像單元111將顯像后的圖像大小限制為200萬個像素以下??蛇x地,簡單顯像單元111僅進行針對噪聲去除或光學(xué)失真校正的有限處理、或者省略進行該處理。由于簡單顯像單元111對縮小后的圖像大小進行處理或進行有限的顯像處理,因此例如攝像設(shè)備100可以利用更小的電路規(guī)模和更少的電力消耗來實現(xiàn)200萬個像素且60幀/秒的攝像操作。
[0056]將簡單顯像單元111進行了顯像的圖像信息供給至評價值計算單元105。在步驟S305中,評價值計算單元105基于圖像信息中所包括的亮度值和對比度值等來計算諸如表示聚焦狀態(tài)和曝光狀態(tài)的評價值等的評價值。評價值計算單元105可以獲取未顯像的RAW圖像并且以相同方式根據(jù)該RAW圖像計算評價值。
[0057]另外,還將簡單顯像單元111進行了顯像的圖像信息供給至識別單元131。在步驟S306中,識別單元131根據(jù)該圖像信息檢測被攝體(例如,面部)并且識別被攝體信息。例如,識別單元131檢測該圖像信息內(nèi)的面部的有無。如果存在面部,則識別單元131檢測該面部的位置,對特定人進行認證,并且將該結(jié)果作為信息輸出。
[0058]另外,還將簡單顯像單元111進行了顯像的圖像信息供給至顯示處理單元122。在步驟S307中,顯示處理單元122根據(jù)所獲取到的圖像信息形成顯示圖像并將該顯示圖像輸出至顯示單元123或外部顯示裝置以顯示該圖像。在靜止圖像拍攝模式中,將顯示單元123所呈現(xiàn)的顯示圖像用于實時取景顯示(通過鏡頭圖像),以使得用戶可以適當?shù)貙Ρ粩z體進行取景??梢詫@示圖像從顯示處理單元122經(jīng)由視頻輸出端子124發(fā)送至諸如外部電視等的其它顯示裝置,以使得該顯示裝置可以顯示該顯示圖像。另外,通過使用從評價值計算單元105和識別單元131所供給的評價值信息和被攝體信息,顯示處理單元122例如可以在顯示圖像上的聚焦區(qū)域上呈現(xiàn)標記并且在所識別出的面部位置上呈現(xiàn)框。
[0059]在步驟S308中,控制單元161判斷是否從用戶輸入了針對攝像操作的指示。如果從用戶輸入了該指示(步驟S308中為“是”),則操作進入步驟S310。否則(步驟S308中為“否”),操作返回至步驟S301,并且重復(fù)針對攝像操作的準備操作和實時取景顯示。
[0060]如果控制單元161判斷為輸入了針對攝像操作的指示(步驟S308中為“是”),則將通過簡單顯像單元111的顯像處理所獲得的圖像信息供給至靜止圖像壓縮單元141。即,在步驟S310中,靜止圖像壓縮單元141對所獲取到的圖像信息進行高效率編碼(靜止圖像的壓縮)并且創(chuàng)建靜止圖像文件。靜止圖像壓縮單元141通過使用諸如聯(lián)合圖片專家組(JPEG)等的已知的靜止圖像壓縮技術(shù)來進行壓縮處理。
[0061]接著,在步驟S311中,記錄再現(xiàn)單元151將靜止圖像文件記錄在存儲介質(zhì)152中。
[0062]接著,在步驟S312中,響應(yīng)于針對攝像操作的指示(步驟S308中為“是”),RAff壓縮單元113獲取與所拍攝到的靜止圖像相對應(yīng)并且從傳感器信號處理單元103輸出的RAW圖像,并且對該RAW圖像進行高效率編碼(RAW圖像的壓縮),以將該RAW圖像轉(zhuǎn)換成RAW文件。將該RAW文件存儲在緩沖單元115中。RAW壓縮單元113通過使用諸如小波變換或差分編碼等的已知技術(shù)來進行高效率編碼??梢允褂糜袚p編碼或無損編碼??蛇x地,RAW壓縮單元113可以省略RAW圖像的壓縮。S卩,RAW壓縮單元113可以在無需對RAW圖像進行壓縮的情況下直接輸出RAW圖像。與是否對RAW圖像進行壓縮無關(guān)地,根據(jù)本典型實施例,創(chuàng)建相對于從傳感器信號處理單元103供給的圖像信息沒有顯著劣化并且可以恢復(fù)作為高質(zhì)量圖像文件的RAW文件。
[0063]在步驟S313中,記錄再現(xiàn)單元151將RAW文件記錄在存儲介質(zhì)152中。接著,操作進入步驟S301。在步驟S311和S313中,記錄再現(xiàn)單元151可以將靜止圖像文件和/或RAW文件經(jīng)由通信單元153和通信端子154發(fā)送至外部存儲器,由此可以將靜止圖像文件和/或RAW文件存儲在外部存儲器中。
[0064]如此說明了根據(jù)本典型實施例的靜止圖像拍攝模式的處理的流程。
[0065]接著,將說明根據(jù)本典型實施例的靜止圖像文件和RAW文件的結(jié)構(gòu)。圖4A和4B示出靜止圖像文件和RAW文件的結(jié)構(gòu)。
[0066]例如,利用記錄再現(xiàn)單元151將圖4A所示的靜止圖像文件400記錄在存儲介質(zhì)152的預(yù)定記錄區(qū)域中。靜止圖像文件400包括頭部401、元數(shù)據(jù)部402和壓縮數(shù)據(jù)部403。頭部401例如包括表示該文件采用靜止圖像文件格式的識別碼。壓縮數(shù)據(jù)部403包括進行了高效率編碼的靜止圖像的壓縮數(shù)據(jù)。
[0067]元數(shù)據(jù)部402包括關(guān)于與該靜止圖像文件同時生成的RAW文件的名稱的信息404。另外,元數(shù)據(jù)部402包括表示通過簡單顯像單元111進行簡單顯像獲得了該靜止圖像文件的顯像狀況信息405。另外,元數(shù)據(jù)部402包括拍攝元數(shù)據(jù)406,其中該拍攝元數(shù)據(jù)406包括評價值計算單元105和識別單元131分別檢測到的評價值和被攝體信息、以及利用攝像光學(xué)單元101和圖像傳感器單元102在攝像操作期間所獲得的信息(例如,透鏡類型識別信息和傳感器類型識別信息)。另外,盡管沒有示出,但元數(shù)據(jù)部402可以包括記錄有同時生成的RAW文件的存儲介質(zhì)的識別碼以及與記錄有該RAW文件的文件夾有關(guān)的路徑信息等。
[0068]例如,利用記錄再現(xiàn)單元151將圖4B所示的RAW文件410存儲在存儲介質(zhì)152的預(yù)定記錄區(qū)域中。RAW文件410包括頭部411、元數(shù)據(jù)部412和壓縮數(shù)據(jù)部413。頭部411包括表示該文件采用RAW文件格式的識別碼。壓縮數(shù)據(jù)部413包括進行了高效率編碼的靜止圖像的RAW壓縮數(shù)據(jù)(或沒有進行壓縮的靜止圖像的RAW圖像數(shù)據(jù))。
[0069]元數(shù)據(jù)部412包括關(guān)于與該RAW文件同時生成的靜止圖像文件的名稱的信息414。另外,元數(shù)據(jù)部412包括表示通過簡單顯像單元111進行簡單顯像獲得了該靜止圖像文件的顯像狀況信息415。另外,元數(shù)據(jù)部412包括拍攝元數(shù)據(jù)416,其中該拍攝元數(shù)據(jù)416包括評價值計算單元105和識別單元131所檢測到的評價值和被攝體信息、以及利用攝像光學(xué)單元101和圖像傳感器單元102在攝像操作期間所獲得的信息(例如,透鏡類型識別信息和傳感器類型識別信息)。如果拍攝元數(shù)據(jù)416中的數(shù)據(jù)是與拍攝元數(shù)據(jù)406中的數(shù)據(jù)共通的數(shù)據(jù),則使用相同的數(shù)據(jù)。另外,盡管沒有示出,但元數(shù)據(jù)部412可以包括記錄有同時生成的靜止圖像文件的存儲介質(zhì)的識別碼以及與記錄有靜止圖像文