專利名稱:攝像裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及在動態(tài)圖像拍攝中拍攝靜止圖像的攝像裝置。
背景技術(shù):
提出了以下的攝像裝置(例如,參照專利文獻(xiàn)1)如果在動態(tài)圖像拍攝記錄中發(fā)出了靜止圖像拍攝記錄的指示,則中斷動態(tài)圖像拍攝記錄處理,開始計(jì)數(shù)在靜止圖像拍攝記錄處理期間所缺失的動態(tài)圖像幀(缺失幀)的個(gè)數(shù),將根據(jù)來自攝像元件的攝像信號生成的靜止圖像數(shù)據(jù)存放到存儲卡中后,由靜止圖像數(shù)據(jù)生成虛擬動態(tài)圖像幀(虛擬幀),將所生成的虛擬幀補(bǔ)寫到被中斷的動態(tài)圖像的動態(tài)圖像數(shù)據(jù)中,重新開始動態(tài)圖像拍攝記錄處理,并進(jìn)行補(bǔ)償調(diào)節(jié),以便虛擬幀適用于被計(jì)數(shù)的缺失幀。現(xiàn)有技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)1日本特開2007-159088號公報(bào)
發(fā)明內(nèi)容
發(fā)明要解決的技術(shù)問題在上述專利文獻(xiàn)1記載的攝像裝置中,由一個(gè)靜止圖像數(shù)據(jù)生成一個(gè)虛擬動態(tài)圖像幀(虛擬幀),并將該虛擬幀適用于在靜止圖像拍攝記錄處理期間所缺失的多個(gè)幀的各自。另外,在其它以往的攝像裝置中,將剛開始靜止圖像拍攝記錄處理之前的動態(tài)圖像幀適用于缺失的多個(gè)幀的各自。因此,在播放這些動態(tài)圖像時(shí),存在與缺失的多個(gè)幀對應(yīng)的部分的被拍攝體的動作不自然停止的情況。另外,雖然也可以根據(jù)靜止圖像拍攝記錄處理中的被拍攝體的動作來生成虛擬幀,但需要在動態(tài)圖像拍攝之后進(jìn)行虛擬幀的生成處理,并且需要準(zhǔn)備用于存儲多個(gè)幀圖像的大容量存儲器等。本發(fā)明的目的在于提供以下的攝像裝置在動態(tài)圖像拍攝過程中拍攝靜止圖像之后且在重新開始拍攝動態(tài)圖像之后,在拍攝動態(tài)圖像過程中能夠容易且高精度地生成在拍攝靜止圖像過程中所缺失的幀圖像。用于解決問題的手段本發(fā)明的攝像裝置,其特征在于,具備攝像元件,拍攝來自被拍攝體的光;第一圖像處理部,根據(jù)來自上述攝像元件的攝像信號,進(jìn)行形成動態(tài)圖像文件的多個(gè)幀圖像的圖像處理;指示部,指示拍攝上述被拍攝體的靜止圖像;第二圖像處理部,在拍攝動態(tài)圖像過程中由上述指示部指示了拍攝上述靜止圖像的情況下,根據(jù)來自上述攝像元件的攝像信號進(jìn)行上述靜止圖像的圖像處理,在拍攝上述靜止圖像之后且在重新開始拍攝上述動態(tài)圖像時(shí),生成插補(bǔ)幀圖像,該插補(bǔ)幀圖像為從由上述指示部指示拍攝上述靜止圖像開始到重新開始拍攝上述動態(tài)圖像為止的期間的上述幀圖像;以及動態(tài)圖像文件生成部,根據(jù)由上述第一圖像處理部進(jìn)行了圖像處理的多個(gè)上述幀圖像以及由上述第二圖像處理部生成的上述插補(bǔ)幀圖像,生成上述動態(tài)圖像文件。技術(shù)效果根據(jù)本發(fā)明的攝像裝置,在動態(tài)圖像拍攝中拍攝靜止圖像之后且在重新開始拍攝動態(tài)圖像之后,在拍攝動態(tài)圖像中能夠容易且高精度地生成在拍攝靜止圖像中所缺失的幀圖像。
圖1是表示實(shí)施方式涉及的電子相機(jī)的系統(tǒng)結(jié)構(gòu)的框圖。圖2是用于說明在實(shí)施方式涉及的電子相機(jī)中拍攝動態(tài)圖像時(shí)的處理的流程圖。圖3是用于說明在實(shí)施方式涉及的電子相機(jī)中拍攝動態(tài)圖像以及靜止圖像時(shí)的處理的時(shí)序圖。圖4是用于說明在實(shí)施方式涉及的電子相機(jī)中在動態(tài)圖像拍攝過程中發(fā)出了拍攝靜止圖像的指示時(shí)的處理的流程圖。圖5是用于說明在實(shí)施方式涉及的電子相機(jī)中在動態(tài)圖像拍攝過程中拍攝靜止圖像時(shí)的處理的流程圖。圖6是用于說明在實(shí)施方式涉及的電子相機(jī)中用于生成插補(bǔ)幀圖像所需的處理的流程圖。圖7是用于說明在實(shí)施方式涉及的電子相機(jī)中用于生成插補(bǔ)幀圖像所需的處理的流程圖。圖8是用于說明在實(shí)施方式涉及的電子相機(jī)中生成插補(bǔ)幀圖像時(shí)的處理的流程圖。圖9是表示由第一圖像處理部生成的幀圖像、由第二圖像處理部生成的靜止圖像以及插補(bǔ)幀圖像、和形成動態(tài)圖像文件的幀圖像的圖。
具體實(shí)施例方式下面,參照
本發(fā)明的實(shí)施方式涉及的作為攝像裝置的電子相機(jī)。圖1是表示該實(shí)施方式涉及的電子相機(jī)2的系統(tǒng)結(jié)構(gòu)的框圖。如圖1所示,電子相機(jī)2具備由微處理器等構(gòu)成、并統(tǒng)一控制電子相機(jī)2的各部的控制部4,在控制部4上連接有攝像元件 6、第一圖像處理部8、第二圖像處理部10、記錄介質(zhì)12、操作部14、第一計(jì)數(shù)器16以及第二計(jì)數(shù)器18。攝像元件6由CCD或CMOS等構(gòu)成,拍攝經(jīng)由未圖示的拍攝鏡頭的來自被拍攝體的光,控制部4獲取基于攝像信號的圖像數(shù)據(jù),該攝像信號是從攝像元件6輸出的、通過經(jīng)由未圖示的A/D轉(zhuǎn)換部等而由模擬信號轉(zhuǎn)換成數(shù)字信號的攝像信號。第一圖像處理部8以及第二圖像處理部10根據(jù)基于來自攝像元件6的攝像信號的圖像數(shù)據(jù),進(jìn)行形成動態(tài)圖像文件的多個(gè)幀圖像的圖像處理、靜止圖像的圖像處理以及插補(bǔ)幀圖像(將后述)的生成處理。另外,第一圖像處理部8具備第一通信控制部20,第一通信控制部20將由第一圖像處理部8進(jìn)行了圖像處理的圖像等經(jīng)由后述的第二通信控制部22向第二圖像處理部10發(fā)送,并接收由第二圖像處理部10經(jīng)由第二通信控制部22發(fā)送的圖像(由第二圖像處理部10進(jìn)行了圖像處理的圖像)等。相同地,第二處理部10具備第二通信控制部22,第二通信控制部22將由第二圖像處理部10進(jìn)行了圖像處理的圖像等經(jīng)由第一通信控制部20向第一圖像處理部8發(fā)送,并接收由第一圖像處理部8經(jīng)由第一通信控制部20發(fā)送的圖像等。記錄介質(zhì)12是可裝卸地安裝在設(shè)于電子相機(jī)2的卡槽(未圖示)中的、具有可攜帶性的記錄介質(zhì),在記錄介質(zhì)12中記錄有靜止圖像以及動態(tài)圖像的圖像文件。操作部14具備接通/斷開電源的電源開關(guān);用于指示拍攝靜止圖像等的釋放按鈕;用于指示動態(tài)圖像的記錄開始、記錄結(jié)束的錄像按鈕;用于選擇拍攝模式的模式按鈕等。第一計(jì)數(shù)器16計(jì)數(shù)在動態(tài)圖像拍攝中自發(fā)出拍攝靜止圖像的指示開始到從攝像元件6讀出用于靜止圖像生成的攝像信號為止的期間的、構(gòu)成動態(tài)圖像文件的幀圖像的個(gè)數(shù)。另外,第二計(jì)數(shù)器18計(jì)數(shù)在動態(tài)圖像拍攝中自從攝像元件6讀出用于靜止圖像生成的攝像信號開始到重新開始拍攝動態(tài)圖像為止的期間的、構(gòu)成動態(tài)圖像文件的幀圖像的個(gè)數(shù)。在該實(shí)施方式涉及的電子相機(jī)2中,在拍攝動態(tài)圖像時(shí),通過第一圖像處理部 8 (或者第二圖像處理部10)進(jìn)行形成動態(tài)圖像文件的幀圖像的圖像處理。然后,如果在動態(tài)圖像拍攝中釋放按鈕被按下,則中止動態(tài)圖像的拍攝即通過第一圖像處理部8 (或者第二圖像處理部10)進(jìn)行的幀圖像的圖像處理,并進(jìn)行靜止圖像的拍攝即通過第二圖像處理部10 (或者第一圖像處理部8)進(jìn)行靜止圖像的圖像處理。然后,如果靜止圖像的拍攝結(jié)束, 則重新開始拍攝動態(tài)圖像。此時(shí),在第一圖像處理部8(或者第二圖像處理部10)中重新開始形成動態(tài)圖像的幀圖像的動態(tài)圖像處理,并在重新開始通過第一圖像處理部8進(jìn)行的動態(tài)圖像處理的同時(shí),在第二圖像處理部10(或者第一圖像處理部8)中開始自釋放按鈕被按下到重新開始拍攝動態(tài)圖像為止的期間的動態(tài)圖像的幀圖像即插補(bǔ)幀圖像的生成處理。下面,參照圖2所示的流程圖以及圖3所示的時(shí)序圖,說明該實(shí)施方式涉及的電子相機(jī)2中的拍攝動態(tài)圖像時(shí)的處理。首先,如果例如由用戶按下錄像按鈕等發(fā)出了開始拍攝動態(tài)圖像的指示(步驟 S10),則控制部4將第一計(jì)數(shù)器16的計(jì)數(shù)值i以及第二計(jì)數(shù)器18的計(jì)數(shù)值j進(jìn)行復(fù)位(i =0,j = 0)(步驟 Sll)。接著,如圖3所示,控制部4與動態(tài)圖像周期(例如,30fpS、60fpS等)同步地獲取基于從攝像元件6輸出的攝像信號的圖像數(shù)據(jù)(步驟S12)。此外,由于是形成動態(tài)圖像文件的幀圖像用的圖像數(shù)據(jù),因此從攝像元件6不是按全像素讀出而是將像素間隔讀出。在第一圖像處理部8中執(zhí)行在步驟S12中獲取的圖像數(shù)據(jù)的動態(tài)圖像處理(步驟 S13)。即,第一圖像處理部8按照來自控制部4的指示,執(zhí)行如下的的動態(tài)圖像處理由基于來自攝像元件6的攝像信號的圖像數(shù)據(jù),生成形成動態(tài)圖像的多個(gè)幀圖像中的一個(gè)幀圖像。然后,控制部4將在步驟S13中被第一圖像處理部8進(jìn)行了動態(tài)圖像處理的幀圖像暫時(shí)存放到第一圖像處理部8內(nèi)的緩沖存儲器(未圖示)等中。接著,控制部4從第一計(jì)數(shù)器16獲取計(jì)數(shù)值i且從第二計(jì)數(shù)器18獲取計(jì)數(shù)值j, 并判斷各計(jì)數(shù)值i,j是否為“0” (步驟S14)。在步驟S14中判斷為各計(jì)數(shù)值i,j為“0”的情況下(步驟S14中為“是”),控制部4將暫時(shí)存放在緩沖存儲器中的幀圖像記錄到記錄介質(zhì)12中(步驟S15)。
具體而言,將存放在緩沖存儲器中的幀圖像記錄到記錄介質(zhì)12中設(shè)置的動態(tài)圖像文件內(nèi)的規(guī)定地址編號(用于按順序記錄形成動態(tài)圖像文件的各幀圖像所需的編號)的地址(用于按順序記錄形成動態(tài)圖像文件的各幀圖像的記錄區(qū)域)內(nèi)。例如,按順序?qū)⑿纬蓜討B(tài)圖像文件的第一個(gè)幀圖像記錄到與第一個(gè)幀圖像的數(shù)據(jù)容量相對應(yīng)而生成的地址編號1的地址,將第二個(gè)幀圖像記錄到與第二個(gè)幀圖像的數(shù)據(jù)容量相對應(yīng)而生成的地址編號2的地址,將圖3所示的第n(n為自然數(shù))個(gè)幀圖像a記錄到與第η個(gè)幀圖像的數(shù)據(jù)容量相對應(yīng)而生成的地址編號η的地址,將圖3所示的第(η+1)個(gè)幀圖像b記錄到與第(n+1) 個(gè)幀圖像的數(shù)據(jù)容量相對應(yīng)而生成的地址編號(n+1)的地址。接著,控制部4判斷是否例如由用戶按下錄像按鈕等、發(fā)生了結(jié)束拍攝動態(tài)圖像的指示(步驟S16)。在步驟S16中判斷為未發(fā)生結(jié)束拍攝動態(tài)圖像的指示的情況下(在步驟S16中為“否”),控制部4返回到步驟S12的處理,重復(fù)進(jìn)行步驟S12至S16的處理直到在步驟S16中判斷為發(fā)出了結(jié)束拍攝動態(tài)圖像的指示為止。即,控制部4在步驟S12中依次獲取基于與動態(tài)圖像周期同步從攝像元件輸出的攝像信號的圖像數(shù)據(jù),在步驟S13中將所獲取的圖像數(shù)據(jù)由第一圖像處理部8依次進(jìn)行動態(tài)圖像處理,從而依次生成幀圖像(例如,圖3所示的幀圖像a、b、c…),在步驟S15中將所生成的幀圖像a、b、c…依次記錄到記錄介質(zhì)12中。另一方面,在重復(fù)步驟S12至S16的處理時(shí),在通過用戶發(fā)出了拍攝靜止圖像的指示的情況下,控制部4中止步驟S12至步驟S16的處理,進(jìn)行靜止圖像的拍攝。下面,參照圖4所示的流程圖,說明在該實(shí)施方式涉及的電子相機(jī)2中在動態(tài)圖像拍攝中拍攝靜止圖像時(shí)的處理。首先,如果在執(zhí)行圖2所示的步驟S12至步驟S16的處理時(shí)由用戶按下釋放按鈕 (步驟S20中為“是”),則控制部4判斷為由用戶發(fā)出了開始拍攝靜止圖像的指示,并判斷是否在圖2所示的步驟S13中由第一圖像處理部8進(jìn)行動態(tài)圖像處理中(步驟S21)。艮口, 判斷第一圖像處理部8是否為由基于來自攝像元件6的攝像信號的圖像數(shù)據(jù)開始生成幀圖像之后且在結(jié)束生成之前。在步驟S21中判斷為由第一圖像處理部8進(jìn)行動態(tài)圖像處理中的情況下(步驟 S21中為“是”),控制部4中止由第一圖像處理部8進(jìn)行的動態(tài)圖像處理,并且刪除由第一圖像處理部8進(jìn)行的動態(tài)圖像處理生成途中的幀圖像(步驟S22)。例如,如果在圖3所示的時(shí)間、由用戶按下了釋放按鈕,則控制部4中止由第一圖像處理部8進(jìn)行的幀圖像d的動態(tài)圖像處理,并刪除幀圖像d。然后,控制部4將第一計(jì)數(shù)器16的計(jì)數(shù)值i設(shè)定為“1” (步驟S23),該第一計(jì)數(shù)器16用于計(jì)數(shù)自釋放按鈕被按下開始到獲取基于由攝像元件6輸出的攝像信號的圖像數(shù)據(jù)為止的期間的、被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的幀圖像的個(gè)數(shù)。即,將生成途中的幀圖像d追加到計(jì)數(shù)值i中。另一方面,在步驟S21中判斷為不是由第一圖像處理部8進(jìn)行的動態(tài)圖像處理中的情況下(步驟S21中為“否”),例如為在圖3所示的時(shí)間t0由用戶按下釋放按鈕的情況下,由于不存在因生成途中而需要?jiǎng)h除的幀圖像,因此控制部4不進(jìn)行步驟S22以及S23的處理而進(jìn)入到下一步處理。接著,控制部4并行地執(zhí)行用于拍攝靜止圖像的處理(步驟S24)以及在結(jié)束靜止圖像拍攝且重新開始拍攝動態(tài)圖像時(shí)用于生成插補(bǔ)幀圖像所需的處理(步驟S25),該插補(bǔ)幀圖像用于插補(bǔ)在拍攝靜止圖像中所缺失的幀圖像。首先,參照圖5所示的流程圖,說明用
7于拍攝靜止圖像的處理(圖4中所示的步驟S24)。首先,控制部4在結(jié)束用于拍攝靜止圖像的準(zhǔn)備(對焦、曝光等)之后(例如,圖 3所示的時(shí)間t3),獲取基于從攝像元件6輸出的攝像信號的、靜止圖像用的圖像數(shù)據(jù)(步驟S30),將所獲取的靜止圖像用的圖像數(shù)據(jù)暫時(shí)存放到第二圖像處理部10內(nèi)的緩沖存儲器(未圖示)等中。此外,由于是靜止圖像用的圖像數(shù)據(jù),因此從攝像元件6按全像素讀出。接著,控制部4在第二圖像處理部10中執(zhí)行在步驟S30中獲取的靜止圖像用的圖像數(shù)據(jù)的靜止圖像處理(步驟S31)。即,第二圖像處理部10按照來自控制部4的指示,執(zhí)行由基于來自攝像元件6的攝像信號的圖像數(shù)據(jù)生成靜止圖像e(參照圖3)的靜止圖像處理。 接著,控制部4將在步驟S31中被第二圖像處理部10進(jìn)行了靜止圖像處理的靜止圖像e記錄到記錄介質(zhì)12中(步驟S32)。接著,參照圖6所示的流程圖說明用于生成插補(bǔ)幀圖像所需的處理(圖4中所示的步驟S25)。首先,控制部4判斷是否獲取了基于來自攝像元件6的攝像信號的、靜止圖像用的圖像數(shù)據(jù),即,是否執(zhí)行了圖5所示的步驟S30的處理(步驟S40)。在步驟S40中判斷為未獲取靜止圖像用的圖像數(shù)據(jù)的情況下(步驟S40中為“否”),控制部4判斷是否獲取了下一個(gè)動態(tài)圖像周期(步驟S41)。在步驟S41中判斷為獲取了下一個(gè)動態(tài)圖像周期的情況下(步驟S41中為“是”,例如圖3所示的時(shí)間t2),控制部4將第一計(jì)數(shù)器16的計(jì)數(shù)值i 加“廣(i = i+i)(步驟S42)。S卩,由于使用第一計(jì)數(shù)器16計(jì)數(shù)在自釋放按鈕被按下到獲取基于由攝像元件6輸出的攝像信號的圖像數(shù)據(jù)為止的期間的、被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的幀圖像的個(gè)數(shù),因此將計(jì)數(shù)值i加“1”。另外,在步驟S41中判斷為未獲取下一個(gè)動態(tài)圖像周期的情況下(在步驟S41中為“否”),或者在步驟S42中進(jìn)行了對計(jì)數(shù)值i力卩“1”的處理之后,控制部4返回到步驟S40 的處理。然后,控制部4重復(fù)步驟S40至S42的處理直到在步驟S40中判斷為獲取了靜止圖像用的圖像數(shù)據(jù)為止即執(zhí)行圖5所示的步驟30的處理為止。然后,在步驟S40中判斷為用于拍攝靜止圖像的準(zhǔn)備結(jié)束且獲取了基于來自攝像元件6的攝像信號的、靜止圖像用的圖像數(shù)據(jù)的情況下(步驟S40中為“是”,例如圖3所示的時(shí)間t3),即判斷為執(zhí)行了圖5所示的步驟S30的處理的情況下,控制部4判斷是否結(jié)束了由第二圖像處理部10進(jìn)行的靜止圖像處理即圖5所示的步驟S31的處理(步驟S43)。在步驟S43中判斷為未結(jié)束由第二圖像處理部10進(jìn)行的靜止圖像處理即圖5所示的步驟S31的處理的情況下(步驟S43中為“否”),控制部4判斷是否獲取了下一個(gè)動態(tài)圖像周期(步驟S44)。在步驟S44中判斷為獲取了下一個(gè)動態(tài)圖像周期的情況下(步驟 S44中為“是”,例如圖3所示的時(shí)間t4),控制部4將第二計(jì)數(shù)器18的計(jì)數(shù)值j力卩“l(fā)”(j = j+1)(步驟S45)。S卩,由于使用第二計(jì)數(shù)器18計(jì)數(shù)在自獲取了基于由攝像元件6輸出的攝像信號的、靜止圖像用的圖像數(shù)據(jù)開始到由第二圖像處理部10進(jìn)行的靜止圖像處理結(jié)束為止的期間的、被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的幀圖像的個(gè)數(shù),因此將計(jì)數(shù)值j加“1”。另外,在步驟S44中判斷為未獲取下一個(gè)動態(tài)圖像周期的情況下(步驟S44中為 “否”),或者在步驟S45中進(jìn)行了對計(jì)數(shù)值j加“1”的處理之后,控制部4返回到步驟S43 的處理。接著,控制部4重復(fù)S43至S45的處理直到在步驟S43中判斷為結(jié)束了由第二圖像處理部10進(jìn)行的靜止圖像處理即圖5所示的步驟S31的處理為止。然后,在步驟S43中判斷為結(jié)束了由第二圖像處理部10進(jìn)行的靜止圖像處理即圖5所示的步驟S31的處理的情況下(步驟S43中為“是”),控制部4到獲取下一個(gè)動態(tài)圖像周期為止待機(jī)(步驟S46中為“否”),一旦獲取下一個(gè)動態(tài)圖像周期(步驟S46中為 “是”),就返回到圖2所示的步驟S12的處理,并重新開始被中止的動態(tài)圖像拍攝。即,控制部4獲取基于與動態(tài)圖像周期同步地從攝像元件6輸出的攝像信號的、圖像數(shù)據(jù)(步驟S12),在第一圖像處理部8中執(zhí)行根據(jù)在步驟S12中獲取的圖像數(shù)據(jù)生成幀圖像f(參照圖3)的動態(tài)圖像處理(步驟S13)。然后,控制部4判斷第一計(jì)數(shù)器16以及第二計(jì)數(shù)器18的計(jì)數(shù)值i、j是否為“0” (步驟S14)。在各計(jì)數(shù)值i、j為“0”的情況下(步驟S14中為“是”),控制部4判斷為未進(jìn)行圖4所示步驟S24 (圖5所示步驟S30至S32)的用于拍攝靜止圖像的處理,在各計(jì)數(shù)值i、j不為“0”的情況下(步驟S14中為“否”),控制部4判斷為進(jìn)行了圖4所示的步驟S24(圖5所示步驟S30至S32)的用于拍攝靜止圖像的處理。因此,在此情況下,由于是拍攝了靜止圖像e (參照圖3)之后且在圖6所示的步驟 S42以及S45中執(zhí)行了至少一次對各計(jì)數(shù)值i、j力卩“1”的處理,因此控制部4判斷為各計(jì)數(shù)值i、j不為“0”(步驟S14中為“否”),執(zhí)行用于生成插補(bǔ)幀圖像的處理(步驟S17)。在此,插補(bǔ)幀圖像用于虛擬地生成拍攝靜止圖像過程中缺失的幀圖像(即,自釋放按鈕被按下(發(fā)出了拍攝靜止圖像e的指示之后)到重新開始拍攝動態(tài)圖像的為止期間的、在拍攝靜止圖像e過程中被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的幀圖像)。在該實(shí)施方式中,與第一圖像處理部8中的動態(tài)圖像處理并行地在第二圖像處理部10中執(zhí)行生成插補(bǔ)幀圖像的處理。此外,在第一圖像處理部8中與動態(tài)圖像處理并行地在第二圖像處理部10中執(zhí)行將用于生成插補(bǔ)幀圖像所需的信息等向第二圖像處理部10發(fā)送的處理。首先,參照圖7所示流程圖,說明與第一圖像處理部8中的動態(tài)圖像處理并行地在第二圖像處理部10中將用于生成插補(bǔ)幀圖像所需的信息等從第一圖像處理部8向第二圖像處理部10發(fā)送時(shí)的處理。首先,控制部4將在緊挨著釋放按鈕被按下的時(shí)刻^之前被第一圖像處理部8進(jìn)行了動態(tài)圖像處理并暫時(shí)存放在第一圖像處理部8內(nèi)的緩沖存儲器中的幀圖像(下面,稱為“前幀圖像”。圖3所示的幀圖像c),經(jīng)由第一通信控制部20以及第二通信控制部22向第二圖像處理部10發(fā)送(步驟S50)。相同地,控制部4將在緊挨著結(jié)束了用于拍攝靜止圖像e(參照圖3)的處理的時(shí)刻t5(參照圖3)即重新開始動態(tài)圖像處理的時(shí)刻之后被第一圖像處理部8進(jìn)行了動態(tài)圖像處理并暫時(shí)存放在第一圖像處理部8內(nèi)的緩沖存儲器中的幀圖像(下面,稱為“后幀圖像”。圖3所示的幀圖像f),經(jīng)由第一通信控制部20以及第二通信控制部22向第二圖像處理部10發(fā)送(步驟S51)。接著,控制部4從記錄介質(zhì)12獲取前幀圖像c的地址編號(步驟S52)。接著,控制部4從第一計(jì)數(shù)器16獲取計(jì)數(shù)值i且從第二計(jì)數(shù)器18獲取計(jì)數(shù)值j (步驟S53),根據(jù)在步驟S53中獲取的計(jì)數(shù)值i、j執(zhí)行地址編號的補(bǔ)償(步驟S54)。S卩,計(jì)數(shù)值i、j的合計(jì)值 (i+j)表示在拍攝靜止圖像e過程中被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的幀圖像的個(gè)數(shù),因此執(zhí)行地址編號的補(bǔ)償,以便在對前幀圖像c的地址編號加上(i+j+Ι)的地址編號的地址上記錄后幀圖像f。此外,在前幀圖像c的地址編號和后幀圖像f的地址編號之間的(i+j)個(gè)地址編號的地址上,記錄之后生成的插補(bǔ)幀圖像。接著,控制部4結(jié)束步驟S54的處理之后返回到圖2所示步驟S15的處理。S卩,在步驟S54中進(jìn)行了補(bǔ)償?shù)牡刂肪幪?對前幀圖像c的地址編號加上(i+j+Ι)的地址編號) 的地址內(nèi)記錄幀圖像f (步驟S15)。接著,參照圖8所示流程圖說明在第二圖像處理部10中與第一圖像處理部8中的動態(tài)圖像處理并行地生成插補(bǔ)幀圖像時(shí)的處理。首先,控制部4確認(rèn)第二圖像處理部10是否接收了在圖7所示的步驟S50中從第一圖像處理部8向第二圖像處理部10發(fā)送的前幀圖像c (步驟S60)。相同地,確認(rèn)第二圖像處理部10是否接收了在圖7所示的步驟S51中從第一圖像處理部8向第二圖像處理部 10發(fā)送的后幀圖像f (步驟S61)。接著,控制部4在第一圖像處理部8中執(zhí)行在圖5所示的步驟S30中獲取并暫時(shí)存放在第二圖像處理部10內(nèi)的緩沖存儲器等中的靜止圖像e用的圖像數(shù)據(jù)的動態(tài)圖像處理(步驟S62)。S卩,第一圖像處理部8按照來自控制部4的指示,執(zhí)行由靜止圖像e用的圖像數(shù)據(jù)生成動態(tài)圖像用的幀圖像(以下,稱為基于靜止圖像e的幀圖像)的動態(tài)圖像處理。接著,控制部4從第一計(jì)數(shù)器16獲取計(jì)數(shù)值i (步驟S63),根據(jù)在步驟S60中第二圖像處理部10所接收的前幀圖像C以及在步驟S62中所生成的基于靜止圖像e的幀圖像,執(zhí)行生成i張插補(bǔ)幀圖像的處理(步驟S64)。該i張插補(bǔ)幀圖像是自釋放按鈕被按下的時(shí)刻、到獲取基于由攝像元件6輸出的攝像信號的靜止圖像e的圖像數(shù)據(jù)為止期間的、 被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的i張的幀圖像。例如,在如圖3所示的情況下,由于第一計(jì)數(shù)器16的計(jì)數(shù)值i = 2,因此第二圖像處理部10生成兩張插補(bǔ)圖像g、h。插補(bǔ)幀圖像g、h是例如使用特開2006-94058號公報(bào)等中所公開的周知的插補(bǔ)幀圖像生成功能,根據(jù)由前幀圖像c以及基于靜止圖像e的幀圖像求出的被拍攝體的運(yùn)動矢量生成。在圖3所示的情況下,作為前幀圖像c的下一個(gè)幀圖像的、插補(bǔ)幀圖像g,根據(jù)由前幀圖像c以及基于靜止圖像e的幀圖像求出的被拍攝體的運(yùn)動矢量而生成為使得被拍攝體的動作順暢。另外,由于被中止的動態(tài)圖像處理若未被中止則插補(bǔ)幀圖像h的相應(yīng)的幀圖像的圖像數(shù)據(jù)應(yīng)該被讀出的時(shí)間、與靜止圖像e被拍攝的時(shí)間大致相同,因此作為插補(bǔ)幀圖像g的下一個(gè)幀圖像的、插補(bǔ)幀圖像h生成為與基于靜止圖像 e的幀圖像相同的幀圖像。接著,控制部4從第二計(jì)數(shù)器18獲取計(jì)數(shù)值j (步驟S65),根據(jù)在步驟S61中第二圖像處理部10接收的后幀圖像f以及在步驟S63中生成的基于靜止圖像e的幀圖像,執(zhí)行生成j張插補(bǔ)幀圖像的處理(步驟S66)。該j張插補(bǔ)幀圖像是自獲取基于由攝像元件6 輸出的攝像信號的靜止圖像e用的圖像數(shù)據(jù)開始到結(jié)束由第二圖像處理部10進(jìn)行的靜止圖像處理為止期間的、被中止的動態(tài)圖像處理若未被中止則應(yīng)該生成的j張幀圖像。例如,在圖3所示的情況下,由于第二計(jì)數(shù)器18的計(jì)數(shù)值j = 2,因此第二圖像處理部10生成兩張插補(bǔ)幀圖像k、m。插補(bǔ)幀圖像k、m也與上述的插補(bǔ)幀圖像g、h相同地生成。例如,作為插補(bǔ)幀圖像h的下一個(gè)幀圖像的、插補(bǔ)幀圖像k,是根據(jù)由基于靜止圖像e的幀圖像以及后幀圖像f求出的被拍攝體的運(yùn)動矢量,由后幀圖像f內(nèi)的被拍攝體的位置加權(quán)到基于靜止圖像e的幀圖像內(nèi)的被拍攝體的位置而生成。另外,作為插補(bǔ)幀圖像k的下一個(gè)幀圖像的插補(bǔ)幀圖像m,是根據(jù)由基于靜止圖像e的幀圖像以及后幀圖像f求出的被拍攝體的運(yùn)動矢量,由基于靜止圖像e的幀圖像內(nèi)的被拍攝體的位置加權(quán)到后幀圖像f內(nèi)的被拍攝體的位置而生成。即,在存在動作的被拍攝體的情況下,在步驟S64以及S66中生成圖像內(nèi)的被拍攝體的位置各不相同的插補(bǔ)幀圖像g、h、k、m。接著,控制部4將第一計(jì)數(shù)器16的計(jì)數(shù)值i以及第二計(jì)數(shù)器18的計(jì)數(shù)值j進(jìn)行復(fù)位即設(shè)為“0” (步驟67),并進(jìn)入到圖2所示的步驟S15的處理。S卩,控制部4將在圖8 所示步驟S64以及S66中通過第二圖像處理部10生成的插補(bǔ)幀圖像g、h、k、m記錄到記錄介質(zhì)12中(步驟S15)。具體而言,從記錄介質(zhì)12獲取前幀圖像c的地址編號,將插補(bǔ)幀圖像g記錄到前幀圖像c的地址編號(例如,n+2)的下一個(gè)地址編號(例如,n+3)的地址內(nèi)。相同地,依次在下一個(gè)地址編號(例如,n+4)的地址內(nèi)記錄插補(bǔ)幀圖像h,在下一個(gè)地址編號(例如,n+5)的地址內(nèi)記錄插補(bǔ)幀圖像k,在下一個(gè)地址編號(例如,n+6)的地址內(nèi)記錄插補(bǔ)幀圖像m。然后,控制部4重復(fù)上述處理、例如由圖3所示的第一圖像處理部8進(jìn)行的幀圖像 P至S的生成以及記錄處理,直到在步驟S16中被判斷為發(fā)出了動態(tài)圖像的拍攝結(jié)束的指示為止。然后,在步驟S16中被判斷為發(fā)出了動態(tài)圖像的拍攝結(jié)束的指示的情況下(步驟 S16中為“是”),結(jié)束動態(tài)圖像的拍攝即動態(tài)圖像文件的生成以及記錄,該動態(tài)圖像文件由通過第一圖像處理部8進(jìn)行了動態(tài)圖像處理的幀圖像…a至c、f、p至s…以及通過第二圖像處理部10生成的插補(bǔ)幀圖像g、h、k、m形成。這樣,通過執(zhí)行圖2至圖8的流程圖所示的處理,例如,如圖9的(a)所示,首先, 在第一圖像處理部8中生成形成動態(tài)圖像文件的幀圖像…a至c,如果發(fā)出拍攝靜止圖像的指示,則如圖9的(b)所示,在第二圖像處理部10中生成靜止圖像e。然后,如果拍攝靜止圖像的處理結(jié)束,則如圖9的(a)所示,在第一圖像處理部8中依次生成形成動態(tài)圖像文件的幀圖像f、P至s···,與此并行地,如圖9的(b)所示,在第二圖像處理部10中生成插補(bǔ)幀圖像g、h、k、m(在第二圖像處理部10中生成有靜止圖像e的期間T所缺失的幀圖像)。然后,如圖9的(c)所示,將各幀圖像…a至c、f、p至s…以及插補(bǔ)幀圖像g、h、k、m按順序存放到規(guī)定的地址編號的地址內(nèi),由此生成動態(tài)圖像文件F并記錄到記錄介質(zhì)12。根據(jù)該實(shí)施方式涉及的電子相機(jī)2,由于具備兩個(gè)進(jìn)行圖像數(shù)據(jù)的圖像處理的圖像處理部,因此在動態(tài)圖像拍攝中拍攝靜止圖像后,在重新開始拍攝動態(tài)圖像之后,在動態(tài)圖像拍攝中能夠容易且高精度地生成作為在拍攝靜止圖像過程中缺失的幀圖像的插補(bǔ)幀圖像。例如,以往,在具備兩個(gè)圖像處理部的電子相機(jī)中,由一個(gè)圖像處理部進(jìn)行奇數(shù)幀圖像的圖像處理,由另一個(gè)圖像處理部進(jìn)行偶數(shù)幀圖像的圖像處理,由此實(shí)現(xiàn)高速連拍。艮口, 使用這種具備兩個(gè)圖像處理部的電子相機(jī),在由一個(gè)圖像處理部執(zhí)行動態(tài)圖像處理期間, 由另一個(gè)圖像處理部執(zhí)行插補(bǔ)幀圖像的生成處理,由此即使在動態(tài)圖像拍攝中拍攝靜止圖像的情況下,也能夠?qū)崟r(shí)地生成動態(tài)圖像文件。另外,由于根據(jù)在拍攝靜止圖像前后所生成的幀圖像以及基于靜止圖像的幀圖像來生成插補(bǔ)幀圖像,因此在播放包括插補(bǔ)幀圖像的動態(tài)圖像時(shí),與插補(bǔ)幀圖像對應(yīng)的部分的被拍攝體的動作不會不自然地停止,能夠播放順暢地動作的動態(tài)圖像。此外,在上述實(shí)施方式中使用兩個(gè)計(jì)數(shù)器16、18來計(jì)數(shù)自發(fā)出拍攝靜止圖像的指示到從攝像元件6獲取靜止圖像用的攝像信號為止期間的幀圖像的個(gè)數(shù)、以及自從攝像元件6獲取靜止圖像用的攝像信號到重新開始拍攝動態(tài)圖像為止期間的幀圖像的個(gè)數(shù),但也可以構(gòu)成為使用一個(gè)計(jì)數(shù)器來計(jì)數(shù)這些幀圖像的個(gè)數(shù)。在此情況下,使用一個(gè)計(jì)數(shù)器,首先,計(jì)數(shù)自發(fā)出拍攝靜止圖像的指示到從攝像元件6獲取靜止圖像用的攝像信號為止期間的幀圖像的個(gè)數(shù),將該計(jì)數(shù)結(jié)果(在上述實(shí)施方式中為計(jì)數(shù)值i)存放到緩沖存儲器(未圖示),并繼續(xù)進(jìn)行幀圖像的計(jì)數(shù)直到重新開始拍攝動態(tài)圖像為止。然后,通過從所得到的計(jì)數(shù)結(jié)果(在上述實(shí)施方式中為計(jì)數(shù)值i+j)減去存放在緩沖存儲器等中的計(jì)數(shù)結(jié)果(計(jì)數(shù)值i),計(jì)算出自從攝像元件6獲取靜止圖像用的攝像信號到重新開始拍攝動態(tài)圖像為止期間的幀圖像的個(gè)數(shù)(在上述實(shí)施方式中為計(jì)數(shù)值j)。此外,自發(fā)出拍攝靜止圖像的指示到從攝像元件6獲取靜止圖像用的攝像信號為止期間的幀圖像的個(gè)數(shù)是存放在緩沖存儲器等中的計(jì)數(shù)結(jié)果(計(jì)數(shù)值i)。另外,雖然在上述實(shí)施方式中將靜止圖像e為單拍的情況為例進(jìn)行了說明,但本發(fā)明也可適用于在動態(tài)圖像拍攝中所拍攝的靜止圖像為連續(xù)拍攝拍的多個(gè)連拍圖像的情況。在此情況下,生成基于各個(gè)連拍圖像的幀圖像(圖8所示的步驟S62),根據(jù)基于連拍圖像的幀圖像各自的、前幀圖像以及后幀圖像,生成插補(bǔ)幀圖像。例如,根據(jù)前幀圖像以及基于最初連拍圖像的幀圖像,生成其間的插補(bǔ)幀圖像,并根據(jù)基于第二和第三、第三和第四的連拍圖像的幀圖像,依次生成其間的插補(bǔ)幀圖像,并根據(jù)基于最后連拍圖像的幀圖像以及后幀圖像,生成其間的插補(bǔ)幀圖像。另外,在上述實(shí)施方式中,根據(jù)緊挨著發(fā)出拍攝靜止圖像e的指示時(shí)刻之前的幀圖像C、以及緊挨著重新開始拍攝動態(tài)幀圖像時(shí)刻之后的幀圖像f,生成插補(bǔ)幀圖像,但也可以用發(fā)出拍攝靜止圖像e的指示時(shí)刻前的幀圖像(例如,圖3所示幀圖像b等)來代替幀圖像c或者追加、以及用重新開始拍攝動態(tài)圖像時(shí)刻后的幀圖像(例如,圖3所示的幀圖像P等)來代替幀圖像f或者追加而生成插補(bǔ)幀圖像。以上說明的實(shí)施方式是為了容易理解本發(fā)明而記載的,不是為了限定本發(fā)明而記載的。因此,在上述實(shí)施方式中所公開的各要素是包括屬于本發(fā)明的技術(shù)范圍的所有的設(shè)計(jì)變更、均等物。
權(quán)利要求
1.一種攝像裝置,其特征在于,具備 攝像元件,拍攝來自被拍攝體的光;第一圖像處理部,根據(jù)來自上述攝像元件的攝像信號,進(jìn)行形成動態(tài)圖像文件的多個(gè)幀圖像的圖像處理;指示部,指示拍攝上述被拍攝體的靜止圖像;第二圖像處理部,在拍攝動態(tài)圖像過程中由上述指示部指示了拍攝上述靜止圖像的情況下,根據(jù)來自上述攝像元件的攝像信號進(jìn)行上述靜止圖像的圖像處理,在拍攝上述靜止圖像之后且在重新開始拍攝上述動態(tài)圖像時(shí),生成插補(bǔ)幀圖像,該插補(bǔ)幀圖像為從由上述指示部指示拍攝上述靜止圖像開始到重新開始拍攝上述動態(tài)圖像為止的期間的上述幀圖像;以及動態(tài)圖像文件生成部,根據(jù)由上述第一圖像處理部進(jìn)行了圖像處理的多個(gè)上述幀圖像以及由上述第二圖像處理部生成的上述插補(bǔ)幀圖像,生成上述動態(tài)圖像文件。
2.根據(jù)權(quán)利要求1所述的攝像裝置,其特征在于,如果由上述指示部指示拍攝上述靜止圖像,則上述第一圖像處理部中止上述幀圖像的圖像處理,如果上述靜止圖像的拍攝結(jié)束,則上述第一圖像處理部重新開始上述幀圖像的圖像處理,上述第二圖像處理部與由上述第一圖像處理部進(jìn)行的圖像處理的重新開始同時(shí)開始上述插補(bǔ)幀圖像的生成。
3.根據(jù)權(quán)利要求1或2所述的攝像裝置,其特征在于,上述第一圖像處理部具備將上述幀圖像向第二圖像處理部發(fā)送的發(fā)送部, 上述第二圖像處理部具備接收從上述發(fā)送部發(fā)送的上述幀圖像的接收部, 上述發(fā)送部將前幀圖像和后幀圖像向上述第二圖像處理部發(fā)送,其中,該前幀圖像為在由上述指示部指示拍攝上述靜止圖像的時(shí)刻之前由上述第一圖像處理部進(jìn)行了圖像處理的上述幀圖像,該后幀圖像為在拍攝上述靜止圖像之后且在重新開始拍攝上述動態(tài)圖像的時(shí)刻之后由上述第一圖像處理部進(jìn)行了圖像處理的上述幀圖像,上述接收部接收由上述發(fā)送部發(fā)送的上述前幀圖像以及上述后幀圖像, 上述第二圖像處理部生成基于上述靜止圖像的幀圖像,并且根據(jù)由上述接收部接收的上述前幀圖像、所生成的上述基于上述靜止圖像的幀圖像以及由接收部接收的上述后幀圖像中的至少兩個(gè)幀圖像,生成上述插補(bǔ)幀圖像。
4.根據(jù)權(quán)利要求3所述的攝像裝置,其特征在于,上述前幀圖像是在緊挨著由上述指示部指示拍攝上述靜止圖像的時(shí)刻之前,由上述第一圖像處理部進(jìn)行了圖像處理的幀圖像,上述后幀圖像是在緊挨著重新開始拍攝上述動態(tài)圖像的時(shí)刻之后,由上述第一圖像處理部進(jìn)行了圖像處理的幀圖像。
5.根據(jù)權(quán)利要求1至4中的任一項(xiàng)所述的攝像裝置,其特征在于,具備第一檢測部,檢測從由上述指示部指示拍攝上述靜止圖像開始到上述第二圖像處理部從上述攝像元件獲取攝像信號為止的期間的、上述幀圖像的個(gè)數(shù);以及第二檢測部,檢測自上述第二圖像處理部從上述攝像元件獲取攝像信號開始到重現(xiàn)開始拍攝上述動態(tài)圖像為止的期間的、上述幀圖像的個(gè)數(shù),上述第二圖像處理部根據(jù)上述第一檢測部以及上述第二檢測部的檢測結(jié)果生成上述插補(bǔ)幀圖像。
6.根據(jù)權(quán)利要求5所述的攝像裝置,其特征在于,上述第二圖像處理部根據(jù)上述前幀圖像以及基于上述靜止圖像的幀圖像生成由上述第一檢測部檢測出的個(gè)數(shù)的上述插補(bǔ)幀圖像,并根據(jù)基于上述靜止圖像的幀圖像以及上述后幀圖像生成由上述第二檢測部檢測出的個(gè)數(shù)的上述插補(bǔ)幀圖像。
7.根據(jù)權(quán)利要求3所述的攝像裝置,其特征在于, 上述靜止圖像包括連續(xù)拍攝的多個(gè)連拍圖像,上述第二圖像處理部生成基于各個(gè)上述連拍圖像的幀圖像。
全文摘要
本發(fā)明提供一種攝像裝置。該攝像裝置具備第一圖像處理部,根據(jù)來自攝像元件的攝像信號進(jìn)行形成動態(tài)圖像文件的多個(gè)幀圖像的圖像處理,該攝像元件拍攝來自被拍攝體的光;指示部,指示拍攝被拍攝體的靜止圖像;第二圖像處理部,在拍攝動態(tài)圖像過程中由指示部指示了拍攝靜止圖像的情況下,根據(jù)來自攝像元件的攝像信號進(jìn)行靜止圖像的圖像處理,在拍攝靜止圖像后且在重新開始拍攝動態(tài)圖像時(shí)生成插補(bǔ)幀圖像,該插補(bǔ)幀圖像為從由指示部指示拍攝靜止圖像開始到重新開始拍攝動態(tài)圖像為止的期間的幀圖像;及動態(tài)圖像文件生成部,根據(jù)由第一圖像處理部進(jìn)行了圖像處理的多個(gè)幀圖像及由第二圖像處理部生成的插補(bǔ)幀圖像,生成動態(tài)圖像文件。
文檔編號H04N5/76GK102263897SQ20111012377
公開日2011年11月30日 申請日期2011年5月10日 優(yōu)先權(quán)日2010年5月25日
發(fā)明者豐田隆文 申請人:株式會社尼康