專(zhuān)利名稱(chēng)：相機(jī)抖動(dòng)校正方法及其圖像拍攝裝置和存儲(chǔ)介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置、相機(jī)抖動(dòng)校正方法和記錄相機(jī)抖動(dòng)校正處理的預(yù)處理程序的存儲(chǔ)介質(zhì)，更具體地，涉及一種具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置、一種相機(jī)抖動(dòng)校正方法和一種記錄相機(jī)抖動(dòng)校正處理的預(yù)處理程序的存儲(chǔ)介質(zhì)，其能夠通過(guò)糾正相機(jī)抖動(dòng)來(lái)避免圖像質(zhì)量下降。
背景技術(shù)：
例如，當(dāng)使用內(nèi)建于移動(dòng)電話(huà)等之中的數(shù)字相機(jī)(圖像拍攝裝置)來(lái)拍照時(shí)，在曝光期間拿著移動(dòng)電話(huà)的手的抖動(dòng)對(duì)待提取的圖像產(chǎn)生影響。為了抑制手部抖動(dòng)的這種影響，對(duì)提取的圖像采用相機(jī)抖動(dòng)校正。
近來(lái)，數(shù)字相機(jī)，特別是安裝在移動(dòng)電話(huà)上的數(shù)字相機(jī)普及很快。用戶(hù)對(duì)數(shù)字相機(jī)的性能和適用性的需求也在增加。
適應(yīng)這種需求，在性能上，提高像素和縮放倍率有了顯著進(jìn)展，而在適用性上，減小尺寸和減輕重量也有了顯著進(jìn)展。
然而，這些性能/適用性的提高反過(guò)來(lái)很容易導(dǎo)致由于這種相機(jī)抖動(dòng)而造成圖像模糊。特別是對(duì)于安裝在移動(dòng)電話(huà)上的數(shù)字相機(jī)，由于總是隨身攜帶，所以經(jīng)常在例如光線(xiàn)很暗的地方拍照。但是經(jīng)常不安裝閃光燈。因此在這種情況下，與其它數(shù)字相機(jī)相比，很容易發(fā)生由于相機(jī)抖動(dòng)而造成圖像模糊。
已經(jīng)提出一種光學(xué)圖像校正方法和一種通過(guò)數(shù)字處理的圖像校正方法，作為處理相機(jī)抖動(dòng)的方法。
對(duì)于通常的數(shù)字相機(jī)，所述光學(xué)圖像校正方法已經(jīng)進(jìn)入商業(yè)化；而對(duì)于安裝在移動(dòng)電話(huà)上的數(shù)字相機(jī)，所述通過(guò)數(shù)字處理的圖像校正方法的商業(yè)化才剛剛開(kāi)始。
作為其它的相機(jī)抖動(dòng)校正方法，例如，公知的有專(zhuān)利參考文獻(xiàn)1和2公開(kāi)的方法。
專(zhuān)利參考文獻(xiàn)1公開(kāi)這樣一種技術(shù)，即自動(dòng)將快門(mén)速度和感光度(增益值)提高n倍，一次拍攝圖像n幀，并且基于通過(guò)一系列成像獲得的n條圖像數(shù)據(jù)而獲得相機(jī)抖動(dòng)得到校正的圖像數(shù)據(jù)。
專(zhuān)利參考文獻(xiàn)2公開(kāi)這樣一種技術(shù)，即如果預(yù)計(jì)計(jì)算的適當(dāng)曝光時(shí)間比相機(jī)抖動(dòng)限制曝光時(shí)間長(zhǎng)，則在比相機(jī)抖動(dòng)限制曝光時(shí)間更短的曝光時(shí)間內(nèi)拍攝多個(gè)圖像。
專(zhuān)利參考文獻(xiàn)3公開(kāi)一種圖像處理裝置，用于校正圖像拍攝裝置所拍攝圖像的相機(jī)抖動(dòng)。這種圖像處理裝置包括連續(xù)圖像拍攝單元，以指定時(shí)間間隔連續(xù)拍攝對(duì)象并獲得多個(gè)圖像；相機(jī)抖動(dòng)檢測(cè)單元，根據(jù)連續(xù)圖像拍攝的定時(shí)(timing)來(lái)檢測(cè)關(guān)于圖像拍攝裝置的相機(jī)抖動(dòng)的相機(jī)抖動(dòng)信息；以及相機(jī)抖動(dòng)校正單元，基于與相機(jī)抖動(dòng)檢測(cè)單元檢測(cè)的每一圖像對(duì)應(yīng)的相機(jī)抖動(dòng)信息和連續(xù)圖像拍攝單元拍攝的多個(gè)圖像來(lái)校正所述多個(gè)圖像之一的相機(jī)抖動(dòng)。因此，圖像拍攝裝置可以以高精確性、高速度校正其相機(jī)抖動(dòng)，拍攝拍攝者期望的情景。
在專(zhuān)利參考文獻(xiàn)4公開(kāi)的具有連續(xù)圖像拍攝功能的電子相機(jī)中，相機(jī)抖動(dòng)信息存儲(chǔ)在RAM中，并且在將連續(xù)圖像拍攝時(shí)獲得的連續(xù)圖像數(shù)據(jù)文件記錄在存儲(chǔ)卡上時(shí)，添加并記錄相機(jī)抖動(dòng)信息，所述相機(jī)抖動(dòng)信息表示在連續(xù)圖像拍攝時(shí)來(lái)自角速度傳感器的對(duì)相機(jī)抖動(dòng)狀態(tài)的檢測(cè)結(jié)果。當(dāng)再現(xiàn)記錄在存儲(chǔ)卡上的連續(xù)圖像時(shí)，基于添加的相機(jī)抖動(dòng)信息來(lái)執(zhí)行相機(jī)抖動(dòng)校正。因此，具有相機(jī)抖動(dòng)校正功能以保持高圖像質(zhì)量的電子相機(jī)不需要設(shè)置復(fù)雜的結(jié)構(gòu)。
專(zhuān)利參考文獻(xiàn)1日本專(zhuān)利申請(qǐng)No.2004-266648，“相機(jī)抖動(dòng)校正設(shè)備和相機(jī)抖動(dòng)校正程序”。
專(zhuān)利參考文獻(xiàn)2日本專(zhuān)利申請(qǐng)No.2004-279514，“相機(jī)抖動(dòng)補(bǔ)償裝置”。
專(zhuān)利參考文獻(xiàn)3日本專(zhuān)利申請(qǐng)No.2002-247444，“圖像處理器和記錄圖像處理程序的記錄介質(zhì)”。
專(zhuān)利參考文獻(xiàn)4日本專(zhuān)利申請(qǐng)No.2000-299813，“電子圖像拾取裝置”。

發(fā)明內(nèi)容
本發(fā)明的一個(gè)目的是提供一種具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置及其相機(jī)抖動(dòng)校正方法，其能夠避免由于執(zhí)行相機(jī)抖動(dòng)校正和由于不執(zhí)行相機(jī)抖動(dòng)校正而產(chǎn)生的圖像質(zhì)量的降低。
本發(fā)明的另一個(gè)目的是提供一種具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置及其相機(jī)抖動(dòng)校正方法，其能夠獲得相機(jī)抖動(dòng)影響得到抑制的、質(zhì)量良好的圖像。
在本發(fā)明的第一方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置包括圖像傳感器，將指定曝光時(shí)間內(nèi)從待拍攝對(duì)象接收的光轉(zhuǎn)換為電荷，并輸出光電轉(zhuǎn)換數(shù)據(jù)；圖像數(shù)據(jù)產(chǎn)生單元，基于光電轉(zhuǎn)換數(shù)據(jù)產(chǎn)生圖像數(shù)據(jù)；圖像拍攝控制單元，根據(jù)圖像拍攝指令將曝光控制信息輸出至所述圖像傳感器，并提取一條或多條圖像數(shù)據(jù)；以及校正單元，基于多條提取的圖像數(shù)據(jù)產(chǎn)生一條校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。
在本發(fā)明的第二方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置即第一方案中的圖像拍攝裝置，并且還包括曝光控制單元，計(jì)算曝光時(shí)間和增益值作為曝光控制信息，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；以及確定單元，確定計(jì)算的增益值是否等于或大于一預(yù)定閾值。如果確定增益值等于或大于該閾值，則圖像拍攝控制單元提取一條圖像數(shù)據(jù)。如果確定增益值小于該閾值，則圖像拍攝控制單元提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
在這種情況下，如果通過(guò)將多次圖像拍攝中每一條圖像數(shù)據(jù)的曝光時(shí)間相加所獲得的總曝光時(shí)間等于一次圖像拍攝的曝光時(shí)間，則基于多次圖像拍攝所獲得的多條圖像數(shù)據(jù)(用于相機(jī)抖動(dòng)校正)而得到的校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)的S/N比小于通過(guò)一次圖像拍攝所獲得的一條圖像數(shù)據(jù)(用于正常圖像拍攝)的S/N比。
在這種情況下，在圖像質(zhì)量降低的區(qū)域(高增益值的區(qū)域)中，與通過(guò)使用從多個(gè)連續(xù)圖像獲得的圖像數(shù)據(jù)(校正了相機(jī)抖動(dòng))來(lái)抑制相機(jī)抖動(dòng)的影響時(shí)相比，當(dāng)使用一條圖像數(shù)據(jù)時(shí)可獲得在視覺(jué)上質(zhì)量更好的圖像，其中所述一條圖像數(shù)據(jù)是在通過(guò)將多次圖像拍攝的每一條圖像數(shù)據(jù)的曝光時(shí)間相加所獲得的曝光時(shí)間內(nèi)通過(guò)一次圖像拍攝而得到的，不采用任何處理。
特別地，通過(guò)在一范圍附近指定增益值并降低作為其閾值，以及確定單元15根據(jù)計(jì)算的增益值是否等于或大于該閾值來(lái)確定是否連續(xù)拍攝(校正相機(jī)抖動(dòng))，可改善S/N比低(增益值高)的圖像質(zhì)量，從而避免由于相機(jī)抖動(dòng)校正導(dǎo)致圖像質(zhì)量的降低，其中在所述范圍附近，通過(guò)組合多個(gè)連續(xù)圖像得到的圖像的S/N比等于或小于圖像質(zhì)量容許限度。
在本發(fā)明的第三方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置即第一方案的圖像拍攝裝置，并且還包括曝光控制單元，計(jì)算曝光時(shí)間和增益值作為曝光控制信息，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；以及確定單元，確定設(shè)置的數(shù)字縮放倍率值是否等于或大于一預(yù)定閾值。如果確定數(shù)字縮放倍率值等于或大于該閾值，則圖像拍攝控制單元提取用于正常圖像拍攝的一條圖像數(shù)據(jù)。如果確定數(shù)字縮放倍率值小于該閾值，則圖像拍攝控制單元提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
在這種情況下，當(dāng)數(shù)字縮放倍率增加至大于某種程度時(shí)，有時(shí)候，由于根據(jù)該倍率對(duì)圖像進(jìn)行的放大處理，用于該圖像中位置匹配的特征點(diǎn)的提取精度明顯降低。因此，當(dāng)通過(guò)對(duì)多次圖像拍攝所獲得的每一條圖像數(shù)據(jù)進(jìn)行重疊而獲得校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)時(shí)，有時(shí)候，由于重疊使模糊擴(kuò)展，結(jié)果校正的圖像質(zhì)量明顯降低。
因此，在數(shù)字縮放倍率中設(shè)置閾值，如果設(shè)置的數(shù)字縮放倍率值等于或大于該閾值，則僅拍攝一次圖像，并且不校正相機(jī)抖動(dòng)。如果設(shè)置的數(shù)字縮放倍率值小于該閾值，則拍攝多次圖像，并且校正相機(jī)抖動(dòng)。因此，如果數(shù)字縮放倍率增加至大于某種程度，可避免將連續(xù)拍攝對(duì)象所獲得的每一圖像重疊所得到的組合后的圖像質(zhì)量明顯降低。
在本發(fā)明的第四方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置即第一方案的圖像拍攝裝置，并且還包括曝光控制單元，計(jì)算曝光時(shí)間和增益值，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；曝光時(shí)間閾值獲取單元，基于存儲(chǔ)相對(duì)于數(shù)字縮放倍率值的容許曝光時(shí)間閾值的縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元來(lái)獲得與設(shè)定的數(shù)字縮放倍率相應(yīng)的曝光時(shí)間閾值；以及確定單元，確定計(jì)算的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值。如果確定計(jì)算的曝光時(shí)間等于或小于所獲得的曝光時(shí)間閾值，則圖像拍攝控制單元提取用于正常圖像拍攝的一條圖像數(shù)據(jù)。如果確定計(jì)算的曝光時(shí)間大于所獲得的曝光時(shí)間閾值，則圖像拍攝控制單元提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
在這種情況下，通常，如果曝光時(shí)間較短，則由于相機(jī)抖動(dòng)而在拍攝的圖像上產(chǎn)生的模糊影響很小。然而，隨著數(shù)字縮放倍率增加，由于相機(jī)抖動(dòng)所造成的圖像上的模糊也擴(kuò)展了。如果數(shù)字縮放倍率的變化范圍沒(méi)有這么大，那么在此范圍內(nèi)，由于對(duì)多次圖像拍攝所獲得的多個(gè)圖像重疊而造成的模糊沒(méi)有明顯擴(kuò)展。
因此，如果數(shù)字縮放倍率值在由于將多個(gè)圖像重疊而造成的模糊沒(méi)有明顯擴(kuò)展的范圍內(nèi)變化，則通過(guò)由曝光時(shí)間閾值獲取單元基于縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元而獲得與指定數(shù)字縮放倍率值相應(yīng)的曝光時(shí)間閾值，以及通過(guò)確定單元確定計(jì)算的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值，以在所述由于將多個(gè)圖像重疊而造成的模糊沒(méi)有明顯擴(kuò)展的范圍內(nèi)，根據(jù)數(shù)字縮放倍率的增加，通過(guò)盡可能校正相機(jī)抖動(dòng)使得從圖像消除模糊的影響，其中所述縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元相應(yīng)使得用于保持圖像質(zhì)量的曝光時(shí)間閾值與數(shù)字縮放值成反比。因此，可避免由于增加數(shù)字縮放倍率導(dǎo)致在圖像上模糊的擴(kuò)展，以及由于沒(méi)有進(jìn)行相機(jī)抖動(dòng)校正而導(dǎo)致圖像質(zhì)量的降低。
在本發(fā)明的第五方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置即第一方案的圖像拍攝裝置，其中所述圖像拍攝控制單元根據(jù)圖像拍攝指令輸出曝光控制信息至圖像傳感器，實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝和用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝，并提取多條圖像數(shù)據(jù)。所述圖像拍攝裝置還包括用戶(hù)接口單元，用于選擇和存儲(chǔ)正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的由校正單元獲得的圖像數(shù)據(jù)兩種數(shù)據(jù)或其中一種數(shù)據(jù)。
在這種情況下，在一次圖像拍攝指令中，提取用于正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。然后，選擇用于正常圖像拍攝的圖像數(shù)據(jù)或校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)，或者以上兩種圖像數(shù)據(jù)，并由用戶(hù)接口單元存儲(chǔ)。因此，通過(guò)選擇兩種圖像數(shù)據(jù)中相機(jī)抖動(dòng)較少的圖像數(shù)據(jù)，可獲得相機(jī)抖動(dòng)影響得到抑制的、高質(zhì)量的圖像數(shù)據(jù)。
在本發(fā)明的第六方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置即第一方案的圖像拍攝裝置，其中所述圖像拍攝控制單元根據(jù)圖像拍攝指令輸出曝光控制信息至圖像傳感器，實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝和用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝，并提取多條圖像數(shù)據(jù)。所述圖像拍攝裝置還包括邊界提取單元，提取正常圖像拍攝的圖像數(shù)據(jù)和通過(guò)校正單元所獲得的校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)各自的邊界，其中所述邊界是在每一圖像中密度變化的分界線(xiàn)；以及存儲(chǔ)單元，存儲(chǔ)被提取邊界的分辨率較高的圖像數(shù)據(jù)。
同樣，在這種情況下，在一次圖像拍攝指令中，提取用于正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。然后，在用于正常圖像拍攝的圖像和校正了相機(jī)抖動(dòng)的兩種圖像數(shù)據(jù)中，將被提取邊界的分辨率較高的圖像數(shù)據(jù)存儲(chǔ)在存儲(chǔ)單元中。因此，可獲得相機(jī)抖動(dòng)影響得到抑制的、高質(zhì)量的圖像數(shù)據(jù)。
在本發(fā)明的第七方案中，具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置即第一方案的圖像拍攝裝置，其中所述圖像拍攝控制單元根據(jù)圖像拍攝指令輸出曝光控制信息至圖像傳感器，拍攝不校正相機(jī)抖動(dòng)的正常圖像和用于相機(jī)抖動(dòng)校正的連續(xù)圖像，并提取多條圖像數(shù)據(jù)。該圖像拍攝裝置還包括S/N比計(jì)算單元，計(jì)算正常圖像拍攝的圖像數(shù)據(jù)和通過(guò)校正單元獲得的校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)各自的S/N比，所述各S/N比是通過(guò)將必要信號(hào)電平除包含在信號(hào)中的噪音電平而獲得的值；以及存儲(chǔ)單元，存儲(chǔ)計(jì)算的S/N比較高的圖像數(shù)據(jù)。
同樣，在這種情況下，在一次圖像拍攝指令中，提取用于正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。然后，在用于正常圖像拍攝的圖像和校正了相機(jī)抖動(dòng)的兩種圖像數(shù)據(jù)中，S/N比較高的圖像數(shù)據(jù)通過(guò)S/N比計(jì)算單元來(lái)存儲(chǔ)，其中所述S/N比是通過(guò)將必要信號(hào)電平除包含在信號(hào)中的噪音電平來(lái)獲得的值。因此，可獲得相機(jī)抖動(dòng)影響得到抑制的、高質(zhì)量的圖像數(shù)據(jù)。
根據(jù)本發(fā)明，在圖像質(zhì)量降低的區(qū)域(高增益值的區(qū)域)中，與通過(guò)使用連續(xù)圖像拍攝的多條圖像數(shù)據(jù)所獲得的圖像數(shù)據(jù)(校正了相機(jī)抖動(dòng))來(lái)抑制相機(jī)抖動(dòng)影響相比，使用一條圖像數(shù)據(jù)可以更好地改善S/N比較低的圖像的質(zhì)量，其中所述一條圖像數(shù)據(jù)是在通過(guò)將連續(xù)圖像拍攝的每一條圖像數(shù)據(jù)的曝光時(shí)間相加所獲得的曝光時(shí)間內(nèi)得到的，不采用任何處理。
根據(jù)本發(fā)明，在數(shù)字縮放倍率增加至大于某種程度以及由于將多個(gè)圖像重疊而產(chǎn)生的模糊明顯擴(kuò)展的范圍內(nèi)，可通過(guò)避免相機(jī)抖動(dòng)校正來(lái)避免通過(guò)將連續(xù)圖像拍攝的各圖像重疊所獲得的組合圖像的質(zhì)量在視覺(jué)上明顯降低。
根據(jù)本發(fā)明，在由于將多個(gè)圖像重疊而產(chǎn)生的模糊沒(méi)有明顯擴(kuò)展的范圍內(nèi)，當(dāng)數(shù)字縮放倍率增加時(shí)，可通過(guò)盡可能校正相機(jī)抖動(dòng)從圖像上消除模糊的影響。因此，可避免通過(guò)增加數(shù)字縮放倍率而產(chǎn)生的模糊的擴(kuò)展。
根據(jù)本發(fā)明，可獲得相機(jī)抖動(dòng)影響得到抑制的、質(zhì)量更好的圖像數(shù)據(jù)。


圖1是示出本發(fā)明第一、第二和第三優(yōu)選實(shí)施例中共有的圖像拍攝裝置的結(jié)構(gòu)框圖；圖2A示出圖1中的圖像拍攝控制單元在單次圖像拍攝模式下的操作；圖2B示出圖1中的圖像拍攝控制單元在連續(xù)圖像拍攝模式下的操作；圖3是示出由圖1中的校正單元執(zhí)行的相機(jī)抖動(dòng)校正處理的概要流程圖。
圖4概念性地示出S/N比與增益值之間的關(guān)系。
圖5是示出本發(fā)明第一優(yōu)選實(shí)施例中通過(guò)圖像拍攝裝置執(zhí)行的圖像拍攝處理的流程圖。
圖6是示出本發(fā)明第二優(yōu)選實(shí)施例中主要部分的結(jié)構(gòu)框圖。
圖7示出縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元的數(shù)據(jù)結(jié)構(gòu)(第一種)；圖8是對(duì)應(yīng)于圖7中所示的縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元的曲線(xiàn)圖，其中橫軸表示數(shù)字縮放倍率，縱軸表示曝光時(shí)間；圖9是示出本發(fā)明第三優(yōu)選實(shí)施例中主要部分的結(jié)構(gòu)框圖；圖10是示出本發(fā)明第三優(yōu)選實(shí)施例中的確定處理的流程圖；圖11示出縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元的數(shù)據(jù)結(jié)構(gòu)(第二種)；圖12是對(duì)應(yīng)于圖11中所示的縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元的的曲線(xiàn)圖，其中橫軸表示數(shù)字縮放倍率，縱軸表示曝光時(shí)間；圖13A和圖13B說(shuō)明在第四、第五和第六優(yōu)選實(shí)施例中的曝光功能，其中為相機(jī)抖動(dòng)校正而實(shí)施三次連續(xù)圖像拍攝；圖14是示出本發(fā)明第四、第五和第六優(yōu)選實(shí)施例中共有的圖像拍攝裝置的結(jié)構(gòu)框圖；圖15是第四優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖；圖16示出在第四優(yōu)選實(shí)施例中的操作過(guò)程；
圖17是第五優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖；圖18示出在第五優(yōu)選實(shí)施例中的操作過(guò)程；圖19是第六優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖；圖20示出在第六優(yōu)選實(shí)施例中的操作過(guò)程；圖21是示出第七優(yōu)選實(shí)施例中涉及用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器的各單元的框圖；圖22是第七優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖；圖23是示出第八優(yōu)選實(shí)施例中涉及用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器的各單元的框圖；圖24是第八優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖；圖25是第七和第八優(yōu)選實(shí)施例的組合流程圖；以及圖26示出存儲(chǔ)介質(zhì)的實(shí)例。
具體實(shí)施例方式
以下參照附圖詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。
圖1示出本發(fā)明第一、第二和第三優(yōu)選實(shí)施例中共有的圖像拍攝裝置的結(jié)構(gòu)框圖。對(duì)于第一至第三優(yōu)選實(shí)施例中的每一個(gè)，確定單元15用于確定的邏輯均不同。
在圖1中，圖像拍攝裝置10包括鏡頭11，用于將來(lái)自拍攝目標(biāo)(待拍攝對(duì)象)的光聚集在圖像傳感器12上；圖像傳感器12，其配置有光接收單元(圖1中未示出)和信號(hào)輸出單元(圖1中也未示出)，所述光接收單元用于將通過(guò)鏡頭11從拍攝目標(biāo)接收的光轉(zhuǎn)換成電荷并進(jìn)行存儲(chǔ)，所述信號(hào)輸出單元用于輸出已存儲(chǔ)的電荷作為光電轉(zhuǎn)換數(shù)據(jù)；自動(dòng)增益控制(AGC)電路16，用于控制從圖像傳感器12輸出的光電轉(zhuǎn)換數(shù)據(jù)的增益；模數(shù)轉(zhuǎn)換器(ADC)17，用于將增益受控制的光電轉(zhuǎn)換數(shù)據(jù)從模擬值轉(zhuǎn)換為數(shù)字值；圖像處理單元(又稱(chēng)為“圖像信號(hào)處理器”(ISP))18，用于基于ADC 17的輸出產(chǎn)生圖像數(shù)據(jù)；曝光控制單元14，用于計(jì)算拍攝對(duì)象的曝光時(shí)間和增益值，其中曝光時(shí)間即用于存儲(chǔ)電荷的時(shí)間，增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；確定單元15，用于確定計(jì)算的增益值是否等于或大于預(yù)定閾值；以及圖像拍攝控制單元13，用于根據(jù)圖像拍攝指令將包括計(jì)算的曝光控制信息(曝光時(shí)間和增益值)的控制信號(hào)輸出至圖像傳感器12，并通過(guò)圖像傳感器12的圖像拍攝處理(由光接收單元和信號(hào)輸出單元進(jìn)行)提取一條或多條圖像數(shù)據(jù)。
如果確定單元15確定曝光控制單元14計(jì)算的增益值等于或大于閾值，則圖像拍攝控制單元13通過(guò)圖像傳感器(光接收單元和信號(hào)輸出單元)12提取一條圖像數(shù)據(jù)。在這種情況下，如圖1所示，基于表示確定單元15的確定結(jié)果的信號(hào)將開(kāi)關(guān)21切換到上側(cè)，從而將提取的圖像數(shù)據(jù)輸出至在隨后階段中用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器(圖1中未示出)，而不對(duì)該圖像數(shù)據(jù)進(jìn)行任何處理。
如果確定單元15確定曝光控制單元14計(jì)算的增益值小于閾值，則圖像拍攝控制單元13通過(guò)圖像傳感器(光接收單元和信號(hào)輸出單元)12提取多條圖像數(shù)據(jù)。在這種情況下，基于表示確定單元15的確定結(jié)果的信號(hào)將開(kāi)關(guān)21切換到圖1中所示的相反一側(cè)(下側(cè))，從而將(多條)提取的圖像數(shù)據(jù)連續(xù)存儲(chǔ)到存儲(chǔ)器22中。然后，校正單元23基于存儲(chǔ)在存儲(chǔ)器22中的所述多條圖像數(shù)據(jù)產(chǎn)生一條校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)，并將產(chǎn)生的圖像數(shù)據(jù)(校正了相機(jī)抖動(dòng))輸出至在隨后階段中用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器(圖1中未示出)。
在圖像拍攝控制單元13、曝光控制單元14、確定單元15、圖像處理單元18和校正單元23是通過(guò)程序來(lái)實(shí)現(xiàn)的情況下，用于實(shí)現(xiàn)圖像拍攝控制單元13、曝光控制單元14、確定單元15、圖像處理單元18的中央處理單元(CPU)與用于實(shí)現(xiàn)校正單元23(用于相機(jī)抖動(dòng)校正)的CPU可以相同或者不同。
通過(guò)AGC電路16來(lái)放大圖像傳感器12輸出的光電轉(zhuǎn)換數(shù)據(jù)，通過(guò)ADC17將該光電轉(zhuǎn)換數(shù)據(jù)從模擬值轉(zhuǎn)換為數(shù)字值，然后將該光電轉(zhuǎn)換數(shù)據(jù)輸入至圖像處理單元18。
所述圖像處理單元18基于輸入信號(hào)(又稱(chēng)為“原始數(shù)據(jù))執(zhí)行分色處理、用于在顯示屏上線(xiàn)性表示亮度的伽馬校正處理、用于在不考慮光源等溫度的情況下表示白色的白平衡控制處理等。通過(guò)所述分色處理，輸入的信號(hào)轉(zhuǎn)換成要求的格式，例如YUV信號(hào)、RGB信號(hào)等。
曝光控制單元14計(jì)算的增益值G表示將圖像傳感器12輸出的光電轉(zhuǎn)換數(shù)據(jù)放大多少倍。特別地，如果通過(guò)AGC電路16將來(lái)自圖像傳感器12的光電轉(zhuǎn)換數(shù)據(jù)放大G1倍，則通過(guò)圖像處理單元18進(jìn)一步將與該圖像中的像素對(duì)應(yīng)的數(shù)據(jù)放大G/G1倍，從而使該像素的像素分量放大所需的G倍。
在這種情況下，圖像處理單元18產(chǎn)生與用戶(hù)通過(guò)用戶(hù)接口單元指定的數(shù)字縮放倍率相應(yīng)的圖像數(shù)據(jù)。
圖2A和圖2B分別示出圖像拍攝控制單元13在單次和連續(xù)圖像拍攝模式下的操作。
在單次圖像拍攝模式下，圖像拍攝控制單元13進(jìn)行一次圖像數(shù)據(jù)的提取。在圖2A中，與每133msec發(fā)送的垂直同步信號(hào)(VSYNC信號(hào))同步開(kāi)始曝光(電荷的存儲(chǔ))。圖2A示出曝光控制單元14將曝光時(shí)間設(shè)置為200msec的情況。
在連續(xù)圖像拍攝模式下，圖像拍攝控制單元13進(jìn)行多次(次數(shù)n；n＝2，或大于2的整數(shù))圖像數(shù)據(jù)的提取。圖2B示出n＝3的情況。在圖2B中，也是與每133msec發(fā)送的垂直同步信號(hào)(VSYNC信號(hào))同步開(kāi)始曝光(電荷的存儲(chǔ))。
圖2B示出曝光控制單元14將曝光時(shí)間設(shè)置為200msec的情況。在這種情況下，將曝光時(shí)間(200msec)除圖像數(shù)據(jù)提取次數(shù)(三次)計(jì)算的值(66msec)作為每一條圖像數(shù)據(jù)的曝光時(shí)間。在連續(xù)圖像拍攝的情況下，校正單元23基于通過(guò)連續(xù)圖像拍攝所獲得的多條圖像數(shù)據(jù)來(lái)執(zhí)行相機(jī)抖動(dòng)校正，并獲得一條校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。通常，如果連續(xù)圖像拍攝獲得的圖像個(gè)數(shù)和曝光控制單元14計(jì)算的曝光時(shí)間分別是N和E，則在執(zhí)行用于相機(jī)抖動(dòng)校正的這種連續(xù)圖像拍攝時(shí)，每一條圖像數(shù)據(jù)的曝光時(shí)間給定為E/N。
有時(shí)，在單次和連續(xù)圖像拍攝兩種情況下使用相同的增益值；有時(shí)，將連續(xù)圖像拍攝情況下的增益值設(shè)置為在單次圖像拍攝情況下增益值的n倍(n＝連續(xù)圖像拍攝次數(shù))。
也可以使用除了VSYNC信號(hào)之外的信號(hào)來(lái)確定曝光開(kāi)始定時(shí)。
如上所述，通過(guò)連續(xù)圖像拍攝所獲得的多條圖像數(shù)據(jù)存儲(chǔ)在圖1所示的存儲(chǔ)器22中，然后校正單元23基于存儲(chǔ)在所述存儲(chǔ)器22中的多條圖像數(shù)據(jù)產(chǎn)生一條校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。
圖3示出由校正單元23執(zhí)行的相機(jī)抖動(dòng)校正處理的概要流程圖。
在圖3中，首先在步驟S101，在從存儲(chǔ)器22獲得的多條圖像數(shù)據(jù)中對(duì)所述圖像數(shù)據(jù)的位置進(jìn)行匹配。在這種位置匹配中，計(jì)算在所述多條圖像數(shù)據(jù)中的偏移量。例如，在獲得三條圖像數(shù)據(jù)的情況下，計(jì)算將三條圖像數(shù)據(jù)中的第一圖像數(shù)據(jù)相對(duì)于第二圖像數(shù)據(jù)(基準(zhǔn)圖像數(shù)據(jù))滑動(dòng)多少，以及將第三圖像數(shù)據(jù)相對(duì)于第二圖像數(shù)據(jù)滑動(dòng)多少，從而使相應(yīng)的像素可彼此重疊。
然后，在步驟S102，通過(guò)基于位置匹配的結(jié)果來(lái)組合多條圖像數(shù)據(jù)，以執(zhí)行相機(jī)抖動(dòng)校正處理(圖像組合處理)。在這種圖像組合處理中，例如，對(duì)于在所有圖像數(shù)據(jù)中相應(yīng)的各像素來(lái)說(shuō)，這些像素的值被重疊，并且反映在組合后的圖像數(shù)據(jù)中的像素中。對(duì)于僅存在于任一條圖像數(shù)據(jù)中的像素來(lái)說(shuō)，像素的值與待重疊數(shù)量相乘，并且反映在組合后的圖像數(shù)據(jù)中的像素中。
以下說(shuō)明當(dāng)曝光控制單元14計(jì)算的增益值較大時(shí)，以及通過(guò)連續(xù)圖像拍攝獲得的多條圖像數(shù)據(jù)被重疊時(shí)所引起的不便。
當(dāng)組合N條圖像數(shù)據(jù)時(shí)，該N條圖像數(shù)據(jù)的每一像素具有隨機(jī)噪音。因此，例如，當(dāng)在所有圖像中添加相應(yīng)像素時(shí)，信號(hào)電平增加至每一條圖像數(shù)據(jù)的信號(hào)電平的N倍。然而，平均噪音電平僅增加至每一條圖像數(shù)據(jù)的噪音電平的N1/2倍。
如上所述，如果在通過(guò)連續(xù)圖像拍攝提取N條圖像數(shù)據(jù)時(shí)，通過(guò)將曝光控制單元14計(jì)算的曝光時(shí)間E乘以1/N來(lái)確定每一條圖像數(shù)據(jù)的曝光時(shí)間，則表示每一圖像的噪音的S/N比的值與每一條圖像數(shù)據(jù)中的曝光時(shí)間成比例，特別地，其值為在曝光時(shí)間E內(nèi)所獲得的圖像數(shù)據(jù)的S/N比的1/N倍。由于如上所述，噪音隨機(jī)地附加在圖像數(shù)據(jù)的每一像素上，所以在組合的圖像數(shù)據(jù)中，S/N比為在曝光時(shí)間E內(nèi)所獲得的圖像數(shù)據(jù)的S/N比的N1/2/N倍。由于N是2或更大的整數(shù)，所以所述值(N1/2/N)小于1。特別地，例如，如果通過(guò)將多次圖像拍攝中每次圖像數(shù)據(jù)的曝光時(shí)間相加而獲得的曝光時(shí)間等于在一次圖像拍攝中的曝光時(shí)間，則通過(guò)組合多次圖像拍攝(連續(xù)圖像拍攝)所獲得的多條圖像數(shù)據(jù)所得到的圖像數(shù)據(jù)的S/N比小于通過(guò)一次圖像拍攝所獲得的一條圖像數(shù)據(jù)的S/N比。
然而，由于相機(jī)抖動(dòng)量與曝光時(shí)間成比例，所以即使使用連續(xù)圖像拍攝的多個(gè)圖像組合得到的圖像的S/N比降低得更多，相機(jī)抖動(dòng)的影響也很小。因此，有時(shí)用人眼看起來(lái)好像圖像質(zhì)量提高了。
在這種情況下，S/N比表示信號(hào)與噪音的比，也是用于評(píng)估聲音和圖像質(zhì)量的指數(shù)。特別地，通過(guò)將必要的信號(hào)電平除包括在信號(hào)中的噪音電平來(lái)獲得S/N比。其單位是dB(分貝)。通常，該值越高，噪音越低(質(zhì)量高)。由于噪音的幅度不確定，所以噪音量級(jí)通過(guò)標(biāo)準(zhǔn)偏移來(lái)表示，并且經(jīng)常將利用表達(dá)式“平均信號(hào)電平/噪音標(biāo)準(zhǔn)偏移”測(cè)量S/N比的方法作為簡(jiǎn)單的測(cè)量方法。
圖4概念性地示出S/N比與增益值之間的關(guān)系。
當(dāng)增益值增加時(shí)，包含在圖像中的噪音增加。因此，在這種情況下，S/N比降低，圖像質(zhì)量降低。特別地，S/N比與增益值成反比。在圖4中，需要注意的是，在縱軸上S/N比的箭頭標(biāo)志的方向是從較高值指向較低值。
在圖4中，直線(xiàn)(1)表示增益值和圖像數(shù)據(jù)的S/N比之間的關(guān)系，所述圖像數(shù)據(jù)是使用對(duì)連續(xù)圖像拍攝的多條圖像數(shù)據(jù)進(jìn)行組合而得到的，直線(xiàn)(2)表示增益值和一條圖像數(shù)據(jù)的S/N比之間的關(guān)系，所述一條圖像數(shù)據(jù)是在通過(guò)將連續(xù)圖像拍攝的每一條圖像數(shù)據(jù)的曝光時(shí)間相加所獲得的曝光時(shí)間內(nèi)得到的。與橫軸(增益值)平行的直線(xiàn)(3)表示在使用人眼觀(guān)看的情況下與圖像質(zhì)量的容許限度相應(yīng)的S/N比。
例如，盡管在高S/N比區(qū)域中，如圖4中箭頭標(biāo)志A所示，由于使用連續(xù)圖像拍攝的多條圖像數(shù)據(jù)所獲得的圖像而引起的圖像質(zhì)量的降低幾乎不能從視覺(jué)上識(shí)別，但是在低S/N比區(qū)域中，如箭頭標(biāo)志B所示，這種圖像質(zhì)量的降低不能忽略。
結(jié)果，在箭頭標(biāo)志B標(biāo)出的區(qū)域中(在圖像質(zhì)量降低的區(qū)域中，在增益值較高的區(qū)域中)，與通過(guò)使用連續(xù)圖像拍攝(以抑制在校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)中相機(jī)抖動(dòng)的影響)的多個(gè)圖像所獲得的校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)(直線(xiàn)(1)的實(shí)線(xiàn)部分)相比，可以從一條圖像數(shù)據(jù)(直線(xiàn)(2)的實(shí)線(xiàn)部分)獲得在視覺(jué)上質(zhì)量更好的圖像，其中所述一條圖像數(shù)據(jù)是在通過(guò)將連續(xù)圖像拍攝的每一條圖像數(shù)據(jù)的曝光時(shí)間相加所獲得的曝光時(shí)間內(nèi)得到的，不采用任何處理。
特別地，通過(guò)在一范圍附近指定增益值并降低作為其閾值，以及確定單元15基于計(jì)算的增益值是否等于或大于該閾值來(lái)確定是否連續(xù)拍攝(換句話(huà)說(shuō)，校正相機(jī)抖動(dòng))，可改善S/N比低(增益值高)的圖像質(zhì)量，其中在所述范圍附近，使用連續(xù)圖像拍攝的多個(gè)圖像組合得到的圖像的S/N比(直線(xiàn)(1))等于或小于圖像質(zhì)量容許限度(直線(xiàn)(3))。
圖5示出在此優(yōu)選實(shí)施例中通過(guò)圖像拍攝裝置執(zhí)行圖像拍攝處理的流程圖。由圖像拍攝裝置的用戶(hù)按壓快門(mén)按鈕(圖像拍攝按鈕)作為觸發(fā)來(lái)開(kāi)始一系列處理。
在圖5中，首先在步驟S201，在打開(kāi)快門(mén)之后，曝光控制單元14在第一指定時(shí)間內(nèi)基于測(cè)量的亮度信息計(jì)算曝光控制信息(曝光時(shí)間和增益值)。然后，在步驟S202，確定單元15確定計(jì)算的增益值是否等于或大于其閾值。
如果在步驟S202確定計(jì)算的增益值小于閾值，則在步驟S203，圖像傳感器12基于來(lái)自圖像拍攝控制單元13的控制信號(hào)執(zhí)行其圖像拍攝處理。
在此優(yōu)選實(shí)施例中，例如，盡管連續(xù)圖像拍攝的次數(shù)N是基于一種表(在所述表中，對(duì)于曝光控制單元14計(jì)算的每一曝光時(shí)間，連續(xù)圖像拍攝的次數(shù)N是對(duì)應(yīng)的)來(lái)確定，但是也可以通過(guò)其它方法來(lái)確定。
圖像拍攝控制單元13通過(guò)將計(jì)算的曝光時(shí)間E除連續(xù)圖像拍攝的次數(shù)N來(lái)計(jì)算在連續(xù)圖像拍攝過(guò)程中進(jìn)行一次圖像拍攝的曝光時(shí)間(E/N)。
關(guān)于增益值，存在兩種情況，即在連續(xù)圖像拍攝的情況下，圖像拍攝控制單元13也使用曝光控制單元14計(jì)算的增益值，而不采用任何處理；以及在連續(xù)圖像拍攝的情況下，使用通過(guò)將曝光控制單元14計(jì)算的增益值乘以圖像拍攝次數(shù)N所獲得的值。在使用由曝光控制單元14計(jì)算的增益值而不采用任何處理的情況下，當(dāng)執(zhí)行相機(jī)抖動(dòng)校正時(shí)，圖像處理單元18將多個(gè)圖像的相應(yīng)像素重疊，而不采用任何處理。然而，在將增益值與N相乘的情況下，當(dāng)執(zhí)行相機(jī)抖動(dòng)校正時(shí)，將多個(gè)圖像的相應(yīng)像素重疊，然后將像素的重疊值除圖像拍攝的次數(shù)N。
然后，在步驟S204，作為在步驟S203圖像拍攝處理的結(jié)果，從圖像傳感器12將光電轉(zhuǎn)換數(shù)據(jù)輸入至圖像處理單元18，圖像處理單元18執(zhí)行圖像數(shù)據(jù)產(chǎn)生處理。
在步驟S205，在存儲(chǔ)器22中存儲(chǔ)步驟S204產(chǎn)生的圖像數(shù)據(jù)。在步驟S206，確定圖像拍攝是否完成。如果圖像拍攝沒(méi)有完成，則返回至步驟S203。如果圖像拍攝完成，則中止所述一系列處理。
如果在步驟S202確定計(jì)算的增益值等于或大于閾值，則在步驟S207，圖像傳感器12基于圖像處理控制單元13的控制信號(hào)執(zhí)行圖像拍攝處理。在這種情況下，執(zhí)行一次圖像拍攝，不校正相機(jī)抖動(dòng)。圖像拍攝控制單元13在控制信號(hào)中指示圖像傳感器12使用計(jì)算的曝光時(shí)間和增益值來(lái)執(zhí)行一次圖像拍攝，而不采用任何處理。
然后，在步驟S208，作為在步驟S207圖像拍攝處理的結(jié)果，圖像傳感器12將光電轉(zhuǎn)換數(shù)據(jù)輸入至圖像處理單元18。然后，圖像處理單元18執(zhí)行圖像數(shù)據(jù)產(chǎn)生處理，并且將產(chǎn)生的圖像數(shù)據(jù)輸出至隨后階段。
接下來(lái)，描述本發(fā)明的第二優(yōu)選實(shí)施例。盡管在第一實(shí)施例中基于增益值是否等于或大于其閾值來(lái)確定是否執(zhí)行連續(xù)圖像拍攝(以校正相機(jī)抖動(dòng))，但是在第二實(shí)施例中，確定由用戶(hù)通過(guò)用戶(hù)接口單元設(shè)置的數(shù)字縮放倍率是否等于或大于其閾值以及確定是否根據(jù)上述確定的結(jié)果來(lái)執(zhí)行連續(xù)圖像拍攝(以校正相機(jī)抖動(dòng))。
圖6示出本發(fā)明第二優(yōu)選實(shí)施例中主要部分的結(jié)構(gòu)框圖。
在圖6中，在數(shù)字縮放倍率存儲(chǔ)單元32中存儲(chǔ)用戶(hù)通過(guò)用戶(hù)接口單元設(shè)置的數(shù)字縮放倍率。
當(dāng)確定是否校正相機(jī)抖動(dòng)時(shí)，圖像拍攝控制單元30的確定單元31從數(shù)字縮放倍率存儲(chǔ)單元32獲得數(shù)字縮放倍率，并確定所獲得的數(shù)字縮放倍率值是否等于或大于閾值。
在這種情況下，如果數(shù)字縮放倍率增加至大于某種程度，則由于根據(jù)該倍率對(duì)圖像進(jìn)行的放大處理而引起用于該圖像中位置匹配的特征點(diǎn)的提取精度明顯降低。然后，當(dāng)對(duì)連續(xù)圖像拍攝所獲得的每一圖像進(jìn)行重疊(組合)時(shí)，通過(guò)這種操作擴(kuò)展了由于重疊引起的模糊，并且組合后圖像的質(zhì)量明顯降低(在視覺(jué)上)。在檢測(cè)邊界(輪廓)之后，可通過(guò)僅從邊界提取容易區(qū)分的特征部分(例如，高密度點(diǎn)、端點(diǎn)、頂點(diǎn)、分支點(diǎn)和交叉點(diǎn))來(lái)獲得上述特征點(diǎn)，其中所述邊界(輪廓)指的是在圖像中密度變化的分界線(xiàn)。
在此第二優(yōu)選實(shí)施例中，在數(shù)字縮放倍率中設(shè)置閾值。然后，如果設(shè)置的數(shù)字縮放倍率值等于或大于該閾值，則不執(zhí)行連續(xù)圖像拍攝(相機(jī)抖動(dòng)校正)。如果設(shè)置的數(shù)字縮放倍率值小于該閾值，則執(zhí)行連續(xù)圖像拍攝(相機(jī)抖動(dòng)校正)。因此，如果數(shù)字縮放倍率增加至大于某種程度，可避免將連續(xù)圖像拍攝所獲得的每一圖像重疊所得到的組合圖像質(zhì)量的明顯降低(在視覺(jué)上)。
接下來(lái)，描述本發(fā)明的第三優(yōu)選實(shí)施例。
通常，當(dāng)曝光時(shí)間較短時(shí)，在拍攝的圖像上由于相機(jī)抖動(dòng)而造成模糊的影響很小。然而，當(dāng)數(shù)字縮放倍率增加時(shí)，由于相機(jī)抖動(dòng)所造成的圖像上的模糊也擴(kuò)展了。如果數(shù)字縮放倍率的變化范圍沒(méi)有這么大，則與第二優(yōu)選實(shí)施例不同的是，在該范圍內(nèi)，如同第二優(yōu)選實(shí)施例中通過(guò)連續(xù)圖像拍攝獲得的多個(gè)圖像的重疊所造成的模糊沒(méi)有明顯擴(kuò)展。在該范圍內(nèi)，當(dāng)數(shù)字縮放倍率增加時(shí)，優(yōu)選地，盡可能通過(guò)校正相機(jī)抖動(dòng)消除圖像上模糊的影響。為了實(shí)現(xiàn)這個(gè)目的，如圖7所示，在數(shù)字縮放倍率的變化范圍沒(méi)有這么大(在圖7中的0-8)的情況下，提供一種表(縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元)，在該表中用于(在視覺(jué)上)保持圖像質(zhì)量更好或保持在一定水平上的曝光時(shí)間閾值(th)與數(shù)字縮放值(的范圍)成反比例對(duì)應(yīng)。圖8是對(duì)應(yīng)于圖7中所示的縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元的曲線(xiàn)圖，其中橫軸表示數(shù)字縮放倍率，縱軸表示曝光時(shí)間。
在圖7和圖8中，將數(shù)字縮放倍率的上限設(shè)置為8倍。在圖7和圖8中，從圖像拍攝裝置收集數(shù)據(jù)，在所述圖像拍攝裝置中，將數(shù)字縮放值的范圍(0-8)設(shè)置為，在此范圍內(nèi)，通過(guò)連續(xù)圖像拍攝獲得的多個(gè)圖像的重疊所造成的模糊沒(méi)有明顯擴(kuò)展。
特別地，在此第三實(shí)施例中，如圖9所示，確定單元41基于縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元42(其中，曝光時(shí)間閾值與數(shù)字縮放倍率值(的范圍)成反比例對(duì)應(yīng))來(lái)獲得與特定數(shù)字縮放倍率值相應(yīng)的曝光時(shí)間閾值，并確定由曝光控制單元14計(jì)算的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值。然后，根據(jù)確定結(jié)果，確定單元41確定是否實(shí)施連續(xù)圖像拍攝(相機(jī)抖動(dòng)校正)。
圖10示出本發(fā)明第三優(yōu)選實(shí)施例中的確定處理的流程圖。通過(guò)以圖10中所示的每一步驟來(lái)代替在圖5中所示的步驟S202可獲得在第三優(yōu)選實(shí)施例中的圖像拍攝處理的流程圖。
在圖10中，首先在步驟S301，確定單元41基于縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元42獲得與設(shè)置的數(shù)字縮放倍率值(存儲(chǔ)在數(shù)字縮放倍率存儲(chǔ)單元32中的值)相應(yīng)的曝光時(shí)間閾值。然后，在步驟S302，確定單元41確定由曝光控制單元14計(jì)算的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值。
如果在步驟S302確定計(jì)算的曝光時(shí)間等于或小于所獲得的曝光時(shí)間閾值，則進(jìn)行圖5中所示的步驟S207。如果在步驟S302確定計(jì)算的曝光時(shí)間大于所獲得的曝光時(shí)間閾值，則進(jìn)行圖5中所示的步驟S203。
如上所述，在此第三優(yōu)選實(shí)施例中，如果數(shù)字縮放倍率的變化范圍沒(méi)有這么大，并且因此由于在相機(jī)抖動(dòng)校正時(shí)圖像的重疊所造成的模糊沒(méi)有明顯擴(kuò)展，則當(dāng)數(shù)字縮放倍率增加時(shí)，盡可能校正相機(jī)抖動(dòng)，并從圖像上消除模糊的影響。因此，可避免由于縮放倍率增加而造成的圖像模糊的擴(kuò)展。
第二和第三優(yōu)選實(shí)施例的結(jié)構(gòu)也可以組合。
在這種情況下，如圖11所示，可提供這樣一種表(縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元)，在這種表中，如果數(shù)字縮放倍率的變化范圍沒(méi)有這么大(圖11中0-6)，則曝光時(shí)間閾值(th)與數(shù)字縮放值(的范圍)成反比例對(duì)應(yīng)，而如果數(shù)字縮放倍率的變化范圍很大(圖11中6-8)，則不需要相機(jī)抖動(dòng)校正的曝光時(shí)間閾值(例如最大曝光時(shí)間m)與數(shù)字縮放值(的范圍)對(duì)應(yīng)(因?yàn)樵谶@個(gè)很大的范圍內(nèi)，當(dāng)相機(jī)抖動(dòng)校正時(shí)，由于圖像重疊而造成的模糊明顯擴(kuò)展，所以上述曝光時(shí)間閾值指定為不需要重疊)。圖12是對(duì)應(yīng)于圖11中所示的縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元的的曲線(xiàn)圖，其中橫軸表示數(shù)字縮放倍率，縱軸表示曝光時(shí)間。
在圖11和圖12中，將數(shù)字縮放倍率的上限設(shè)置為8倍。在圖11和圖12中，從圖像拍攝裝置收集數(shù)據(jù)，在所述圖像拍攝裝置中，將數(shù)字縮放倍率值的范圍(0-6)設(shè)置為，在此范圍內(nèi)，通過(guò)連續(xù)圖像拍攝所獲得的多個(gè)圖像的重疊所產(chǎn)生的模糊沒(méi)有明顯擴(kuò)展，并且將數(shù)字縮放值的范圍(6-8)設(shè)置為，在此范圍內(nèi)，通過(guò)連續(xù)圖像拍攝所獲得的多個(gè)圖像的重疊所產(chǎn)生的模糊擴(kuò)展明顯。
接下來(lái)，描述第四、第五和第六優(yōu)選實(shí)施例。
在這些優(yōu)選實(shí)施例中，實(shí)施單次圖像拍攝(其中不校正相機(jī)抖動(dòng))和連續(xù)圖像拍攝(其中校正相機(jī)抖動(dòng))，并提取多條圖像數(shù)據(jù)(在單次圖像拍攝和連續(xù)圖像拍攝之間不存在順序)。
圖13A和圖13B說(shuō)明在第四、第五和第六優(yōu)選實(shí)施例中的曝光功能，其中為相機(jī)抖動(dòng)校正而實(shí)施三次連續(xù)圖像拍攝。
在圖13A中，在一次圖像拍攝時(shí)，在一次正常曝光(其中不校正相機(jī)抖動(dòng))之后實(shí)施三次連續(xù)圖像拍攝的曝光(其中校正相機(jī)抖動(dòng))。在圖13B中，在一次圖像拍攝時(shí)，在三次連續(xù)圖像拍攝的曝光(其中校正相機(jī)抖動(dòng))之后實(shí)施一次正常曝光(其中不校正相機(jī)抖動(dòng))。
圖14示出本發(fā)明第四、第五和第六優(yōu)選實(shí)施例中所共有的圖像拍攝裝置的結(jié)構(gòu)框圖。
在圖14中，由于圖像拍攝裝置50的鏡頭11、圖像傳感器12、AGC 16、ADC 17、圖像處理單元18、存儲(chǔ)器22和校正單元23與圖1中所示的圖像拍攝裝置10相同，所以這里省略對(duì)它們的描述。
在圖像拍攝裝置50中，圖像拍攝控制單元53根據(jù)圖像拍攝指令將包括為拍攝目標(biāo)而計(jì)算的曝光控制信息的控制信號(hào)輸出至圖像傳感器12，并且通過(guò)圖像傳感器12的圖像拍攝處理來(lái)提取多條圖像數(shù)據(jù)(由上述光接收單元和信號(hào)輸出來(lái)執(zhí)行該處理)，而不是執(zhí)行在第一至第三優(yōu)選實(shí)施例中的確定處理。
開(kāi)關(guān)21在例如正常曝光改變?yōu)閳D13A中所示的連續(xù)圖像拍攝曝光時(shí)切換到下側(cè)，在連續(xù)圖像拍攝曝光改變?yōu)閳D13B中所示的正常曝光時(shí)切換到上側(cè)。
通過(guò)正常曝光提取的一條圖像數(shù)據(jù)以及通過(guò)連續(xù)圖像拍攝曝光提取的多條圖像數(shù)據(jù)獲得的、校正了相機(jī)抖動(dòng)的一條圖像數(shù)據(jù)都存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中。
在每一優(yōu)選實(shí)施例中描述用戶(hù)接口單元55。
圖15是第四優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖。由在圖14中所示的各單元來(lái)執(zhí)行這一流程。
首先在步驟S401，圖像拍攝控制單元53對(duì)于單次和連續(xù)圖像拍攝進(jìn)行設(shè)置(在單次圖像拍攝和連續(xù)圖像拍攝之間不存在順序)。根據(jù)圖像拍攝指令，圖像拍攝控制單元53將包括為拍攝目標(biāo)而計(jì)算的曝光控制信息的控制信號(hào)輸出至圖像傳感器12。
然后，在步驟S402，通過(guò)圖像傳感器12的圖像拍攝處理提取多條圖像數(shù)據(jù)。特別地，圖像傳感器12將通過(guò)鏡頭11從拍攝目標(biāo)接收的光轉(zhuǎn)換成電荷并進(jìn)行存儲(chǔ)。然后，將存儲(chǔ)的電荷輸出至圖像處理單元18作為光電轉(zhuǎn)換數(shù)據(jù)。
在步驟S403，圖像處理單元18產(chǎn)生(拍攝)圖像數(shù)據(jù)。特別地，基于光電轉(zhuǎn)換數(shù)據(jù)(又稱(chēng)為“輸入信號(hào)”或“原始”數(shù)據(jù))，圖像處理單元18執(zhí)行分色處理、用于在顯示屏上線(xiàn)性表示亮度的伽馬校正處理、用于在不考慮光源溫度等情況下表示白色的白平衡控制處理。通過(guò)所述分色處理，將輸入的信號(hào)轉(zhuǎn)換成所需的格式，例如YUV信號(hào)、RGB信號(hào)等。
然后，在步驟S404，在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54或存儲(chǔ)器22中存儲(chǔ)圖像處理單元18產(chǎn)生的圖像數(shù)據(jù)。特別地，在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中存儲(chǔ)通過(guò)正常曝光提取的圖像數(shù)據(jù)，在存儲(chǔ)器22中存儲(chǔ)通過(guò)用于連續(xù)圖像拍攝曝光提取的圖像數(shù)據(jù)。
例如，對(duì)于每一圖像拍攝裝置預(yù)定連續(xù)圖像拍攝曝光次數(shù)。然后，在步驟S405，確定是否實(shí)施了將用于連續(xù)圖像拍攝的連續(xù)曝光次數(shù)增加一次(相應(yīng)于正常曝光)(圖13A和13B中曝光總共四次)的圖像拍攝。
如果在步驟S405確定沒(méi)有實(shí)施將預(yù)定次數(shù)增加一次的圖像拍攝，則返回至步驟S401。
如果在步驟S405確定執(zhí)行實(shí)施了將預(yù)定次數(shù)增加一次的圖像拍攝，則在步驟S406基于通過(guò)例如圖3所示的用于連續(xù)圖像拍攝的曝光提取的多條圖像數(shù)據(jù)來(lái)執(zhí)行相機(jī)抖動(dòng)校正處理，并獲得一條圖像數(shù)據(jù)。然后在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中存儲(chǔ)圖像數(shù)據(jù)。
在步驟S407，根據(jù)用戶(hù)通過(guò)用戶(hù)接口單元55發(fā)出的切換指令，在圖像顯示單元(圖14中未示出)上交替顯示存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的兩條圖像數(shù)據(jù)(正常拍攝圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù))。
用戶(hù)檢查交替顯示在圖像顯示單元上的圖像數(shù)據(jù)，并通過(guò)用戶(hù)接口單元55向期望的圖像數(shù)據(jù)發(fā)出確定指令來(lái)存儲(chǔ)他/她所期望的圖像數(shù)據(jù)。
在步驟S408，用戶(hù)接口單元55輸入這一確定指令作為選擇結(jié)果，在步驟S409，將所選擇的圖像數(shù)據(jù)輸出至例如在以后階段中的存儲(chǔ)器(圖14中未示出)作為待存儲(chǔ)的圖像數(shù)據(jù)。
圖16示出在第四優(yōu)選實(shí)施例中的操作過(guò)程。
如圖16所示，例如，在移動(dòng)電話(huà)中，首先通過(guò)按壓相機(jī)按鈕(圖14中未示出)在其顯示屏上顯示拍攝目標(biāo)(將該顯示屏用作相機(jī)取景器)。
然后，通過(guò)按壓快門(mén)按鈕，取消相機(jī)取景器顯示屏，并提取在那個(gè)時(shí)間點(diǎn)拍攝的目標(biāo)作為圖像數(shù)據(jù)。
通過(guò)按壓“”按鈕，如步驟S407所示，將圖像顯示單元上顯示的圖像數(shù)據(jù)切換至下一圖像數(shù)據(jù)。
通過(guò)按壓確定按鈕，存儲(chǔ)在圖像顯示單元上顯示的圖像數(shù)據(jù)。
如上所述，在此第四優(yōu)選實(shí)施例中，通過(guò)用戶(hù)接口單元55選擇和存儲(chǔ)正常拍攝的圖像數(shù)據(jù)或者校正了相機(jī)抖動(dòng)的圖像，或者以上兩種數(shù)據(jù)。因此，例如，通過(guò)選擇相機(jī)抖動(dòng)很小的圖像數(shù)據(jù)，可獲得質(zhì)量良好的、相機(jī)抖動(dòng)的影響得到抑制的圖像數(shù)據(jù)。
圖17是第五優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖。由在圖14中所示的各單元來(lái)執(zhí)行這一流程。
由于步驟S401至S405與圖15中所示的步驟相同，所以這里省略對(duì)它們的描述。
(如果在步驟S405確定實(shí)施了將預(yù)定次數(shù)增加一次的圖像拍攝，)則在步驟S501，在圖像顯示單元(圖14中未示出)上顯示通過(guò)正常曝光提取的、存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的圖像數(shù)據(jù)。
用戶(hù)檢查顯示在圖像顯示單元上的通過(guò)正常曝光提取的圖像數(shù)據(jù)，并確定是否保存。例如，如果用戶(hù)期望存儲(chǔ)該圖像數(shù)據(jù)，則該用戶(hù)通過(guò)用戶(hù)接口單元55發(fā)送確定指令來(lái)存儲(chǔ)該圖像數(shù)據(jù)。
如果用戶(hù)通過(guò)用戶(hù)接口單元55按壓“↓”按鈕，則確定應(yīng)該校正相機(jī)抖動(dòng)，如果按壓“清除”按鈕，則確定不應(yīng)該校正相機(jī)抖動(dòng)。
用戶(hù)接口單元55基于被按壓按鈕的類(lèi)型確定在步驟S502是否校正相機(jī)抖動(dòng)。
如果用戶(hù)接口單元55確定不應(yīng)該校正相機(jī)抖動(dòng)，則處理進(jìn)行步驟S506。
如果用戶(hù)接口單元55確定應(yīng)該校正相機(jī)抖動(dòng)，則在步驟S503，例如如圖3所示，基于通過(guò)用于連續(xù)圖像拍攝的曝光而提取的多條圖像數(shù)據(jù)來(lái)執(zhí)行相機(jī)抖動(dòng)校正，并獲得一條圖像數(shù)據(jù)。然后，在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中存儲(chǔ)該圖像數(shù)據(jù)。
在步驟S504，根據(jù)用戶(hù)通過(guò)用戶(hù)接口單元55發(fā)出的切換指令，在圖像顯示單元(在圖14中未示出)上交替顯示存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的兩條圖像數(shù)據(jù)(正常拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù))。
用戶(hù)檢查交替顯示在圖像顯示單元上的圖像數(shù)據(jù)，并通過(guò)用戶(hù)接口單元55向期望的圖像數(shù)據(jù)發(fā)送確定指令來(lái)存儲(chǔ)他/她所期望的圖像數(shù)據(jù)。
在步驟S505，用戶(hù)接口單元55輸入這一確定指令作為選擇結(jié)果，然后進(jìn)行步驟S506。
在步驟S506，用戶(hù)接口單元55將在步驟S505所選擇的圖像數(shù)據(jù)或正常拍攝的圖像數(shù)據(jù)輸出至例如在以后階段中的存儲(chǔ)器(圖14中未示出)作為待存儲(chǔ)的圖像數(shù)據(jù)。
圖18示出在第五優(yōu)選實(shí)施例中的操作過(guò)程。
如圖18所示，例如，在移動(dòng)電話(huà)中，首先通過(guò)按壓相機(jī)按鈕(圖14中未示出)在其顯示屏上顯示拍攝目標(biāo)(將該顯示屏用作相機(jī)取景器)。
然后，通過(guò)按壓快門(mén)按鈕，取消相機(jī)取景器顯示屏，并提取在那個(gè)時(shí)間點(diǎn)拍攝的目標(biāo)作為圖像數(shù)據(jù)。
如果在圖像顯示單元上僅可顯示一條正常拍攝圖像，則通過(guò)按壓確定按鈕來(lái)存儲(chǔ)在該圖像顯示單元上顯示的圖像數(shù)據(jù)，以及通過(guò)按壓“↓”按鈕來(lái)校正相機(jī)抖動(dòng)。通過(guò)按壓“清除”按鈕，確定不校正相機(jī)抖動(dòng)。
如果在圖像顯示單元上可顯示正常拍攝圖像和校正了相機(jī)抖動(dòng)圖像的兩個(gè)圖像，則通過(guò)按壓確定按鈕來(lái)存儲(chǔ)在圖像顯示單元上顯示的圖像，以及通過(guò)按壓“”按鈕，如步驟S504所示，將該圖像顯示單元上顯示的圖像數(shù)據(jù)切換至下一圖像數(shù)據(jù)。
圖19是第六優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖。由在圖14中所示的各單元來(lái)執(zhí)行這一流程。
由于步驟S401至S405與圖15中所示的步驟相同，所以這里省略對(duì)它們的描述。
(如果在步驟S405確定實(shí)施了將預(yù)定次數(shù)增加一次的圖像拍攝，)則在步驟S601，在圖像顯示單元(圖14中未示出)上顯示通過(guò)正常曝光提取的、存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的圖像數(shù)據(jù)。
用戶(hù)檢查顯示在圖像顯示單元上的通過(guò)正常曝光提取的圖像數(shù)據(jù)，并確定是否保存。例如，如果用戶(hù)期望存儲(chǔ)該圖像數(shù)據(jù)，則該用戶(hù)通過(guò)用戶(hù)接口單元55發(fā)送確定指令來(lái)存儲(chǔ)該圖像數(shù)據(jù)。
如果用戶(hù)期望在該圖像顯示單元上也顯示校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)，則該用戶(hù)通過(guò)用戶(hù)接口單元55按壓“↓”按鈕。盡管在第五優(yōu)選實(shí)施例中，利用按壓“↓”按鈕作為觸發(fā)來(lái)校正相機(jī)抖動(dòng)，但是在第六實(shí)施例中，校正相機(jī)抖動(dòng)與步驟S601在圖像顯示單元上顯示正常拍攝圖像同時(shí)進(jìn)行。
在步驟S602，用戶(hù)接口單元55確定按壓“↓”按鈕作為在圖像顯示單元上顯示校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)的操作。這樣，在步驟S603正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像進(jìn)入到這樣一種狀態(tài)，即根據(jù)用戶(hù)通過(guò)用戶(hù)接口單元55發(fā)出的切換指令(例如通過(guò)按壓“”按鈕)，在該圖像顯示單元上可交替顯示這兩個(gè)圖像。
如果在這種狀態(tài)下，用戶(hù)檢查在圖像顯示單元上交替顯示的圖像數(shù)據(jù)，并通過(guò)用戶(hù)接口單元55發(fā)出存儲(chǔ)期望的圖像數(shù)據(jù)的確定指令，則存儲(chǔ)該圖像數(shù)據(jù)。
在步驟S604，用戶(hù)接口單元55輸入這一確定指令作為選擇結(jié)果，在步驟S605，將所選擇的圖像數(shù)據(jù)輸出至例如在隨后階段中的存儲(chǔ)器(圖14中未示出)作為待存儲(chǔ)的圖像數(shù)據(jù)。
圖20示出在第六優(yōu)選實(shí)施例中的操作過(guò)程。
如圖20所示，例如，在移動(dòng)電話(huà)中，首先通過(guò)按壓相機(jī)按鈕(圖14中未示出)在其顯示屏上顯示拍攝目標(biāo)(將該顯示屏用作相機(jī)取景器)。
然后，通過(guò)按壓快門(mén)按鈕，取消相機(jī)取景器顯示屏，并提取在那個(gè)時(shí)間點(diǎn)拍攝的目標(biāo)作為圖像數(shù)據(jù)。
如果在圖像顯示單元上僅可顯示一條正常拍攝圖像，則通過(guò)按壓確定按鈕來(lái)存儲(chǔ)在該圖像顯示單元上顯示的圖像數(shù)據(jù)，以及通過(guò)按壓“↓”按鈕，正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像進(jìn)入這樣一種狀態(tài)，即在圖像顯示單元上可顯示這兩個(gè)圖像，特別地，除了正常拍攝圖像數(shù)據(jù)之外，還可以挑選校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)作為待存儲(chǔ)的候選圖像數(shù)據(jù)。
在圖像顯示單元上可顯示正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像這兩個(gè)圖像的狀態(tài)下，通過(guò)按壓確定按鈕來(lái)存儲(chǔ)在圖像顯示單元上顯示的圖像，以及通過(guò)按壓“”按鈕，如步驟S603所示，將該圖像顯示單元上顯示的圖像數(shù)據(jù)切換至下一圖像數(shù)據(jù)。
接下來(lái)，描述第七和第八優(yōu)選實(shí)施例。
在這些實(shí)施例中，如同在第四至第六實(shí)施例中，實(shí)施單次圖像拍攝(其中不校正相機(jī)抖動(dòng))和連續(xù)圖像拍攝(其中校正相機(jī)抖動(dòng))，并提取多條圖像數(shù)據(jù)(在單次圖像拍攝和連續(xù)圖像拍攝之間不存在順序)。
第七優(yōu)選實(shí)施例包括特征點(diǎn)提取單元56，以取代用戶(hù)接口單元55。第八優(yōu)選實(shí)施例包括S/N比計(jì)算單元57，以取代用戶(hù)接口單元55。
圖21示出第七優(yōu)選實(shí)施例中涉及用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器的各單元的框圖。
在圖21中，在檢測(cè)正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像的邊界(輪廓)之后，特征點(diǎn)提取單元56通過(guò)僅從邊界提取容易區(qū)分的特征部分(例如，高密度點(diǎn)、端點(diǎn)、頂點(diǎn)、分支點(diǎn)和交叉點(diǎn))來(lái)獲得上述特征點(diǎn)，其中所述邊界(輪廓)指的是在圖像中密度變化的分界線(xiàn)，其中所述正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中。然后，該特征點(diǎn)提取單元56確定該特征點(diǎn)的分辨率是否高，并將具有較高分辨率的圖像輸出至例如在隨后階段中的存儲(chǔ)器(圖21中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
圖22是第七優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖。
由于步驟S401至S405與圖15中所示的步驟相同，所以這里省略對(duì)它們的描述。
(如果在步驟S405確定實(shí)施了將預(yù)定次數(shù)增加一次的圖像拍攝，)則在步驟S701，例如如圖3所示，基于通過(guò)用于連續(xù)圖像拍攝的連續(xù)曝光所提取的多條圖像數(shù)據(jù)校正相機(jī)抖動(dòng)，并獲得一條圖像數(shù)據(jù)。然后，在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中存儲(chǔ)該圖像數(shù)據(jù)。
在步驟S702，在檢測(cè)正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像的邊界(輪廓)之后，特征點(diǎn)提取單元56通過(guò)僅從邊界提取容易區(qū)分的特征部分(例如，高密度點(diǎn)、端點(diǎn)、頂點(diǎn)、分支點(diǎn)和交叉點(diǎn))來(lái)獲得上述特征點(diǎn)，其中所述邊界(輪廓)指的是在圖像中密度變化的分界線(xiàn)，其中所述正常拍攝圖像和校正相機(jī)抖動(dòng)圖像存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中。然后，該特征點(diǎn)提取單元56確定該特征點(diǎn)的分辨率是否高，并在步驟S703將具有較高分辨率的圖像輸出至例如在隨后階段中的存儲(chǔ)器(圖21中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
如上所述，在此第七優(yōu)選實(shí)施例中，通過(guò)一圖像拍攝指令，提取正常拍攝圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。然后，特征點(diǎn)提取單元56存儲(chǔ)在正常拍攝圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)中特征點(diǎn)分辨率較高的一個(gè)圖像數(shù)據(jù)。因此，可獲得相機(jī)抖動(dòng)影響得到抑制的、質(zhì)量良好的圖像數(shù)據(jù)。
盡管如上所述，在第七優(yōu)選實(shí)施例中，從每一圖像提取特征點(diǎn)，但是也可以?xún)H檢測(cè)邊界。在這種情況下，確定該邊界的分辨率是否高，并將具有較高分辨率的圖像輸出至例如在隨后階段中的存儲(chǔ)器(圖21中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
圖23示出第八優(yōu)選實(shí)施例中涉及用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器的各單元的框圖。
在圖23中，S/N比計(jì)算單元57對(duì)于存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的每個(gè)正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像計(jì)算S/N比，即通過(guò)將必要信號(hào)電平除包含在信號(hào)中的噪音電平所獲得的值，并將S/N比較高的圖像數(shù)據(jù)輸出至例如在隨后階段中的存儲(chǔ)器(圖23中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
圖24是第八優(yōu)選實(shí)施例中包括從圖像拍攝處理一直到所提取圖像的存儲(chǔ)處理的流程圖。
由于步驟S401至S405與圖15中所示的步驟相同，所以這里省略對(duì)它們的描述。
(如果在步驟S405確定實(shí)施了將預(yù)定次數(shù)增加一次的圖像拍攝，)則在步驟S801，例如如圖3所示，基于通過(guò)用于連續(xù)圖像拍攝的連續(xù)曝光所提取的多條圖像數(shù)據(jù)校正相機(jī)抖動(dòng)，并獲得一條圖像數(shù)據(jù)。然后，在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中存儲(chǔ)該圖像數(shù)據(jù)。
在步驟S802，S/N比計(jì)算單元57對(duì)于存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的每個(gè)正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像計(jì)算S/N比，即通過(guò)將必要信號(hào)電平除包含在信號(hào)中的噪音電平所獲得的值。在步驟S803，S/N比計(jì)算單元57將S/N比較高的圖像輸出至例如在隨后階段中的存儲(chǔ)器(圖23中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
如上所述，在此第八優(yōu)選實(shí)施例中，通過(guò)一個(gè)圖像拍攝指令，提取正常拍攝圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。然后，S/N比計(jì)算單元57存儲(chǔ)正常拍攝圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)中S/N比較高的圖像數(shù)據(jù)，S/N比即通過(guò)將必要信號(hào)電平除包含在信號(hào)中的噪音電平所獲得的值。因此，可獲得相機(jī)抖動(dòng)得到抑制的、質(zhì)量良好的圖像數(shù)據(jù)。
圖像拍攝裝置也可包括特征點(diǎn)提取單元56和S/N比計(jì)算單元57兩者。在這種情況下，用戶(hù)通過(guò)配置在例如移動(dòng)電話(huà)的內(nèi)建了圖像拍攝裝置的裝置上的開(kāi)關(guān)或用戶(hù)接口單元55的特征點(diǎn)提取來(lái)確定是否對(duì)模糊校正給予優(yōu)先級(jí)。如果對(duì)模糊校正給予優(yōu)先級(jí)，則執(zhí)行第七優(yōu)選實(shí)施例的處理。如果不對(duì)模糊校正給予優(yōu)先級(jí)，則執(zhí)行第八優(yōu)選實(shí)施例的處理。
圖25是第七和第八優(yōu)選實(shí)施例的組合流程圖。
由于步驟S401至S405與圖15中所示的步驟相同，所以這里省略對(duì)它們的描述。
(如果在步驟S405確定實(shí)施了將預(yù)定次數(shù)增加一次的圖像拍攝，)則在步驟S901，例如如圖3所示，基于通過(guò)用于連續(xù)圖像拍攝的連續(xù)曝光所提取的多條圖像數(shù)據(jù)校正相機(jī)抖動(dòng)，并獲得一條圖像數(shù)據(jù)。然后，在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中存儲(chǔ)該圖像數(shù)據(jù)。
在步驟S902，確定當(dāng)前模式是否為“模糊校正優(yōu)先模式”。
如果在步驟S902，確定當(dāng)前模式為“模糊校正優(yōu)先模式”，則在步驟S903，在檢測(cè)正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像的邊界(輪廓)之后，特征點(diǎn)提取單元56通過(guò)僅從邊界提取容易區(qū)分的特征部分(例如，高密度點(diǎn)、端點(diǎn)、頂點(diǎn)、分支點(diǎn)和交叉點(diǎn))來(lái)獲得上述特征點(diǎn)，其中所述邊界(輪廓)指的是在圖像中密度變化的分界線(xiàn)，其中所述正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中。然后，該特征點(diǎn)提取單元56確定該特征點(diǎn)的分辨率是否高，并在步驟S905將分辨率較高的圖像輸出至例如在隨后階段中的存儲(chǔ)器(圖21和23中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
如果在步驟S902，沒(méi)有確定當(dāng)前模式是“模糊校正優(yōu)先模式”，則在步驟S904，S/N比計(jì)算單元57對(duì)于存儲(chǔ)在用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54中的每個(gè)正常拍攝圖像和校正了相機(jī)抖動(dòng)的圖像計(jì)算S/N比，即通過(guò)將必要信號(hào)電平除包含在信號(hào)中的噪音電平所獲得的值。在步驟S905，S/N比計(jì)算單元57將S/N比較高的圖像輸出至例如在隨后階段中的存儲(chǔ)器(圖21和23中未示出)，例如用于圖像數(shù)據(jù)存儲(chǔ)的存儲(chǔ)器54。
圖26示出存儲(chǔ)介質(zhì)的實(shí)例。
可通過(guò)圖像數(shù)據(jù)處理裝置81來(lái)實(shí)現(xiàn)根據(jù)本發(fā)明的相機(jī)抖動(dòng)校正處理以及用于確定待存儲(chǔ)圖像的確定處理的預(yù)處理?？蓮拇鎯?chǔ)裝置85將用于本發(fā)明的處理的程序和數(shù)據(jù)加載至圖像數(shù)據(jù)處理裝置81的存儲(chǔ)器上并執(zhí)行?；蛘?，也可從便攜式存儲(chǔ)介質(zhì)83將所述程序和數(shù)據(jù)加載至圖像數(shù)據(jù)處理裝置81的存儲(chǔ)器上并執(zhí)行?；蛘撸部蓮耐獠看鎯?chǔ)裝置82通過(guò)網(wǎng)絡(luò)86將所述程序和數(shù)據(jù)加載至圖像數(shù)據(jù)處理裝置81的存儲(chǔ)器上并執(zhí)行。
權(quán)利要求
1.一種具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，包括圖像傳感器，將指定曝光時(shí)間內(nèi)從拍攝目標(biāo)接收的光進(jìn)行光電轉(zhuǎn)換處理，并輸出光電轉(zhuǎn)換數(shù)據(jù)；圖像數(shù)據(jù)產(chǎn)生單元，基于所述光電轉(zhuǎn)換數(shù)據(jù)產(chǎn)生圖像數(shù)據(jù)；圖像拍攝控制單元，根據(jù)圖像拍攝指令將曝光控制信息輸出至所述圖像傳感器，并提取一條或多條圖像數(shù)據(jù)；以及校正單元，基于多條提取的圖像數(shù)據(jù)產(chǎn)生一條校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)。
2.根據(jù)權(quán)利要求1所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，還包括曝光控制單元，計(jì)算曝光時(shí)間和增益值作為曝光控制信息，所述增益值表示將所述光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；以及確定單元，確定計(jì)算的增益值是否等于或大于一預(yù)定閾值，其中如果確定所述增益值等于或大于所述閾值，則所述圖像拍攝控制單元提取一條圖像數(shù)據(jù)，以及如果確定所述增益值小于所述閾值，則所述圖像拍攝控制單元提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
3.根據(jù)權(quán)利要求1所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，還包括曝光控制單元，計(jì)算曝光時(shí)間和增益值作為曝光控制信息，所述增益值表示將所述光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；以及確定單元，確定設(shè)置的數(shù)字縮放倍率值是否等于或大于一預(yù)定閾值，其中如果確定所述數(shù)字縮放倍率值等于或大于所述閾值，則所述圖像拍攝控制單元提取用于正常圖像拍攝的一條圖像數(shù)據(jù)，以及如果確定所述數(shù)字縮放倍率值小于所述閾值，則所述圖像拍攝控制單元提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
4.根據(jù)權(quán)利要求3所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，其中所述閾值設(shè)置在所述數(shù)字縮放倍率范圍起始位置的附近，在所述數(shù)字縮放倍率范圍起始位置的附近，由于基于多條圖像數(shù)據(jù)的相機(jī)抖動(dòng)校正，特別是由于多個(gè)圖像的重疊所導(dǎo)致的模糊明顯擴(kuò)展。
5.根據(jù)權(quán)利要求1所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，還包括曝光控制單元，計(jì)算曝光時(shí)間和增益值，所述增益值表示將所述光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；曝光時(shí)間閾值獲取單元，基于縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元來(lái)獲得與設(shè)定的數(shù)字縮放倍率相應(yīng)的曝光時(shí)間閾值，其中該縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元存儲(chǔ)相對(duì)于數(shù)字縮放倍率值的容許曝光時(shí)間閾值；以及確定單元，確定計(jì)算的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值，其中如果確定計(jì)算的曝光時(shí)間等于或小于所獲得的曝光時(shí)間閾值，則所述圖像拍攝控制單元提取用于正常圖像拍攝的一條圖像數(shù)據(jù)，以及如果確定計(jì)算的曝光時(shí)間大于所獲得的曝光時(shí)間閾值，則所述圖像拍攝控制單元提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
6.根據(jù)權(quán)利要求5所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，其中在所述縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元中，各曝光時(shí)間閾值指定為與屬于一范圍內(nèi)的數(shù)字縮放倍率值成反比例，在此范圍內(nèi)，由于基于多條圖像數(shù)據(jù)的相機(jī)抖動(dòng)校正，特別是由于多個(gè)圖像的重疊所導(dǎo)致的模糊擴(kuò)展不明顯。
7.根據(jù)權(quán)利要求1所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，其中所述圖像拍攝控制單元根據(jù)圖像拍攝指令輸出曝光控制信息至所述圖像傳感器，實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝以及用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝并提取多條圖像數(shù)據(jù)；以及所述圖像拍攝裝置還包括用戶(hù)接口單元，用于選擇和存儲(chǔ)正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的由所述校正單元獲得的圖像數(shù)據(jù)兩種數(shù)據(jù)或其中一種數(shù)據(jù)。
8.根據(jù)權(quán)利要求1所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，其中所述圖像拍攝控制單元根據(jù)圖像拍攝指令輸出曝光控制信息至所述圖像傳感器，實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝以及用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝并提取多條圖像數(shù)據(jù)；以及所述圖像拍攝裝置還包括邊界提取單元，提取通過(guò)正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的由所述校正單元獲得的圖像數(shù)據(jù)的邊界，其中所述邊界是在每一圖像中密度變化的分界線(xiàn)；以及存儲(chǔ)單元，存儲(chǔ)被提取邊界的分辨率較高的圖像數(shù)據(jù)。
9.根據(jù)權(quán)利要求8所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，還包括特征點(diǎn)提取單元，從提取的邊界提取特征點(diǎn)，其中所述存儲(chǔ)單元存儲(chǔ)被提取特征點(diǎn)的分辨率較高的圖像數(shù)據(jù)。
10.根據(jù)權(quán)利要求1所述的具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，其由所述圖像拍攝控制單元根據(jù)圖像拍攝指令輸出曝光控制信息至所述圖像傳感器，實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝以及用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝并提取多條圖像數(shù)據(jù)；以及所述圖像拍攝裝置包括信噪比計(jì)算單元，計(jì)算信噪比，所述信噪比是通過(guò)對(duì)于正常圖像拍攝的圖像數(shù)據(jù)和校正了相機(jī)抖動(dòng)的由所述校正單元獲得的圖像數(shù)據(jù)將必要信號(hào)電平除包含在信號(hào)中的噪音電平來(lái)獲得的值；以及存儲(chǔ)單元，存儲(chǔ)計(jì)算的信噪比較高的圖像數(shù)據(jù)。
11.一種相機(jī)抖動(dòng)校正方法，包括使用光電傳感器將指定曝光時(shí)間內(nèi)從拍攝目標(biāo)接收的光進(jìn)行光電轉(zhuǎn)換，并輸出光電轉(zhuǎn)換數(shù)據(jù)的步驟；基于所述光電轉(zhuǎn)換數(shù)據(jù)產(chǎn)生圖像數(shù)據(jù)的圖像數(shù)據(jù)產(chǎn)生步驟；根據(jù)圖像拍攝指令將曝光控制信息輸出至所述圖像傳感器，并提取一條或多條圖像數(shù)據(jù)的圖像拍攝控制步驟；以及基于多條提取的圖像數(shù)據(jù)產(chǎn)生一條校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)的校正步驟。
12.根據(jù)權(quán)利要求11所述的相機(jī)抖動(dòng)校正方法，還包括計(jì)算曝光時(shí)間和增益值的曝光控制步驟，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；以及確定計(jì)算的增益值是否等于或大于一預(yù)定閾值的確定步驟，其中如果確定所述增益值等于或大于所述閾值，則在所述圖像拍攝控制步驟提取用于正常圖像拍攝的一條圖像數(shù)據(jù)，以及如果確定所述增益值小于所述閾值，則在所述圖像拍攝控制步驟提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
13.根據(jù)權(quán)利要求11所述的相機(jī)抖動(dòng)校正方法，還包括計(jì)算曝光時(shí)間和增益值的曝光控制步驟，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；以及確定設(shè)置的數(shù)字縮放倍率值是否等于或大于一預(yù)定閾值的確定步驟，其中如果確定所述數(shù)字縮放倍率值等于或大于所述閾值，則在所述圖像拍攝控制步驟提取用于正常圖像拍攝的一條圖像數(shù)據(jù)，以及如果確定所述數(shù)字縮放倍率值小于所述閾值，則在所述圖像拍攝控制步驟提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
14.根據(jù)權(quán)利要求11所述的相機(jī)抖動(dòng)校正方法，還包括計(jì)算曝光時(shí)間和增益值的曝光控制步驟，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍；基于縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元來(lái)獲得與設(shè)定的數(shù)字縮放倍率相應(yīng)的曝光時(shí)間閾值的曝光時(shí)間閾值獲取步驟，其中該縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元存儲(chǔ)相對(duì)于數(shù)字縮放倍率值的容許曝光時(shí)間閾值；以及確定計(jì)算的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值的確定步驟，其中如果確定計(jì)算的曝光時(shí)間等于或小于所獲得的曝光時(shí)間閾值，則在所述圖像拍攝控制步驟提取用于正常圖像拍攝的一條圖像數(shù)據(jù)，以及如果確定計(jì)算的曝光時(shí)間大于所獲得的曝光時(shí)間閾值，則在所述圖像拍攝控制步驟提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
15.根據(jù)權(quán)利要求11所述的相機(jī)抖動(dòng)校正方法，其中在所述圖像拍攝控制步驟，通過(guò)根據(jù)圖像拍攝指令輸出曝光控制信息至圖像傳感器和實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝以及用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝，來(lái)提取多條圖像數(shù)據(jù)；所述相機(jī)抖動(dòng)校正方法還包括提取正常拍攝圖像數(shù)據(jù)和在校正步驟獲得的校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)的邊界的邊界提取步驟，其中所述邊界是在每一圖像中密度變化的分界線(xiàn)；以及所述相機(jī)抖動(dòng)校正方法還包括存儲(chǔ)被提取邊界的分辨率較高的圖像數(shù)據(jù)的存儲(chǔ)步驟。
16.根據(jù)權(quán)利要求11所述的相機(jī)抖動(dòng)校正方法，其中在所述圖像拍攝控制步驟，通過(guò)根據(jù)圖像拍攝指令輸出曝光控制信息至圖像傳感器和實(shí)施不校正相機(jī)抖動(dòng)的正常圖像拍攝以及用于相機(jī)抖動(dòng)校正的連續(xù)圖像拍攝，來(lái)提取多條圖像數(shù)據(jù)；所述相機(jī)抖動(dòng)校正方法還包括計(jì)算信噪比的信噪比計(jì)算步驟，所述信噪比是通過(guò)對(duì)于正常拍攝圖像數(shù)據(jù)和在校正步驟獲得的校正了相機(jī)抖動(dòng)的圖像數(shù)據(jù)將必要信號(hào)電平除包含在信號(hào)中的噪音電平來(lái)獲得的值；以及所述相機(jī)抖動(dòng)校正方法還包括存儲(chǔ)計(jì)算的信噪比較高的圖像數(shù)據(jù)的存儲(chǔ)步驟。
17.一種存儲(chǔ)介質(zhì)，在該存儲(chǔ)介質(zhì)上記錄一種預(yù)處理程序，該預(yù)處理程序使得用于處理圖像數(shù)據(jù)的圖像數(shù)據(jù)處理裝置確定是否執(zhí)行相機(jī)抖動(dòng)校正，該預(yù)處理程序使得所述圖像數(shù)據(jù)處理裝置執(zhí)行以下步驟獲得曝光時(shí)間和增益值作為曝光控制信息的步驟，其中所述曝光時(shí)間為從圖像拍攝目標(biāo)接收光的時(shí)間，所述增益值表示將光電轉(zhuǎn)換數(shù)據(jù)放大多少倍，所述光電轉(zhuǎn)換數(shù)據(jù)是通過(guò)將從控制曝光的單元接收的光進(jìn)行光電轉(zhuǎn)換而獲得的；將獲得的曝光控制信息輸出至用于執(zhí)行圖像拍攝處理的單元的圖像拍攝指令步驟。
18.根據(jù)權(quán)利要求17所述的存儲(chǔ)介質(zhì)，其中該預(yù)處理程序還包括確定所獲得的增益值是否等于或大于一預(yù)定閾值的確定步驟；如果確定所述增益值等于或大于所述閾值，則在所述圖像拍攝控制步驟發(fā)送提取用于正常圖像拍攝的一條圖像數(shù)據(jù)的指令，以及如果確定所述增益值小于所述閾值，則在所述圖像拍攝控制步驟發(fā)送提取用于產(chǎn)生校正了相機(jī)抖動(dòng)的一條圖像數(shù)據(jù)的多條圖像數(shù)據(jù)的指令。
19.根據(jù)權(quán)利要求17所述的存儲(chǔ)介質(zhì)，其中該預(yù)處理程序還包括確定設(shè)置的數(shù)字縮放倍率值是否等于或大于一預(yù)定閾值的確定步驟；如果確定所述數(shù)字縮放倍率值等于或大于所述閾值，則在所述圖像拍攝控制步驟發(fā)送提取用于正常圖像拍攝的一條圖像數(shù)據(jù)的指令，以及如果確定所述數(shù)字縮放倍率值小于所述閾值，則在所述圖像拍攝控制步驟發(fā)送提取用于產(chǎn)生校正了相機(jī)抖動(dòng)的一條圖像數(shù)據(jù)的多條圖像數(shù)據(jù)的指令。
20.根據(jù)權(quán)利要求17所述的存儲(chǔ)介質(zhì)，其中該預(yù)處理程序還包括基于縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元來(lái)獲得與設(shè)定的數(shù)字縮放倍率相應(yīng)的曝光時(shí)間閾值的曝光時(shí)間閾值獲取步驟，其中該縮放倍率/曝光時(shí)間閾值存儲(chǔ)單元存儲(chǔ)相對(duì)于數(shù)字縮放倍率值的容許曝光時(shí)間閾值；以及確定獲得的曝光時(shí)間是否等于或小于所獲得的曝光時(shí)間閾值的確定步驟，如果確定所述曝光時(shí)間等于或小于所獲得的曝光時(shí)間閾值，則在所述圖像拍攝控制步驟發(fā)送提取用于正常圖像拍攝的一條圖像數(shù)據(jù)的指令，以及如果確定所述曝光時(shí)間大于所獲得的曝光時(shí)間閾值，則在所述圖像拍攝控制步驟發(fā)送提取用于產(chǎn)生校正了相機(jī)抖動(dòng)的一條圖像數(shù)據(jù)的多條圖像數(shù)據(jù)的指令。
全文摘要
本發(fā)明提供一種具有相機(jī)抖動(dòng)校正功能的圖像拍攝裝置，其能夠避免由于執(zhí)行相機(jī)抖動(dòng)校正而產(chǎn)生的圖像質(zhì)量的降低。本發(fā)明的圖像拍攝裝置的圖像拍攝控制單元可配置為基于確定單元的確定結(jié)果來(lái)選擇提取用于正常圖像拍攝的一條圖像數(shù)據(jù)或者提取用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。所述圖像拍攝控制單元還可配置為提取用于正常圖像拍攝的一條圖像數(shù)據(jù)和用于相機(jī)抖動(dòng)校正的多條圖像數(shù)據(jù)。
文檔編號(hào)G03B7/00GK101060591SQ200610164668
公開(kāi)日2007年10月24日 申請(qǐng)日期2006年12月15日 優(yōu)先權(quán)日2006年4月18日
發(fā)明者中條薰, 若松隆, 中井丈裕, 泉澤映文, 川勝保博, 廣瀨正幸 申請(qǐng)人:富士通株式會(huì)社