專利名稱:移動(dòng)終端及其離焦圖像生成方法
技術(shù)領(lǐng)域:
本說明書涉及能夠使用深度圖生成離焦(out-focused)圖像(或者離焦的圖像)的移動(dòng)終端及其生成離焦圖像的方法。
背景技術(shù):
移動(dòng)終端可以被配置以執(zhí)行各種功能,例如,數(shù)據(jù)和語音通信、拍攝圖像或者視頻、存儲(chǔ)語音、經(jīng)過揚(yáng)聲器系統(tǒng)再現(xiàn)音樂文件、顯示圖像或者視頻等。一些移動(dòng)終端可以包括玩游戲的附加功能,并且其它移動(dòng)終端可以被實(shí)現(xiàn)為多媒體播放器。另外,最近,移動(dòng)終端可以接收廣播或者多播信號(hào)以允許觀看視頻或者電視節(jié)目。此外,正在進(jìn)行很多努力來支持或者增強(qiáng)這種移動(dòng)終端的各種功能。這些努力不僅包括改變和改進(jìn)實(shí)現(xiàn)移動(dòng)終端的結(jié)構(gòu)組件,而且包括軟件或者硬件改進(jìn)。另外,為不熟悉按鈕/鍵輸入的用戶設(shè)計(jì)了移動(dòng)終端的觸摸功能,以使用觸摸屏方便地執(zhí)行移動(dòng)終端的功能。最近,除了簡(jiǎn)單的輸入功能之外,觸摸功能與用戶接口(UI)—起變?yōu)榻K端的重要功能。因此,隨著觸摸功能進(jìn)一步以各種形式應(yīng)用于移動(dòng)終端,更需要開發(fā)適當(dāng)?shù)膎。通常,離焦效果是指當(dāng)用相機(jī)對(duì)特定對(duì)象攝影時(shí)使該對(duì)象在焦內(nèi)(focused-1n)并且除了該對(duì)象之外的背景離焦的技術(shù)。可以通過使用復(fù)雜相機(jī)(例如,DSLR型、混合型等)的鏡頭特性或者通過普通相機(jī)的圖像處理獲得離焦效果。其中,為了使用復(fù)雜相機(jī),可以通過設(shè)置低光 圈大小(將光圈開的很大)、確保相機(jī)和背景之間的更長(zhǎng)距離或者使用變焦鏡頭來獲得離焦效果。相反地,為了使用通過圖像處理實(shí)現(xiàn)離焦效果的相機(jī),連續(xù)拍攝兩張照片(一個(gè)模糊圖像和一個(gè)原始圖像)并且將其彼此組合。然而,當(dāng)采用圖像處理方法時(shí),拍攝的兩個(gè)完整大小的圖像占據(jù)通常攝影的兩倍存儲(chǔ)器存儲(chǔ)空間,而且拍攝兩個(gè)圖像使拍攝時(shí)間加倍。
發(fā)明內(nèi)容
因此,詳細(xì)描述的一個(gè)方面是提供一種能夠在具有雙相機(jī)的移動(dòng)終端中使用深度圖和一個(gè)拍攝圖像生成離焦圖像的移動(dòng)終端、及其生成離焦圖像的方法。詳細(xì)描述的另一個(gè)方面是提供一種當(dāng)拍攝靜止圖像或者運(yùn)動(dòng)圖像(視頻)時(shí)能夠使用深度圖更精確地生成離焦圖像的移動(dòng)終端、及其生成離焦圖像的方法。為了實(shí)現(xiàn)這些和其它優(yōu)點(diǎn),并且根據(jù)本說明書的目的,如這里所具體實(shí)施和廣泛描述的,提供一種用于在移動(dòng)終端中生成離焦圖像的方法,所述方法包括當(dāng)離焦功能被選擇時(shí)顯示預(yù)覽圖像和深度圖;當(dāng)從所述預(yù)覽圖像中選擇特定對(duì)象時(shí)通過基于所述特定對(duì)象調(diào)整會(huì)聚(convergence)來更新所述深度圖;以及當(dāng)實(shí)際拍攝圖像時(shí)通過基于經(jīng)更新的深度圖的會(huì)聚使拍攝的圖像模糊來生成離焦圖像。所述預(yù)覽圖像可以是靜止圖像或者運(yùn)動(dòng)圖像(視頻)。
所述深度圖可以根據(jù)通過兩個(gè)相機(jī)獲取的預(yù)覽圖像生成。所述深度圖可以以迷你圖的形式顯示在所述預(yù)覽圖像的一側(cè),或者可以通過以半透明形式交疊所述預(yù)覽圖像而顯示。所述深度圖可以基于會(huì)聚零點(diǎn)分為負(fù)(_)會(huì)聚區(qū)域和正(+ )會(huì)聚區(qū)域,所述區(qū)域用不同顏色指示。可以響應(yīng)于布置在所述預(yù)覽圖像或者所述深度圖的一側(cè)的控制條的移動(dòng),調(diào)整所述深度圖的背景的模糊程度。所述深度圖的更新可以包括將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn);檢查是否存在一個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象;當(dāng)存在一個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象時(shí),在畫面上顯示對(duì)應(yīng)的對(duì)象用于用戶選擇;當(dāng)用戶不選擇任何具有負(fù)會(huì)聚的對(duì)象時(shí),提取所述對(duì)應(yīng)的對(duì)象;將所提取的對(duì)象的會(huì)聚重新設(shè)置為正會(huì)聚;以及基于重新設(shè)置的正會(huì)聚更新所述深度圖。所述離焦圖像的生成可以包括將所述經(jīng)更新的深度圖放大到所述拍攝的圖像的大?。粚⑺雠臄z的圖像和所述深度圖分別劃分為多個(gè)塊;以及基于會(huì)聚零點(diǎn),進(jìn)行用于使通過比較與所述深度圖對(duì)應(yīng)的所述拍攝的圖像的正會(huì)聚區(qū)域模糊的高斯模糊濾波。為了實(shí)現(xiàn)根據(jù)本公開示例性實(shí)施方式的目的,提供了一種移動(dòng)終端,所述終端包括顯示單元,所述顯示單元被配置為顯示預(yù)覽圖像和深度圖;存儲(chǔ)器,所述存儲(chǔ)器被配置為存儲(chǔ)拍攝的圖像;以及控制器,所述控制器被配置為當(dāng)從所述預(yù)覽圖像中選擇特定對(duì)象時(shí)通過基于所述特定對(duì)象調(diào)整會(huì)聚來更新所述深度圖,并且在拍攝圖像時(shí)基于經(jīng)更新的深度圖的會(huì)聚使拍攝的圖像模糊,以生成離焦圖像。所述預(yù)覽圖像可以是靜止圖像或者運(yùn)動(dòng)圖像。所述預(yù)覽圖像可 以是通過一個(gè)相機(jī)獲取的,所述深度圖可以以迷你圖的形式顯示在所述預(yù)覽圖像的一側(cè),或者通過以半透明形式交疊所述預(yù)覽圖像而顯示??梢栽谟脩舨藛沃谐跏荚O(shè)置所述深度圖的大小、形狀、顏色和顯示時(shí)間,或者通過所述深度圖被選擇時(shí)顯示的菜單設(shè)置所述深度圖的大小、形狀、顏色和顯示時(shí)間。所述控制器可以將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn),并且基于所述會(huì)聚零點(diǎn)用不同顏色指示負(fù)(_)會(huì)聚區(qū)域和正(+ )會(huì)聚區(qū)域。所述控制器可以響應(yīng)于布置在所述預(yù)覽圖像或者所述深度圖的一側(cè)的控制條的移動(dòng),調(diào)整所述深度圖的背景的模糊程度。當(dāng)對(duì)象被選擇時(shí)所述控制器可以將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn),并且檢查是否存在一個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象,當(dāng)存在一個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象時(shí)將對(duì)應(yīng)的對(duì)象的會(huì)聚重新設(shè)置為正會(huì)聚。當(dāng)存在一個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象時(shí)所述控制器可以在畫面上顯示對(duì)應(yīng)的對(duì)象用于用戶選擇;所述控制器可以將所述經(jīng)更新的深度圖放大到所述拍攝的圖像的大小,以塊或者像素為單位比較所述拍攝的圖像和經(jīng)放大的深度圖,并且基于會(huì)聚零點(diǎn)進(jìn)行用于使與所述深度圖對(duì)應(yīng)的所述拍攝的圖像的正會(huì)聚區(qū)域模糊的高斯模糊濾波。從下文給出的詳細(xì)描述本申請(qǐng)的進(jìn)一步應(yīng)用范圍將變得更明顯。然而,應(yīng)理解,詳細(xì)描述和具體示例盡管指示本發(fā)明的優(yōu)選實(shí)施方式,但是僅僅是通過例示給出,因?yàn)楸景l(fā)明的實(shí)質(zhì)和范圍內(nèi)的各種修改和變化從此詳細(xì)描述中將對(duì)于本領(lǐng)域技術(shù)人員變得明顯。
附圖被包括進(jìn)來以提供對(duì)本發(fā)明的進(jìn)一步理解,并結(jié)合到本申請(qǐng)中且構(gòu)成本申請(qǐng)的一部分,這些附圖例示了示例性實(shí)施方式,并與說明書一起用于解釋本發(fā)明的原理。在附圖中圖1是例示根據(jù)本說明書的一個(gè)示例性實(shí)施方式的移動(dòng)終端的框圖;圖2是可與移動(dòng)終端操作的通信系統(tǒng)的圖;圖3是示出使用一個(gè)預(yù)覽圖像生成深度圖的示例的圖;圖4是示出顯示在畫面的一側(cè)的深度圖的示例的圖;圖5是示出當(dāng)從預(yù)覽圖像中選擇要通過離焦效果清楚地拍攝的特定對(duì)象時(shí)更新深度圖的示例的圖;圖6是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的控制具有深度圖的預(yù)覽圖像中背景的模糊程度的示例的圖;圖7是示出通過拍攝預(yù)覽圖像來生成通過離焦效果清楚地拍攝的圖像的示例的圖;圖8是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的用于針對(duì)靜止圖像生成離焦圖像的方法的流程圖;圖9是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的針對(duì)負(fù)(_)會(huì)聚區(qū)域調(diào)整深度圖的示例的圖;以及圖10是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的用于針對(duì)運(yùn)動(dòng)圖像(視頻)生成離焦圖像的方法的流程圖。
具體實(shí)施例方式下面將參照附圖詳細(xì)給出根據(jù)本發(fā)明的移動(dòng)終端的優(yōu)選配置的描述。在下文,提供說明中使用的用于組件的后綴“模塊”和“單元或者部”僅是為了便于準(zhǔn)備說明書,因而它們不被賦予特定的含義或者功能。因此,應(yīng)注意的是“模塊”和“單元或者部”可以一起使用??梢允褂枚喾N不同類型的終端實(shí)現(xiàn)移動(dòng)終端。這些終端的示例包括移動(dòng)終端,諸如移動(dòng)電話、智能電話、筆記本計(jì)算機(jī)、數(shù)字廣播終端、個(gè)人數(shù)字助理(PDA)、便攜式多媒體播放器(PMP)、導(dǎo)航儀等;以及固定終端,諸如數(shù)字TV、桌上型計(jì)算機(jī)等。以下描述假定終端是移動(dòng)終端。然而,本領(lǐng)域技術(shù)人員可以容易理解的是,除了特別針對(duì)移動(dòng)性而設(shè)置的組件之外,根據(jù)以下描述的配置可以應(yīng)用于固定終端。圖1是根據(jù)本發(fā)明的一個(gè)實(shí)施方式的移動(dòng)終端的框圖。移動(dòng)終端100可包括諸如無線通信單元110、音頻/視頻(A/V)輸入單元120、用戶輸入單元130、感測(cè)單元140、輸出單元150、存儲(chǔ)器160、接口單元170、控制器180、電源190等的組件。圖1示出具有多個(gè)組件的移動(dòng)終端100,但是應(yīng)理解,不要求實(shí)現(xiàn)所例示的全部組件。可以另選地實(shí)現(xiàn)更多或者更少的組件。在下文,將按順序描述每個(gè)組件。無線通信單元110通常可以包括允許移動(dòng)終端100和無線通信系統(tǒng)之間或移動(dòng)終端100和該移動(dòng)終端100所處于的網(wǎng)絡(luò)之間的無線通信的一個(gè)或更多個(gè)組件。例如,無線通信單元110可包括廣播接收模塊111、移動(dòng)通信模塊112、無線因特網(wǎng)模塊113、短距離通信模塊114、位置定位模塊115等。廣播接收模塊111經(jīng)過廣播信道從外部廣播管理實(shí)體接收廣播信號(hào)和/或與廣播相關(guān)的信息。廣播信道可以包括衛(wèi)星信道和地面信道。廣播管理實(shí)體可以指生成和發(fā)射廣播信號(hào)和/或與廣播相關(guān)的信息的服務(wù)器,或者指接收預(yù)先生成的廣播信號(hào)和/或與廣播相關(guān)的信息并且向移動(dòng)終端發(fā)送的服務(wù)器。與廣播相關(guān)的信息的示例可以包括與廣播信道、廣播節(jié)目、廣播服務(wù)提供商等相關(guān)的信息。廣播信號(hào)可以實(shí)現(xiàn)為TV廣播信號(hào)、無線電廣播信號(hào)和數(shù)據(jù)廣播信號(hào)等。廣播信號(hào)還可以包括與TV或者無線電廣播信號(hào)組合的數(shù)據(jù)廣播信號(hào)。與廣播相關(guān)的信息可以是指涉及廣播信道、廣播節(jié)目、廣播服務(wù)提供商的信息。與廣播相關(guān)的信息可以通過移動(dòng)通信網(wǎng)絡(luò)來提供,并且通過移動(dòng)通信模塊112來接收。與廣播相關(guān)的信息可以實(shí)現(xiàn)為各種格式。例如,與廣播相關(guān)的信息可以包括數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)、手持?jǐn)?shù)字視頻廣播(DVB-H)的電子服務(wù)指南(ESG)等。廣播接收模塊111可以被配置為接收從各種類型的廣播系統(tǒng)發(fā)送的數(shù)字廣播信號(hào)。這種廣播系統(tǒng)可以包括地面數(shù)字多媒體廣播(DMB-T)、衛(wèi)星數(shù)字多媒體廣播(DMB-S)、僅媒體前向鏈路(MediaFLO)、手持?jǐn)?shù)字視頻廣播(DVB-H)、地面綜合業(yè)務(wù)數(shù)字廣播(ISDB-T)等。廣播接收模塊111可以配置為適用于每一種發(fā)送廣播信號(hào)的廣播系統(tǒng)以及數(shù)字廣播系統(tǒng)。通過廣播接收模塊111接收到的廣播信號(hào)和/或與廣播相關(guān)的信息可以被存儲(chǔ)在諸如存儲(chǔ)器160這樣的適當(dāng)裝置中。移動(dòng)通信模塊112向/從移動(dòng)通信網(wǎng)絡(luò)上的網(wǎng)絡(luò)實(shí)體(例如,基站、外部移動(dòng)終端、服務(wù)器等)中的至少一個(gè)發(fā)送/接收無線信號(hào)。在這里,無線信號(hào)可以包括音頻呼叫信號(hào)、視頻呼叫信號(hào)、或者根據(jù)文本/多媒體消息的發(fā)送/接收的各種格式的數(shù)據(jù)。無線因特網(wǎng)模塊113支持移動(dòng)終端的無線因特網(wǎng)接入。該模塊可以內(nèi)置或者外置地耦合到移動(dòng)終端。這種無線因特網(wǎng)接入的示例可以包括無線LAN (WLAN)、Wi-Fi、無線寬頻帶(Wibro )、全球微波互聯(lián)接入(Wimax )、高速下行分組接入(HSDPA)等。短距離通信模塊114表示用于短距離通信的模塊。用于實(shí)現(xiàn)該模塊的合適的技術(shù)可以包括BLUETOOTH、射頻識(shí)別(RFID)、紅外數(shù)據(jù)協(xié)會(huì)(IrDA)、超寬帶(UWB)、ZigBee等。位置定位模塊115表示用于檢測(cè)或計(jì)算移動(dòng)終端的位置的模塊。位置定位模塊115的示例可以包括全球定位系統(tǒng)(GPS)模塊。在當(dāng)前技術(shù)條件下,GPS模塊可以測(cè)量準(zhǔn)確時(shí)間和分別距三個(gè)以上衛(wèi)星的距離,以根據(jù)三角測(cè)量方案基于這三個(gè)不同距離準(zhǔn)確地計(jì)算移動(dòng)終端的當(dāng)前位置??梢允褂梅桨竵慝@得時(shí)間信息和距三個(gè)衛(wèi)星的距離信息,并且通過一個(gè)衛(wèi)星校正誤差。另外,GPS模塊可以實(shí)時(shí)地連續(xù)計(jì)算當(dāng)前位置以獲得速度信息。A/V輸入模塊120被配置為向移動(dòng)終端提供音頻或視頻信號(hào)輸入。A/V輸入單元120可以包括相機(jī)121和麥克風(fēng)122。相機(jī)121接收并且處理圖像傳感器在視頻呼叫模式或拍攝模式所得到的靜止圖片或視頻的圖像幀。經(jīng)處理的圖像幀可以被顯示在顯示器151上。
經(jīng)相機(jī)121處理的圖像幀可以存儲(chǔ)在存儲(chǔ)器160中或者通過無線通信單元110發(fā)送至外部。根據(jù)移動(dòng)終端的配置可以設(shè)置兩個(gè)或更多個(gè)相機(jī)121。當(dāng)移動(dòng)終端處于特定的模式(例如電話呼叫模式、記錄模式、語音識(shí)別模式等)時(shí),麥克風(fēng)122可以經(jīng)過麥克風(fēng)接收外部音頻信號(hào)。該音頻信號(hào)被處理為數(shù)字?jǐn)?shù)據(jù)。在電話呼叫模式的情況下,經(jīng)處理的數(shù)字?jǐn)?shù)據(jù)被轉(zhuǎn)換為可以通過移動(dòng)通信模塊112傳送至移動(dòng)通信基站以輸出的格式。麥克風(fēng)122可以包括適合的噪聲去除算法以去除在接收外部音頻信號(hào)的過程中生成的噪聲。 用戶輸入單元130可以生成由用戶輸入的輸入數(shù)據(jù)以控制移動(dòng)終端的操作。用戶輸入單元130可以包括鍵盤、薄膜開關(guān)、觸摸板(例如,靜態(tài)壓力/電容)、推輪、輕推開關(guān)等。特定示例可以是以下描述的觸摸板與顯示器151層疊的示例,以與顯示器151協(xié)作,這稱為觸摸屏。感測(cè)單元140提供移動(dòng)終端的各個(gè)方面的狀態(tài)測(cè)量。例如,感測(cè)單元140可以檢測(cè)移動(dòng)終端的開/關(guān)狀態(tài)、移動(dòng)終端100的位置的改變、用戶與移動(dòng)終端100的接觸的出現(xiàn)或消失、移動(dòng)終端100的位置、移動(dòng)終端100的加速/減速等,以生成用于控制移動(dòng)終端100的操作的感測(cè)信號(hào)。例如,對(duì)于滑蓋型移動(dòng)終端,感測(cè)單元140可以感測(cè)移動(dòng)終端的滑動(dòng)部是打開的還是關(guān)閉的。其它示例包括感測(cè)功能,例如感測(cè)單元140感測(cè)由電源190提供的電源的出現(xiàn)或消失、接口單元170和外部設(shè)備之間的耦合或其它連接的出現(xiàn)或消失。在此,感測(cè)單元140可以包括接近傳感器141,稍后將結(jié)合觸摸屏來對(duì)其描述。感測(cè)單元140包括地磁傳感器,用于計(jì)算當(dāng)用戶運(yùn)動(dòng)時(shí)的運(yùn)動(dòng)方向;陀螺儀傳感器,用于計(jì)算旋轉(zhuǎn)方向;以及加速度傳感器。接口單元170通常被實(shí)現(xiàn)以將移動(dòng)終端耦合到外部設(shè)備。接口單元170可以包括例如有線/無線耳機(jī)端口、外部充電器端口、有線/無線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于耦接具有識(shí)別模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機(jī)端口等。識(shí)別模塊可以配置為用于存儲(chǔ)對(duì)使用移動(dòng)終端100的權(quán)限進(jìn)行認(rèn)證所需的各種信息的芯片,其可以包括用戶身份模塊(UM)、訂戶身份模塊(SM)、通用訂戶身份模塊(USM)等。而且,具有識(shí)別模塊的裝置(以下稱為“識(shí)別裝置”)可以實(shí)現(xiàn)為智能卡的類型。因此,識(shí)別裝置可以通過端口耦接至移動(dòng)終端100。這種接口單元170可以從外部設(shè)備接收數(shù)據(jù)或者被提供電力,并且將接收到的數(shù)據(jù)或者電力傳遞到移動(dòng)終端100內(nèi)的每一個(gè)組件,或者將移動(dòng)終端100的數(shù)據(jù)傳遞到外部設(shè)備。而且,接口單元170可以充當(dāng)當(dāng)移動(dòng)終端100連接至外部支架時(shí)將電力從外部支架供應(yīng)至移動(dòng)終端100的路徑,或者充當(dāng)用于將由用戶從支架輸入的各種指令信號(hào)傳送至移動(dòng)終端100的路徑。這些來自支架的各種指令信號(hào)或者電源輸入可以操作為用于確認(rèn)移動(dòng)終端100已被精確地安裝至支架的信號(hào)。輸出單元150被配置為輸出音頻信號(hào)、視頻信號(hào)或者報(bào)警信號(hào)。輸出單元150可以包括顯不器151、音頻輸出模塊152、報(bào)警器153等。顯示器151可以輸出移動(dòng)終端100中處理的信息。例如,當(dāng)移動(dòng)終端工作在電話呼叫模式時(shí),顯示器151將提供包括與呼叫相關(guān)的信息的用戶接口(UI)或圖形用戶接口(⑶ I)。另外,如上所述,觸摸屏可以被配置成顯示器151與觸摸板彼此疊置以彼此協(xié)作。該構(gòu)造允許顯示器151用作輸出裝置和輸入裝置兩者。可以利用例如液晶顯示器(LCD)、薄膜晶體管-液晶顯示器(TFT-1XD)、有機(jī)發(fā)光二極管(OLED)、柔性顯示器、三維(3D)顯示器等來實(shí)現(xiàn)顯示器151。一些顯示器可以被配置為透明的,從而能夠通過其看見外部。這些顯示器可以被稱為透明顯示器。透明顯示器的典型示例可以包括透明有機(jī)發(fā)光二極管(TOLED)等。移動(dòng)終端100可以根據(jù)其實(shí)施方式包括兩個(gè)或更多個(gè)這種顯示器。例如,移動(dòng)終端100可同時(shí)包括外部顯示器(未示出)和內(nèi)部顯示器(未示出)。觸摸屏可以被配置為檢測(cè)觸摸輸入壓力以及觸摸輸入位置和觸摸輸入面積。音頻輸出模塊152可以將在包括呼叫接收模式、呼叫撥打模式、記錄模式、語音識(shí)別模式、廣播接收模式等多種模式下從無線通信單元HO接收到的音頻數(shù)據(jù)或者存儲(chǔ)在存儲(chǔ)器160中的音頻數(shù)據(jù)輸出。另外,音頻輸出模塊152可以輸出涉及移動(dòng)終端100進(jìn)行的特定功能(例如,接收到呼叫、接收到消息等)的音頻信號(hào)??梢允褂脫P(yáng)聲器、蜂鳴器等實(shí)現(xiàn)音頻輸出模塊152。報(bào)警單元153輸出通知從移動(dòng) 終端100發(fā)生的事件的信號(hào)。從移動(dòng)終端100發(fā)生的事件可以包括接收到呼叫、接收到消息、按鍵信號(hào)輸入、觸摸輸入等。報(bào)警單元153可以不僅輸出視頻或音頻信號(hào),還可以輸出其它類型的信號(hào),例如,以振動(dòng)方式通知事件的發(fā)生的信號(hào)。當(dāng)呼叫信號(hào)或者消息被接收到時(shí),報(bào)警單元153可以輸出振動(dòng)以使用戶認(rèn)識(shí)到事件發(fā)生。當(dāng)然,可以通過顯示單元151或者音頻輸出模塊152輸出用于提醒事件發(fā)生的信號(hào)。存儲(chǔ)器160可以存儲(chǔ)對(duì)控制器180進(jìn)行處理和控制的程序。另選地,存儲(chǔ)器160可以臨時(shí)存儲(chǔ)輸入/輸出數(shù)據(jù)(例如,電話薄數(shù)據(jù)、消息、靜止圖像、視頻等)。而且,存儲(chǔ)器160可以存儲(chǔ)與振動(dòng)的各種模式相關(guān)的數(shù)據(jù)以及在觸摸屏上進(jìn)行觸摸輸入時(shí)的音頻輸出??梢岳萌魏晤愋偷倪m合的存儲(chǔ)介質(zhì)實(shí)現(xiàn)存儲(chǔ)器160,這些存儲(chǔ)介質(zhì)包括閃存類型、硬盤類型、多媒體卡微型、存儲(chǔ)卡類型(例如,SD或DX存儲(chǔ)器)、隨機(jī)存取存儲(chǔ)器(RAM)、靜態(tài)隨機(jī)存取存儲(chǔ)器(SRAM)、只讀存儲(chǔ)器(ROM)、電可擦除可編程只讀存儲(chǔ)器(EEPR0M)、可編程只讀存儲(chǔ)器(PR0M)、磁性存儲(chǔ)器、磁盤、光盤等。而且,移動(dòng)終端100可以對(duì)在因特網(wǎng)上執(zhí)行存儲(chǔ)器160的存儲(chǔ)功能的網(wǎng)絡(luò)存儲(chǔ)器進(jìn)行操作。控制器180通??刂埔苿?dòng)終端100的總體操作。例如,控制器180執(zhí)行與電話呼口4、數(shù)據(jù)通信、視頻呼叫等相關(guān)的控制和處理。控制器180可以包括提供多媒體回放的多媒體模塊181。多媒體模塊181可以配置為控制器180的一部分或者作為單獨(dú)的組件。控制器180可以執(zhí)行模式識(shí)別處理以將觸摸屏上的寫或畫輸入識(shí)別為文字或圖像。電源190在控制器180的控制下提供各種組件所需的電源。所提供的電源可以是內(nèi)部電源、外部電源或者其組合。此處所描述的各種實(shí)施方式可以利用軟件、硬件或其組合實(shí)現(xiàn)在計(jì)算機(jī)可讀介質(zhì)中。針對(duì)硬件實(shí)現(xiàn),此處所描述的實(shí)施方式可以實(shí)現(xiàn)在以下各項(xiàng)中的一個(gè)或更多個(gè)中專用集成電路(ASIC)、數(shù)字信號(hào)處理器(DSP)、數(shù)字信號(hào)處理器件(DSPD)、可編程邏輯器件(PLD)、現(xiàn)場(chǎng)可編程門陣列(FPGA)、處理器、微處理器、設(shè)計(jì)為執(zhí)行此處所描述的功能的其它電子單元或者其選擇性的組合。在某些情況下,可以由控制器180實(shí)現(xiàn)這樣的實(shí)施方式。針對(duì)軟件實(shí)現(xiàn),可以利用各自執(zhí)行至少一種功能和操作的單獨(dú)的軟件模塊共同實(shí)現(xiàn)例如程序和功能的實(shí)施方式??梢杂靡匀魏魏线m的編程語言編寫的軟件應(yīng)用來實(shí)現(xiàn)軟件代碼。而且,該軟件代碼可以存儲(chǔ)在存儲(chǔ)器160中,并且被控制器180執(zhí)行。圖1所示的移動(dòng)終端100可以被配置為在經(jīng)過幀或者分組發(fā)射數(shù)據(jù)的通信系統(tǒng)內(nèi)操作,包括無線和有線通信系統(tǒng)以及基于衛(wèi)星的通信系統(tǒng)。在下文,將參照?qǐng)D2給出根據(jù)本公開的可與移動(dòng)終端操作的通信系統(tǒng)的描述。這些通信系統(tǒng)利用不同的空中接口和/或物理層。通信系統(tǒng)利用的空中接口的示例包括頻分多址(FDMA )、時(shí)分多址(TDMA )、碼分多址(CDMA )和通用移動(dòng)通信系統(tǒng)(UMT S )、UMTS的長(zhǎng)期演進(jìn)(LTE)、全球移動(dòng)通信系統(tǒng)(GSM)等。僅僅通過非限定示例,進(jìn)一步描述將涉及CDMA通信系統(tǒng),但是這些教導(dǎo)等同地應(yīng)用于其它系統(tǒng)類型,包括CDMA無線通信系統(tǒng)?,F(xiàn)在參照?qǐng)D2,所示的CDMA無線通信系統(tǒng)具有多個(gè)移動(dòng)終端100、多個(gè)基站(BS)270、基站控制器(BSC) 275和移動(dòng)交換中心(MSC) 280。MSC 280被配置以與常規(guī)的公共交換電話網(wǎng)絡(luò)(PSTN) 290接口。MSC 280還被配置以與BSC 275接口。BSC 275經(jīng)過骨干線路耦合到基站270。可以根據(jù)任意已知接口配置骨干線路,包括例如El/Tl、ATM、IP、PPP,幀中繼、HDSL、ADSL或者xDSL。因此,多個(gè)BSC 275可以被包括在如圖2所示的系統(tǒng)中。
每個(gè)基站270可以包括一個(gè)或者更多個(gè)扇區(qū),并且每個(gè)扇區(qū)可以包括全向天線或者從基站270徑向遠(yuǎn)離地指向特定方向的天線。另選地,每個(gè)扇區(qū)可以包括兩個(gè)更多個(gè)不同的天線。每一個(gè)基站270可以被配置為支持多個(gè)頻率分配,每一個(gè)頻率分配具有特定頻譜(例如,1. 25MHz、5MHz 等)。扇區(qū)和頻率分配的交叉可以稱為CDMA信道?;?70可以稱為基站收發(fā)機(jī)子系統(tǒng)(BTS)。在一些情況下 ,術(shù)語“基站”可以用于統(tǒng)一指代BSC 275和一個(gè)或者更多個(gè)基站270?;具€可以被表示為“小區(qū)站點(diǎn)”。另選地,給定的基站270的各個(gè)扇區(qū)可以稱為小區(qū)站點(diǎn)。如圖2所示,廣播發(fā)射機(jī)(BT)295向在系統(tǒng)內(nèi)操作的移動(dòng)終端100發(fā)射廣播信號(hào)。廣播接收模塊111 (圖1)通常構(gòu)建在移動(dòng)終端100內(nèi)部以接收BT 295發(fā)射的廣播信號(hào)。圖2還描繪了多個(gè)全球定位系統(tǒng)(GPS)衛(wèi)星300。這些衛(wèi)星300便于定位多個(gè)移動(dòng)終端100中的至少一個(gè)的位置。圖2中描繪了兩個(gè)衛(wèi)星,但應(yīng)理解的是可以通過比兩個(gè)衛(wèi)星更多或者更少的衛(wèi)星獲得有用的位置信息。GPS模塊115 (圖1)通常被配置為與衛(wèi)星300合作來獲得期望的位置信息。應(yīng)理解的是可以另選地實(shí)現(xiàn)其它類型的位置檢測(cè)技術(shù)(即,除了 GPS定位技術(shù)還可以使用的定位技術(shù)或者代替GPS定位技術(shù)使用的定位技術(shù))。如果期望,則GPS衛(wèi)星300中的至少一個(gè)可以另選地或者附加地被配置成提供衛(wèi)星DMB發(fā)射。在無線通信系統(tǒng)的通常操作期間,基站270從各個(gè)移動(dòng)終端100接收反向鏈路的集合。移動(dòng)終端100參與呼叫、消息通信以及執(zhí)行其它通信。給定的基站270接收到的每一個(gè)反向鏈路信號(hào)在該基站270內(nèi)處理。得到的數(shù)據(jù)被轉(zhuǎn)發(fā)到相關(guān)聯(lián)的BSC 275。BSC 275提供呼叫資源分配和移動(dòng)性管理功能,包括基站270之間的一連串軟切換。BSC 275還將接收到的數(shù)據(jù)路由到MSC 200,MSC 200接著提供用于與PSTN 290接口的附加的路由服務(wù)。類似地,PSTN 290與MSC 280接口,并且MSC 280與BSC 275接口,BSC 275接著控制基站270來向移動(dòng)終端100發(fā)射前向鏈路信號(hào)的集合。
本公開提出一種在具有雙相機(jī)的移動(dòng)終端中使用拍攝的單個(gè)圖像而不是拍攝的兩個(gè)圖像生成離焦圖像(離焦的圖像)的方法。在本公開中,隨著一個(gè)相機(jī)拍攝的預(yù)覽圖像被顯示,使用兩個(gè)預(yù)覽圖像實(shí)時(shí)地生成深度圖并且顯示在所顯示的預(yù)覽圖像的一側(cè)。當(dāng)在深度圖上選擇要通過離焦效果清楚地?cái)z影的對(duì)象(或者主體)、即要被清楚地聚焦的部分時(shí),基于所選擇的對(duì)象的會(huì)聚更新深度圖。當(dāng)實(shí)際進(jìn)行拍攝(攝影)時(shí),濾波器(即,高斯模糊濾波器)基于經(jīng)更新的深度圖的會(huì)聚處理拍攝的圖像,以生成離焦拍攝圖像。預(yù)覽圖像可以包括靜止圖像或者視頻。深度圖可以顯示在畫面的隨機(jī)區(qū)域上。例如,深度圖可以被處理成半透明(即,通過a混合處理)從而交疊預(yù)覽畫面,或者以小窗口(即迷你圖)的形式顯示。顯示在畫面的隨機(jī)區(qū)域上的深度圖基于會(huì)聚零(0)點(diǎn)用不同顏色顯示負(fù)(_)會(huì)聚區(qū)域(負(fù)視差區(qū)域)(即,突出)和正(+ )會(huì)聚區(qū)域(正視差區(qū)域)(即,深度)。當(dāng)用戶在畫面上改變要通過離焦效果清楚地拍攝的對(duì)象時(shí),顯示在畫面的隨機(jī)區(qū)域上的深度圖可以通過自動(dòng)更新而顯示。具體地,當(dāng)要通過離焦效果清楚地拍攝對(duì)象時(shí),負(fù)(_)會(huì)聚區(qū)域和正(+ )會(huì)聚區(qū)域基于將對(duì)應(yīng)的對(duì)象作為會(huì)聚零點(diǎn)而出現(xiàn)在深度圖上。在此,可以通過生成次深度圖,針對(duì)看上去突出的部分(對(duì)象)而不是所選擇的 對(duì)象來進(jìn)行背景處理。深度圖的生成圖3示出使用一個(gè)預(yù)覽圖像生成深度圖的示例。當(dāng)在相機(jī)模式下選擇離焦功能時(shí),控制器180驅(qū)動(dòng)(激活、操作)兩個(gè)相機(jī)。當(dāng)這兩個(gè)相機(jī)被驅(qū)動(dòng)時(shí),控制器180將經(jīng)過每一個(gè)相機(jī)輸入的圖像(圖像數(shù)據(jù))存儲(chǔ)在每一個(gè)緩沖器中??刂破?80可以在顯示單元151上顯示存儲(chǔ)在一個(gè)緩沖器中的圖像作為預(yù)覽圖像,并且可以不顯示存儲(chǔ)在另一個(gè)緩沖器中的圖像。另外,控制器180可以使用通過兩個(gè)相機(jī)獲得的預(yù)覽圖像實(shí)時(shí)地生成針對(duì)顯示的預(yù)覽圖像的深度圖,并且在預(yù)覽圖像(用作背景)的一側(cè)顯示所生成的深度圖。顯示在顯示單元151上的預(yù)覽圖像(由左相機(jī)或者右相機(jī)獲得的圖像)可以被用戶選擇。圖4示出顯示在畫面的一側(cè)的深度圖的示例的圖。如圖4所示,深度圖50可以以迷你圖的形式顯示在畫面的右上部。深度圖50可以另選地被顯示在右下部和左下部以及右上部之一,或者以半透明形式(即,通過a混合處理)以交疊方式顯示在輸出到畫面上的預(yù)覽圖像上。深度圖的大小、形狀、顏色和顯示時(shí)間可以通過菜單被用戶設(shè)置,或者通過當(dāng)深度圖的邊緣被直接觸摸時(shí)顯示的菜單設(shè)置或者改變。具體地,可以通過觸摸和拖動(dòng)調(diào)整深度圖的大小。要通過離焦效果清禁地拍攝的對(duì)象的詵擇圖5是示出當(dāng)從預(yù)覽圖像中選擇要通過離焦效果清楚地拍攝的特定對(duì)象時(shí)更新深度圖的示例的圖。如圖5所示,當(dāng)在深度圖50顯示在預(yù)覽圖像上的狀態(tài)下用戶選擇要通過離焦效果清楚地拍攝的特定對(duì)象時(shí),控制器180將深度圖50上的對(duì)應(yīng)的對(duì)象設(shè)置為會(huì)聚零(0)點(diǎn),并且基于會(huì)聚零點(diǎn)顯示負(fù)(_)會(huì)聚區(qū)域(即,突出)和正(+ )會(huì)聚區(qū)域(即,深度)。在此,為了用戶容易識(shí)別,可以用不同顏色顯示負(fù)會(huì)聚區(qū)域和正會(huì)聚區(qū)域。圖6是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的控制具有深度圖的預(yù)覽圖像中背景的模糊程度的示例的圖。如圖6所示,可以在預(yù)覽圖像或深度圖的一側(cè)設(shè)置用于控制背景(正會(huì)聚區(qū)域)的模糊程度的控制條52。用戶可以滾動(dòng)控制條52以調(diào)整正會(huì)聚區(qū)域(即,背景區(qū)域)的模糊程度。隨著控制條52被滾動(dòng),背景區(qū)域的模糊程度可以自動(dòng)調(diào)整以顯示在深度圖50上。例如,如果假定隨著控制條的顏色變暗背景更模糊并且隨著顏色變亮而更清楚,則用戶可以通過調(diào)整控制條52來決定正會(huì)聚區(qū)域的模糊程度。所決定的模糊程度可以反映到深度圖50上以通知用戶。 拍攝按鈕和深度圖調(diào)整大小圖7是示出通過拍攝預(yù)覽圖像來生成通過離焦效果清楚地拍攝的圖像的示例的圖。當(dāng)在已經(jīng)在預(yù)覽畫面上選擇了要清楚地聚焦的對(duì)象的狀態(tài)下用戶按壓位于預(yù)覽畫面右側(cè)的拍攝按鈕51時(shí),參照?qǐng)D7,控制器180獲取經(jīng)過兩個(gè)相機(jī)中的一個(gè)相機(jī)(例如,右相機(jī))拍攝的圖像,并且將在預(yù)覽畫面上生成的深度圖的大小調(diào)整為與獲取的圖像相同的大小。隨著在預(yù)覽圖像上生成的深度圖被調(diào)整大小,控制器180組合獲取到的圖像和調(diào)整大小的深度圖,從而在顯示單元151上顯示應(yīng)用了離焦效果的拍攝圖像?;诮?jīng)調(diào)整大小的深度圖的拍攝圖像的離焦可以通過以塊為單位或者以像素為單位的比較來實(shí)現(xiàn)基于經(jīng)調(diào)整大小的深度圖的拍攝的圖像的離焦。當(dāng)以塊為單位進(jìn)行比較時(shí),控制器180將拍攝的圖像和經(jīng)調(diào)整大小的深度圖分別劃分為NXM個(gè)塊,并且比較每個(gè)塊。圖7示例地示出通過以塊為單位比較而生成離焦圖像。相反地,當(dāng)以像素為單位進(jìn)行比較時(shí),比較每個(gè)像素。具體地,當(dāng)通過以像素為單位進(jìn)行比較來生成離焦圖像時(shí),經(jīng)調(diào)整大小的深度圖和拍攝的圖像是相同的圖像。這可以允許清楚地分離對(duì)象之間的邊緣,得到精確的針對(duì)邊緣的模糊。常規(guī)方法尚未獲得令人滿意的針對(duì)邊緣的離焦效果。經(jīng)離焦的拍攝的圖像的濾波當(dāng)完成以塊為單位或者以像素為單位的比較時(shí),可以進(jìn)行濾波,即,高斯模糊濾波,以根據(jù)基于深度圖在拍攝的圖像上決定的會(huì)聚零點(diǎn),使對(duì)應(yīng)于正會(huì)聚區(qū)域的塊(或者像素)模糊,而保持負(fù)會(huì)聚區(qū)域不變。當(dāng)濾波完成時(shí),控制器180最終生成離焦圖像并且用編碼器處理離焦圖像。圖8是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的用于針對(duì)靜止圖像生成離焦圖像的方法的流程圖。如圖8所示,當(dāng)用戶在相機(jī)模式下選擇離焦功能(SlO)時(shí),控制器180同時(shí)激活兩個(gè)相機(jī)(左相機(jī)和右相機(jī))(Sll)0控制器180接著將各個(gè)相機(jī)獲取的預(yù)覽圖像存儲(chǔ)在存儲(chǔ)器160中,并且還顯示兩個(gè)相機(jī)中的一個(gè)相機(jī)獲得的圖像作為預(yù)覽圖像,且顯示針對(duì)相應(yīng)預(yù)覽圖像生成的深度圖50(S12)。當(dāng)離焦功能被選擇時(shí),深度圖50可以與預(yù)覽圖像一起顯示,但是另選地,當(dāng)在以下說明的步驟S13中選擇要清楚地聚焦的對(duì)象時(shí)首先顯示。
當(dāng)用戶在顯示了深度圖50的預(yù)覽畫面上選擇要清楚地聚焦的對(duì)象(或者部分)時(shí),控制器180將所選擇的對(duì)象設(shè)置為深度圖50上的會(huì)聚零點(diǎn),并且通過基于會(huì)聚零點(diǎn)用不同顏色指示負(fù)會(huì)聚區(qū)域和正會(huì)聚區(qū)域來更新深度圖50 (S14).在此,用戶可以使用控制條52調(diào)整針對(duì)正會(huì)聚區(qū)域(S卩,對(duì)應(yīng)于深度圖50上的背景的部分)的模糊程度??刂破?80接著作為對(duì)移動(dòng)控制條52的響應(yīng)提供深度圖50的正會(huì)聚區(qū)域的模糊程度(S15)。當(dāng)在完成深度圖的調(diào)整之后用戶按壓拍攝按鈕51時(shí),控制器180通過用一個(gè)相機(jī)(例如,左相機(jī))實(shí)際拍攝當(dāng)前處于預(yù)覽狀態(tài)的全大小圖像來獲得靜止圖像(S16)。一旦獲取了靜止圖像,控制器180將經(jīng)調(diào)整的深度圖50劃分為NXM個(gè)塊,并且放大每個(gè)塊以對(duì)應(yīng)于全大小靜止圖像的比例(S17)。也就是說,經(jīng)調(diào)整的深度圖50被調(diào)整大小為與拍攝的圖像相同的大小。因此,控制器180進(jìn)行高斯模糊濾波,通過該濾波,基于與經(jīng)放大的深度圖對(duì)應(yīng)的拍攝圖像的會(huì)聚零點(diǎn),使對(duì)應(yīng)于正會(huì)聚區(qū)域的部分(塊或者像素)模糊,而保持負(fù)會(huì)聚區(qū)域不變,從而最終生成離焦圖像(S18 )。所生成的離焦圖像接著被存儲(chǔ)在存儲(chǔ)器160中并且在顯示單元151上輸出。同時(shí),在步驟S18中,當(dāng)基于與經(jīng)放大的深度圖對(duì)應(yīng)的拍攝圖像的會(huì)聚零點(diǎn)進(jìn)行濾波時(shí),控制器180仍保留負(fù)會(huì)聚區(qū)域。在此情況下,除了目標(biāo)對(duì)象之外的其它對(duì)象也很可能被聚焦。因此,必須選擇其它對(duì)象的特定對(duì)象,或者必須進(jìn)行針對(duì)對(duì)應(yīng)部分的背景處理。圖9是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的針對(duì)負(fù)(_)會(huì)聚區(qū)域調(diào)整深度圖的示例的圖。如圖9所示,在圖8的步驟S13中,當(dāng)基于從初始預(yù)覽畫面選擇的要聚焦的對(duì)象生成深度圖50時(shí),控制器180將對(duì)應(yīng)的對(duì)象設(shè)置為會(huì)聚零點(diǎn)(S20),并且檢查是否存在看上去比對(duì)應(yīng)的對(duì)象更突出的對(duì) 象(即負(fù)會(huì)聚對(duì)象)(S21)。如果根據(jù)檢查結(jié)果不存在任何具有負(fù)會(huì)聚的對(duì)象,則如圖8所示,控制器180通過基于所選擇的一個(gè)對(duì)象更新深度圖來顯示深度圖。另一方面,如果檢查到存在至少一個(gè)具有負(fù)會(huì)聚的對(duì)象,則控制器180顯示關(guān)于除了所選擇的對(duì)象之外是否還應(yīng)用另一個(gè)對(duì)象的用戶確認(rèn)消息。在此,用戶可以應(yīng)用所述至少一個(gè)對(duì)象的全部,附加地選擇特定的期望對(duì)象,或者可以不應(yīng)用它們中的任一個(gè)。如果用戶決定不應(yīng)用不同于所選擇的對(duì)象的另一個(gè)對(duì)象(S22),則控制器180提取當(dāng)前具有負(fù)會(huì)聚的對(duì)象塊(或者像素),并且將對(duì)應(yīng)的對(duì)象塊強(qiáng)制地調(diào)整為會(huì)聚零點(diǎn)(S23和S243)。也就是說,控制器180針對(duì)除了已經(jīng)從初始預(yù)覽畫面選擇的要清楚地聚焦的對(duì)象之外的其它對(duì)象的全部或者選擇性地進(jìn)行背景處理。之后,如圖8的步驟S14所示,控制器180基于經(jīng)調(diào)整的會(huì)聚零點(diǎn)調(diào)整整個(gè)深度圖。因此,當(dāng)除了要清楚地聚焦的對(duì)象之外存在具有負(fù)會(huì)聚的對(duì)象時(shí),可以通過離焦效果清楚地聚焦所選擇的對(duì)象,并且附加地,其它對(duì)象也可以與所選擇的對(duì)象一起清楚地聚焦,實(shí)現(xiàn)更準(zhǔn)確的離焦。同時(shí),相對(duì)于靜止圖像例示了至此描述的離焦圖像生成方法。然而,本公開可以不限于靜止圖像,而還可以應(yīng)用于視頻。
圖10是示出根據(jù)詳細(xì)描述的示例性實(shí)施方式的用于針對(duì)運(yùn)動(dòng)圖像(視頻)生成離焦圖像的方法的流程圖。如圖10所示,當(dāng)用戶在視頻模式下選擇離焦功能時(shí),控制器180同時(shí)激活兩個(gè)相機(jī)(S30),接著在顯示單元151上顯示預(yù)覽圖像和利用由兩個(gè)相機(jī)獲取的圖像生成的深度圖(S32)。當(dāng)在預(yù)覽畫面上選擇要清楚地聚焦的對(duì)象時(shí)(S33),控制器180將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn)接著實(shí)時(shí)地進(jìn)行自動(dòng)會(huì)聚。也就是說,當(dāng)設(shè)置了對(duì)象跟蹤或者面部識(shí)別時(shí),控制器180針對(duì)所選擇的對(duì)象實(shí)時(shí)地進(jìn)行對(duì)象跟蹤或者面部識(shí)別,并且基于被設(shè)置為會(huì)聚零點(diǎn)的所選擇的對(duì)象實(shí)時(shí)地進(jìn)行自動(dòng)會(huì)聚,從而根據(jù)兩個(gè)相機(jī)獲取的圖像生成深度圖(S34 )。 另外,在連續(xù)自動(dòng)聚焦(AF)的設(shè)置狀態(tài)中,控制器180隨著針對(duì)兩個(gè)相機(jī)進(jìn)行連續(xù)AF而將焦內(nèi)部分設(shè)置 為會(huì)聚零點(diǎn),之后進(jìn)行自動(dòng)會(huì)聚以生成深度圖。一旦生成了深度圖,控制器180將深度圖和預(yù)覽圖像分別劃分為NXM個(gè)塊。因此,控制器180基于深度圖的會(huì)聚零點(diǎn)使預(yù)覽圖像的各塊的負(fù)(-)會(huì)聚區(qū)域模糊,并且銳化正(+ )會(huì)聚區(qū)域(S35和S36)。另外,控制器180可以通過如圖9所示地調(diào)整深度圖來選擇性地使正會(huì)聚區(qū)域模糊。因而生成的離焦圖像然后顯示在畫面上。當(dāng)用戶按壓記錄按鈕時(shí),控制器180通過用編碼器壓縮對(duì)應(yīng)的圖像而將對(duì)應(yīng)的圖像存儲(chǔ)在存儲(chǔ)器160中(S37)。對(duì)于處理期間的視頻預(yù)覽,與通常攝影的預(yù)覽不同,被攝影對(duì)象(主體)連續(xù)地移動(dòng)。這可能使得很難按照應(yīng)用于靜止圖像的相同方法調(diào)整模糊程度。為了彌補(bǔ)缺陷,本公開采用當(dāng)拍攝視頻時(shí)單獨(dú)對(duì)運(yùn)動(dòng)對(duì)象開窗口的方法。也就是說,運(yùn)動(dòng)對(duì)象的跟蹤結(jié)果被顯示在單獨(dú)窗口上(或者相反示例)并且允許用戶將跟蹤結(jié)果改變?yōu)橛脩艚涌?UI ),以調(diào)整運(yùn)動(dòng)圖像的模糊程度。在此情況下,由于運(yùn)動(dòng)圖像的周圍是模糊的,可以減少任何時(shí)候跟蹤運(yùn)動(dòng)對(duì)象時(shí)調(diào)整模糊程度的問題。如上所述,本公開可以允許通過使用深度圖和一個(gè)拍攝圖像而不是兩個(gè)連續(xù)拍攝的圖像生成離焦圖像,這可以減少由于圖像拍攝引起的延遲時(shí)間和存儲(chǔ)器使用。并且,可以使用作為圖像提取概念的深度圖生成離焦圖像,因此,可以更準(zhǔn)確地拍攝這種離焦圖像。此外,根據(jù)本公開的一個(gè)實(shí)施方式,該方法可以在程序記錄介質(zhì)中被實(shí)現(xiàn)為計(jì)算機(jī)可讀代碼。計(jì)算機(jī)可讀介質(zhì)可以包括存儲(chǔ)可被計(jì)算機(jī)系統(tǒng)讀取的數(shù)據(jù)的全部類型的記錄裝置。這些計(jì)算機(jī)可讀介質(zhì)的示例可以包括R0M、RAMXD_R0M、磁帶、軟盤、光學(xué)數(shù)據(jù)存儲(chǔ)元件等。另外,計(jì)算機(jī)可讀介質(zhì)還可以實(shí)現(xiàn)為載波的格式(例如,經(jīng)過因特網(wǎng)傳輸)。計(jì)算機(jī)可以包括移動(dòng)終端的控制器180。上述實(shí)施方式中的移動(dòng)終端的配置和方法可以不受限地應(yīng)用,但是這些實(shí)施方式可以通過全部或者部分實(shí)施方式的選擇性的組合來配置,以實(shí)現(xiàn)很多變型。上述實(shí)施方式和優(yōu)點(diǎn)僅僅是示例性的而不理解為限制本公開。這些教導(dǎo)可容易地應(yīng)用于其它類型的設(shè)備。這些描述旨在作為示例性的,而不限制權(quán)利要求的范圍。許多修改和變型對(duì)于本領(lǐng)域的技術(shù)人員是明顯的。此處描述的示例性實(shí)施方式的特征、結(jié)構(gòu)、方法和其它特性可以按照各種方式組合以獲得附加和/或另選的示例性實(shí)施方式。
由于不背離其特性的情況下當(dāng)前的特征可以按照多種形式實(shí)現(xiàn),還應(yīng)理解的是除非相反地規(guī)定,上述實(shí)施方式不限于上述描述的任何細(xì)節(jié),而應(yīng)在所附的權(quán)利要求的范圍內(nèi)寬泛地理解 ,因而所附的權(quán)利要求旨在包含落入權(quán)利要求的實(shí)質(zhì)和邊界或者這些實(shí)質(zhì)和邊界的等同物內(nèi)的全部變化和修改。
權(quán)利要求
1.一種用于在移動(dòng)終端中生成離焦圖像的方法,所述方法包括 當(dāng)離焦功能被選擇時(shí)顯示預(yù)覽圖像和深度圖; 當(dāng)從所述預(yù)覽圖像中選擇特定對(duì)象時(shí)通過基于所述特定對(duì)象調(diào)整會(huì)聚來更新所述深度圖; 拍攝圖像;以及 通過基于經(jīng)更新的深度圖的會(huì)聚使拍攝的圖像模糊來生成離焦圖像。
2.根據(jù)權(quán)利要求1所述的方法,其中,所述預(yù)覽圖像是靜止圖像或者運(yùn)動(dòng)圖像(視頻)。
3.根據(jù)權(quán)利要求1所述的方法,其中,所述深度圖是根據(jù)通過兩個(gè)相機(jī)獲取的預(yù)覽圖像生成的,并且是當(dāng)所述離焦功能被選擇或者所述特定對(duì)象被選擇時(shí)生成的。
4.根據(jù)權(quán)利要求1所述的方法,其中,所述深度圖以迷你圖的形式顯示在所述預(yù)覽圖像的ー側(cè)。
5.根據(jù)權(quán)利要求4所述的方法,其中,所述深度圖通過以半透明形式交疊所述預(yù)覽圖像而顯示。
6.根據(jù)權(quán)利要求1所述的方法,其中,在用戶菜單中初始設(shè)置所述深度圖的大小、形狀、顔色和顯示時(shí)間,或者通過所述深度圖被選擇時(shí)顯示的菜單設(shè)置所述深度圖的大小、形狀、顔色和顯示時(shí)間。
7.根據(jù)權(quán)利要求1所述的方法,其中,所述深度圖包括基于會(huì)聚零點(diǎn)的負(fù)(_)會(huì)聚區(qū)域和正(+ )會(huì)聚區(qū)域,所述區(qū)域用不同顔色指示。
8.根據(jù)權(quán)利要求1所述的方法,其中,響應(yīng)于布置在所述預(yù)覽圖像或者所述深度圖的ー側(cè)的控制條的移動(dòng),進(jìn)行所述深度圖的更新以調(diào)整所述深度圖的背景的模糊程度。
9.根據(jù)權(quán)利要求1所述的方法,其中,所述深度圖的更新包括 將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn); 檢查是否存在ー個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象; 當(dāng)存在ー個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象時(shí),在畫面上顯示對(duì)應(yīng)的對(duì)象用于用戶選擇; 當(dāng)用戶不選擇任何具有負(fù)會(huì)聚的對(duì)象時(shí),提取所述對(duì)應(yīng)的對(duì)象; 將所提取的對(duì)象的會(huì)聚重新設(shè)置為正會(huì)聚;以及 基于重新設(shè)置的正會(huì)聚更新所述深度圖。
10.根據(jù)權(quán)利要求1所述的方法,其中,所述離焦圖像的生成包括 將所述經(jīng)更新的深度圖放大到所述拍攝的圖像的大小; 以塊或者像素為單位比較所述拍攝的圖像和經(jīng)放大的深度圖;以及基于會(huì)聚零點(diǎn),進(jìn)行用于使通過比較與所述深度圖對(duì)應(yīng)的所述拍攝的圖像的正會(huì)聚區(qū)域模糊的濾波。
11.根據(jù)權(quán)利要求10所述的方法,其中,所述濾波是高斯模糊濾波。
12.一種移動(dòng)終端,所述終端包括 顯示單元,所述顯示単元被配置為顯示預(yù)覽圖像和深度圖; 存儲(chǔ)器,所述存儲(chǔ)器被配置為存儲(chǔ)拍攝的圖像;以及 控制器,所述控制器被配置為當(dāng)從所述預(yù)覽圖像中選擇特定對(duì)象時(shí)通過基于所述特定對(duì)象調(diào)整會(huì)聚來更新所述深度圖,并且在拍攝圖像時(shí)基于經(jīng)更新的深度圖的會(huì)聚使拍攝的圖像模糊,以生成離焦圖像。
13.根據(jù)權(quán)利要求12所述的終端,其中,所述預(yù)覽圖像是靜止圖像或者運(yùn)動(dòng)圖像。
14.根據(jù)權(quán)利要求12所述的終端,其中,所述深度圖是根據(jù)通過兩個(gè)相機(jī)獲取的預(yù)覽圖像生成的,并且是當(dāng)離焦功能被選擇或者所述特定對(duì)象被選擇時(shí)生成的。
15.根據(jù)權(quán)利要求12所述的終端,其中,所述深度圖以迷你圖的形式顯示在所述預(yù)覽圖像的ー側(cè)。
16.根據(jù)權(quán)利要求12所述的終端,其中,所述深度圖通過以半透明形式交疊所述預(yù)覽圖像而顯示。
17.根據(jù)權(quán)利要求12所述的終端,其中,在用戶菜單中初始設(shè)置所述深度圖的大小、形狀、顔色和顯示時(shí)間,或者通過所述深度圖被選擇時(shí)顯示的菜單設(shè)置所述深度圖的大小、形狀、顔色和顯示時(shí)間。
18.根據(jù)權(quán)利要求12所述的終端,其中,所述控制器將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn),并且基于所述會(huì)聚零點(diǎn)用不同顔色指示負(fù)(_)會(huì)聚區(qū)域和正(+ )會(huì)聚區(qū)域。
19.根據(jù)權(quán)利要求12所述的終端,其中,所述控制器響應(yīng)于布置在所述預(yù)覽圖像或者所述深度圖的ー側(cè)的控制條的移動(dòng),調(diào)整所述深度圖的背景的模糊程度。
20.根據(jù)權(quán)利要求12所述的終端,其中,所述控制器在對(duì)象被選擇時(shí)將所選擇的對(duì)象設(shè)置為會(huì)聚零點(diǎn),并且檢查是否存在ー個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象,當(dāng)存在ー個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象時(shí)通過將對(duì)應(yīng)的對(duì)象的會(huì)聚重新設(shè)置為正會(huì)聚來更新所述深度圖。
21.根據(jù)權(quán)利要求20所述的終端,其中,當(dāng)存在ー個(gè)或多個(gè)具有負(fù)會(huì)聚的對(duì)象時(shí)所述控制器在畫面上顯示對(duì)應(yīng)的對(duì)象用于用戶選擇。
22.根據(jù)權(quán)利要求12所述的終端,其中,所述控制器將所述經(jīng)更新的深度圖放大到所述拍攝的圖像的大小,以塊或者像素為單位比較所述拍攝的圖像和經(jīng)放大的深度圖,并且基于會(huì)聚零點(diǎn)進(jìn)行用于使與所述深度圖對(duì)應(yīng)的所述拍攝的圖像的正會(huì)聚區(qū)域模糊的濾波。
23.根據(jù)權(quán)利要求22所述的終端,其中,所述濾波是高斯模糊濾波。
24.根據(jù)權(quán)利要求12所述的終端,所述終端還包括布置在所述預(yù)覽圖像或者所述深度圖的ー側(cè)、用于控制所述深度圖的背景的模糊程度的控制條。
全文摘要
移動(dòng)終端及其離焦圖像生成方法。在使用深度圖和一個(gè)拍攝圖像生成離焦圖像的移動(dòng)終端及其離焦圖像生成方法中,該方法包括當(dāng)離焦功能被選擇時(shí)顯示預(yù)覽圖像和深度圖;當(dāng)從所述預(yù)覽圖像中選擇特定對(duì)象時(shí)通過基于所述特定對(duì)象調(diào)整會(huì)聚來更新所述深度圖;拍攝實(shí)際圖像;以及通過基于經(jīng)更新的深度圖的會(huì)聚使通過一個(gè)相機(jī)拍攝的圖像模糊來生成離焦圖像。
文檔編號(hào)H04N5/232GK103037075SQ201210370090
公開日2013年4月10日 申請(qǐng)日期2012年9月28日 優(yōu)先權(quán)日2011年10月7日
發(fā)明者李賑述 申請(qǐng)人:Lg電子株式會(huì)社