專利名稱:移動(dòng)終端及其控制方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種能夠再現(xiàn)視頻的移動(dòng)終端及其控制方法。
背景技術(shù):
移動(dòng)終端可以被配置成執(zhí)行各種功能。這樣的功能的示例包括數(shù)據(jù)和語(yǔ)音通信功能、通過相機(jī)捕獲圖像和視頻的功能、存儲(chǔ)語(yǔ)音、通過揚(yáng)聲器系統(tǒng)播放音樂文件的功能、顯示圖像或者視頻的功能。一些移動(dòng)終端包括支持玩游戲的附加功能,同時(shí)其它的終端被配置成多媒體播放器。最近,移動(dòng)終端已經(jīng)被配置成接收廣播和多播信號(hào)以允許觀看視頻和電視節(jié)目。為了支持和增加移動(dòng)終端的功能性正在進(jìn)行努力。這樣的努力包括軟件和硬件改進(jìn),以及在形成移動(dòng)終端的結(jié)構(gòu)組件中的變化和改進(jìn)。而且,當(dāng)移動(dòng)終端與字幕一起顯示視頻時(shí),僅在預(yù)設(shè)部分上以均一形式顯示字幕,不能逼真地表達(dá)與視頻有關(guān)的內(nèi)容。
發(fā)明內(nèi)容
本發(fā)明的方面是為了提供一種移動(dòng)終端及其控制方法,其能夠允許用戶容易地識(shí)別與視頻有關(guān)的內(nèi)容。本發(fā)明的另一方面是為了提供一種移動(dòng)終端及其控制方法,其能夠允許有聽力障礙的人通過顯示在視頻上的字幕容易地識(shí)別視頻的內(nèi)容。根據(jù)本發(fā)明的實(shí)施例,提供一種再現(xiàn)包括圖像數(shù)據(jù)和音頻數(shù)據(jù)的視頻的移動(dòng)終端,包括:顯示單元,該顯示單元被配置成基于相對(duì)于視頻的再現(xiàn)命令顯示與圖像數(shù)據(jù)相對(duì)應(yīng)的圖像;字幕處理單元,該字幕處理單元被配置成將與視頻有關(guān)的字幕連同圖像一起輸出到顯示單元;以及控制器,該控制器被配置成控制字幕處理單元以根據(jù)與圖像有關(guān)的音頻數(shù)據(jù)的聲音特性改變字幕的顯示格式。在本發(fā)明的實(shí)施例中,控制器可以基于與音頻數(shù)據(jù)有關(guān)的聲音的振幅、振動(dòng)的次數(shù)、以及波形中的至少一個(gè)不同地控制字幕的顯示格式。在本發(fā)明的實(shí)施例中,控制器可以以二維(2D )格式或者三維(3D )格式顯示字幕,并且基于與音頻數(shù)據(jù)有關(guān)的聲音的振幅、振動(dòng)的次數(shù)、以及波形中的至少一個(gè)不同地設(shè)置用于顯示字幕的格式。在本發(fā)明的實(shí)施例中,當(dāng)三維地顯示字幕時(shí),根據(jù)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的振幅可以變化被顯示的字幕的3D深度值。在本發(fā)明的實(shí)施例中,控制器可以不同地設(shè)置其中根據(jù)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的波形顯示字幕的位置。在本發(fā)明的實(shí)施例中,字幕可以被定位為與被包括在圖像中的對(duì)象當(dāng)中的與對(duì)應(yīng)于音頻數(shù)據(jù)的聲音的波形有關(guān)的對(duì)象相鄰。在本發(fā)明的實(shí)施例中,控制器通過使用面部識(shí)別算法可以將與面部相對(duì)應(yīng)的對(duì)象與圖像區(qū)分開來(lái),并且在與面部相對(duì)應(yīng)的對(duì)象的附近顯示字幕。在本發(fā)明的實(shí)施例中,與圖像上的對(duì)應(yīng)于當(dāng)前輸出的音頻數(shù)據(jù)的對(duì)象有關(guān)的字幕可以以3D格式顯示。在本發(fā)明的實(shí)施例中,當(dāng)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的波形不同時(shí),被顯示在顯示單元上的字幕的顏色不同。在本發(fā)明的實(shí)施例中,控制器可以根據(jù)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的振幅控制字幕的尺寸不同。在本發(fā)明的實(shí)施例中,控制器可以將聲音的振幅與基準(zhǔn)值相比較,并且根據(jù)比較結(jié)果當(dāng)聲音的振幅大于基準(zhǔn)值時(shí),控制器可以以大于與基準(zhǔn)值相對(duì)應(yīng)的基準(zhǔn)尺寸的尺寸顯示字幕,并且根據(jù)比較結(jié)果當(dāng)聲音的振幅小于基準(zhǔn)值時(shí),控制器可以以小于與基準(zhǔn)值相對(duì)應(yīng)的基準(zhǔn)尺寸的尺寸顯示字幕。在本發(fā)明的實(shí)施例中,根據(jù)在聲音的振幅與基準(zhǔn)值之間的差可以變化被顯示的字幕的尺寸。在本發(fā)明的實(shí)施例中,當(dāng)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的振幅被改變時(shí),控制器可以改變被顯示的字幕的厚度和尺寸中的至少一個(gè)。在本發(fā)明的實(shí)施例中,當(dāng)聲音的振幅被增加時(shí),控制器可以與被增加的振幅的程度成比例地增加被顯示的字幕的尺寸,并且當(dāng)聲音的振幅被減少時(shí),控制器可以與被減少的振幅的程度成比例地減少被顯示的字幕的尺寸。在本發(fā)明的實(shí)施例中,隨著聲音的振幅被增加,被顯示的字幕可以從2D變成3D,并且隨著聲音的振幅被增加,可以改變?nèi)S地顯示的字幕的深度值。根據(jù)本發(fā)明的另一實(shí)施例,提供一種用于控制再現(xiàn)包括圖像數(shù)據(jù)和音頻數(shù)據(jù)的視頻的移動(dòng)終端的方法,包括:當(dāng)再現(xiàn)視頻時(shí),在顯示單元上顯示與圖像數(shù)據(jù)相對(duì)應(yīng)的圖像;并且根據(jù)與圖像有關(guān)的音頻數(shù)據(jù)的聲音特性通過改變顯示格式與圖像一起顯示與圖像有關(guān)的字眷。在本發(fā)明的實(shí)施例中,可以三維地顯示字幕,并且可以根據(jù)與音頻數(shù)據(jù)有關(guān)的聲音的振幅變化3D字幕的深度值。在本發(fā)明的實(shí)施例中,根據(jù)與音頻數(shù)據(jù)有關(guān)的聲音的波形可以在不同的位置顯示字幕,可以將字幕定位于與被包括在圖像中的對(duì)象當(dāng)中的與聲音的波形相對(duì)應(yīng)的對(duì)象相鄰。從下文中所給出的具體實(shí)施方式
,本發(fā)明的適用性的進(jìn)一步的范圍將變得顯而易見。然而,應(yīng)該理解,盡管詳細(xì)描述和特定示例指示本發(fā)明的優(yōu)選實(shí)施例,但僅通過舉例說(shuō)明來(lái)給出詳細(xì)描述和特定示例,因?yàn)閺脑敿?xì)描述本發(fā)明的精神和范圍內(nèi)的各種改變和修改對(duì)本領(lǐng)域的技術(shù)人員而言將變得顯而易見。
從下文中所給出的具體實(shí)施方式
和僅以圖示方式給出的附圖,本發(fā)明將變得更加充分地理解,而因此不限制本發(fā)明,并且其中:圖1是根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端的框圖。圖2A和圖2B是根據(jù)在本公開中公開的實(shí)施例的移動(dòng)終端的前透視圖。
圖3是根據(jù)在本公開中公開的實(shí)施例的示意性地示出移動(dòng)終端的框圖。圖4和圖5是圖示根據(jù)在本公開中公開的實(shí)施例的移動(dòng)終端的控制方法的流程圖。圖6A、圖6B、圖6C以及圖7是根據(jù)在本公開中公開的實(shí)施例的解釋用于根據(jù)在移動(dòng)終端中的聲音的特性顯示字幕的方法的概念視圖。圖8、圖9、以及圖10是根據(jù)在本公開中公開的實(shí)施例的解釋用于顯示字幕以對(duì)應(yīng)于移動(dòng)終端中的對(duì)象的方法的概念視圖。圖11是圖示在根據(jù)在本公開中公開的實(shí)施例的用于根據(jù)移動(dòng)終端中的振幅不同地顯示字幕的方法的流程圖。圖12、圖13以及圖14是根據(jù)在本公開中公開的實(shí)施例中的解釋用于根據(jù)移動(dòng)終端中的振幅顯示字幕的方法的概念視圖。
具體實(shí)施例方式現(xiàn)在將參考附圖來(lái)描述本發(fā)明的實(shí)施例,其中相同的附圖標(biāo)記指的是相同的元件,盡管實(shí)施例是不同的,并且與第一實(shí)施例相同的元件的描述將會(huì)用于不同的實(shí)施例的元件描述。在下面的描述中,僅給出了用于指示元件的諸如“模塊”、“部分”或“單元”的后綴的使用來(lái)便于解釋本發(fā)明,而其本身不具有任何重要的意義。在描述本發(fā)明中,如果對(duì)于相關(guān)已知功能或者構(gòu)造的詳細(xì)解釋被認(rèn)為沒有必要地轉(zhuǎn)移本發(fā)明的要旨,則已經(jīng)省略這樣的解釋,但是本領(lǐng)域的技術(shù)人員將會(huì)理解。本發(fā)明的附圖旨在便于理解本發(fā)明并且不應(yīng)被解釋為受到附圖的限制。在本公開中描述的移動(dòng)終端可以包括移動(dòng)電話、智能電話、筆記本計(jì)算機(jī)、平板計(jì)算機(jī)、數(shù)字廣播接收機(jī)、PDA (個(gè)人數(shù)字助理)、PMP (便攜式多媒體播放器)、導(dǎo)航設(shè)備等。然而,本領(lǐng)域的技術(shù)人員將會(huì)理解,除了為移動(dòng)目的而特別地配置的任何元件之外,根據(jù)本發(fā)明的實(shí)施例的構(gòu)造也能夠可應(yīng)用于諸如數(shù)字TV、臺(tái)式機(jī)等的固定類型的終端。圖1是根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端的框圖。移動(dòng)終端100可以包括無(wú)線通信單元110、A/V (音頻/視頻)輸入單元120、用戶輸入單元130、感測(cè)單元140、輸出單元150、存儲(chǔ)器160、接口單元170、控制器180以及電源單元190等。圖1將移動(dòng)終端示出為具有各種組件,但是應(yīng)當(dāng)理解,不需要實(shí)現(xiàn)被圖示的所有組件。可以替代地實(shí)現(xiàn)更多或更少的組件。如下將更詳細(xì)地描述移動(dòng)終端的元件。無(wú)線通信單元110通常包括一個(gè)或多個(gè)模塊,其允許在移動(dòng)終端100與該移動(dòng)終端所位于的無(wú)線通信系統(tǒng)或網(wǎng)絡(luò)之間進(jìn)行無(wú)線電通信。例如,無(wú)線通信單元可以包括廣播接收模塊111、移動(dòng)通信模塊112、無(wú)線因特網(wǎng)模塊113、短程通信模塊114以及位置信息模塊115中的至少一個(gè)。廣播接收模塊111經(jīng)由廣播信道從外部廣播管理服務(wù)器(或其它網(wǎng)絡(luò)實(shí)體)接收廣播信號(hào)和/或廣播相關(guān)信息。廣播信道可以包括衛(wèi)星信道和/或陸地信道。廣播管理服務(wù)器可以是生成和發(fā)送廣播信號(hào)和/或廣播相關(guān)信息的服務(wù)器,或者是接收先前生成的廣播信號(hào)和/或廣播相關(guān)信息并且將其發(fā)送到終端的服務(wù)器。廣播信號(hào)可以包括TV廣播信號(hào)、無(wú)線電廣播信號(hào)、數(shù)據(jù)廣播信號(hào)等。此外,廣播信號(hào)還可以進(jìn)一步包括與TV廣播信號(hào)或無(wú)線電廣播信號(hào)組合的廣播信號(hào)。廣播相關(guān)信息可以指的是與廣播信道、廣播節(jié)目、廣播服務(wù)提供商相關(guān)聯(lián)的信息。還可以經(jīng)由移動(dòng)通信網(wǎng)絡(luò)來(lái)提供廣播相關(guān)信息,并且在該情況下,可以通過移動(dòng)通信模塊112來(lái)接收廣播相關(guān)信息。廣播相關(guān)信息可以以各種形式存在。例如,可以以數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)、手持式數(shù)字視頻廣播(DVB-H)的電子服務(wù)指南(ESG)等的形式存在。廣播接收模塊111可以被配置成通過使用各種類型的廣播系統(tǒng)來(lái)接收廣播信號(hào)。特別地,廣播接收模塊111可以通過使用數(shù)字廣播系統(tǒng)來(lái)接收數(shù)字廣播,數(shù)字廣播系統(tǒng)諸如地面多媒體廣播(DMB-T)、衛(wèi)星數(shù)字多媒體廣播(DMB-S)、手持式數(shù)字視頻廣播(DVB-H)、稱為僅媒體前向鏈路(MediaFLOk )的數(shù)據(jù)廣播系統(tǒng)、地面綜合業(yè)務(wù)數(shù)字廣播(ISDB-T)等。廣播接收模塊111可以被配置成適用于提供廣播信號(hào)的每一個(gè)廣播系統(tǒng)以及上述數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收到的廣播信號(hào)和/或廣播相關(guān)信號(hào)可以被存儲(chǔ)在存儲(chǔ)器160中。移動(dòng)通信模塊112將無(wú)線電信號(hào)發(fā)送到基站、外部終端以及服務(wù)器中的至少一個(gè)和/或從發(fā)送基站、外部終端以及服務(wù)器中的至少一個(gè)接收無(wú)線電信號(hào)。根據(jù)文本和/或多媒體消息傳輸和/或接收等,這樣的無(wú)線電信號(hào)可以包括語(yǔ)音呼叫信號(hào)、視頻呼叫信號(hào)或各種類型的數(shù)據(jù)。無(wú)線因特網(wǎng)模塊113支持對(duì)于移動(dòng)終端的無(wú)線因特網(wǎng)接入。該模塊可以內(nèi)部地或外部地耦合到終端。所實(shí)現(xiàn)的無(wú)線因特網(wǎng)接入技術(shù)可以包括WLAN (無(wú)線LAN) (W1-Fi)、Wibro (無(wú)線寬帶)、Wimax (全球微波接入互操作性)、HSDPA (高速下行鏈路分組接入)等。短程通信模塊114是用于支持短程通信的模塊。短程通信技術(shù)的一些示例包括藍(lán)牙 、射頻識(shí)別(RFID)、紅外線數(shù)據(jù)協(xié)會(huì)(IrDA)、超寬帶(UWB)、紫峰 等。位置信息模塊115是用于檢查或獲取移動(dòng)終端的位置(或定位)的模塊。位置信息模塊的典型示例是GPS (全球定位系統(tǒng))。參考圖1,A/V輸入單元120被配置為接收音頻或視頻信號(hào)。A/V輸入單元120可以包括相機(jī)121和麥克風(fēng)122。相機(jī)121處理由圖像捕獲設(shè)備在視頻捕獲模式或圖像捕獲模式下所獲得的靜止圖片或視頻的圖像數(shù)據(jù)。所處理的圖像幀可以被顯示在顯示單元151上。由相機(jī)121處理的圖像幀可以被存儲(chǔ)在存儲(chǔ)器160 (或其它的存儲(chǔ)介質(zhì))中或者經(jīng)由無(wú)線通信單元110來(lái)發(fā)送。可以根據(jù)移動(dòng)終端的配置來(lái)提供兩個(gè)或兩個(gè)以上的相機(jī)121。麥克風(fēng)122可以在電話呼叫模式、記錄模式、語(yǔ)音識(shí)別模式等中經(jīng)由麥克風(fēng)來(lái)接收聲音(可聽數(shù)據(jù)),并且能夠?qū)⑦@樣的聲音處理成音頻數(shù)據(jù)。在電話呼叫模式的情況下,處理的音頻(語(yǔ)音)數(shù)據(jù)可以被變換為可經(jīng)由移動(dòng)通信模塊112發(fā)送到移動(dòng)通信基站(或其它的網(wǎng)絡(luò)實(shí)體)的格式以用于輸出。麥克風(fēng)122可以實(shí)現(xiàn)各種類型的噪聲消除(或抑制)算法,以消除(或抑制)在接收和發(fā)送音頻信號(hào)的過程中所生成的噪聲或干擾。用戶輸入單元130可以根據(jù)由用戶鍵入的以控制移動(dòng)終端的各種操作的命令來(lái)生成輸入數(shù)據(jù)。用戶輸入單元130可以包括鍵盤、圓頂開關(guān)(dome switch)、觸摸板、滾輪(jog wheel)、撥動(dòng)開關(guān)(jog switch)等。感測(cè)單元(或其它檢測(cè)單元)140檢測(cè)移動(dòng)終端100的當(dāng)前狀況(狀態(tài)),并且生成用于控制移動(dòng)終端100的操作的命令或信號(hào),移動(dòng)終端100的當(dāng)前狀況(狀態(tài))諸如移動(dòng)終端100的打開或關(guān)閉狀態(tài)、移動(dòng)終端100的位置、用戶與移動(dòng)終端100的接觸(即,觸摸輸入)的存在或不存在、移動(dòng)終端100的定向、移動(dòng)終端100的加速或減速移動(dòng)以及方向等。例如,當(dāng)移動(dòng)終端100被實(shí)現(xiàn)為滑蓋型移動(dòng)電話時(shí),感測(cè)單元140可以感測(cè)滑蓋電話打開還是關(guān)閉。另外,感測(cè)單元140能夠檢測(cè)電源190是否提供電力、或者接口單元170是否與外部設(shè)備耦合。輸出單元150被配置成以視覺、聽覺和/或觸覺方式(例如,音頻信號(hào)、視頻信號(hào)、報(bào)警信號(hào)、振動(dòng)信號(hào)等)提供輸出。輸出單元150可以包括顯示單元151、音頻輸出模塊152、報(bào)警單元153、觸覺模塊154等。顯示單元151可以顯示(輸出)在移動(dòng)終端100中處理的信息。例如,當(dāng)移動(dòng)終端100處于電話呼叫模式中時(shí),顯示單元151可以顯示與呼叫或其它通信(諸如文本消息收發(fā)、多媒體文件下載等)相關(guān)聯(lián)的用戶界面(UI)或圖形用戶界面(GUI)。當(dāng)移動(dòng)終端100處于視頻呼叫模式或圖像捕獲模式中時(shí),顯示單元151可以顯示捕獲的圖像和/或接收到的圖像、不出與其相關(guān)的視頻或圖像以及功能的UI或GUI等。顯示單元151可以包括液晶顯示器(IXD)、薄膜晶體管LAC (TFT-1XD)、有機(jī)發(fā)光二極管顯示器(0LED)、柔性顯示器和三維(3D)顯示器、以及電子墨顯示器的至少一個(gè)。上述顯示器中的一些可以被配置成為透明的或者光透射的以允許看到外部,這可以被稱為透明顯示器。典型的透明顯示器可以例如TOLED (透明有機(jī)發(fā)光二極管)顯示器等。通過這樣的配置,用戶能夠通過由終端主體的顯示單元151所占據(jù)的區(qū)域來(lái)觀看位于在終端主體背面的對(duì)象。根據(jù)其特定的期望實(shí)施例移動(dòng)終端100可以包括兩個(gè)或更多個(gè)顯示單元。例如,多個(gè)顯示單元可以被單獨(dú)地或整體地布置在移動(dòng)終端的一個(gè)表面上,或可以被單獨(dú)地布置在相互不同的表面上。同時(shí),當(dāng)顯示單元151和用于檢測(cè)觸摸操作的傳感器(在下文中被稱為“觸摸傳感器”)以分層方式進(jìn)行重疊以形成觸摸屏?xí)r,顯示單元151即可以具有輸入設(shè)備和輸出設(shè)備的功能。觸摸傳感器可以具有觸摸膜、觸摸片、觸摸板等的形式。觸摸傳感器可以被配置為將施加到顯示單元151的特定部分的壓力或者在顯示單元151的特定部分產(chǎn)生的電容等的變化轉(zhuǎn)換為電輸入信號(hào)。觸摸傳感器可以被配置為檢測(cè)當(dāng)施加觸摸時(shí)的壓力以及觸摸的位置和區(qū)域。當(dāng)存在相對(duì)于觸摸傳感器的觸摸輸入時(shí),對(duì)應(yīng)的信號(hào)(多個(gè)信號(hào))被發(fā)送到觸摸控制器。觸摸控制器處理該信號(hào),并且將對(duì)應(yīng)的數(shù)據(jù)發(fā)送到控制器180。因此,控制器180可以識(shí)別顯示單元151的哪一部分已經(jīng)被觸摸。參考圖1,接近傳感器141可以被布置在觸摸屏內(nèi)或在觸摸屏附近。接近傳感器141是在沒有機(jī)械接觸的情況下使用電磁力或紅外線來(lái)檢測(cè)相對(duì)于特定檢測(cè)表面的對(duì)象或者在接近傳感器周圍存在的對(duì)象的存在或不存在的傳感器。因此,與接觸型傳感器相比接近傳感器141具有相當(dāng)長(zhǎng)的壽命,并且其能夠用于各種用途。接近傳感器141的示例可以包括透射式光電傳感器、直接反射式光電傳感器、鏡反射式光電傳感器、RF振蕩式接近傳感器、電容式接近傳感器、磁接近傳感器、紅外線接近傳感器等。在觸摸屏為電容式的情況下,指示器的接近通過根據(jù)指示器的接近的電場(chǎng)變化來(lái)檢測(cè)。在這種情況下,觸摸屏(觸摸傳感器)可以被分類為接近傳感器。在下面的描述中,為了簡(jiǎn)潔起見,位于觸摸屏附近的指示器的識(shí)別將被稱為‘接近觸摸’,而在觸摸屏上的指示器的實(shí)際接觸的識(shí)別將被稱為‘接觸觸摸’。在該情況下,當(dāng)指示器處于接近觸摸的狀態(tài)時(shí),這意味著指示器被定位成垂直對(duì)應(yīng)于觸摸屏。通過采用接近傳感器141,能夠檢測(cè)接近觸摸和接近觸摸模式(例如,接近觸摸距離、接近觸摸速度、接近觸摸時(shí)間、接近觸摸位置、接近觸摸移動(dòng)狀態(tài)等),并且能夠向觸摸屏輸出與檢測(cè)到的接近觸摸操作和接近觸摸模式相對(duì)應(yīng)的信息。音頻輸出模塊152可以在呼叫信號(hào)接收模式、呼叫模式、記錄模式、語(yǔ)音識(shí)別模式、廣播接收模式等中轉(zhuǎn)換和輸出從無(wú)線通信單元110接收到的或者被存儲(chǔ)在存儲(chǔ)器160中的聲音音頻數(shù)據(jù)。而且,音頻輸出模塊152可以提供與通過移動(dòng)終端100執(zhí)行的特定功能有關(guān)的音頻輸出(例如,呼叫信號(hào)接收聲音、消息接收聲音等)。音頻輸出模塊152可以包括揚(yáng)聲器、蜂鳴器,或其他聲音產(chǎn)生設(shè)備。報(bào)警單元153可以提供輸出以通知與移動(dòng)終端100的事件的發(fā)生。典型的事件可以包括呼叫接收、消息接收、鍵信號(hào)輸入、觸摸輸入等。除了音頻或視頻輸出之外,報(bào)警單元153還可以以不同的方式提供輸出以通知事件的發(fā)生。例如,報(bào)警單元153可以以振動(dòng)的形式提供輸出。當(dāng)接收到呼叫、消息、或一些其它呼入的通信時(shí),報(bào)警單元153可以提供觸覺輸出(即,振動(dòng))來(lái)通知其用戶。通過提供這樣的觸覺輸出,即使用戶的移動(dòng)電話在用戶的口袋中用戶也能夠識(shí)別各種事件的發(fā)生。還可以經(jīng)由顯示單元151或音頻輸出模塊152來(lái)提供通知事件的發(fā)生的輸出。顯示單元151和音頻輸出模塊152可以被分類為報(bào)警單元153的一部分。觸覺模塊154產(chǎn)生用戶會(huì)感覺到的各種觸覺效果。通過觸覺模塊154產(chǎn)生的觸覺效果的典型示例是振動(dòng)。能夠控制觸覺模塊154的強(qiáng)度和模式。例如,不同的振動(dòng)可以被組合以輸出或者被順序地輸出。除了振動(dòng)之外,觸覺模塊154可以產(chǎn)生諸如通過相對(duì)于接觸皮膚垂直地移動(dòng)的針排列的刺激、通過噴射孔或者吸入開口的空氣噴射力或者空氣吸入力、皮膚上的接觸、電極的接觸、靜電力等的效果、通過使用能夠吸收或者產(chǎn)生熱的元件再現(xiàn)寒冷和溫暖的感覺的效果的各種其它觸覺效果。觸覺模塊154可以被實(shí)現(xiàn)為允許用戶通過諸如用戶的手指或者手臂的肌肉感覺來(lái)感受觸覺效果,以及通過直接接觸來(lái)傳送觸覺效果。根據(jù)移動(dòng)終端100的配置,可以提供兩個(gè)或者多個(gè)觸覺模塊154。存儲(chǔ)器160可以存儲(chǔ)用于處理和控制通過控制器180執(zhí)行的操作的軟件程序,或者可以暫時(shí)地存儲(chǔ)輸入或者輸出的數(shù)據(jù)(例如,電話簿、消息、靜止圖像、視頻等)。另外,存儲(chǔ)器160可以存儲(chǔ)關(guān)于當(dāng)觸摸被輸入到觸摸屏?xí)r輸出的各種模式的振動(dòng)和音頻信號(hào)的數(shù)據(jù)。存儲(chǔ)器160可以包括包含閃存、硬盤、多媒體卡微型、卡型存儲(chǔ)器(例如,SD或者DX存儲(chǔ)器等)、隨機(jī)存取存儲(chǔ)器(RAM)、靜態(tài)隨機(jī)存取存儲(chǔ)器(SRAM)、只讀存儲(chǔ)器(ROM)、電可擦可編程只讀存儲(chǔ)器(EEPR0M)、可編程只讀存儲(chǔ)器(PR0M)、磁存儲(chǔ)器、磁盤、以及光盤中的至少一種類型的存儲(chǔ)介質(zhì)。而且,可以與在因特網(wǎng)上執(zhí)行存儲(chǔ)器160的存儲(chǔ)功能的網(wǎng)絡(luò)存儲(chǔ)設(shè)備相關(guān)地操作移動(dòng)終端100。接口單元170用作每一個(gè)外部設(shè)備(與移動(dòng)終端100連接)的接口。例如,外部設(shè)備可以將數(shù)據(jù)發(fā)送到外部設(shè)備,接收并且發(fā)送電力到移動(dòng)終端100的每個(gè)元件,或者將移動(dòng)終端100的內(nèi)部數(shù)據(jù)發(fā)送到外部設(shè)備。例如,接口單元170可以包括有線或者無(wú)線頭戴式耳機(jī)端口、外部電源端口、有線或者無(wú)線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于連接具有識(shí)別模塊的設(shè)備的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機(jī)端口等。識(shí)別模塊可以是存儲(chǔ)用于認(rèn)證使用移動(dòng)終端100權(quán)限的各種類型的信息的芯片并且可以包括用戶識(shí)別模塊(ΠΜ)、訂戶識(shí)別模塊(SM)、通用訂戶識(shí)別模塊(USM)等。另夕卜,具有識(shí)別模塊的設(shè)備(在下文中,被稱為“識(shí)別設(shè)備”)可以采用智能卡的形式。因此,識(shí)別設(shè)備可以經(jīng)由端口與移動(dòng)終端100相連接。當(dāng)移動(dòng)終端100與外部托架相連接時(shí),接口單元170可以用作通過其將來(lái)自外部托架的電力供應(yīng)給移動(dòng)終端100的通路,或者可以用作允許將用戶輸入的各種命令信號(hào)從托架傳送到移動(dòng)終端100的通路。從托架輸入的各種命令信號(hào)或電力可以操作為用于識(shí)別移動(dòng)終端被正確地安裝在托架上的信號(hào)。控制器180通??刂埔苿?dòng)終端的一般操作。例如,控制器180執(zhí)行與語(yǔ)音呼叫、數(shù)據(jù)通信、視頻呼叫等相關(guān)聯(lián)的控制和處理??刂破?80可以包括用于再現(xiàn)多媒體數(shù)據(jù)的多媒體模塊181。多媒體模塊181可以被配置在控制器180內(nèi)或者可以被配置為與控制器180分離。控制器180可以執(zhí)行模式識(shí)別處理以將在觸摸屏上執(zhí)行的手寫輸入或者繪圖輸入分別識(shí)別為字符或者圖像。而且,當(dāng)移動(dòng)終端的狀態(tài)滿足預(yù)設(shè)條件時(shí),控制器180可以執(zhí)行鎖定狀態(tài)以相對(duì)于應(yīng)用限制用戶的控制命令的輸入。而且,在鎖定狀態(tài)中,控制器可以基于通過顯示單元感測(cè)的觸摸輸入控制被顯示在鎖定狀態(tài)中的鎖定屏幕。 電源單元190接收外部電力或者內(nèi)部電力并且供應(yīng)用于在控制器180的控制下操作各個(gè)元件和組件所要求的適當(dāng)?shù)碾娏?。使用例如軟件、硬件、或者其任何組合在計(jì)算機(jī)可讀或者其類似的介質(zhì)中可以實(shí)現(xiàn)在此描述的各種實(shí)施例。對(duì)于硬件實(shí)現(xiàn),通過使用被設(shè)計(jì)為執(zhí)行在此描述的功能的專用集成電路(ASIC)、數(shù)字信號(hào)處理器(DSP)、數(shù)字信號(hào)處理設(shè)備(DSPD)、可編程邏輯設(shè)備(PLD)、現(xiàn)場(chǎng)可編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、電子單元中的至少一個(gè),可以實(shí)現(xiàn)在此描述的實(shí)施例。在一些情況下,可以通過控制器180自身實(shí)現(xiàn)這樣的實(shí)施例。對(duì)于軟件實(shí)現(xiàn),可以通過單獨(dú)的軟件模塊來(lái)實(shí)現(xiàn)在此描述的諸如程序或者功能的實(shí)施例。每個(gè)軟件模塊可以執(zhí)行在此描述的一個(gè)或者多個(gè)功能或者操作。通過以任何適合的編程語(yǔ)言所寫的軟件應(yīng)用能夠?qū)崿F(xiàn)軟件代碼。軟件代碼可以被存儲(chǔ)在存儲(chǔ)器160中并且通過控制器180執(zhí)行。在上面已經(jīng)參考圖1描述了根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端,將描述在移動(dòng)終端中布置移動(dòng)終端的組件布置,或者將描述移動(dòng)終端的結(jié)構(gòu)。圖2A是根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端的前透視圖,并且圖2B是圖2A中圖示的移動(dòng)終端的后透視。所公開的移動(dòng)終端200具有直板型終端主體。然而,本發(fā)明不限于此,并且可以應(yīng)用于諸如滑蓋型移動(dòng)終端、折疊型移動(dòng)終端、擺動(dòng)型移動(dòng)終端、旋轉(zhuǎn)型移動(dòng)終端等的各種結(jié)構(gòu),其中兩個(gè)或者多個(gè)主體被組合以可相對(duì)地移動(dòng)。如所圖示的,終端主體100 (在下文中,被稱為“主體”)包括前表面、側(cè)表面、以及后表面。而且,主體包括在長(zhǎng)度方向中形成的兩個(gè)端部。主體包括組成外觀的殼體(或外殼、外罩、蓋等)。在本實(shí)施例中,殼體可以包括前殼體101和后殼體102。各種電子組件被安裝在前殼體101與后殼體102之間的空間內(nèi)。一個(gè)或多個(gè)中間殼體可以被額外地布置在前殼體101與后殼體102之間。殼體可以由注模成型合成樹脂來(lái)形成或可以由諸如不銹鋼(STS)或鈦(Ti)等金屬材料來(lái)制成。顯示單元151、音頻輸出模塊152、相機(jī)121、用戶輸入單元130/131、132、麥克風(fēng)122、接口單元170等可以被主要地布置在前殼體101上。顯不模塊151占據(jù)前殼體101的主表面的大部分。音頻輸出單兀152和相機(jī)121被布置在顯示單元151的兩個(gè)端部部分當(dāng)中的一個(gè)端部部分附近的區(qū)域處,并且用戶輸入單元131和麥克風(fēng)122被布置在與另一端部部分相鄰的區(qū)域處。用戶輸入單元132和接口單元170可以被布置在前殼體101和后殼體102的側(cè)面上。麥克風(fēng)122可以被布置在主體100的另一端部上。操縱用戶輸入單元130以接收用于控制移動(dòng)終端100的操作的命令,并且可以包括多個(gè)操縱單元131和132。操縱單元131和132通??梢员环Q為操縱部分,并且對(duì)于操縱部分能夠采用各種方法和技術(shù),只要它們能夠由用戶以觸覺方式來(lái)操縱。能夠不同地設(shè)置由第一操縱單元131和第二操縱單元132輸入的內(nèi)容。例如,第一操縱單元131可以接收諸如開始、結(jié)束、滾動(dòng)等的命令,并且第二操縱單元132可以接收諸如控制從音頻輸出單兀152輸出的聲音的大小或轉(zhuǎn)換成顯不模塊151的觸摸識(shí)別模式的命令。參考圖2B,音頻輸出單元152’可以附加地布置在終端主體的后表面上。音頻輸出單兀152’可以與音頻輸出模塊152 (參見圖2A)結(jié)合實(shí)現(xiàn)立體聲音功能并且也可以用于實(shí)現(xiàn)用于呼叫通信的揚(yáng)聲器電話模式。用于向移動(dòng)終端200供電的電源單元190被安裝在終端主體上。電源單元190可以被安裝在終端主體內(nèi),或可以被直接地附接到終端主體的外部或者從終端主體的外部直接拆卸。用于檢測(cè)觸摸的觸摸板135可以被附加地安裝在后殼體102上。觸摸板135可以被配置成如顯示單元151 —樣是透光的。在這樣的情況下,當(dāng)顯示單元151被配置成從其兩側(cè)輸出可視信息時(shí),經(jīng)由觸摸板135也可以識(shí)別視覺信息。可替選地,顯示器可以被附加地安裝在觸摸板上使得觸摸屏可以被布置在后殼體102上。觸摸板135與前殼體101的顯示單元151相關(guān)聯(lián)地操作。觸摸板135可以被布置成平行于顯示單元151的后側(cè)。觸摸板135可以具有與顯示單元151相同的尺寸,或者比其小的尺寸。相機(jī)221’可以被附加地布置在終端主體的后殼體102上。相機(jī)221’可以具有基本上與相機(jī)221的圖像捕獲方向相反的圖像捕獲方向(參見圖2a),并且可以與相機(jī)121具有不同數(shù)目的像素。例如,相機(jī)221可以具有較少數(shù)目的像素以捕獲用戶的面部的圖像,并且將這樣的圖像發(fā)送到另一方,并且相機(jī)121’可以具有較大數(shù)目的像素以捕獲普通對(duì)象的圖像并且在大多數(shù)情況下沒有立即發(fā)送。相機(jī)121和121’可以被安裝在終端主體上使得它們能夠可旋轉(zhuǎn)或者彈出。閃光燈123和鏡子124可以被附加地布置與相機(jī)221’相鄰。當(dāng)利用相機(jī)121’捕獲目標(biāo)的圖像時(shí),閃光燈123照亮該目標(biāo)。當(dāng)用戶想通過使用相機(jī)221’來(lái)捕獲他自己的圖像(即,自拍)時(shí),鏡子124允許用戶看見他自己。而且,當(dāng)可以包括如上所述的組件中的至少一個(gè)或者多個(gè)的移動(dòng)終端再現(xiàn)(或者播放)視頻時(shí),其可以根據(jù)與視頻有關(guān)的聲音特性不同地輸出字幕的顯示格式。將參考附圖描述用于通過使用根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端根據(jù)聲音特性不同地顯示字幕的方法。圖3是示意性地示出根據(jù)在本公開中公開的實(shí)施例的移動(dòng)終端的框圖。在此,將省略參考圖1在上面已經(jīng)描述的相同內(nèi)容。參考圖3,移動(dòng)終端100可以包括控制器180、字幕處理單元182、無(wú)線通信單元110、用戶輸入單元130、顯示單元151、以及存儲(chǔ)器160。控制器180基于通過用戶輸入單元130應(yīng)用的視頻再現(xiàn)命令或者顯示單元151可用的觸摸輸入將視頻輸出到顯示單元151。在此,視頻可以是與包括圖像數(shù)據(jù)和音頻數(shù)據(jù)的視頻文件相對(duì)應(yīng)的圖像。S卩,像電影和聲音一樣的處于連續(xù)移動(dòng)的狀態(tài)中的圖像被一起輸出??刂破?80可以輸出與事先被存儲(chǔ)在存儲(chǔ)器160中的視頻文件相對(duì)應(yīng)的視頻或者可以輸出與通過無(wú)線通信單元110實(shí)時(shí)地接收到的視頻數(shù)據(jù)相對(duì)應(yīng)的視頻。當(dāng)視頻被輸出到顯示單元151時(shí),字幕處理單元182將與視頻有關(guān)的字幕輸出到顯示單元151。字幕處理單元182在與被輸出到顯示單元151的圖像相對(duì)應(yīng)的時(shí)刻輸出字幕??刂破?80控制字幕處理單元182以根據(jù)與被輸出到顯示單元151的視頻有關(guān)的音頻數(shù)據(jù)的聲音特性變化從字幕處理單元182輸出的字幕的顯示格式。因此,在本發(fā)明的實(shí)施例中,被輸出到顯示單元151的字幕不以標(biāo)準(zhǔn)化的形式不變地顯示,而是可以根據(jù)音頻數(shù)據(jù)的聲音特性可變地顯示。在此,通過音頻數(shù)據(jù)的數(shù)據(jù)值識(shí)別的聲音特性可以被分類為音高(振動(dòng)或者頻率的次數(shù))、聲音的強(qiáng)度(振幅或者波的高度值)、音色(波形或類型)??刂破?80可以通過這樣的聲音特性不同地改變字幕顯示。例如,當(dāng)在音頻數(shù)據(jù)中包括的聲音的振動(dòng)的次數(shù)大時(shí),可以表現(xiàn)高調(diào)(或者高音高音調(diào)),并且當(dāng)在音頻數(shù)據(jù)中包括的聲音的振動(dòng)的次數(shù)小時(shí),其可以表現(xiàn)低調(diào)(或者低音高音調(diào))。當(dāng)與人類的語(yǔ)音相比較時(shí),在女人的語(yǔ)音的情況下,振動(dòng)的次數(shù)相對(duì)大,并且在男人的語(yǔ)音的情況下,振動(dòng)的次數(shù)相對(duì)小。因此,控制器180可以通過使用在音頻數(shù)據(jù)中包括的各種類型的信息當(dāng)中的聲音的振動(dòng)次數(shù)信息來(lái)區(qū)分男人和女人的語(yǔ)音,并且根據(jù)區(qū)分結(jié)果不同地顯示字幕。在另一示例中,控制器180可以根據(jù)在音頻數(shù)據(jù)中包括的聲音的振幅來(lái)區(qū)分相對(duì)大的聲音和相對(duì)小的聲音。例如,當(dāng)聲音的振幅大時(shí),聲音的強(qiáng)度是強(qiáng)烈的,并且當(dāng)聲音的振幅小時(shí),聲音的強(qiáng)度是微弱的。即,即使當(dāng)聲音被調(diào)節(jié)為具有類似級(jí)別的音量時(shí),控制器180能夠區(qū)分相對(duì)大的聲音和相對(duì)小的聲音。例如,當(dāng)心煩的人喊叫(或者發(fā)出高聲)時(shí),聲音的振幅大,并且人在圖書館低聲細(xì)語(yǔ)時(shí)等,聲首的振幅小。因此,控制器180可以通過使用在音頻數(shù)據(jù)中包括的各種類型的信息當(dāng)中的聲音的振幅信息來(lái)區(qū)分大聲和平靜聲音,并且根據(jù)區(qū)分結(jié)果來(lái)不同地顯示字幕。在另一示例中,控制器180可以根據(jù)聲音的波形(類型或者音色)來(lái)區(qū)分不同的語(yǔ)音、不同的自然語(yǔ)音、動(dòng)物聲音、或者在特定情形下的聲音。聲音的波形指的是從對(duì)象唯一地產(chǎn)生的波的形狀,并且每一個(gè)對(duì)象具有它自己的波形。因此,控制器180能夠根據(jù)聲音的波形區(qū)分在音頻數(shù)據(jù)中包括的聲音。即,控制器180可以區(qū)分聲音是來(lái)自人還是來(lái)自于動(dòng)物,還是在特定的情況下產(chǎn)生。以這樣的方式,當(dāng)通過使用各種類型的音頻數(shù)據(jù)的信息當(dāng)中的關(guān)于頻率、波的高度、以及波形的信息輸出圖像時(shí),控制器180可以一起逼真地輸出字幕。同時(shí),根據(jù)用戶選擇可以確定是否要輸出字幕,并且另外,根據(jù)用戶選擇可以不同地改變顯示格式。而且,控制器180可以從外部系統(tǒng)通過無(wú)線通信單元110接收關(guān)于字幕的顯示格式的信息并且不同地顯示字幕。S卩,在這樣的情況下,外部系統(tǒng)可以提供與顏色、尺寸、位置等有關(guān)的顯示信息,并且控制器180可以基于接收到的信息改變?cè)陲@示單元上顯示的字幕。例如,控制器180可以使與接收到的字幕有關(guān)的信息與存儲(chǔ)在存儲(chǔ)器160中的字幕相匹配,并且以各種顯示格式改變字幕文本以將字幕輸出到顯示單元151。在另一示例中,控制器180可以從外部系統(tǒng)一起接收字幕文本和關(guān)于字幕文本的顯示的顯示信息,并且可以不同地改變字幕的顯示格式以將相對(duì)應(yīng)的字幕輸出到顯示單元151。而且,通過使用被存儲(chǔ)在存儲(chǔ)器160中的字幕文本和字幕有關(guān)的顯示信息,當(dāng)再現(xiàn)視頻時(shí)控制器180可以基于在存儲(chǔ)器160中存儲(chǔ)的信息以各種顯示格式輸出字幕。同時(shí),除了如上所述的從外部輸入的字幕的顯示信息之外,控制器180可以分析被包括在視頻文件中的音頻數(shù)據(jù)和圖像數(shù)據(jù)并且不同地控制字幕的顯示格式。在下文中,將會(huì)參考圖4和圖5詳細(xì)地描述控制視頻以各種顯示格式輸出字幕的方法。圖4和圖5是圖示根據(jù)在本公開中公開的實(shí)施例的移動(dòng)終端的控制方法的流程圖。首先,控制器180分析在視頻文件中包括的音頻數(shù)據(jù)的聲音特性(步驟S100)。在此,就當(dāng)通過控制器180分析視頻文件時(shí)的時(shí)刻而言,在應(yīng)用相對(duì)于視頻文件的再現(xiàn)命令之后分析視頻文件,或者,當(dāng)視頻文件被存儲(chǔ)在存儲(chǔ)器160中時(shí),基于用戶選擇,甚至在應(yīng)用再現(xiàn)命令之前,可以自動(dòng)地分析音頻數(shù)據(jù)。
如上所述,控制器180分析音頻數(shù)據(jù)的聲音特性。S卩,控制器180通過分析音頻數(shù)據(jù)檢測(cè)頻率信息、振幅信息、以及波形信息。同時(shí),頻率信息、振幅信息、以及波形信息可以被表達(dá)為聲音特性信息。控制器180將被分析的聲音特性信息與字幕文本相匹配(步驟S200)。在此,字幕文本可以與對(duì)應(yīng)于聲音特性信息的音頻數(shù)據(jù)同步。字幕文本可以被事先存儲(chǔ)在存儲(chǔ)器160中或者可以通過分析音頻數(shù)據(jù)由控制器180生成。接下來(lái),當(dāng)用戶應(yīng)用視頻再現(xiàn)命令時(shí),根據(jù)被匹配的聲音特性信息通過區(qū)分字幕的顯示格式,控制器180將字幕與視頻一起輸出到顯示單元151 (步驟S300)?!皡^(qū)別字幕的顯示格式”指的是根據(jù)聲音特性信息改變字幕的顯示顏色、改變字幕的顯示尺寸、兩維或者三維地顯示字幕等。控制器180可以事先存儲(chǔ)關(guān)于如何根據(jù)存儲(chǔ)單元160中的聲音特性信息不同地顯示字幕并且參考先前存儲(chǔ)的信息根據(jù)聲音特性信息控制字幕的顯示的信息。例如,在男人的聲音的情況下,S卩,在低頻率的情況下,“以藍(lán)色顯示”的信息可以被存儲(chǔ)在存儲(chǔ)器160中,并且控制器180可以參考信息以“藍(lán)色”顯示字幕。如上所述,控制器180可以通過分析音頻數(shù)據(jù)提取聲音特性信息,并且根據(jù)被提取的聲音特性信息不同地改變字幕的顯示。同時(shí),已經(jīng)描述了分析音頻數(shù)據(jù)的情況,但是控制器180也可以分析在視頻文件中包括的圖像數(shù)據(jù)并且處理字幕的顯示,以使得其與圖像數(shù)據(jù)相關(guān)聯(lián)。在下文中,將詳細(xì)地描述分析圖像數(shù)據(jù)以便于多樣化地顯示字幕的格式的方法。首先,控制器180分析在視頻文件中包括的音頻數(shù)據(jù)的聲音特性(步驟A100)。就當(dāng)通過控制器180分析視頻文件時(shí)的時(shí)刻而言,當(dāng)視頻文件被存儲(chǔ)在存儲(chǔ)器160中時(shí),基于用戶選擇,在相對(duì)于視頻文件應(yīng)用再現(xiàn)命令之后或者甚至在應(yīng)用再現(xiàn)命令之前,可以自動(dòng)地分析音頻數(shù)據(jù)。控制器180可以通過分析音頻數(shù)據(jù)檢測(cè)諸如頻率信息、振幅信息、或者波形信息的聲音特性信息??刂破?80將被分析的聲音特性信息與字幕文本相匹配(步驟A200)。在此,字幕文本可以與對(duì)應(yīng)于聲音特性信息的音頻數(shù)據(jù)同步。字幕文本可以被預(yù)先存儲(chǔ)在存儲(chǔ)器160中或者通過分析音頻數(shù)據(jù)通過控制器180生成。接下來(lái),控制器基于被分析的聲音特性信息分析被包括在圖像數(shù)據(jù)中的對(duì)象(步驟A300)。被包括在圖像數(shù)據(jù)中的對(duì)象是被包括在輸出到顯示單元151的圖像中的對(duì)象,指的是人、沒有生命的對(duì)象(或者事情)、動(dòng)物等。控制器180從與音頻數(shù)據(jù)相對(duì)應(yīng)的圖像數(shù)據(jù)中檢測(cè)與聲音特性信息相關(guān)聯(lián)的對(duì)象。例如,當(dāng)在與圖像數(shù)據(jù)相對(duì)應(yīng)的圖像中存在“男人”和“女人”,并且與相對(duì)應(yīng)的圖像有關(guān)的聲音特性信息是“低頻率”時(shí),控制器180可以分析音頻數(shù)據(jù)和“低頻率”聲音特性信息與“男人”對(duì)象有關(guān)。并且,控制器180可以分析與聲音特性信息當(dāng)中的特定波形相關(guān)聯(lián)的對(duì)象,并且執(zhí)行控制以不斷地顯示具有特定波形的音頻數(shù)據(jù)的字幕。
在此,用于分析被包括在圖像數(shù)據(jù)中的對(duì)象的方法可以包括各種技術(shù),并且在本公開中,將省略用于分析圖像的方法的詳細(xì)描述。同時(shí),控制器180將聲音特性信息和字幕文本與被分析的對(duì)象相匹配(步驟A400)。控制器180可以將被顯示在顯示單元151上的對(duì)象的坐標(biāo)信息、聲音特性信息與字幕文本相匹配。因此,當(dāng)再現(xiàn)視頻時(shí),控制器180可以在與對(duì)象相鄰的部分處基于被匹配的聲音特性信息以各種顯示格式顯示字幕(步驟S500)。同時(shí),已經(jīng)公開用于通過控制器180分析圖像數(shù)據(jù)的方法,并且此外,從用戶圖像中可以選擇特定對(duì)象并且相對(duì)應(yīng)的字幕和聲音特性信息可以被匹配到其中。同時(shí),用于分析如上所述的圖像數(shù)據(jù)的方法對(duì)應(yīng)于用于實(shí)現(xiàn)本發(fā)明的實(shí)施例,因此用于顯示圖像數(shù)據(jù)和字幕的方法不限于前述的方法,圖像數(shù)據(jù)和字幕可以被關(guān)聯(lián)以各種方式來(lái)進(jìn)行處理。如上所述,在本發(fā)明的實(shí)施例中,其中調(diào)整顯示字幕的位置以與對(duì)應(yīng)于聲音特性信息的對(duì)象相鄰,通過字幕,用戶能夠容易地識(shí)別當(dāng)前發(fā)出聲音的對(duì)象。在上面,已經(jīng)描述用于通過分析圖像數(shù)據(jù)和音頻數(shù)據(jù)不同地顯示字幕的各種方法??傊?,作為用于獲得關(guān)于字幕的顯示信息的方法,已經(jīng)描述i)從外部系統(tǒng)接收與字幕有關(guān)的字幕文本和顯示信息(包括位置信息)并且基于接收到的信息顯示字幕的方法;ii)分析音頻數(shù)據(jù)和圖像數(shù)據(jù)中的至少一個(gè)并且使其與字幕文本相匹配的方法;以及iii)通過分析音頻數(shù)據(jù)和分析聲音通信信息生成字幕文本的方法。S卩,除了在終端內(nèi)執(zhí)行分析的方法之外,可以從外部接收關(guān)于字幕的顯示信息。在本發(fā)明的實(shí)施例中,當(dāng)通過各種方法中的至少一種獲得字幕顯示信息時(shí),基于獲得的字幕顯示信息可以不同地改變字幕顯示格式。在下文中,將會(huì)更加詳細(xì)地描述通過使用前述方法中的一種以各種格式顯示字幕的方法。首先,將會(huì)參考圖6A、圖6B、圖6C、以及圖7描述根據(jù)對(duì)應(yīng)于音頻數(shù)據(jù)的聲音特性不同地顯示字幕的實(shí)施例。圖6A、圖6B、圖6C、以及圖7是根據(jù)在本公開中公開的實(shí)施例的解釋根據(jù)在移動(dòng)終端中的聲音的特性顯示字幕的方法的概念視圖。首先,圖6A是示出根據(jù)如上所述的聲音特性當(dāng)中的聲音的強(qiáng)度(振幅或者波的高度值)變化字幕的顯示格式的實(shí)施例的概念視圖。如所圖示的,當(dāng)從用戶應(yīng)用視頻再現(xiàn)命令時(shí),與有關(guān)視頻文件相對(duì)應(yīng)的圖像被輸出到顯示單元151。在這樣的情況下,當(dāng)通過用戶或者控制器180已經(jīng)設(shè)置以根據(jù)視頻文件顯示字幕時(shí),控制器180參考與被輸出到顯示單元151的圖像有關(guān)的音頻數(shù)據(jù)的信息變化顯示格式。例如,當(dāng)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的強(qiáng)度,S卩,振幅大時(shí),控制器180可以顯示相對(duì)應(yīng)的字幕大于其它的字幕。而且,除了僅改變字幕的尺寸之后,控制器180可以立體地顯示字幕。
當(dāng)與視頻數(shù)據(jù)相對(duì)應(yīng)的聲音的強(qiáng)度,S卩,振幅小時(shí),控制器180可以顯示相對(duì)應(yīng)的字幕小于其它的字幕。以這樣的方式,控制器180可以根據(jù)與音頻數(shù)據(jù)相對(duì)應(yīng)的聲音的強(qiáng)度改變字幕的顯示尺寸和3D效果(三維深度值)中的至少一個(gè)。而且,控制器180可以調(diào)整根據(jù)聲音的強(qiáng)度立體地顯示的字幕的3D效果(3D深度值)以允許用戶通過直覺識(shí)別關(guān)于聲音多強(qiáng)大或者聲音多微弱的信息。如所圖示的,當(dāng)與對(duì)應(yīng)于第一字幕210的音頻數(shù)據(jù)有關(guān)的聲音的強(qiáng)度大時(shí),控制器180可以顯示第一字幕210大于在第一字幕210下面的第二字幕220。并且,控制器180將3D效果(3D深度值)提供給第一字幕210以在圖像上傳達(dá)對(duì)象310的情感。而且,如所圖示的,當(dāng)與對(duì)應(yīng)于第二字幕220的音頻數(shù)據(jù)有關(guān)的聲音的強(qiáng)度小時(shí),控制器180可以顯示第二字幕220小于第一字幕210。而且,控制器180可以表達(dá)第二字幕220的3D效果(3D深度值)使得其小于第一字幕210或者可以二維地顯示第二字幕220而沒有3D效果(3D深度值)。如上所述,在根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端中,因?yàn)樽帜坏某叽缁蛘咦帜坏?D效果(3D深度值)被顯示為是不同的,所以用戶能夠僅通過字幕感覺到從圖像中感覺到的感情線。接下來(lái),圖6B是示出其中根據(jù)如上所述的聲音特性當(dāng)中的振動(dòng)的次數(shù)變化字幕的顯示格式的實(shí)施例的概念視圖。聲音的振動(dòng)的次數(shù)指的是聲音的音高。當(dāng)與音頻數(shù)據(jù)有關(guān)的聲音的振動(dòng)的次數(shù)大時(shí),表不聞首聞的首調(diào)(或者聞?wù){(diào)),并且當(dāng)與首頻數(shù)據(jù)有關(guān)的聲首的振動(dòng)的次數(shù)小時(shí),表不低音調(diào)(或者低調(diào))。當(dāng)與人類的聲音相比較時(shí),在女人的聲音的情況下,振動(dòng)的次數(shù)相對(duì)大,并且在男人的聲音的情況下,振動(dòng)的次數(shù)相對(duì)小。因此,通過使用在音頻數(shù)據(jù)中包括的各種類型的信息當(dāng)中的聲音的振動(dòng)次數(shù)信息控制器180可以區(qū)分男人和女人的聲音,并且根據(jù)區(qū)分結(jié)果不同地顯示字幕。而且,如上所述,雖然沒必要通過聲音的振動(dòng)的次數(shù)區(qū)分男人和女人,但是控制器180可以區(qū)分具有相對(duì)均一地多次數(shù)的振動(dòng)和相對(duì)少次數(shù)的振動(dòng)的聲音并且區(qū)分不同人的語(yǔ)音。因此,根據(jù)聲音的振動(dòng)的次數(shù)(或者頻率)可以變化字幕的顯示顏色并且將其輸出到顯示單元151。如所圖示的,當(dāng)與第一字幕210相對(duì)應(yīng)的音頻數(shù)據(jù)具有均一地高于與第二字幕220相對(duì)應(yīng)的音頻數(shù)據(jù)的頻率時(shí),控制器180可以區(qū)分第一字幕210和第二字幕220的顯示顏色并且利用圖像顯示第一字幕210和第二字幕220。因此,用戶可以識(shí)別第一和第二字幕與在圖像中包括的對(duì)象當(dāng)中的不同對(duì)象有關(guān)。接下來(lái),圖6C是示出其中根據(jù)如上所述的聲音特性當(dāng)中的聲音的波形(或者類型)變化字幕的顯示格式的實(shí)施例的概念視圖。根據(jù)聲音的波形(或者類型或者音色),控制器180區(qū)分對(duì)象的獨(dú)特聲音,諸如人、動(dòng)物、大自然等的聲音。
因此,控制器180能夠根據(jù)聲音的波形(類型或者音色)區(qū)分不同的聲音、不同的自然聲音、動(dòng)物聲音、或者特定情況下的聲音。
因此,控制器180能夠根據(jù)聲音的波形區(qū)分在音頻數(shù)據(jù)中包括的聲音。即,控制器180可以區(qū)別聲音是來(lái)自人還是來(lái)自動(dòng)物,還是在特定的情況下產(chǎn)生。
如所圖示的,控制器180可以不同地顯示與具有不同的波形的音頻數(shù)據(jù)相對(duì)應(yīng)的字幕。
如所圖示的,控制器180可以基于不同的波形變化其中顯示第一字幕210和第二字幕220的位置。
而且,控制器180可以通過各種方法來(lái)區(qū)分字幕的顯示,諸如根據(jù)波形變化顯示字幕的尺寸或者改變字幕的顏色。
以這樣的方式,在根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端中,通過根據(jù)聲音的波形改變字幕的位置、顏色以及尺寸,即使當(dāng)聲音不能夠被聽到時(shí),關(guān)于圖像的直覺信息能夠被提供給用戶。
而且,如在圖7中所示,考慮聲音的振動(dòng)的次數(shù)、強(qiáng)度、波形等所有方面,控制器180可以變化字幕的顯示格式。
如所圖示的,控制器180可以顯示對(duì)應(yīng)于具有最高強(qiáng)度的聲音的音頻數(shù)據(jù)的第一字幕210和3D效果(3D深度值),使得第一字幕210大于第二字幕220和第三字幕230。
而且,控制器180可以基于聲音的波形和振動(dòng)的次數(shù)中的至少一個(gè)變化其中第一字幕210和第三字幕230被顯示的位置和其中第二字幕220被顯示的位置。
如上所述,在根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端中,通過根據(jù)聲音特性變化字幕的顯示格式,期望通過在圖像上的“聲音”傳遞的感情和情境能夠通過字幕被有效地傳達(dá)給用戶。
在下文中,將參考圖8、圖9以及圖10描述以相關(guān)聯(lián)的方式顯示被包括在圖像中的對(duì)象和字幕的方法。
圖8、圖9以及圖10是根據(jù)在本公開中公開的實(shí)施例的解釋用于在移動(dòng)終端中顯示字幕以對(duì)應(yīng)于對(duì)象的方法的概念視圖。
在上面參考圖5已經(jīng)描述用于通過關(guān)聯(lián)他們處理圖像數(shù)據(jù)和字幕的方法的實(shí)施例。
在下文中,將詳細(xì)地描述實(shí)現(xiàn)其的實(shí)施例。
通過使用諸如面部識(shí)別算法、對(duì)象識(shí)別算法等的各種識(shí)別算法,控制器180可以檢測(cè)被包括在顯示單元151上顯示的圖像中的對(duì)象。
在此,如在圖8中所示,對(duì)象可以是第一面部310和第二面部320,并且此外,對(duì)象可以是與被包括在圖像中的人或者動(dòng)物相對(duì)應(yīng)的圖像本身。
可以設(shè)置控制器180使得如上所述檢測(cè)到的第一和第二對(duì)象310和320被定位為與字幕相鄰。
在這樣的情況下,控制器180可以匹配檢測(cè)到的對(duì)象和相關(guān)聯(lián)的音頻數(shù)據(jù),并且在與第一對(duì)象310相鄰的位置處顯示對(duì)應(yīng)于第一對(duì)象的與音頻數(shù)據(jù)有關(guān)的第一字幕210。
為此,控制器180匹配與第一和第二對(duì)象310和320相對(duì)應(yīng)的聲音波形。
當(dāng)?shù)谝粚?duì)象310的“鼠標(biāo)”部分移動(dòng)時(shí),控制器180檢測(cè)要被輸出的音頻數(shù)據(jù)的波形,并且將檢測(cè)到的波形與第一對(duì)象310相匹配,從而將對(duì)象和波形相關(guān)聯(lián)。
并且,通過使用前述匹配的波形信息控制器180繼續(xù)將特定波形和特定對(duì)象相關(guān)聯(lián),使得與相同的波形音頻數(shù)據(jù)有關(guān)的字幕僅能夠被相鄰地顯示在相同的對(duì)象附近。
如所圖示的,控制器180可以在第一對(duì)象310附近顯示與第一對(duì)象310相對(duì)應(yīng)的第一字幕210并且在第二對(duì)象320附近顯示第二字幕210。
并且,控制器180立體地顯示與當(dāng)前輸出的音頻數(shù)據(jù)相對(duì)應(yīng)的字幕以將關(guān)于與當(dāng)前情形相對(duì)應(yīng)的字幕的信息提供給用戶。
因此,如所圖示的,當(dāng)輸出與第一對(duì)象310相對(duì)應(yīng)的音頻數(shù)據(jù)時(shí),控制器210三維地顯示第一字幕210,并且當(dāng)輸出與第二對(duì)象320相對(duì)應(yīng)的音頻數(shù)據(jù)時(shí),控制器180將已經(jīng)被三維地顯示的第一字幕210變成2D顯示格式,并且三維地顯示第二字幕220。
而且,如在圖9中所示,控制器180可以在作為圖像的聲音來(lái)源的位置上顯示字眷。
而且,即使當(dāng)聲音不是從人輸出的聲音時(shí),控制器180可以顯示與被包括在視頻文件中的音頻數(shù)據(jù)有關(guān)的字幕。因此,控制器180在作為聲音的來(lái)源的第一和第二對(duì)象310和320附近顯示表示足跡的第一和第二對(duì)象210和220,并且在作為聲音的來(lái)源的第三和第四對(duì)象330和340附近顯示表示鼓掌的第三和第四字幕230和240。
而且,如在圖10中所示,通過使用字幕的尺寸、3D效果、以及顏色中的至少一個(gè)控制器180可以提供關(guān)于時(shí)間流逝的信息。
S卩,控制器180可以顯示與當(dāng)前生成的音頻數(shù)據(jù)相對(duì)應(yīng)的字幕使得該字幕是最大的,并且顯示與很久以前生成的音頻數(shù)據(jù)相對(duì)應(yīng)的字幕使得該字幕較小。
如所圖示的,通過顯示與最近生成的音頻數(shù)據(jù)相對(duì)應(yīng)的第一字幕210控制器180可以將關(guān)于時(shí)間順序的信息提供給用戶,使得字幕210大于其它的字幕并且是三維的。
在這樣的情況下,可以將與很久以前生成的音頻數(shù)據(jù)相對(duì)應(yīng)的第四字幕240顯示為最小的。
在其中生成與第一字幕210有關(guān)的音頻數(shù)據(jù)的狀態(tài)下,當(dāng)生成與第五字幕有關(guān)的音頻數(shù)據(jù)時(shí),控制器180可以將第一字幕210的顯示變成二維顯示,三維地顯示第五字幕250,并且增加第五字幕250的尺寸使得第五字幕250是最大的。
并且,控制器180使與最早生成的音頻數(shù)據(jù)有關(guān)的第四字幕240消失,使得在圖像上能夠始終顯示適當(dāng)數(shù)目的字幕。
如上所述,根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端通過將對(duì)象和字幕相關(guān)聯(lián),顯示對(duì)象和字幕,并且根據(jù)時(shí)間順序改變字幕的顯示格式,從而允許用戶容易地理解圖像。
接下來(lái),將會(huì)參考圖11、圖12、圖13以及圖14描述通過協(xié)作地操作在音頻數(shù)據(jù)中包括的聲音的振幅信息的處理和字幕的顯示的方法。
圖11是圖示根據(jù)在本公開中公開的實(shí)施例的用于在移動(dòng)終端中根據(jù)振幅不同地顯示字幕的方法的流程圖,并且圖12、圖13以及圖14是根據(jù)在本公開中公開的實(shí)施例的解釋用于在移動(dòng)終端中根據(jù)振幅顯示字幕的方法的概念視圖。
參考圖11,在根據(jù)音頻數(shù)據(jù)的聲音特性當(dāng)中的振幅的大小不同地顯示字幕的尺寸的實(shí)施例中,控制器180分析被包括在音頻數(shù)據(jù)的信息當(dāng)中的與聲音的振幅相對(duì)應(yīng)的信息(步驟 BlOO)。
控制器180將被分析的聲音的振幅與基準(zhǔn)值相比較(步驟B200)。
當(dāng)根據(jù)比較結(jié)果被分析的聲音的振幅大于基準(zhǔn)值時(shí),控制器180顯示大于基準(zhǔn)尺寸的字幕(步驟B300)。而且,當(dāng)根據(jù)比較結(jié)果被分析的聲音的振幅小于基準(zhǔn)值時(shí),控制器180顯示小于基準(zhǔn)尺寸的字幕(步驟B400)。
以這樣的方式,控制器180確定與聲音的振幅有關(guān)的基準(zhǔn)值,分析與基準(zhǔn)值的差,并且根據(jù)差改變字幕的尺寸。
因此,當(dāng)振幅對(duì)應(yīng)于基準(zhǔn)值時(shí),字幕被顯示為具有預(yù)設(shè)的基準(zhǔn)尺寸。
例如,在圖12中,當(dāng)?shù)谝蛔帜?10的尺寸是基準(zhǔn)尺寸時(shí),控制器180可以顯示與與音頻數(shù)據(jù)相對(duì)應(yīng)的第二字幕220,該音頻數(shù)據(jù)具有大于與第一字幕210相對(duì)應(yīng)的音頻數(shù)據(jù)的振幅,使得第二字幕220大于第一字幕210。而且,根據(jù)振幅通過使用3D效果和字幕的尺寸,控制器180可以三維地顯示字幕。
另外,控制器180可以根據(jù)具有被逐漸地增加的聲音,即,振幅的音頻數(shù)據(jù)改變字幕的尺寸。
例如,如在圖13中所示,當(dāng)與第一字幕210相對(duì)應(yīng)的音頻數(shù)據(jù)的振幅被逐漸地增加時(shí),控制器180可以改變第一字幕的尺寸,使得其對(duì)應(yīng)于被逐漸地增加的振幅。
因此,控制器180可以根據(jù)音頻數(shù)據(jù)的振幅中的變化將第一字幕210的尺寸變成第二字幕的尺寸。在這樣的情況下,當(dāng)振幅被快速地增加時(shí),控制器180將移動(dòng)效果提供給第二字幕220以將關(guān)于相對(duì)應(yīng)的情形的信息提供給用戶。
而且,控制器180可以將尺寸從第二字幕220的尺寸增加到第三字幕230的尺寸并且使用3D效果以進(jìn)一步有效地提供關(guān)于振幅的信息。
而且,如上所述,相對(duì)于其振幅被逐漸地減少的音頻數(shù)據(jù),控制器180可以減少字幕的尺寸或者其3D效果。
另外,如在圖14中所示,控制器180可以在對(duì)應(yīng)于與圖像中的音頻數(shù)據(jù)有關(guān)的聲音的來(lái)源的位置處顯示字幕,并且根據(jù)在與聲音的來(lái)源相對(duì)應(yīng)的位置處的振幅的變化改變字幕的顯示尺寸。
如上所述,在根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端中,通過根據(jù)振幅中的變化區(qū)別字幕的顯示尺寸,用戶能夠通過字幕識(shí)別大的聲音和小的聲音,因此在沒有直接地聽到聲音的情況下用戶能夠理解圖像的內(nèi)容。
而且,在根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端中,通過根據(jù)與視頻有關(guān)的聲音特性區(qū)別字幕的顯示格式,用戶能夠通過字幕容易地識(shí)別與視頻有關(guān)的內(nèi)容。
另外,在根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端中,通過根據(jù)視頻的內(nèi)容改變字幕的尺寸、3D效果、顏色等,用戶能夠僅通過字幕快速地識(shí)別與視頻的內(nèi)容有關(guān)的感情線和情形。
根據(jù)本公開的實(shí)施例的移動(dòng)終端不受在其配置和方法的應(yīng)用中的限制,但是實(shí)施例的整體或者部分能夠被選擇性地組合以被配置成各種修改。
因?yàn)樵诓槐畴x本發(fā)明的特性的情況下,可以以若干形式來(lái)實(shí)現(xiàn)示例性實(shí)施例,所以還應(yīng)當(dāng)理解,除非另外指明,否則上述實(shí)施例不受任何前面描述的細(xì)節(jié)限制,而是應(yīng)該在如所附權(quán)利要求中所限定的范圍內(nèi)被廣泛地解釋。因此,因此意在落入權(quán)利要求的范圍、或這樣的范圍的等價(jià)物內(nèi)的各種改變和修改由所附權(quán)利要求來(lái)包括。
權(quán)利要求
1.一種移動(dòng)終端,包括: 接收器,所述接收器被配置成接收包括視頻數(shù)據(jù)和音頻數(shù)據(jù)的內(nèi)容信號(hào); 顯不器;和 控制器,所述控制器被配置為: 使得基于接收到的視頻數(shù)據(jù)在所述顯示器上顯示視頻; 使得在所述顯示器上與被顯示的視頻同時(shí)地顯示字幕,其中所述字幕的內(nèi)容基于所述接收到的音頻數(shù)據(jù);以及 使得根據(jù)所述接收到的音頻數(shù)據(jù)的相對(duì)應(yīng)的聲音特性以多種不同的格式中的任意一種顯示所述字幕,其中所述接收到的音頻數(shù)據(jù)的聲音特性是多個(gè)可能的聲音特性中的一個(gè)。
2.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中所述接收到的音頻數(shù)據(jù)的聲音特性至少與振幅、振動(dòng)的次數(shù)、或者波形有關(guān)。
3.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中所述控制器被進(jìn)一步配置成: 使得當(dāng)所述接收到的音頻數(shù)據(jù)的聲音特性小于閾值時(shí),以二維(2D)格式顯示字幕;并且 使得當(dāng)所述音頻數(shù)據(jù)的聲音特性大于閾值時(shí),以三維(3D)格式顯示字幕。
4.根據(jù)權(quán)利要求3所述的移動(dòng)終端,其中以3D格式顯示的字幕的深度值基于與超過所述閾值的音頻數(shù)據(jù)相對(duì)應(yīng) 的聲音振幅的級(jí)別變化。
5.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中所述接收到的音頻數(shù)據(jù)的聲音特性與波形有關(guān),并且其中所述控制器被進(jìn)一步配置成: 使得在基于所述音頻數(shù)據(jù)的波形的所述顯示器的位置處出現(xiàn)所述字幕的顯示。
6.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中: 所述接收到的音頻數(shù)據(jù)的聲音特性與波形有關(guān); 所述被顯示的視頻包括多個(gè)對(duì)象; 被顯示的字幕的每個(gè)字幕與所述多個(gè)對(duì)象中的相對(duì)應(yīng)的一個(gè)有關(guān);以及所述控制器被進(jìn)一步配置成使得所述顯示器在對(duì)應(yīng)于所述多個(gè)對(duì)象中的相對(duì)應(yīng)的一個(gè)的所述顯示器的位置處顯示被顯示的字幕中的每個(gè)字幕。
7.根據(jù)權(quán)利要求6所述的移動(dòng)終端,其中所述多個(gè)對(duì)象中的每個(gè)包括面部。
8.根據(jù)權(quán)利要求6所述的移動(dòng)終端,其中所述控制器被進(jìn)一步配置成以三維(3D)格式顯示所述被顯示的字幕中的至少一個(gè)。
9.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中: 所述接收到的音頻數(shù)據(jù)的聲音特性與波形有關(guān); 所述控制器被進(jìn)一步配置成使得所述顯示器以基于所述音頻數(shù)據(jù)的波形的顏色顯示被顯示的字幕中的每個(gè)字幕;以及 基于所述音頻數(shù)據(jù)的不同波形的所述被顯示的字幕的字幕以彼此不同的顏色顯示。
10.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中: 所述接收到的音頻數(shù)據(jù)的聲音特性與振幅有關(guān);以及 所述控制器被進(jìn)一步配置成使得所述顯示器基于與所述被顯示的字幕的每個(gè)字幕相對(duì)應(yīng)的聲音振幅的級(jí)別來(lái)變化所述被顯示的字幕中的每個(gè)字幕的尺寸。
11.根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中所述控制器被進(jìn)一步配置成: 確定與所述被顯示的字幕中的每個(gè)字幕相對(duì)應(yīng)的聲音振幅是大于基準(zhǔn)值還是等于基準(zhǔn)值; 使得以大于基準(zhǔn)尺寸的尺寸顯示被顯示的字幕中的每個(gè)字幕,所述被顯示的字幕中的每個(gè)字幕基于大于所述基準(zhǔn)值的聲音振幅;以及 使得以小于所述基準(zhǔn)尺寸的尺寸顯示被顯示的字幕中的每個(gè)字幕,所述被顯示的字幕中的每個(gè)字幕基于小于所述基準(zhǔn)值的聲音振幅。
12.根據(jù)權(quán)利要求11所述的移動(dòng)終端,其中所述被顯示的字幕中的每個(gè)的尺寸基于與被顯示的字幕中的每個(gè)字幕相對(duì)應(yīng)的聲音振幅和所述基準(zhǔn)值之間的差而變化。
13.根據(jù)權(quán)利要求12所述的移動(dòng)終端,其中所述控制器被進(jìn)一步配置成: 當(dāng)所述相對(duì)應(yīng)的聲音振幅大于所述基準(zhǔn)值時(shí),所述被顯示的字幕中的每個(gè)的尺寸與對(duì)應(yīng)于被顯示的字幕中的每個(gè)字幕的聲音振幅和所述基準(zhǔn)值之間的差的增加成比例地增加;以及 當(dāng)所述相對(duì)應(yīng)的聲音振幅小于所述基準(zhǔn)值時(shí),所述被顯示的字幕中的每個(gè)的尺寸與對(duì)應(yīng)于被顯示的字幕中的每個(gè)字幕的聲音振幅和所述基準(zhǔn)值之間的差的增加成比例地減少。
14.根據(jù)權(quán)利要求13所述的移動(dòng)終端,其中所述控制器被進(jìn)一步配置成: 使得當(dāng)所述聲音振幅在預(yù)設(shè)閾值以上時(shí)以三維(3D)格式顯示所述字幕;以及 基于聲音振幅和所述預(yù)設(shè)閾值之間的差來(lái)變化以所述3D格式顯示的所述字幕的深度值。
15.根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中所述控制器被進(jìn)一步配置成基于與所述被顯示的字幕中的每個(gè)字幕相對(duì)應(yīng)的聲音振幅的改變來(lái)變化所述被顯示的字幕中的每個(gè)字幕的字符厚度。
16.根據(jù)權(quán)利要求1所述的移動(dòng)終端,其中: 所述接收到的音頻數(shù)據(jù)的聲音特性與振幅有關(guān);以及 所述控制器被進(jìn)一步配置成使所述顯示器基于與所述被顯示的字幕中的每個(gè)字幕相對(duì)應(yīng)的聲音振幅的差以不同于所述被顯示的字幕中的另一個(gè)的尺寸顯示所述被顯示的字幕中的每個(gè)字幕。
17.—種控制移動(dòng)終端的方法,所述方法包括: 經(jīng)由所述移動(dòng)終端的接收器接收內(nèi)容信號(hào),所述內(nèi)容信號(hào)包括視頻數(shù)據(jù)和音頻數(shù)據(jù); 經(jīng)由所述移動(dòng)終端的控制器控制所述移動(dòng)終端的顯示器,以基于所述接收到的視頻數(shù)據(jù)顯示視頻; 經(jīng)由所述控制器控制所述顯示器以與所述被顯示的視頻同時(shí)地顯示字幕,其中所述字幕的內(nèi)容基于所述接收到的音頻數(shù)據(jù);以及 經(jīng)由所述控制器控制所述顯示器以根據(jù)所述接收到的音頻數(shù)據(jù)的相對(duì)應(yīng)的聲音特性以多種不同的格式中的任意一種顯示所述字幕,其中所述接收到的音頻數(shù)據(jù)的聲音特性是多個(gè)可能的聲音特性中的一個(gè)。
18.根據(jù)權(quán)利要求17所述的方法,其中所述接收到的音頻數(shù)據(jù)的聲音特性至少與振幅、振動(dòng)的次數(shù)、或者波形有關(guān)。
19.根據(jù)權(quán)利要求17所述的方法,其中所述接收到的音頻數(shù)據(jù)的聲音特性與振幅有關(guān),所述方法進(jìn)一步包括: 經(jīng)由所述控制器控制所述顯示器,以當(dāng)聲音振幅小于閾值時(shí)以二維(2D)格式顯示所述字眷; 經(jīng)由所述控制器控制所述顯示器,以當(dāng)所述聲音振幅大于所述閾值時(shí)以三維(3D)格式顯示所述字幕;以及 經(jīng)由所述控制器控制所述顯示器,以基于與超過所述閾值的所述音頻數(shù)據(jù)相對(duì)應(yīng)的聲音振幅的級(jí)別來(lái)變化以所述3D格式顯示的字幕的深度值。
20.根據(jù)權(quán)利要求17所述的方法,其中所述接收到的音頻數(shù)據(jù)的聲音特性進(jìn)一步與波形有關(guān),其中所述被顯示的視頻包括多個(gè)對(duì)象,并且其中所述被顯示的字幕中的每個(gè)字幕與所述多個(gè)對(duì)象中的相對(duì)應(yīng)的一個(gè)有關(guān),所述方法進(jìn)一步包括: 經(jīng)由所述控制器控制所述顯示器,以在與所述多個(gè)對(duì)象中的相對(duì)應(yīng)的一個(gè)相對(duì)應(yīng)的所述顯示器的位置處顯示 所述被顯示的字幕中的每個(gè)字幕。
全文摘要
本發(fā)明涉及一種移動(dòng)終端及其控制方法。提供一種再現(xiàn)包括圖像數(shù)據(jù)和音頻數(shù)據(jù)的視頻的移動(dòng)終端及其控制方法。再現(xiàn)包括圖像數(shù)據(jù)和音頻數(shù)據(jù)的視頻的移動(dòng)終端,包括顯示單元,該顯示單元被配置成基于相對(duì)于視頻的再現(xiàn)命令顯示與圖像數(shù)據(jù)相對(duì)應(yīng)的圖像;字幕處理單元,該字幕處理單元被配置成將與視頻有關(guān)的字幕連同圖像一起輸出到顯示單元;以及控制器,該控制器被配置成控制字幕處理單元以根據(jù)與圖像有關(guān)的音頻數(shù)據(jù)的聲音特性改變字幕的顯示格式。
文檔編號(hào)H04M1/725GK103139375SQ20121050538
公開日2013年6月5日 申請(qǐng)日期2012年11月30日 優(yōu)先權(quán)日2011年12月2日
發(fā)明者金志桓 申請(qǐng)人:Lg電子株式會(huì)社