專利名稱：配合音樂來調(diào)節(jié)移動無線終端的可視用戶界面的方法及相應(yīng)的移動無線終端的制作方法
技術(shù)領(lǐng)域：
本發(fā)明總體上涉及電子設(shè)備，諸如用于進(jìn)行語音通信和/或用于播放 視聽內(nèi)容的電子設(shè)備。更具體地說，本發(fā)明涉及基于與音樂的回放相關(guān) 的參數(shù)來改變所顯示內(nèi)容的方法及系統(tǒng)。
背景技術(shù)：
移動和/或無線電子裝置正變得日益普及。例如，現(xiàn)在廣泛使用移動 電話和便攜式媒體播放器。此外，與某些類型的電子裝置相關(guān)的特征變 得日益多樣化。例如，許多電子裝置都能夠拍照、發(fā)送并接收文本消息、 瀏覽互聯(lián)網(wǎng)、發(fā)送并接收電子郵件、回放視頻內(nèi)容、回放音頻內(nèi)容、顯 示圖像、以及與免提耳機進(jìn)行接口連接。
許多電子裝置用戶喜歡在使用該電子裝置進(jìn)行其它活動的同時使用 該電子裝置來播放音樂。其它活動可以包括進(jìn)行游戲、對數(shù)據(jù)進(jìn)行分 類、編寫文本消息、瀏覽互聯(lián)網(wǎng)、閱讀電子郵件消息等。傳統(tǒng)上，在以 背景的方式回放音樂與其它活動的執(zhí)行之間沒有關(guān)聯(lián)。也就是說，用戶 可以收聽作為背景而播放的音樂，但是在其它方面并不受該音樂的影響。

發(fā)明內(nèi)容
鑒于音樂回放與其它電子裝置活動之間的上述分隔，在本領(lǐng)域內(nèi)需 要通過在向用戶播放的音樂與顯示給用戶的可視內(nèi)容之間建立關(guān)聯(lián)，來 提高用戶對電子裝置(尤其是對便攜式手持裝置)的體驗。
根據(jù)本發(fā)明的一個方面，公開了一種用于生成多媒體用戶界面的方 法，該方法包括以下步驟使用電子裝置來播放音樂；確定與所述音樂 相關(guān)的參數(shù)；以及通過將視覺效果應(yīng)用到顯示在所述電子裝置的顯示器
3上的可視內(nèi)容，來使所述可視內(nèi)容符合所述音樂的所述參數(shù)，所述視覺
效果與所述參數(shù)相關(guān)聯(lián)。
根據(jù)所述方法的一個實施方式，通過分析所述音樂來確定所述參數(shù)。 根據(jù)所述方法的一個實施方式，通過對與對應(yīng)于所述音樂的音頻數(shù)
據(jù)一起存儲的或一起發(fā)送的數(shù)據(jù)進(jìn)行讀取，來確定所述參數(shù)。
根據(jù)所述方法的一個實施方式，所述參數(shù)是音樂回放的音量。 根據(jù)所述方法的一個實施方式，所述視覺效果是對至少一個所顯示
對象的亮度或顏色中的至少一個進(jìn)行調(diào)節(jié)。
根據(jù)所述方法的一個實施方式，所述參數(shù)與所述音樂的節(jié)奏相關(guān)。 根據(jù)所述方法的一個實施方式，所述視覺效果是調(diào)節(jié)所述顯示器上
的移動對象。
根據(jù)所述方法的一個實施方式，根據(jù)所述音樂的節(jié)拍的出現(xiàn)來移動 所述移動對象。
根據(jù)所述方法的一個實施方式，所述視覺效果是調(diào)節(jié)所述顯示器上 的閃爍對象。
根據(jù)所述方法的一個實施方式，根據(jù)所述音樂的節(jié)拍的出現(xiàn)來使所 述閃爍對象閃爍。
根據(jù)所述方法的一個實施方式，所述視覺效果是對顯示在所述顯示 器上的內(nèi)容的畫面轉(zhuǎn)變進(jìn)行調(diào)節(jié)。
根據(jù)所述方法的一個實施方式，根據(jù)所述音樂的節(jié)拍來逐步進(jìn)行所 述畫面轉(zhuǎn)變。
根據(jù)所述方法的一個實施方式，所述視覺效果是對顯示在所述顯示 器上的至少一個對象進(jìn)行調(diào)節(jié)，使之與所述音樂的節(jié)拍相關(guān)。
根據(jù)所述方法的一個實施方式，所述電子裝置是移動電話。 根據(jù)本發(fā)明的另一方面， 一種存儲在機器可讀介質(zhì)上的程序被設(shè)置 用于生成多媒體用戶界面。所述程序包括可執(zhí)行邏輯以執(zhí)行以下步驟 確定與由電子裝置播放的音樂相關(guān)的參數(shù)；以及通過將視覺效果應(yīng)用到 顯示在所述電子裝置的顯示器上的可視內(nèi)容，來使所述可視內(nèi)容符合所 述音樂的所述參數(shù)，所述視覺效果與所述參數(shù)相關(guān)聯(lián)。
4根據(jù)所述程序的一個實施方式，通過分析所述音樂或通過對與對應(yīng) 于所述音樂的音頻數(shù)據(jù)一起存儲的或一起發(fā)送的數(shù)據(jù)進(jìn)行讀取這兩種方 式中的一種，來確定所述參數(shù)。
根據(jù)所述程序的一個實施方式，所述參數(shù)是音樂回放的音量，而所 述視覺效果是對至少一個所顯示對象的亮度或顏色中的至少一個進(jìn)行調(diào) 節(jié)。
根據(jù)所述程序的一個實施方式，所述參數(shù)與所述音樂的節(jié)奏相關(guān)， 而所述視覺效果是從以下視覺效果及它們的組合中所選擇的一種調(diào)節(jié) 所述顯示器上的移動對象；調(diào)節(jié)所述顯示器上的閃爍對象；對顯示在所 述顯示器上的內(nèi)容的畫面轉(zhuǎn)變進(jìn)行調(diào)節(jié)；對顯示在所述顯示器上的至少 一個對象進(jìn)行調(diào)節(jié)。
根據(jù)所述程序的一個實施方式，所述視覺效果與所述音樂的節(jié)拍的 出現(xiàn)相關(guān)。
根據(jù)所述程序的一個實施方式，所述電子裝置是移動電話。
根據(jù)本發(fā)明的另一方面，公開了一種電子裝置，該電子裝置包括 顯示器；以及控制電路，該控制電路通過執(zhí)行邏輯以執(zhí)行以下步驟，來 生成多媒體用戶界面確定與由所述電子裝置回放的音樂相關(guān)的參數(shù)； 以及通過將視覺效果應(yīng)用到顯示在所述顯示器上的可視內(nèi)容來使所述可 視內(nèi)容符合所述音樂的所述參數(shù)，所述視覺效果與所述參數(shù)相關(guān)聯(lián)。
根據(jù)所述電子裝置的一個實施方式，通過分析所述音樂或通過對與 對應(yīng)于所述音樂的音頻數(shù)據(jù)一起存儲的或一起發(fā)送的數(shù)據(jù)進(jìn)行讀取這兩 種方式中的一種，來確定所述參數(shù)。
根據(jù)所述電子裝置的一個實施方式，所述參數(shù)是音樂回放的音量， 而所述視覺效果是對至少一個所顯示對象的亮度或顏色中的至少一個進(jìn) 行調(diào)節(jié)。
根據(jù)所述電子裝置的一個實施方式，所述參數(shù)與所述音樂的節(jié)奏相 關(guān)，而所述視覺效果是從以下視覺效果及它們的組合中所選擇的一種 調(diào)節(jié)所述顯示器上的移動對象；調(diào)節(jié)所述顯示器上的閃爍對象；對顯示 在所述顯示器上的內(nèi)容的畫面轉(zhuǎn)變進(jìn)行調(diào)節(jié)；對顯示在所述顯示器上的至少一個對象進(jìn)行調(diào)節(jié)。
根據(jù)所述電子裝置的一個實施方式，所述視覺效果與所述音樂的節(jié) 拍的出現(xiàn)相關(guān)。
根據(jù)所述電子裝置的一個實施方式，所述電子裝置是移動電話。
根據(jù)以下說明并參照附圖將使得本發(fā)明的這些及其它特征更加清 楚。在說明和附圖中，詳細(xì)描述了本發(fā)明的具體實施方式
，作為對可以 實施本發(fā)明的原理的一些方式的指示，但是可以理解的是，本發(fā)明在范 圍上并不受相應(yīng)限制。相反，本發(fā)明涵蓋落入所附權(quán)利要求的精神和條 款內(nèi)的全部變化例、修改例和等同物。
根據(jù)一個實施方式所描述和/或例示的多種特征，可以通過相同方式 或者類似方式而被用于一個或更多個其它實施方式中，和/或與其它實施 方式的特征相組合而使用，或代替其它實施方式的特征而使用。
應(yīng)該強調(diào)的是，在本說明書中使用的用語"包括
(comprises/comprising)"用于表明所陳述的特征、整體、步驟或組件的 存在，但是不排除一個或更多個其它特征、整體、步驟、部件或它們的 組的存在或增加。


圖1是示出根據(jù)本發(fā)明的一個實施方式的作為示例性電子設(shè)備的移 動電話的示意圖2是示出圖1的移動電話的根據(jù)本發(fā)明的一個實施方式的相關(guān)部
分的示意性框圖3是示出圖1的移動電話可工作于其中的通信系統(tǒng)的示意圖4是示出在回放給電子設(shè)備的用戶的音樂與顯示給該用戶的可視
內(nèi)容之間生成交互的示例性方法的流程圖5是示出在音樂與可視內(nèi)容之間的示例性關(guān)聯(lián)的示意圖6是示出在回放給電子設(shè)備的用戶的音樂與顯示給該用戶的可視
內(nèi)容之間生成交互的另一示例性方法的流程圖；以及
圖7是示出在回放給電子設(shè)備的用戶的音樂與顯示給該用戶的可視內(nèi)容之間生成交互的另 一示例性方法的流程圖。
具體實施例方式
現(xiàn)在將參照附圖來描述本發(fā)明，在附圖中，相同的附圖標(biāo)記始終用 于表示相同的單元。可以理解的是，附圖不一定是按照比例描繪。
可互換的術(shù)語"電子設(shè)備"和"電子裝置"包括便攜式無線通信設(shè)備。 術(shù)語"便攜式無線通信設(shè)備"(此后稱作"移動無線終端")包括諸如移動電 話、尋呼機、通信裝置、電子記事本、個人數(shù)字助理(PDA)、智能手機、 便攜式通信裝置等的全部設(shè)備。
在本申請中，主要就移動電話來描述本發(fā)明。然而，可以理解的是， 本發(fā)明并不限于移動電話，而可以是任何類型的合適的電子設(shè)備。可以 應(yīng)用本發(fā)明的其它電子設(shè)備例如包括便攜式媒體播放器、游戲機和計算 機。
首先參照圖1和圖2，圖l和圖2示出了電子設(shè)備10。電子設(shè)備IO 包括用戶界面增強功能12，用戶界面增強功能12被設(shè)置為在按照可聽到 的方式而回放給用戶的音樂與顯示給用戶的可視內(nèi)容之間建立關(guān)聯(lián)。將 這種關(guān)聯(lián)作為視覺效果呈現(xiàn)給用戶，并旨在提高用戶對電子設(shè)備10的體 驗。稍后將詳細(xì)描述各種視覺效果。此外，稍后將詳細(xì)描述用戶界面增 強功能12的操作?？梢岳斫獾氖?，可以將用戶界面增強功能12實現(xiàn)為 駐留在電子設(shè)備10中并由電子設(shè)備IO執(zhí)行的可執(zhí)行代碼。例如，用戶 界面增強功能12可以是存儲在計算機可讀介質(zhì)或機器可讀介質(zhì)上的程 序。
所例示的實施方式的電子設(shè)備是移動電話，并被稱為移動電話10。 如圖所示，移動電話IO具有"磚形"或"塊形"設(shè)計的外殼，但是可以理解 的是，也可以利用其它類型外殼(諸如翻蓋式外殼或滑蓋式外殼)。
移動電話IO包括顯示器14和鍵區(qū)16。顯示器14向用戶顯示信息、 圖形對象(例如，鼠標(biāo)指針、圖標(biāo)、菜單選項等)、字母數(shù)字?jǐn)?shù)據(jù)以及圖 像，這使得用戶能夠利用移動電話10的各種功能。顯示器14還可用于 可視地顯示由移動電話10接收到的和/或從移動電話10的存儲器18獲取
7的視頻內(nèi)容和/或圖像。
鍵區(qū)16提供了各種用戶輸入操作。例如，鍵區(qū)16通常包括用于輸 入字母數(shù)字信息(諸如電話號碼、電話列表、聯(lián)系人信息、注釋等)的
字母數(shù)字鍵20。此外，鍵區(qū)16通常包括特殊功能鍵，諸如用于發(fā)起或應(yīng)
答呼叫的"呼叫發(fā)送"鍵及用于結(jié)束或"掛斷"呼叫的"通話結(jié)束"鍵。如傳統(tǒng) 的那樣，特殊功能鍵例如還包括菜單導(dǎo)航鍵，菜單導(dǎo)航鍵用于瀏覽顯示
在顯示器14上的菜單以選擇不同電話功能、方案、設(shè)置等。與移動電話 相關(guān)的其它鍵可以包括音量鍵、靜音鍵、電源開/關(guān)鍵、web瀏覽器啟動 鍵、相機鍵等。還可以將鍵或類似鍵的功能實現(xiàn)為與顯示器14相關(guān)的觸摸屏。
移動電話IO包括呼叫電路，呼叫電路使得移動電話10能夠與被叫/ 主叫裝置(通常是另一移動電話或固定電話(landline telephone))建立呼 叫和/或交換信號。然而，被叫/主叫裝置不一定是另一電話，而可以是諸 如互聯(lián)網(wǎng)web服務(wù)器、內(nèi)容提供服務(wù)器等的一些其它裝置。
圖2示出了移動電話10的功能性框圖。為了簡潔，這里未對移動電 話10的一般傳統(tǒng)特征進(jìn)行詳細(xì)描述。移動電話10包括主控制電路24， 主控制電路24被設(shè)置為執(zhí)行對移動電話10的功能和操作的總體控制。 控制電路24可以包括處理裝置26,諸如CPU、微控制器或微處理器。 處理裝置26執(zhí)行存儲在控制電路24內(nèi)的存儲器(未示出)中和/或存儲 在獨立存儲器(諸如存儲器18)中的代碼，以執(zhí)行移動電話10的操作。 存儲器18例如可以是緩存、閃存、硬盤驅(qū)動器、可移除介質(zhì)、易失性存 儲器、非易失性存儲器或其它合適裝置中的一個或更多個。
此外，處理裝置26執(zhí)行代碼以執(zhí)行用戶界面增強功能12。如何對 移動電話IO進(jìn)行編程以使其工作并執(zhí)行這里所描述的功能，這對于計算 機編程領(lǐng)域、尤其是對于移動電話或其它電子裝置的應(yīng)用編程領(lǐng)域的普 通技術(shù)人員是明顯的。因此，為了簡潔，省略了關(guān)于具體的編程代碼的 細(xì)節(jié)。此外，雖然根據(jù)本發(fā)明的優(yōu)選實施方式，由處理裝置26來執(zhí)行用 戶界面增強功能12，但是也可以通過專用硬件、固件、軟件或它們的組 合來執(zhí)行這種功能，而不脫離本發(fā)明的范圍。繼續(xù)參照圖1和圖2，移動電話10包括連接到無線電電路30的天 線28。如傳統(tǒng)的那樣，無線電電路30包括用于通過天線28來發(fā)射和接 收信號的射頻發(fā)射機和接收機。無線電電路30被設(shè)置為在移動通信系統(tǒng) 中工作，并可用于發(fā)送和接收數(shù)據(jù)和/或視聽內(nèi)容。與移動無線網(wǎng)絡(luò)和/ 或廣播網(wǎng)絡(luò)進(jìn)行交互的無線電電路30包括但不限于GSM、 CDMA、 WCDMA、 GPRS、 MBMS、 WiFi、 WiMax、 DVB-H、 ISDB-T等以及這 些標(biāo)準(zhǔn)的高級版本。
移動電話10還包括用于對由無線電電路30發(fā)送的/從無線電電路30 接收的音頻信號進(jìn)行處理的聲音信號處理電路32。如傳統(tǒng)的那樣，聲音 處理電路32連接有揚聲器34和麥克風(fēng)36，揚聲器34和麥克風(fēng)36使用 戶能夠通過移動電話10進(jìn)行收聽和講話。無線電電路30和聲音處理電 路32分別連接到控制電路24，以執(zhí)行總體操作?？梢詫⒁纛l數(shù)據(jù)(包括 來自由存儲器18所存儲并由控制電路24或移動無線服務(wù)所獲取的音頻 文件的音樂)從控制電路24傳送到聲音信號處理電路32，以向用戶進(jìn)行 回放。聲音處理電路32可以包括任何合適的緩存、解碼器、放大器等。
移動電話10還包括連接到控制電路24的上述顯示器14和鍵區(qū)16。 顯示器14可通過視頻處理電路38連接到控制電路24，視頻處理電路38 將視頻數(shù)據(jù)轉(zhuǎn)換成用于驅(qū)動顯示器14的視頻信號。視頻數(shù)據(jù)可由控制電 路24生成、從存儲在存儲器18中的視頻文件獲取、從由無線電電路30 接收的入向視頻數(shù)據(jù)流中得到或通過任何其它合適方法獲得。視頻處理 電路38可包括任何合適的緩存、解碼器、視頻數(shù)據(jù)信號處理器等。
移動電話10還包括一個或更多個I/O接口 42。1/0接口 42可以是典 型的移動電話i/o接口形式，并可以包括一個或更多個電連接器。如典型 的那樣，1/O接口42可用于將移動電話10連接到電池充電器，以對移動 電話10內(nèi)的電源單元(PSU) 44的電池進(jìn)行充電。此外，或者作為替換 方式，1/O接口42可用于將移動電話10連接到有線個人免提適配器(未 示出)，諸如耳機(有時稱作耳塞)，該耳機根據(jù)由聲音處理電路34輸出 的信號以可聽見的方式輸出聲音。此外，1/0接口 42可用于通過數(shù)據(jù)線 纜將移動電話10連接到個人計算機或其它裝置。移動電話10可以在連
9接到車載電源適配器或電源插座適配器時通過I/O接口 42來接收工作電 力。
移動電話10還可包括用于執(zhí)行定時功能的定時器46。這些功能包
括對通話持續(xù)時長計時、生成時間和日期戳內(nèi)容等。移動電話io可以包
括用于拍攝數(shù)字照片和/或電影的相機48。與這些照片和/或電影相對應(yīng)的 圖像文件和/或視頻文件可以存儲在存儲器18中。移動電話10還可以包 括位置數(shù)據(jù)接收機50，諸如全球定位系統(tǒng)(GPS)接收機、伽里略衛(wèi)星 系統(tǒng)接收機等。移動電話IO還可以包括本機無線接口 52，諸如紅外收發(fā) 機和/或RF適配器(例如，藍(lán)牙適配器)，本機無線接口 52用于與配件、 免提適配器(例如，可以按可聽見的方式輸出與從移動電話IO傳送給耳 機的音頻數(shù)據(jù)相對應(yīng)的聲音的耳機)、另一移動無線終端、計算機或者 其它裝置建立通信。
移動電話10可以被設(shè)置為發(fā)送、接收和處理數(shù)據(jù)，諸如文本消息(例 如，俗稱為"SMS")、電子郵件消息、多媒體消息(例如，俗稱為"MMS")、 圖像文件、視頻文件、音頻文件、鈴聲、流音頻、流視頻、數(shù)據(jù)饋送(包 括播客)等。對這些數(shù)據(jù)的處理可以包括將數(shù)據(jù)存儲在存儲器18中、執(zhí) 行允許用戶與數(shù)據(jù)進(jìn)行交互的應(yīng)用、顯示與數(shù)據(jù)相關(guān)的視頻和/或圖像內(nèi) 容、輸出與數(shù)據(jù)相關(guān)的音頻聲音等。
另外參照圖3，移動電話10可以被設(shè)置為作為通信系統(tǒng)54的一部 分進(jìn)行操作。系統(tǒng)54可以包括具有服務(wù)器58 (或多個服務(wù)器)的通信網(wǎng) 絡(luò)56，服務(wù)器58用于對由移動電話IO發(fā)起的呼叫或目的地為移動電話 10的呼叫進(jìn)行管理、將數(shù)據(jù)發(fā)送到移動電話10并執(zhí)行任何其它支持功能。 服務(wù)器58通過傳輸介質(zhì)與移動電話IO通信?？梢岳斫獾氖牵?wù)器58 可被設(shè)置為用于執(zhí)行服務(wù)器功能的典型的計算機系統(tǒng)，并可包括處理器， 該處理器可被設(shè)置為執(zhí)行包含實現(xiàn)服務(wù)器58的功能的邏輯指令的軟件。 傳輸介質(zhì)可以是任何合適的裝置或組件，例如包括通信塔(例如，蜂窩 塔)、另一移動電話、無線接入點、衛(wèi)星等。網(wǎng)絡(luò)的一部分可以包括無線 傳輸路徑。雖然在圖3中只示出了一個移動電話IO，但是網(wǎng)絡(luò)56可以支 持多個移動電話IO和其它類型終端用戶裝置的通信活動。
10如上所述，可以執(zhí)行用戶界面增強功能12，以在按照可聽見的方式 回放給用戶的音樂與顯示給用戶的可視內(nèi)容之間建立關(guān)聯(lián)?？梢詫⑦@種 關(guān)聯(lián)作為圖形視覺效果呈現(xiàn)給用戶，以提高用戶對移動電話10的體驗。 這種視覺效果可以涉及對所顯示內(nèi)容的任何操縱。 一個示例性視覺效果 可以是對所顯示的對象或多個對象(這些對象包括文本、圖標(biāo)、背景顏 色或圖形、符號、整個顯示器等)的顏色、色調(diào)、亮度、對比度、清晰 度或其它屬性進(jìn)行改變。另一示例性視覺效果可以是當(dāng)該對象移動通過 顯示器(14)時對該對象的動作進(jìn)行改變，諸如通過使該對象的移動按
照音樂的節(jié)奏、曲速(tempo)或拍速(pace)而暫停、減慢或加快。另 一示例性視覺效果可以是對光標(biāo)閃爍的方式進(jìn)行改變，諸如將閃爍調(diào)節(jié) 為適合于音樂的節(jié)奏。另一示例性視覺效果是對進(jìn)行畫面轉(zhuǎn)變的方式進(jìn) 行修改，諸如將畫面轉(zhuǎn)變調(diào)節(jié)為適合于音樂的節(jié)奏。其它示例性視覺效 果包括使所顯示對象跳動(pulse)、使對象外表發(fā)光、以及在對象后面發(fā) 光或呈現(xiàn)光環(huán)。可以理解的是，這里所述的視覺效果僅是示例，而且由 所附權(quán)利要求所限定的本發(fā)明并不限于用于在所播放的音頻與所顯示的 視覺內(nèi)容之間建立關(guān)聯(lián)的這些視覺效果的幾個示例。此外，可以對兩個 或更多個效果進(jìn)行組合來創(chuàng)建另一視覺效果。
本發(fā)明的各個方面致力于將視覺效果應(yīng)用于可視用戶界面，以將可 視界面調(diào)節(jié)為適合于音樂屬性。音樂屬性可以與音樂的節(jié)奏、曲速或拍 速相關(guān)，這例如可以按照節(jié)拍的頻率來測得。另一屬性可以是音樂的音 調(diào)，諸如低音(bass)的量相對于高音(treble)的量。另一屬性可以是 用戶回放音樂的音量?？赏ㄟ^分析音樂來確定這些屬性。例如，用戶界 面增強功能12的軟件組件可以對與所播放的音樂相對應(yīng)的音頻數(shù)據(jù)進(jìn)行 分析，以檢測該音樂的節(jié)拍和/或頻率響應(yīng)。在另一實施方式中，音樂文 件和/或流音頻可以包括元數(shù)據(jù)(例如，頭信息)，用戶界面增強功能12 可以讀取該元數(shù)據(jù)以確定參數(shù)。
在用戶與移動電話10的其它功能進(jìn)行交互的同時，當(dāng)以背景的方式 回放音樂或其它音頻內(nèi)容時，可以應(yīng)用視覺效果的應(yīng)用。此外，當(dāng)將音 頻輸出與所顯示的視頻內(nèi)容進(jìn)行同步時(諸如在玩游戲或回放視聽內(nèi)容(例如，音樂視頻、移動電視頻道、視頻文件等)期間)，可以應(yīng)用視覺 效果的應(yīng)用。
將視覺效果劃分為三個大類，以便討論。雖然有可能會有一種視覺 效果并不屬于這三個大類中的一個，但是這種視覺效果仍然落入由所附 權(quán)利要求所記載的本發(fā)明的合理范圍之內(nèi)。第一類視覺效果包括基于與 音樂相關(guān)的參數(shù)來調(diào)節(jié)非靜態(tài)對象(例如，移動或閃爍的光標(biāo)、鼠標(biāo)指 針、圖標(biāo)、圖形、文本等)，并且將參照圖4和圖5來描述第一類視覺效 果。第二類視覺效果包括基于與音樂相關(guān)的參數(shù)來調(diào)節(jié)畫面轉(zhuǎn)變，并且 將參照圖6來描述第二類視覺效果。第三類視覺效果包括基于與音樂相 關(guān)的參數(shù)來調(diào)節(jié)整個所顯示的內(nèi)容或一部分所顯示的內(nèi)容。
參照圖4，圖4示出了當(dāng)執(zhí)行用戶界面增強功能12時由移動電話10 所執(zhí)行的示例性邏輯操作的流程圖。圖4可被理解為描述了由移動電話 10所執(zhí)行的方法的各個步驟。雖然圖4示出了執(zhí)行功能邏輯塊的特定次 序，但是可相對于所示的次序改變這些塊的執(zhí)行次序。此外，可以并行 或者部分并行地執(zhí)行連續(xù)示出的兩個或更多個塊。還可以省略某些塊。 此外，為了增強實用性、計費、性能、測量、故障診斷等目的，可以將 任意數(shù)量的指令、狀態(tài)變量、信號量(semaphore)或消息增加到該邏輯 流中?？梢岳斫獾氖?，全部這些變化都落入本發(fā)明的范圍內(nèi)。
邏輯流從塊60開始，其中對顯示器14上的對象(例如，光標(biāo)、鼠 標(biāo)指針、圖標(biāo)、圖形、文本等)是否正在移動進(jìn)行判斷或?qū)︼@示器14上 的對象(例如，光標(biāo))是否正在閃爍以吸引用戶的注意進(jìn)行判斷。該對 象可以基于用戶輸入或基于由移動電話10執(zhí)行的處理的操作而移動或閃 爍。如果沒有對象正在閃爍或移動，則在塊60中作出否定判斷，并且邏 輯流會等待直至作出肯定判斷為止。如果對象正在移動或閃爍，則在塊 60中作出肯定判斷，并且邏輯流前進(jìn)到塊62。
在塊62中，對是否向用戶回放音樂或其它音頻內(nèi)容進(jìn)行判斷。如果 沒有回放音樂，則在塊62中作出否定判斷，并且邏輯流前進(jìn)到塊64。在 塊64中，可以利用默認(rèn)設(shè)置來移動對象或使對象閃爍。例如，鼠標(biāo)指針 的默認(rèn)運動包括以均勻速率來將指針從開始點到結(jié)束點移動通過顯示器
1214。光標(biāo)的默認(rèn)閃爍包括光標(biāo)的循環(huán)顯示，其中在各個循環(huán)期間光標(biāo)顯 示的時間長度和循環(huán)周期都是恒定的。
如果在塊62中確定播放音樂，則作出肯定判斷，并且邏輯流前進(jìn)到
塊66。在塊66中，確定與音樂相關(guān)的并可適用于要應(yīng)用到移動或閃爍對
象的參數(shù)。通過檢測參數(shù)(例如，通過分析音樂或通過與音樂回放相關(guān) 的用戶設(shè)置)或通過確定參數(shù)(例如，通過讀取與音樂相關(guān)的元數(shù)據(jù)或
頭數(shù)據(jù))，來確定參數(shù)?？梢赃B續(xù)地(ongoing)確定參數(shù)(諸如識別一系 列節(jié)拍的出現(xiàn))。所確定的具體參數(shù)可取決于要應(yīng)用的視覺效果。示例參 數(shù)包括但不限于音樂節(jié)拍的出現(xiàn)或頻率、有節(jié)奏的低音成份、音調(diào)、回 放音量、歌詞(lyrics)的有無等。
接下來，在塊68中，將該參數(shù)應(yīng)用到對象的移動或?qū)ο蟮拈W爍，以 產(chǎn)生視覺效果。例如，如果對象移動通過顯示器14，則按照音樂的拍速 來停止、加快和/或減慢移動。
另外參照圖5，圖5示出了將參數(shù)應(yīng)用到移動對象上的示例。在圖5 中，參數(shù)是節(jié)拍的出現(xiàn)。由沿時間線72的散列標(biāo)志70來表示節(jié)拍的出 現(xiàn)。移動對象為指針74，將其描繪為從左向右移動。針對各個節(jié)拍70， 將指針74瞬間顯示為在相應(yīng)的節(jié)拍70的時刻在其位置處停止或減慢。 因此，在節(jié)拍70a處，指針74定位于位置76a并在該位置處暫?；驕p慢。 在下一節(jié)拍70b處，指針定位于位置76b并在該位置處暫?；驕p慢，以 此類推，經(jīng)過隨后的節(jié)拍及位置對70c/76c、 70d/76d等，直到指針74到 達(dá)結(jié)束位置為止。在各個位置76之間，指針74被顯示為按照恒定的速 率移動或不顯示指針74?？梢詫⒅羔?4的停止或減慢設(shè)置成對于各個節(jié) 拍持續(xù)大約十分之一秒或設(shè)置成持續(xù)該節(jié)拍的持續(xù)時長。
在本示例的變型例中，可以將指針74 (或該視覺效果所應(yīng)用到的其 它對象)表示為對于各個節(jié)拍70變得更大或更小、表示為對于各個節(jié)拍 70而具有不同顏色、表示為對于各個節(jié)拍70變得更亮或更暗、在各個節(jié) 拍70處振動等。
本領(lǐng)域普通技術(shù)人員可以理解的是，圖5的示例可應(yīng)用于閃爍對象。 例如，可在各個節(jié)拍的出現(xiàn)處顯示閃爍對象(例如，光標(biāo))，或針對節(jié)拍70的出現(xiàn)而作出任何其它視覺效果。此外，圖5的示例可應(yīng)用于其它靜 態(tài)地顯示的對象。例如，可以使圖標(biāo)、圖形、指針、所選擇或高亮的項 目或其它對象按照節(jié)拍70而閃爍、消失、改變顏色、改變尺寸、跳躍、 振動、跳動或按照其它方式而作出視覺外觀的改變。
可以理解的是，圖5的例示僅是將特定的音樂參數(shù)(節(jié)拍的出現(xiàn)) 應(yīng)用到特定對象(移動指針74)上的示例。對移動、靜態(tài)和/或閃爍對象 迸行這種參數(shù)或其它參數(shù)的類似調(diào)節(jié)，這對于本領(lǐng)域普通技術(shù)人員是明 顯的。
在塊64和塊68之后，邏輯流返回到塊60以重復(fù)該處理，或者可以 結(jié)束該處理。
參照圖6，圖6示出了當(dāng)執(zhí)行用戶界面增強功能12時由移動電話10 所執(zhí)行的示例性邏輯操作的流程圖。圖6可被理解為描述了由移動電話 10所執(zhí)行的方法的各個步驟。雖然圖6示出了執(zhí)行功能邏輯塊的特定次 序，但是可相對于所示的次序改變這些塊的執(zhí)行次序。此外，可以并行 或者部分并行地執(zhí)行連續(xù)示出的兩個或更多個塊。還可以省略某些塊。 此外，為了增強實用性、計費、性能、測量、故障診斷等目的，可以將 任意數(shù)量的指令、狀態(tài)變量、信號量或消息增加到該邏輯流中?？梢岳?解的是，全部這些變化都落入本發(fā)明的范圍內(nèi)。
圖6所示的邏輯流與圖4所示的邏輯流相類似。為了簡潔，僅對就 圖4的邏輯操作而描述的并可應(yīng)用于圖6所示的邏輯操作的處理進(jìn)行簡 要的描述。
圖6的邏輯流從塊78開始，其中對是否要求進(jìn)行畫面轉(zhuǎn)變進(jìn)行判斷。 畫面轉(zhuǎn)變是從顯示一個內(nèi)容設(shè)置變化到顯示另一內(nèi)容設(shè)置。當(dāng)改變應(yīng)用 或在應(yīng)用內(nèi)發(fā)生變化時，會發(fā)生畫面轉(zhuǎn)變。如果沒有要求進(jìn)行畫面轉(zhuǎn)變 則在塊78中作出否定判斷，并且邏輯流會等待直至作出肯定判斷為止。 如果要求進(jìn)行畫面轉(zhuǎn)變，則在塊78中作出肯定判斷，并且邏輯流前進(jìn)到 塊80。
在塊80中，對是否向用戶回放音樂或其它音頻內(nèi)容進(jìn)行判斷。如果 沒有回放音樂，則在塊80中作出否定判斷，并且邏輯流前進(jìn)到塊82。在塊82中，利用默認(rèn)設(shè)置來進(jìn)行畫面轉(zhuǎn)變(例如，即刻轉(zhuǎn)變或在設(shè)定的時 間段內(nèi)進(jìn)行平滑轉(zhuǎn)變)。
如果在塊80中確定播放音樂，則作出肯定判斷，并且邏輯流前進(jìn)到
塊84。在塊84中，確定與音樂相關(guān)的并可適用于要應(yīng)用到畫面轉(zhuǎn)變的視 覺效果的參數(shù)?？梢园凑罩T如參照圖4的塊66所述的方式的任何合適方 式來確定該參數(shù)。
接下來，在塊86中，將該參數(shù)應(yīng)用到畫面轉(zhuǎn)變。例如，在畫面轉(zhuǎn)變 期間，按照一系列步驟來改變所顯示內(nèi)容。對于各個步驟，整個畫面或 部分畫面(例如，從精細(xì)的棋盤(checkerboard)設(shè)置或隨機的像素組中 選擇方塊)會發(fā)生變化。例如，所顯示的內(nèi)容會隨著音樂的節(jié)奏逐步從 一個畫面變形為另一畫面?？梢詫⒁粋€步驟的開始和/或一個步驟的結(jié)束 定時為音樂的節(jié)拍。因此，播放較快的音樂時，會比播放較慢音樂時更 快地完成整個轉(zhuǎn)變。此外，對于較慢音樂或以較低音量播放的音樂，會 以平滑通暢過渡的方式進(jìn)行畫面轉(zhuǎn)變。在一些實施方式中，可以引入中 間畫面圖形或顏色作為轉(zhuǎn)變期間的步驟或多個步驟。
在塊82和塊86之后，邏輯流可以返回到塊78以重復(fù)該處理，或者 可以結(jié)束該處理。
參照圖7，圖7示出了在執(zhí)行用戶界面增強功能12時由移動電話10 所執(zhí)行的示例性邏輯操作的流程圖。圖7可被理解為描述了由移動電話 10所執(zhí)行的方法的各個步驟。雖然圖7示出了執(zhí)行功能邏輯塊的特定次 序，但是可相對于所示的次序改變這些塊的執(zhí)行次序。此外，可以并行 或者部分并行地執(zhí)行連續(xù)示出的兩個或更多個塊。還可以省略某些塊。 此外，為了增強實用性、計費、性能、測量、故障診斷等目的，可以將 任意數(shù)量的指令、狀態(tài)變量、信號量或消息增加到該邏輯流中?？梢岳?解的是，全部這些變化都落入本發(fā)明的范圍內(nèi)。
圖7所示的邏輯流與圖4及圖6所示的邏輯流相類似。為了簡潔， 僅對就圖4及圖6的邏輯操作而描述的并可應(yīng)用于圖7所示的邏輯操作 的處理進(jìn)行簡要的描述。
圖7的邏輯流從塊88開始，其中對是否向用戶回放音樂或其它音頻
15內(nèi)容進(jìn)行判斷。如果沒有回放音樂，則在塊88中作出否定判斷，并且邏
輯流前進(jìn)到塊90。在塊90中，利用默認(rèn)設(shè)置(例如，正常亮度、色彩飽 和度和清晰度設(shè)置)來在顯示器14上顯示內(nèi)容。
如果在塊88中確定播放音樂，則作出肯定判斷，并且邏輯流前進(jìn)到 塊92。在塊92中，確定與音樂相關(guān)的并可適用于要應(yīng)用到所顯示內(nèi)容的 視覺效果的參數(shù)?？梢园凑罩T如參照圖4的塊66所描述的方式的任何合 適方式來確定該參數(shù)。
接下來，在塊94中，將該參數(shù)應(yīng)用到顯示器。例如，該參數(shù)可以是 音樂回放的音量，并且響應(yīng)于回放音量可以調(diào)節(jié)顯示器的亮度 (intensity)。如果將音量設(shè)置為相對高的設(shè)置，則可以增大顯示器的亮 度、呈現(xiàn)在顯示器上的顏色的強度、和/或清晰度。因此，按照與同更高 音量的音樂回放相關(guān)聯(lián)的經(jīng)過強化并且更強烈的音樂體驗相對應(yīng)的方式 來調(diào)節(jié)顯示器。如果音量相對低，則利用默認(rèn)設(shè)置或簡化的(reduced) 顯示器設(shè)置(例如，亮度、對比度等)來呈現(xiàn)所顯示內(nèi)容。此外，可基 于音量或其它音樂參數(shù)(例如，音樂曲速)來選擇顏色(例如，背景色、 菜單和畫面主題顏色等)。可對整個顯示器14或顯示器14的一部分進(jìn)行 所顯示內(nèi)容的調(diào)節(jié)。在音樂回放期間對顯示器的調(diào)節(jié)可以是持續(xù)的，或 可以與音樂的節(jié)奏相關(guān)(例如，可以與音樂的節(jié)拍相對應(yīng)地加強亮度或 清晰度或改變顏色)。顯示器14的一部分可以包括所選擇項目(例如， 圖標(biāo)或聯(lián)系人列表條目)、背景、菜單選項等。
在塊90和塊94之后，可以結(jié)束該邏輯流，或者可以返回到塊88以 重復(fù)該處理。
在上述說明中，提供了用于調(diào)節(jié)顯示器特征的各種示例性參數(shù)。而 且還提供了各種示例性視覺效果。可以理解的是，針對一個實施方式描 述和/或例示的參數(shù)和視覺效果可以按照相同或相似的方式用于一個或更 多個其它實施方式中，和/或結(jié)合所述參數(shù)和/或視覺效果而用于一個或更 多個其它實施方式中，或替代所述參數(shù)和/或視覺效果而用于一個或更多 個其它實施方式中。
用戶界面增強功能12可以向用戶產(chǎn)生視覺反饋，該視覺反饋對通過
16揚聲器34或耳機(未示出)而播放給用戶的音樂進(jìn)行補充。因此，這里 所述的增強功能在允許用戶進(jìn)行各種其它任務(wù)(例如，閱讀或編寫文本 消息、觀看視頻，對數(shù)據(jù)進(jìn)行分類、閱讀或編寫電子郵件消息、瀏覽互 聯(lián)網(wǎng)等)的同時，提髙了用戶的音樂體驗。通過將與背景音樂相關(guān)的(多 個)參數(shù)應(yīng)用到電子裝置的導(dǎo)航及其它基于可視的操作，用戶與電子裝 置的交互體驗可以更加魯棒。此外，作為公知現(xiàn)象，個人的運動模式會 隨著該用戶正在收聽的音樂的速度而發(fā)生變化。視覺效果通過向用戶提 供與音樂相協(xié)調(diào)的附加感受反饋，可以強化這種公知現(xiàn)象。
雖然參照特定優(yōu)選實施方式示出并描述了本發(fā)明，但是可以理解的 是，本領(lǐng)域技術(shù)人員通過閱讀并理解本說明書，將能夠想到本發(fā)明的等 同物和修改例。本發(fā)明包括全部這些等同物和修改例，并且僅由所附權(quán) 利要求的范圍限定。
相關(guān)申請
本申請要求于2006年7月31日提交的、申請?zhí)枮镹o. 60/820,813 的美國臨時申請的優(yōu)先權(quán)，這里通過引用并入其全部內(nèi)容。
權(quán)利要求
1、一種用于生成多媒體用戶界面的方法，該方法包括以下步驟使用電子裝置(10)來播放音樂；確定與所述音樂相關(guān)的參數(shù)；以及通過將視覺效果應(yīng)用到顯示在所述電子裝置的顯示器(14)上的可視內(nèi)容，來使所述可視內(nèi)容符合所述音樂的所述參數(shù)，所述視覺效果與所述參數(shù)相關(guān)聯(lián)。
2、 根據(jù)權(quán)利要求1所述的方法，其中，通過分析所述音樂來確定所述參數(shù)。
3、 根據(jù)權(quán)利要求1所述的方法，其中，通過對與對應(yīng)于所述音樂的音頻數(shù)據(jù)一起存儲的或一起發(fā)送的數(shù)據(jù)進(jìn)行讀取，來確定所述參數(shù)。
4、 根據(jù)權(quán)利要求1所述的方法，其中，所述參數(shù)是音樂回放的音量。
5、 根據(jù)權(quán)利要求4所述的方法，其中，所述視覺效果是對至少一個 所顯示對象的亮度或顏色中的至少一個進(jìn)行調(diào)節(jié)。
6、 根據(jù)權(quán)利要求1所述的方法，其中，所述參數(shù)與所述音樂的節(jié)奏相關(guān)。
7、 根據(jù)權(quán)利要求6所述的方法，其中，所述視覺效果是以下視覺效 果中的一種根據(jù)所述音樂的節(jié)拍的出現(xiàn)來移動所述顯示器上的對象；根據(jù)所述音樂的節(jié)拍的出現(xiàn)來使所述顯示器上的對象閃爍；或根據(jù)所述 音樂的節(jié)拍來逐步進(jìn)行畫面轉(zhuǎn)變。
8、 根據(jù)權(quán)利要求6所述的方法，其中，所述視覺效果是對顯示在所 述顯示器上的至少一個對象進(jìn)行調(diào)節(jié)，使之與所述音樂的節(jié)拍相關(guān)。
9、 根據(jù)權(quán)利要求1所述的方法，其中，所述電子裝置是移動電話。
10、 一種電子裝置(10)，該電子裝置(10)包括顯示器(14);以及控制電路(24)，該控制電路(24)通過執(zhí)行邏輯以執(zhí)行以下步驟，來生成多媒體用戶界面確定與由所述電子裝置回放的音樂相關(guān)的參數(shù)；以及 通過將視覺效果應(yīng)用到顯示在所述顯示器上的可視內(nèi)容來使所述可視內(nèi)容符合所述音樂的所述參數(shù)，所述視覺效果與所述參數(shù)相關(guān)聯(lián)。
全文摘要
一種用于生成多媒體用戶界面的方法，該方法包括以下步驟使用電子裝置(10)來播放音樂；確定與所述音樂相關(guān)的參數(shù)；以及通過將視覺效果應(yīng)用到顯示在所述電子裝置的顯示器(14)上的可視內(nèi)容，來使所述可視內(nèi)容符合所述音樂的所述參數(shù)，所述視覺效果與所述參數(shù)相關(guān)聯(lián)。
文檔編號H04M1/725GK101496389SQ200780028252
公開日2009年7月29日 申請日期2007年1月26日 優(yōu)先權(quán)日2006年7月31日
發(fā)明者艾拉爾·D·?？怂苟魈m德 申請人:索尼愛立信移動通訊有限公司