專利名稱：用于諸如tv之類的音頻視頻顯示設(shè)備的3d用戶界面的制作方法
技術(shù)領(lǐng)域：
本申請一般涉及用于諸如電視機(TV)之類的音頻視頻顯示設(shè)備(AVDD)的用戶界面(UI)。
背景技術(shù)：
已經(jīng)提供了諸如TV之類的AVDD的用戶界面，其中，用戶可選擇Π上的元件來導(dǎo)致某些動作被執(zhí)行。例如，用戶界面可呈現(xiàn)有音量和頻道變更選擇器元件，利用遙控器(RC)的人可利用RC的點選和點擊能力來選擇這些元件。或者，可提供觸摸屏，并且，人可觸摸所希望的UI元件上的屏幕來選擇它。如此處所理解的，通過最小化導(dǎo)致所希望的動作被執(zhí)行的復(fù)雜度并向與UI交互的人提供愉悅的體驗二者，UI可以是重要的娛樂助手。

發(fā)明內(nèi)容
根據(jù)以下所進一步提出的原理，音頻視頻顯示設(shè)備(AOTD)包括處理器；視頻顯示器；以及計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)承載可由所述處理器執(zhí)行的指令。通過利用存儲在計算機可讀介質(zhì)中的指令，處理器可在所述視頻顯示器上于該顯示器的圖像前景中呈現(xiàn)三維(3D)用戶界面(UI)。至少所述3D UI的第一元件可具有如下模擬元件位置，該模擬元件位置使得所述第一元件看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比所述圖像更加靠近所述顯示器的觀看者。處理器還可在所述第一元件附近檢測人的附器官；以及可響應(yīng)于確定所述人的附器官與所述模擬元件位置基本位于同一位置。處理器對附器官與第一元件位于同一位置的響應(yīng)可以是執(zhí)行與所述第一元件相關(guān)聯(lián)的第一功倉泛。所述模擬元件位置可在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中與顯示器相距開。所述3D Π可包括多個元件，所述多個元件中的至少一些看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比圖像更加靠近所述顯示器的觀看者?？商鎿Q地，所述3D UI可包括多個元件，所有所述多個元件都看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比圖像更加靠近所述顯示器的觀看者。AVDD可包括至少一個相機，所述至少一個相機對所述人的附器官進行成像并與所述處理器通信。AVDD可包括至少兩個相機，或可替換地至少三個相機，它們對所述人的附器官進行成像并與所述處理器通信。在所有情形中，處理器可利用多個相機(至少一個、至少兩個或至少三個)呈現(xiàn)的圖像來確定所述附器官相對于所述顯示器的位置。處理器可確定所述人的附器官正向所述模擬元件位置移動，并且，作為響應(yīng)，可對所述第一元件進行動畫，使得所述第一元件在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中向所述人的附器官移動。在另一實施例中，一種音頻視頻設(shè)備AVDD可包括:處理器；視頻顯示器；以及計算機可讀存儲介質(zhì)。所述計算機可讀存儲介質(zhì)承載可由所述處理器執(zhí)行的指令，以在所述顯示器上呈現(xiàn)3D UI，所述3D Π的至少一部分看起來在所述顯示器的前面并與所述顯示器相距開。在另一方面，一種方法可包括:在3D視頻顯示器上呈現(xiàn)圖像；以及在所述圖像前面并與所述圖像相距開的模擬空間中呈現(xiàn)用戶界面UI，所述Π包括可由觀看者選擇的至少一個元件。該元件可以通過觀看者將附器官定位在所述3D視頻顯示器前面并與所述視頻顯示器的前面相距開的位置上來選擇。通過參照附圖，可最佳地理解本發(fā)明的細節(jié)(其結(jié)構(gòu)和操作二者)，其中，相同的參考標(biāo)號指相同的部件，并且其中:


圖1是根據(jù)本原理的非限制性示例系統(tǒng)的框圖；圖2是根據(jù)本原理的示例邏輯的流程圖；以及圖3是3D Π的示意圖。
具體實施例方式首先參照圖1中所示的非限制性示例實施例，系統(tǒng)10包括諸如TV之類的音頻視頻顯示設(shè)備(AVDD) 12，其包括TV調(diào)諧器16，該TV調(diào)諧器16與TV處理器18通信，該TV處理器18訪問諸如基于磁盤或固態(tài)存儲器之類的有形計算機可讀存儲介質(zhì)20。AVDD12可以在一個或多個揚聲器22上輸出音頻。AVDD12可利用內(nèi)嵌的有線或無線網(wǎng)絡(luò)接口 24 (諸如，調(diào)制解調(diào)器或路由器)來從因特網(wǎng)接收流化視頻，該網(wǎng)絡(luò)接口 24與可執(zhí)行軟件實現(xiàn)的瀏覽器的處理器12進行通信。在TV顯示器28上的TV處理器18的控制下，視頻被呈現(xiàn)，該TV顯示器28諸如但不限于高清TV(HDTV)平板顯示器，并且，其優(yōu)選為三維(3D) TV顯示器，該三維TV顯示器向戴有3D眼鏡或例如利用全息圖(hologram)或其他3D技術(shù)來觀看TV的人呈現(xiàn)模擬的3D圖像。例如，顯示器28可以是自由立體顯示器，或還可構(gòu)想觀看者佩戴的用以觀看順序顯示器28的主動快門3D眼鏡。如果使用了 3D顯示器，則可將UI的圖像或元件布置在前景中，從而消除身體觸摸顯示器的表面的必要。因此，極大地減少了顯示器28的活動區(qū)域上的指紋和污點。換言之，利用z軸(垂直于顯示器所定義的χ-y平面的維度)允許更易理解的圖像呈現(xiàn)在顯示器28上，因為UI元件被更容易地區(qū)分。對處理器18的用戶命令可例如利用rf (紅外)從遙控器(RC) 30以及從以下所描述的3D Π無線地接收?？墒褂贸?TV以外的音頻視頻顯示設(shè)備，例如，智能電話、游戲機、個人數(shù)字管理器、筆記本電腦和其他類型的計算機等。來自一個或多個陸地TV廣播源的TV節(jié)目可被呈現(xiàn)在顯示器28和揚聲器22上，所述TV節(jié)目由與AVDD12進行通信的陸地廣播天線接收。陸地廣播節(jié)目可遵從數(shù)字ATSC標(biāo)準(zhǔn)并可在其中承載陸地廣播EPG，但是陸地廣播EPG可經(jīng)由以太網(wǎng)、或電纜通信鏈路、或衛(wèi)星通信鏈路從例如因特網(wǎng)的可替換源接收。來自電纜TV頭端的TV節(jié)目還可在TV處被接收，以用于在顯示器28和揚聲器22上呈現(xiàn)TV信號。當(dāng)僅希望基本的電纜時，來自墻的電纜通常以QAM或NTSC格式承載TV信號并被直接插入到美國的TV機座上的“F-類型連接器”中，但是出于該目的所使用的連接器在其他國家中可能不同。與此不同，例如當(dāng)用戶具有擴展的電纜訂購時，來自頭端的信號通常通過STB發(fā)送，該STB可獨立于TV機座或集成在TV機座內(nèi)，但是，在任意情形中，當(dāng)源在TV外部時，該STB將HDMI基帶信號發(fā)送到TV?？墒褂闷渌愋偷倪B接，例如，MOCA、USB、1394 協(xié)議、DLNA。類似地，從TV廣播信號的衛(wèi)星源發(fā)送的HDMI基帶信號可被輸入到AVDD12，以用于呈現(xiàn)在顯示器28和揚聲器22上，該TV廣播信號由與家用碟形衛(wèi)星天線相關(guān)聯(lián)的集成接收機/解碼器(IRD)接收。還可從因特網(wǎng)接收流化視頻，以用于呈現(xiàn)在顯示器28和揚聲器22上?？稍诰W(wǎng)絡(luò)接口 24處接收流化視頻，或可在家用的調(diào)制解調(diào)器處接收該流化視頻，該家用的調(diào)制解調(diào)器在AVDD12外部，該流化視頻通過有線或無線以太網(wǎng)鏈路被傳遞到AVDD12并在TV機座上的RJ45或802.1lx天線處被接收。在某些實施例中，一個或多個相機50還可被連接至處理器18，以向處理器18提供觀看顯示器28的觀看者的視頻圖像，該相機50可以是集成在機座中的(如果希望的話)或單獨安裝并電連接的攝像機。一個或多個相機50可被布置在AVDD的機座頂部，在顯示器背部并穿過顯示器查看，或嵌入在顯示器中。由于希望相機50檢測人的附器官，諸如手或手指，因此，其可是內(nèi)嵌在顯示器背部的紅外(IR)相機。使用兩個或多個相機50可使得通過處理器18來在3D空間中定位手或手指的位置更加容易。相機50可以是兩個類似的相機，即，一個傳統(tǒng)相機和一個IR相機。由于通過訓(xùn)練可學(xué)習(xí)手或輸入物體的大小，處理器已知相機的位置，因此，可容易地確定距離。再次，如果使用了三個相機，則不需要訓(xùn)練，因為XYZ可由三角測量來求解。使用相機50的可替換選項是鄰近技術(shù)(proximity technology),以使能對虛擬控制ICON的重新定位。通過引用被結(jié)合于此的以下專利文獻公開了這種技術(shù):USPP2008/0122798、2010/0127970、2010/0127989、2010/0090948、2010/0090982。處理器16還可與用于向HDMI的源54傳輸信令的紅外(IR)或射頻(RF)收發(fā)機52進行通信。處理器16可通過HDMI端口 56從源54接收HDMI音頻視頻信號和消費者電子控制(CEC)信號。因此，源54可包括源處理器58，其訪問計算機可讀存儲介質(zhì)60并與HDMI端口 62和/或IR或IP收發(fā)機64傳遞信號。轉(zhuǎn)而參照圖2，流程圖在框70處開始，其中，3D UI可被呈現(xiàn)在AVDD12的顯示器28上，并且，顯示在前景中的距離顯示器28較遠的點處，其垂直于顯示器28。至少一個相機50可對觀看者的附器官進行成像并將該圖像傳輸給處理器18。在框72處，處理器18可確定或“感知”觀看者的手的位置。在判決菱形框74處，由相機50所拍攝并發(fā)送至處理器18的圖像序列可被用于確定觀看者的手是否正向Π元件移動。在框76處，如果確定手正向UI元件移近，則處理器18可對該元件進行動畫，以使其進一步向觀看者的手平移至前景中。在另一方面，在判決菱形框74處，處理器18確定手未向UI元件移動將導(dǎo)致邏輯移動到判決菱形框78處，在該步驟中，處理器18可利用(一個或多個)相機50所拍攝的圖像來確定手是位于AVDD12前面還是位于投影到前景中的元件中。判定手不位于AVDD12的前面或UI元件中將終止邏輯流。但是，如果手實際上在UI元件前面的位置中，則在框80處，處理器18執(zhí)行與UI元件相關(guān)聯(lián)的功能?，F(xiàn)參照圖3，3D Π的示意圖包括帶有3D顯示器28的AVDD設(shè)備12，此處為自動立體顯示器。一個或多個2D UI元件82可由處理器18呈現(xiàn)在顯示器28上。
另外，一個或多個3D Π元件84可被呈現(xiàn)在顯示器28的前面的位置中，該位置距離觀看者比距離顯示器平面更近，即，該位置位于沿著垂直于顯示器28的軸(慣常為Z-軸)比顯示器平面更靠近觀看者的位置處。也就是說，在垂直于顯示器的維度中，Π元件84表現(xiàn)為比顯示器平面更靠近觀看者，但是注意，UI元件84自身還可從顯示器左側(cè)或右側(cè)或上面或下面(即，在X和y維度中)偏移以及在Z-維上偏移。涵蓋整個顯示器28、整個顯示器28的區(qū)域、或僅Π元件82、84的圖像可以以3D呈現(xiàn)。處理器18對3D Π元件84的呈現(xiàn)可允許元件84之間有更大的距離，并且因此，這使得用戶更容易地觀看并選擇合適的元件84。觀看者的手86的位置可通過(一個或多個)相機50所拍攝的圖像由處理器18所確定。雖然此處示出并詳細描述了具體的用于諸如TV之類的音頻視頻顯示設(shè)備的3D用戶界面，但是將理解，本發(fā)明所涵蓋的主題僅由權(quán)利要求限定。
權(quán)利要求
1.一種音頻視頻顯示設(shè)備AVDD，包括: 處理器； 視頻顯示器；以及 計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)承載可由所述處理器執(zhí)行的指令，所述指令執(zhí)行如下操作: 在所述視頻顯示器上呈現(xiàn)三維3D用戶界面Π，該3D UI顯示在所述顯示器的圖像前景中，以使得至少所述3D UI的第一元件具有如下模擬元件位置，該模擬元件位置使得所述第一元件看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比所述圖像更加靠近所述顯示器； 在所述第一元件附近檢測人的附器官；以及 響應(yīng)于確定所述人的附器官與所述模擬元件位置基本位于同一位置，執(zhí)行與所述第一元件相關(guān)聯(lián)的第一功能。
2.一種音頻視頻設(shè)備AVDD，包括: 處理器； 視頻顯示器；以及 計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)承載可由所述處理器執(zhí)行的指令，所述指令操作為在所述顯示器上呈現(xiàn)3D UI，所述3D Π的至少一部分出現(xiàn)在所述顯示器的前面并與所述顯示器相距開。
3.根據(jù)權(quán)利要求2所述的AVDD，其中，所述3DΠ的第一元件具有如下模擬元件位置，該模擬元件位置使得所述第一元件看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比所述圖像更加靠近所述顯示器的觀看者，并且，所述處理器: 在所述第一元件附近檢測人的附器官；以及 響應(yīng)于確定所述人的附器官與所述模擬元件位置基本位于同一位置，執(zhí)行與所述第一元件相關(guān)聯(lián)的第一功能。
4.根據(jù)權(quán)利要求1或3所述的AVDD，其中，所述模擬元件位置在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中與所述顯示器相距開。
5.根據(jù)權(quán)利要求1或2所述的AVDD，其中，所述3DΠ包括多個元件，所述多個元件中的至少一些看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比所述圖像更加靠近所述顯示器的觀看者。
6.根據(jù)權(quán)利要求1或2所述的AVDD，其中，所述3DΠ包括多個元件，所有所述多個元件都看起來在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中比所述圖像更加靠近所述顯示器的觀看者。
7.根據(jù)權(quán)利要求1或2所述的AVDD,包括至少一個相機,所述至少一個相機對所述人的附器官進行成像并與所述處理器通信，所述處理器利用所述圖像來確定所述附器官相對于所述顯示器的位置。
8.根據(jù)權(quán)利要求7所述的AVDD，包括至少兩個相機，所述至少兩個相機對所述人的附器官進行成像并與所述處理器通信，所述處理器利用來自兩個相機的圖像來確定所述附器官相對于所述顯示器的位置。
9.根據(jù)權(quán)利要求7所述的 AVDD，包括三個相機，所述三個相機對所述人的附器官進行成像并與所述處理器通信，所述處理器利用來自所有三個相機的圖像來確定所述附器官相對于所述顯示器的位置。
10.根據(jù)權(quán)利要求1或3所述的AVDD，其中，響應(yīng)于確定所述人的附器官正向所述模擬元件位置移動，所述處理器對所述第一元件進行動畫，使得所述第一元件在垂直于呈現(xiàn)在所述顯示器上的圖像的維度中向所述人的附器官移動。
11.一種方法，包括: 在3D視頻顯示器上呈現(xiàn)圖像；以及 在所述圖像前面的模擬空間中并與所述圖像相距開呈現(xiàn)用戶界面UI，所述Π包括至少一個元件，所述至少一個元件可通過人將附器官定位在所述3D視頻顯示器前面并與所述3D視頻顯示器相距開的位置上來由該人選擇。
12.根據(jù)權(quán)利要求11所述的方法，包括當(dāng)所述人的附器官位于所述3D視頻顯示器前面并與所述3D視頻顯示器相距開的、對應(yīng)于所述元件的模擬位置的位置上時，執(zhí)行與所述元件相關(guān)聯(lián)的功能。
13.根據(jù)權(quán)利要求11所述的方法，包括利用相機來確定所述附器官的位置。
全文摘要
本發(fā)明提供了用于諸如TV之類的音頻視頻顯示設(shè)備的3D用戶界面。三維AVDD顯示技術(shù)可被用于顯示用戶界面或用戶界面的元件，并且，可被用于與一個或多個相機協(xié)作以使得AVDD的觀看者能夠“觸摸”呈現(xiàn)在三維空間中的用戶界面或用戶界面的一部分。
文檔編號H04N21/472GK103079114SQ20121040725
公開日2013年5月1日 申請日期2012年10月17日 優(yōu)先權(quán)日2011年10月26日
發(fā)明者彼得·施恩塔尼 申請人:索尼公司