3d顯示裝置及其方法
【專利摘要】本發(fā)明提供一種3D顯示裝置及其方法。該3D顯示方法包括：從至少一個(gè)圖像獲取距離信息圖；從用戶輸入設(shè)備接收控制信息；根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖；根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像；以及顯示該交互式三維圖像。本發(fā)明所提供的3D顯示裝置及其方法，可使用戶與3D圖像進(jìn)行互動(dòng)。
【專利說明】
30顯示裝置及其方法

【技術(shù)領(lǐng)域】
[0001]本發(fā)明是有關(guān)于一種30顯示裝置及其方法，特別是有關(guān)于一種可以使用戶與30(1:111-66-(111116118101181,以下簡稱30)圖像進(jìn)行互動(dòng)的30顯示裝置及其方法。

【背景技術(shù)】
[0002]近年來，三維以下簡稱為30 )顯不方法成為流行的技術(shù)。有許多方法可以產(chǎn)生30圖像。其中一種方法是將二維(切0-(1111161181011211,以下簡稱為20)圖像轉(zhuǎn)換為30圖像。當(dāng)20圖像轉(zhuǎn)換為30圖像時(shí)，需要深度圖。深度圖是一種指示圖像中的對(duì)象和參考面(16:^6:^611(36 ￠181116)之間距離的灰度圖像8(^16丨腦陰)。舉例來說，相機(jī)在參考面上提供捕獲圖像。通過參考深度圖，當(dāng)20圖像轉(zhuǎn)換為30圖像時(shí)，可以估計(jì)并仿真(81皿1^1:)人眼的視差以使得可以相應(yīng)產(chǎn)生30圖像。
[0003]然而，在現(xiàn)有技術(shù)中，30圖像僅能由用戶觀看，而不能與用戶產(chǎn)生互動(dòng)影響。


【發(fā)明內(nèi)容】

[0004]有鑒于此，本發(fā)明提出一種30顯示裝置及其方法。
[0005]根據(jù)本發(fā)明第一實(shí)施方式，提供一種30顯不方法，該30顯不方法包括:從至少一個(gè)圖像獲取距離信息圖；從用戶輸入設(shè)備接收控制信息；根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖；根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像；以及顯示該交互式三維圖像。
[0006]根據(jù)本發(fā)明第二實(shí)施方式，提供一種三維顯示裝置。該三維顯示裝置包括:用戶輸入設(shè)備、距離信息圖獲取/修改模塊、三維圖像產(chǎn)生模塊以及顯示屏。用戶輸入設(shè)備，用于確定控制信息。距離信息圖獲取/修改模塊，用于從至少一個(gè)圖像獲取距離信息圖，從該用戶輸入設(shè)備接收該控制信息，以及根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖。三維圖像產(chǎn)生模塊，用于根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像。顯示屏，用于顯示該交互式三維圖像。
[0007]本發(fā)明所提出的30顯示裝置及其方法，可使用戶與30圖像進(jìn)行互動(dòng)。

【專利附圖】

【附圖說明】
[0008]圖1為根據(jù)本發(fā)明實(shí)施方式的30顯示方法的流程圖。
[0009]圖2八為局部修改距離信息圖的示意圖。
[0010]圖28為全面修改距離信息圖的示意圖。
[0011]圖3為更詳細(xì)地說明圖1中的30顯示方法的示意圖。
[0012]圖4為根據(jù)本發(fā)明一實(shí)施方式的局部修改距離信息圖操作的示意圖。
[0013]圖5八和圖58為根據(jù)本發(fā)明一實(shí)施方式的局部修改距離信息圖操作的示意圖。
[0014]圖6八和圖68為根據(jù)本發(fā)明一實(shí)施方式的全面修改距離信息圖操作的示意圖。
[0015]圖7八和圖78為根據(jù)本發(fā)明一實(shí)施方式的全面修改距離信息圖操作的示意圖。
[0016]圖8為根據(jù)本發(fā)明一實(shí)施方式的30顯示裝置的方塊圖。

【具體實(shí)施方式】
[0017]圖1為根據(jù)本發(fā)明實(shí)施方式的30顯示方法的流程圖。在以下實(shí)施方式中，假定本發(fā)明30顯示方法應(yīng)用于具有觸摸屏的移動(dòng)電話，但本發(fā)明并不限于此。除觸摸屏之外的其他用戶輸入設(shè)備也可以應(yīng)用于移動(dòng)電話，例如通過眼睛丨瞳孔跟蹤(676/1)111)11
指示的屏幕上的位置或?qū)ο?。此外，除利用任意用戶輸入設(shè)備的移動(dòng)電話之外的其他設(shè)備也落入本發(fā)明的保護(hù)范圍。
[0018]如圖1所示，30顯示方法包括:
[0019]步驟101
[0020]從至少一個(gè)圖像獲取距離信息圖。
[0021]舉例來說，距離信息圖包括上述的深度圖。可選地，距離信息圖包括其他類型的距離信息圖，例如視差圖。視差圖可以由深度圖轉(zhuǎn)換而得到，因此視差圖也可以指示距離信息。在以下實(shí)施方式中，用深度圖來舉例說明。
[0022]步驟103
[0023]從用戶輸入設(shè)備接收控制信息。
[0024]步驟105
[0025]根據(jù)控制信息修改距離信息圖以產(chǎn)生修改后的距離信息圖。
[0026]步驟107
[0027]根據(jù)修改后的距離信息圖產(chǎn)生交互式30圖像。
[0028]步驟109
[0029]顯示交互式30圖像。
[0030]對(duì)于步驟101，可以從至少一個(gè)20圖像或至少一個(gè)30圖像獲得距離信息圖。以下將進(jìn)一步詳述。
[0031]對(duì)于步驟103，用戶輸入設(shè)備可以是從用戶接收控制操作的任意設(shè)備。舉例來說，觸摸屏、鼠標(biāo)、觸摸筆、眼/面部/頭部跟蹤器)、陀螺儀、6傳感器⑴86118010、或生物信號(hào)產(chǎn)生裝置可以作為用戶輸入設(shè)備。因此，控制信息可以相應(yīng)地包括如下至少一個(gè)信息:觸摸信息，跟蹤信息，運(yùn)動(dòng)信息，傾斜信息，和生物信號(hào)信息。觸摸信息指示由對(duì)象觸摸觸摸傳感器“011011 861181118 ^6^106? (例如，手指或觸摸筆觸摸觸摸屏)而產(chǎn)生的信息。觸摸信息可包括對(duì)象的位置、或?qū)ο笥|摸觸摸傳感器的觸摸時(shí)間(1:011011 ￠61^0(1)0跟蹤信息指示對(duì)象執(zhí)行觸摸傳感器的軌跡或其他任意用戶輸入設(shè)備(例如，鼠標(biāo)、跟蹤球、眼/面部/頭部跟蹤器)執(zhí)行的軌跡。運(yùn)動(dòng)信息指示移動(dòng)電話的移動(dòng)，運(yùn)動(dòng)信息可以由運(yùn)動(dòng)傳感器(例如，陀螺儀)來產(chǎn)生。傾斜信息指示移動(dòng)電話傾斜的角

生物信號(hào)信息由生物信號(hào)發(fā)生裝置來確定，該生物信號(hào)發(fā)生裝置連接至人體以檢測人體信號(hào)(例如，腦電波
[0032]對(duì)于步驟105，距離信息圖可以根據(jù)控制信息來局部(10(^117)修改或全面(810^117)修改。圖2八為局部修改距離信息圖的示意圖。圖28為全面修改距離信息圖的示意圖。在圖2八和圖28中，標(biāo)有斜線的區(qū)域指示修改該區(qū)域的距離信息圖。如圖2八所示，局部修改距離信息圖表明僅修改觸摸屏I？的一個(gè)點(diǎn)附近的小區(qū)域的距離信息圖，其中該點(diǎn)為對(duì)象(例如，手指？)觸摸的點(diǎn)或激活的點(diǎn)。相反地，如圖28所示，全面修改距離信息圖表明不在對(duì)象觸摸觸摸屏I？的點(diǎn)或激活的點(diǎn)附近的距離信息圖也可以被修改。此外，根據(jù)本發(fā)明的一個(gè)實(shí)施方式，步驟105可以進(jìn)一步包括至少一個(gè)分割操作以修改距離信息圖。該分割操作是一種基于圖像中的對(duì)象而將圖像分割為多個(gè)部分的技術(shù)，以使得可以更加精確地修改深度。
[0033]對(duì)于步驟107，對(duì)應(yīng)于不同的獲得距離信息圖的方式，交互式30圖像的產(chǎn)生是不同的。這將在后面詳述。
[0034]對(duì)于步驟109，交互式30圖像可以為多視圖(皿111:1-^16^030圖像或立體30圖像。多視圖30圖像為能夠被多個(gè)人同時(shí)觀看的30圖像。立體30圖像為能夠被一個(gè)人(811106￠161-8011)觀看的30圖像。
[0035]此外，根據(jù)本發(fā)明的一個(gè)實(shí)施方式，在步驟101、105、107中的距離信息圖為多層距離信息圖(皿11“ 1奶61~ (1181:81106111叩)(例如，多層深度圖或多層視差圖)。
[0036]圖3為更詳細(xì)地說明圖1中的30顯示方法的示意圖。如圖3所示，從至少一個(gè)20圖像獲取距離信息圖(即，產(chǎn)生距離信息圖或，通過從至少一個(gè)原始的30圖像中提取距離信息圖來獲取距離信息圖。在獲得距離信息圖之后，修改距離信息圖。修改距離信息圖之后，產(chǎn)生交互式30圖像。若距離信息圖是從至少一個(gè)20圖像獲得，則根據(jù)修改后的距離信息圖產(chǎn)生新的30圖像以作為交互式30圖像。此外，若通過提取原始的30圖像獲得距離信息圖，則根據(jù)修改后的距離信息圖處理原始的30圖像，以產(chǎn)生交互式30圖像。圖3中的操作可通過多種現(xiàn)有的方法來實(shí)現(xiàn)。舉例來說，深度線索((1印訪(3116)7緩沖器、圖層信息(取'叩卜丨。1奶61~可以應(yīng)用于從至少一個(gè)20圖像產(chǎn)生距離信息圖?？梢岳没谏疃葓D像繪制0886(1 0611(161*1118，以下簡稱為018?和圖形處理器？1~006881118 1)1111:，以下簡稱為⑶11)渲染以從20圖像產(chǎn)生30圖像。此外，從30圖像提取距離信息圖的操作可以通過從至少兩個(gè)視圖的立體匹配來實(shí)現(xiàn)，或可以從原始源80111^6)提取距離信息圖(例如，該原始源包括一個(gè)20圖像加上基于該20圖像的距離信息圖處理30圖像深度的操作可以通過自動(dòng)收斂(⑶鮮虹陰!!⑶),深度調(diào)整、0181？或渲染來實(shí)現(xiàn)。
[0037]圖4為根據(jù)本發(fā)明一實(shí)施方式的局部修改距離信息圖操作的示意圖。請(qǐng)參考圖4，移動(dòng)電話1具有顯示30圖像按鈕8^30圖像按鈕82的觸摸屏I？。若沒有觸摸觸摸屏?。?，則30圖像按鈕8^30圖像按鈕82具有相同的深度。若用戶利用手指？觸摸觸摸屏I？的提供30圖像按鈕8工的位置，則30圖像按鈕8工的深度被改變并且30圖像按鈕82的深度仍然保持不變。通過這種方式，如圖1和圖3所示，由于根據(jù)修改后的距離信息圖進(jìn)行處理，30圖像按鈕8丨的外觀被改變(即，產(chǎn)生交互式30圖像因此，能夠仿真真實(shí)按鈕被按壓的情況，以使得用戶能夠與30圖像進(jìn)行互動(dòng)圖4為局部修改距離信息圖的實(shí)施方式，其中僅改變手指？觸摸的點(diǎn)附近的區(qū)域的30圖像。
[0038]請(qǐng)參考圖5八和圖58，圖5八和圖58為根據(jù)本發(fā)明一實(shí)施方式的局部修改距離信息圖操作的示意圖。圖5八和圖58描述了局部修改距離信息圖的另一個(gè)實(shí)施方式。在圖5八和圖58所示的實(shí)施方式中，30圖像包括人30圖像!I和狗30圖像0。如圖5八所示，若用戶沒有觸摸觸摸屏I？，則僅在觸摸屏I？前觀察到人30圖像奔跑。如圖58所示，若用戶使用手指？觸摸觸摸屏I？，則人30圖像遠(yuǎn)離觸摸屏I？奔跑并且狗30圖像0在人30圖像II后奔跑(即，產(chǎn)生交互式30圖像X通過這種方式，用戶能夠感覺狗在人后生動(dòng)地奔跑，與用戶的觸摸進(jìn)行互動(dòng)。在圖5八和圖58所示的局部修改距離信息圖的實(shí)施方式中，僅改變手指？觸摸的點(diǎn)附近的區(qū)域的30圖像。
[0039]圖6八和圖68為根據(jù)本發(fā)明一實(shí)施方式的全面修改距離信息圖操作的示意圖。圖7八和圖78為根據(jù)本發(fā)明一實(shí)施方式的全面修改距離信息圖操作的示意圖。如圖6八所示，若用戶沒有觸摸觸摸屏I？或保持手指于固定位置，則觸摸屏I？顯示用戶交互30圖像II:(即，原始30圖像),該用戶界面30圖像^具有距離信息圖1。若用戶在觸摸屏I？上進(jìn)行移動(dòng)觸摸操作以形成如圖68所示的軌跡(廿狀10，則觸摸屏I？顯示用戶界面30圖像112 (即，產(chǎn)生交互式30圖像),用戶界面30圖像112具有諸如從左側(cè)到右側(cè)的梯度深度
的距離信息圖2。通過這種方式，看起來像用戶界面與用戶手指的移動(dòng)進(jìn)行互動(dòng)()。
[0040]圖7八和圖78為利用6傳感器的實(shí)施方式。在圖7八中，移動(dòng)電話1沒有傾斜并且觸摸屏I？顯示用戶界面30圖像％ (即，原始30圖像),該用戶界面30圖像％具有距離信息圖1。在圖78中，傾斜移動(dòng)電話1以使得在移動(dòng)電話中的傳感器確定控制信息以修改距離信息圖。通過這種方式，觸摸屏I？顯示用戶界面30圖像112 (即，產(chǎn)生交互式30圖像),用戶界面30圖像112具有諸如從左側(cè)到右側(cè)的梯度深度的距離信息圖2。由于能夠修改不在觸摸或觸發(fā)(狀“妨仏)的點(diǎn)附近的區(qū)域的距離信息圖，圖6八、圖68、圖7八、圖78的實(shí)施方式為全局修改距離信息圖的實(shí)施方式。
[0041]請(qǐng)注意，本發(fā)明的保護(hù)范圍并不限于圖4?5、圖6八?68所述的實(shí)施方式。舉例來說，上述的30圖像可以包括如下至少一個(gè)30圖像:相片30圖像、視頻30圖像、游戲30圖像(即，由游戲程序產(chǎn)生的圖像)以及用戶界面30圖像。本發(fā)明能夠根據(jù)來自任意電子裝置的控制信息修改距離信息圖，并根據(jù)修改后的距離信息圖確定30圖像的任意類型。
[0042]圖8為根據(jù)本發(fā)明一實(shí)施方式的30顯示裝置的方塊圖。如圖8所示，30顯示裝置800包括距離信息圖獲取/修改模塊801，30圖像產(chǎn)生模塊803，用戶輸入設(shè)備和顯示屏。請(qǐng)注意，在此實(shí)施方式中，用戶輸入設(shè)置確定控制信息01，以及顯示屏為觸摸屏805。即，用戶輸入設(shè)備可以合并到顯示屏中。然而，用戶輸入設(shè)備和顯示屏為相互獨(dú)立的設(shè)備，例如，在其他實(shí)施方式中的鼠標(biāo)/顯示屏X傳感器/顯示屏。距離信息圖獲取/修改模塊801從至少一個(gè)圖像108中獲取距離信息圖，從用戶輸入設(shè)備接收控制信息01，以及根據(jù)控制信息修改距離信息圖以產(chǎn)生修改后的距離信息圖(1181:81106 1II？01~胍1:1011胍隊(duì)勵(lì)？)。圖像1呢可以來自外部源80111^6)(例如，網(wǎng)絡(luò))，或來自連接至30顯示裝置800的計(jì)算機(jī)，但是也可以來自內(nèi)部源80111^6),例如在30顯示裝置800中的存儲(chǔ)裝置。30圖像產(chǎn)生模塊803根據(jù)修改后的距離信息圖10？產(chǎn)生交互式30圖像III呢。顯示屏顯示交互式30圖像。
[0043]30顯示裝置800的其他操作細(xì)節(jié)可以基于上述實(shí)施方式來獲得，因此為求簡潔在此省略其描述。
[0044]鑒于上述實(shí)施方式，30圖像可以對(duì)應(yīng)于用戶的控制命令而顯示。通過這種方式，用戶可以與30圖像進(jìn)行互動(dòng)，以使得30圖像的應(yīng)用可以進(jìn)一步擴(kuò)展。
[0045]雖然本發(fā)明已以較佳實(shí)施方式揭露如上，然而必須了解其并非用以限定本發(fā)明。相反，任何本領(lǐng)域技術(shù)人員，在不脫離本發(fā)明的精神和范圍內(nèi)，當(dāng)可做些許更動(dòng)與潤飾，因此本發(fā)明的保護(hù)范圍應(yīng)當(dāng)以權(quán)利要求書所界定的保護(hù)范圍為準(zhǔn)。
【權(quán)利要求】
1.一種三維顯示方法，其特征在于，包括: 從至少一個(gè)圖像獲取距離信息圖； 從用戶輸入設(shè)備接收控制信息； 根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖； 根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像；以及 顯示該交互式三維圖像。
2.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，其中 該從至少一個(gè)圖像獲得距離信息圖的步驟包括:從至少一個(gè)二維圖像獲取該距離信息圖；以及 該根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像的步驟包括:根據(jù)該修改后的距離信息圖將該二維圖像轉(zhuǎn)換為交互式三維圖像。
3.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于， 該從至少一個(gè)圖像獲得距離信息圖的步驟包括:從至少一個(gè)原始的三維圖像提取該距離信息圖；以及 該根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像的步驟包括:根據(jù)該修改后的距離信息圖處理該原始的三維圖像以產(chǎn)生該交互式三維圖像。
4.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該三維圖像為多視圖三維圖像或立體三維圖像。
5.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖的步驟包括:根據(jù)該控制信息局部修改該距離信息圖。
6.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖的步驟包括:根據(jù)該控制信息全面修改該距離信息圖。
7.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該控制信息包括如下至少一個(gè)信息:觸摸信息，跟蹤信息，運(yùn)動(dòng)信息，傾斜信息，和生物信號(hào)信息。
8.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該距離信息圖為多層距離信息圖。
9.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖的步驟包括:執(zhí)行分割操作以修改該距離信息圖。
10.根據(jù)權(quán)利要求1所述的三維顯示方法，其特征在于，該交互式三維圖像包括如下至少一個(gè)圖像:相片三維圖像、視頻三維圖像、游戲三維圖像以及用戶界面三維圖像。
11.一種三維顯示裝置，其特征在于，包括 用戶輸入設(shè)備，用于確定控制信息； 距離信息圖獲取/修改模塊，用于從至少一個(gè)圖像獲取距離信息圖，從該用戶輸入設(shè)備接收該控制信息；以及根據(jù)該控制信息修改該距離信息圖以產(chǎn)生修改后的距離信息圖； 三維圖像產(chǎn)生模塊，用于根據(jù)該修改后的距離信息圖產(chǎn)生交互式三維圖像；以及 顯示屏，用于顯示該交互式三維圖像。
12.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該距離信息圖獲取/修改模塊從至少一個(gè)二維圖像獲取該距離信息圖；以及該三維圖像產(chǎn)生模塊根據(jù)該修改后的距離信息圖將該二維圖像轉(zhuǎn)換為交互式三維圖像。
13.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該距離信息圖獲取/修改模塊從至少一個(gè)原始的三維圖像提取該距離信息圖；以及該三維圖像產(chǎn)生模塊根據(jù)該修改后的距離信息圖處理該原始的三維圖像以產(chǎn)生該交互式三維圖像。
14.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該三維圖像為多視圖三維圖像或立體三維圖像。
15.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該距離信息圖獲取/修改模塊根據(jù)該控制信息局部修改該距離信息圖。
16.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該距離信息圖獲取/修改模塊根據(jù)該控制信息全面修改該距離信息圖。
17.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，其中該控制信息包括如下至少一個(gè)信息:觸摸信息，跟蹤信息，運(yùn)動(dòng)信息，傾斜信息，和生物信號(hào)信息。
18.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該距離信息圖為多層距離信息圖。
19.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該距離信息圖獲取/修改模塊執(zhí)行分割操作以修改該距離信息圖。
20.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該交互式三維圖像包括如下至少一個(gè)圖像:相片三維圖像、視頻三維圖像、游戲三維圖像以及用戶界面三維圖像。
21.根據(jù)權(quán)利要求11所述的三維顯示裝置，其特征在于，該用戶輸入設(shè)備合并到該顯示屏中。
【文檔編號(hào)】H04N13/04GK104349157SQ201410160469
【公開日】2015年2月11日 申請(qǐng)日期:2014年4月21日 優(yōu)先權(quán)日:2013年7月25日
【發(fā)明者】張德浩, 鄭朝鐘, 張毓麟, 蔡玉寶, 陳穎睿 申請(qǐng)人:聯(lián)發(fā)科技股份有限公司