專利名稱:3d圖像數(shù)據(jù)的傳輸?shù)闹谱鞣椒?br>
技術(shù)領(lǐng)域:
本發(fā)明涉及將用于傳輸三維[3D]圖像數(shù)據(jù)的3D顯示信號(hào)傳送到3D顯示設(shè)備的方法,該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀序列
該幀序列包括若干單位,每個(gè)單位與包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息的幀相應(yīng);
本發(fā)明還涉及上面提到的3D源設(shè)備、3D顯示信號(hào)和3D顯示設(shè)備。本發(fā)明涉及經(jīng)由高速數(shù)字接口(例如HDMI)傳輸三維圖像數(shù)據(jù)(例如3D視頻)以便在3D顯示設(shè)備上顯示的領(lǐng)域。
背景技術(shù):
用于最初提供(source )2D視頻數(shù)據(jù)的設(shè)備是已知的,例如像DVD播放器那樣的視頻播放器或者提供數(shù)字視頻信號(hào)的機(jī)頂盒。源設(shè)備要耦合到像電視機(jī)或監(jiān)視器那樣的顯示設(shè)備。圖像數(shù)據(jù)經(jīng)由適當(dāng)?shù)慕涌冢瑑?yōu)選地經(jīng)由像HDMI那樣的高速數(shù)字接口從源設(shè)備傳輸。 目前,正提出用于最初提供三維(3D)圖像數(shù)據(jù)的3D增強(qiáng)設(shè)備。類似地,正提出用于顯示3D 圖像數(shù)據(jù)的設(shè)備。為了將3D視頻信號(hào)從源設(shè)備傳輸?shù)斤@示設(shè)備,正在開(kāi)發(fā)新的高數(shù)據(jù)率數(shù)字接口標(biāo)準(zhǔn),其例如基于現(xiàn)有的HDMI標(biāo)準(zhǔn)且與該標(biāo)準(zhǔn)兼容。將2D數(shù)字圖像信號(hào)傳輸?shù)斤@示設(shè)備通常涉及逐幀發(fā)送視頻像素?cái)?shù)據(jù),所述幀要順序地顯示。這樣的幀可以代表逐行掃描視頻信號(hào)的視頻幀(全幀)或者可以代表隔行掃描視頻信號(hào)的視頻幀(基于公知的隔行掃描,提供奇數(shù)行的幀和提供偶數(shù)行的下一幀被順序地顯示)。文獻(xiàn)US4979033描述了具有隔行掃描格式的傳統(tǒng)視頻信號(hào)的一個(gè)實(shí)例。傳統(tǒng)的信號(hào)包括用于在傳統(tǒng)的電視上顯示奇數(shù)和偶數(shù)幀的行和幀的水平和垂直同步信號(hào)。立體視頻系統(tǒng)和方法被提出,其允許立體視頻與使用快門(mén)眼鏡的顯示器的同步。奇數(shù)和偶數(shù)幀用來(lái)傳輸立體視頻信號(hào)的對(duì)應(yīng)左圖像和右圖像。所提出的3D顯示設(shè)備包括檢測(cè)傳統(tǒng)的奇數(shù)/偶數(shù)幀的傳統(tǒng)包絡(luò)檢測(cè)器,但是改為產(chǎn)生用于左和右LCD顯示單元的顯示信號(hào)。特別地,對(duì)垂直消隱間隔期間出現(xiàn)的對(duì)于傳統(tǒng)隔行掃描模擬視頻信號(hào)中的奇數(shù)幀和偶數(shù)幀而言不同的均衡脈沖被計(jì)數(shù)以標(biāo)識(shí)對(duì)應(yīng)的左邊或右邊場(chǎng)。該系統(tǒng)使用該信息以使一副快門(mén)眼鏡同步, 從而快門(mén)眼鏡與立體視頻同步地交替打開(kāi)和關(guān)閉。存在其中可以對(duì)立體圖像格式化(稱為3D圖像格式)的許多不同方式。一些格式基于使用2D通道以便也攜帶立體信息。例如,左視圖和右視圖可以交織或者可以并排地和上下地放置。這些方法犧牲分辨率以攜帶立體信息。另一個(gè)選項(xiàng)是犧牲顏色,該方法稱為補(bǔ)色立體。用于將3D信息傳送到顯示器的新格式正被開(kāi)發(fā)。正在被標(biāo)準(zhǔn)化到MPEG中的MVD 要求傳送用于M個(gè)視圖的{視頻+深度},以允許更大的視錐圖形覆蓋(例如BED播放器或 STB中的菜單或字幕)需要被傳送到顯示器
發(fā)明內(nèi)容
本發(fā)明的目的是提供一種更靈活且可靠的用于將3D視頻信號(hào)傳輸?shù)斤@示設(shè)備的系統(tǒng)。為此目的,依照本發(fā)明的第一方面,在如開(kāi)篇段落中所描述的方法中,3D視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期,這些分組包括信息幀分組,以及輸出3D顯示信號(hào);并且在3D顯示設(shè)備處,接收3D顯示信號(hào),以及處理3D顯示信號(hào)以便產(chǎn)生用于在3D顯示器上再現(xiàn)3D圖像數(shù)據(jù)的顯示控制信號(hào),所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;單位中的每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D數(shù)據(jù)結(jié)構(gòu),并且其中該方法包括 在3D源設(shè)備處,在附加信息幀分組中包含3D傳輸信息,該3D傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量,該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);并且所述產(chǎn)生顯示控制信號(hào)根據(jù)3D傳輸信息而執(zhí)行。為此目的,依照本發(fā)明的第二方面,如開(kāi)篇段落中所描述的用于將3D圖像數(shù)據(jù)傳輸?shù)?D顯示設(shè)備的3D源設(shè)備,該3D源設(shè)備包括用于處理源圖像數(shù)據(jù)以產(chǎn)生3D顯示信號(hào)的生成裝置,該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀序列,所述3D 視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期,這些分組包括信息幀分組;以及用于輸出3D顯示信號(hào)的輸出接口裝置,每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型部分3D數(shù)據(jù)結(jié)構(gòu),所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;其中輸出接口裝置適于在附加信息幀分組中傳送3D傳輸信息,該3D傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量,該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);用于在顯示設(shè)備處根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)。為此目的,依照本發(fā)明的另一方面,如開(kāi)篇段落中所描述的3D顯示設(shè)備數(shù)據(jù)包括用于顯示3D圖像數(shù)據(jù)的3D顯示器;用于接收3D顯示信號(hào)的輸入接口裝置,該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀,所述3D視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期,這些分組包括信息幀分組;以及用于產(chǎn)生用于在3D顯示器上再現(xiàn)3D圖像數(shù)據(jù)的顯示控制信號(hào)的處理裝置,每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D數(shù)據(jù)結(jié)構(gòu),并且所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;其中附加信息幀分組中的3D 傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量,該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);并且處理裝置被設(shè)置用于根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)。本發(fā)明也基于以下認(rèn)識(shí)。不同于2D視頻信息的是,存在對(duì)3D視頻數(shù)據(jù)格式化的許多可能性,例如立體、圖像+深度,可能地包括遮擋和透明度,多個(gè)視圖。而且,可以設(shè)想的是,可以通過(guò)接口傳送多個(gè)3D視頻數(shù)據(jù)層以便在顯示之前進(jìn)行復(fù)合。取決于源設(shè)備處可用的數(shù)據(jù)的格式以及顯示器接受的3D視頻格式,這眾多的選項(xiàng)導(dǎo)致許多視頻格式選項(xiàng)。大多數(shù)這些格式由大量的信息表征,在復(fù)雜的結(jié)構(gòu)中需要被傳送用于每幅要顯示的3D圖像。 依照本發(fā)明,當(dāng)數(shù)據(jù)在若干單位中發(fā)送并且關(guān)于這些單位的信息在3D顯示信號(hào)處可用時(shí), 傳送系統(tǒng)在處理各種不同的3D數(shù)據(jù)格式方面更靈活,因?yàn)楦嗟臄?shù)據(jù)可以包含在一個(gè)單位中?,F(xiàn)代高速接口允許以比3D圖像的實(shí)際頻率(通常為電影行業(yè)使用的MHz)高得多的頻率發(fā)送幀。通過(guò)使用若干單位的幀,可以通過(guò)接口發(fā)送用于每幅3D圖像的靈活格式的更大量的數(shù)據(jù)。在一個(gè)實(shí)施例中,所述復(fù)用方案組進(jìn)一步包括以下至少一個(gè)場(chǎng)交替復(fù)用;行交替復(fù)用;并排幀復(fù)用,該并排幀復(fù)用指示所述數(shù)量的幀并排設(shè)置在所述視頻數(shù)據(jù)周期內(nèi); 2D和深度幀復(fù)用;2D、深度、圖形和圖形深度幀復(fù)用。通常,3D視頻數(shù)據(jù)的傳送可以由3個(gè)參數(shù)表征
-像素重復(fù)率
-單幅3D圖像的幀的單位幀數(shù)量 -格式復(fù)用通道的方式。在本發(fā)明的一個(gè)優(yōu)選的實(shí)施例中,所有這些參數(shù)的信息包含在3D傳輸信息中。為了實(shí)現(xiàn)最大的靈活性,依照本發(fā)明,這些參數(shù)應(yīng)當(dāng)在三個(gè)單獨(dú)的場(chǎng)中傳送。在本發(fā)明的一個(gè)實(shí)施例中,HDMI用作接口,并且在AVI信息幀和/或HDMI供應(yīng)商特定信息幀中發(fā)送3D傳輸信息。在允許最大靈活性的最優(yōu)選的實(shí)施例中,在單獨(dú)的信息幀中發(fā)送3D傳輸信息。所附權(quán)利要求書(shū)中給出了依照本發(fā)明的方法、3D設(shè)備和信號(hào)的另外的優(yōu)選實(shí)施例,其公開(kāi)內(nèi)容通過(guò)引用合并于此。
本發(fā)明的這些和其他方面根據(jù)以下說(shuō)明中通過(guò)實(shí)例且參照附圖描述的實(shí)施例將是清楚明白的,并且將進(jìn)一步結(jié)合這些實(shí)施例進(jìn)行闡述,在附圖中
圖1示出了用于傳輸三維(3D)圖像數(shù)據(jù)的系統(tǒng); 圖2示出了 3D圖像數(shù)據(jù)的實(shí)例; 圖3示出了回放設(shè)備和顯示設(shè)備組合;
圖4示意性地示出了要通過(guò)視頻接口發(fā)送的用于與2D+立體+DOT相應(yīng)的3D圖像數(shù)據(jù)的可能的幀單位;
圖5示意性地示出了要通過(guò)視頻接口發(fā)送的用于與2D+立體+DOT相應(yīng)的3D圖像數(shù)據(jù)的可能的幀單位的另外的細(xì)節(jié);
圖6示意性地示出了通過(guò)視頻接口的用于與2D+立體+DOT相應(yīng)的3D圖像數(shù)據(jù)的幀的時(shí)間輸出;
圖7示意性地示出了用于立體信號(hào)的可能的幀單位布置;圖8示出了用于力+DOT格式01920像素的水平和垂直消隱和信令; 圖9示出了用于作為1920逐行掃描@30Hz發(fā)送的4+D0T格式720像素的水平和垂直消隱和信令;
圖10示出了利用幀類型同步指示符擴(kuò)展的用于立體3D圖像數(shù)據(jù)的AVI信息幀的表
格;
圖11示出了 3D視頻格式的表格; 圖12示出了幀同步信號(hào),以及圖13示出了用于附加視頻層的值。在附圖中,與已經(jīng)描述的元件相應(yīng)的元件具有相同的附圖標(biāo)記。
具體實(shí)施例方式圖1示出了用于傳輸三維(3D)圖像數(shù)據(jù)的系統(tǒng),所述三維圖像數(shù)據(jù)例如視頻、圖形或其他可視信息。3D源設(shè)備10耦合到3D顯示設(shè)備13以便傳輸3D顯示信號(hào)56。3D源設(shè)備具有用于接收?qǐng)D像信息的輸入單元51。例如,該輸入單元設(shè)備可以包括用于從像DVD 或藍(lán)光光盤(pán)那樣的光學(xué)記錄載體M獲取各種不同類型的圖像信息的光盤(pán)單元58。可替換地,輸入單元可以包括用于耦合到網(wǎng)絡(luò)陽(yáng)(例如互聯(lián)網(wǎng)或廣播網(wǎng))的網(wǎng)絡(luò)接口單元59,這樣的設(shè)備通常稱為機(jī)頂盒。圖像數(shù)據(jù)可以從遠(yuǎn)程媒體服務(wù)器57獲取。源設(shè)備也可以是衛(wèi)星接收器或者直接提供顯示信號(hào)的媒體服務(wù)器,即輸出直接耦合到顯示單元的3D顯示信號(hào)的任何適當(dāng)?shù)脑O(shè)備。3D源設(shè)備具有耦合到輸入單元51的處理單元52,其用于處理圖像信息以便產(chǎn)生經(jīng)由輸出接口單元12傳輸?shù)斤@示設(shè)備的3D顯示信號(hào)56。處理單元52被設(shè)置用于產(chǎn)生包含在3D顯示信號(hào)56中的圖像數(shù)據(jù)以便在顯示設(shè)備13上顯示。源設(shè)備設(shè)有用戶控制元件 15,用于控制圖像數(shù)據(jù)的顯示參數(shù),例如對(duì)比度或顏色參數(shù)。像這樣的用戶控制元件是眾所周知的,并且可以包括遠(yuǎn)程控制單元,該遠(yuǎn)程控制單元具有控制3D源設(shè)備的各種功能(例如回放和記錄功能)且用于例如通過(guò)圖形用戶界面和/或菜單設(shè)置所述顯示參數(shù)的各種不同的按鈕和/或光標(biāo)控制功能。源設(shè)備具有用于在3D顯示信號(hào)中提供至少一個(gè)幀類型同步指示符的傳送同步單元11,所述指示符在輸出接口單元12中包含在3D顯示信號(hào)中,該輸出接口單元進(jìn)一步被設(shè)置用于將具有圖像數(shù)據(jù)和幀類型同步指示符的3D顯示信號(hào)作為3D顯示信號(hào)56從源設(shè)備傳輸?shù)斤@示設(shè)備。3D顯示信號(hào)包含幀序列,這些幀組織成若干組幀,從而依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù),在所述格式中,這些幀包括至少兩種不同幀類型。每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),該序列通常依照預(yù)定分辨率設(shè)置為若干像素的水平行序列。每種幀類型代表部分3D數(shù)據(jù)結(jié)構(gòu)。例如,3D視頻傳輸格式的幀類型中的3D部分?jǐn)?shù)據(jù)結(jié)構(gòu)可以是左和右圖像或者2D圖像和附加的深度和/或另外的3D數(shù)據(jù),例如下面討論的遮擋或透明度信息。應(yīng)當(dāng)指出的是,幀類型也可以是指示上述幀類型的子幀的組合的組合幀類型,這些子幀例如位于單個(gè)全分辨率幀中的具有較低分辨率的4個(gè)子幀。此外,可以將若干多視像編碼到要同時(shí)顯示的幀視頻流中。源設(shè)備適于包括3D傳輸信息,該3D傳輸信息至少包括關(guān)于要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量的信息。這可以通過(guò)將相應(yīng)的功能加入到同步單元11中來(lái)實(shí)現(xiàn)。3D顯示設(shè)備13用于顯示3D圖像數(shù)據(jù)。該設(shè)備具有輸入接口單元14,該輸入接口單元用于接收從源設(shè)備10傳輸?shù)?、在幀中包?D圖像數(shù)據(jù)且包含幀類型同步指示符的3D 顯示信號(hào)56。每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D數(shù)據(jù)結(jié)構(gòu)。顯示設(shè)備設(shè)有另外的用戶控制元件16,用于設(shè)置顯示器的顯示參數(shù),例如對(duì)比度、顏色或深度參數(shù)。傳輸?shù)膱D像數(shù)據(jù)在處理單元18中依照來(lái)自用戶控制元件的設(shè)置命令進(jìn)行處理并且基于不同幀類型產(chǎn)生用于在3D顯示器上再現(xiàn)3D圖像數(shù)據(jù)的顯示控制信號(hào)。該設(shè)備具有接收顯示控制信號(hào)以便顯示處理的圖像數(shù)據(jù)的3D顯示器17,例如雙IXD。 顯示設(shè)備13是立體顯示器,也稱為3D顯示器,具有由箭頭44指示的顯示深度范圍。3D圖像數(shù)據(jù)的顯示根據(jù)不同的幀而執(zhí)行,每幀提供對(duì)應(yīng)的部分3D圖像數(shù)據(jù)結(jié)構(gòu)。顯示設(shè)備進(jìn)一步包括耦合到處理單元18的檢測(cè)單元19,該檢測(cè)單元用于從3D顯示信號(hào)中獲取幀類型同步指示符并且用于檢測(cè)接收的3D顯示信號(hào)中的不同幀類型。處理單元18被設(shè)置用于基于如各3D視頻格式(例如2D圖像和深度幀)的部分3D數(shù)據(jù)結(jié)構(gòu)限定的各種不同類型的圖像數(shù)據(jù)產(chǎn)生顯示控制信號(hào)。各幀被識(shí)別且在時(shí)間上同步,如對(duì)應(yīng)幀類型同步指示符所指示的。顯示設(shè)備適于檢測(cè)3D傳輸信息,該3D傳輸信息至少包括關(guān)于要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量的信息;并且適于使用3D傳輸信息以便根據(jù)該3D 傳輸信息產(chǎn)生顯示控制信號(hào)。這可以例如通過(guò)使檢測(cè)單元19適于檢測(cè)3D傳輸信息并且通過(guò)使處理裝置(18)適于根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)而實(shí)現(xiàn)。幀類型同步指示符允許檢測(cè)必須組合哪些幀以便同時(shí)顯示,并且也指示幀類型, 從而可以獲取和處理對(duì)應(yīng)的部分3D數(shù)據(jù)。3D顯示信號(hào)可以通過(guò)諸如公知的HDMI接口(例如參見(jiàn)"High Definition Multimedia Interface Specification Version 1. 3a of Nov 10 2006)之類的適當(dāng)高速數(shù)字視頻接口傳輸。圖1進(jìn)一步示出了作為3D圖像數(shù)據(jù)的載體的記錄載體M。該記錄載體為盤(pán)狀并且具有軌道和中心孔。由一系列物理上可檢測(cè)的標(biāo)記構(gòu)成的軌道依照螺旋或同心模式的匝設(shè)置,這些匝在信息層上構(gòu)成基本上平行的軌道。記錄載體可以是光學(xué)上可讀的,稱為光盤(pán),例如⑶、DVD或BD (藍(lán)光光盤(pán))。信息在信息層上通過(guò)沿著軌道的光學(xué)可檢測(cè)標(biāo)記(例如凹坑和凸臺(tái))表示。軌道結(jié)構(gòu)也包含位置信息,例如頭部和地址,用于指示通常稱為信息塊的信息單元的位置。記錄載體M攜帶代表像視頻那樣的數(shù)字編碼圖像數(shù)據(jù)的信息,該數(shù)字編碼圖像數(shù)據(jù)例如依照MPEG2或MPEG4編碼系統(tǒng)以像DVD或BD格式那樣的預(yù)定義記錄格式編碼。應(yīng)當(dāng)指出的是,播放器可以支持播放各種不同的格式,但是不能將視頻格式轉(zhuǎn)碼, 并且顯示設(shè)備可能能夠播放有限的視頻格式集合。這意味著什么可以播放存在公共的劃分器。應(yīng)當(dāng)指出的是,根據(jù)所述盤(pán)或內(nèi)容,格式可以在系統(tǒng)的回放/操作期間改變。格式的實(shí)時(shí)同步有必要發(fā)生,并且格式的實(shí)時(shí)切換由幀類型同步指示符提供。下面的部分提供了對(duì)于三維顯示和人的深度感知的綜述。3D顯示在以下意義上不同于2D顯示它們可以提供更生動(dòng)的深度感知。實(shí)現(xiàn)這一點(diǎn),是因?yàn)樗鼈兲峁┍?D顯示更多的深度線索,所述2D顯示只能示出單眼深度線索以及基于運(yùn)動(dòng)的線索。單眼(或靜態(tài))深度線索可以通過(guò)使用單只眼睛從靜態(tài)圖像中獲得。畫(huà)家經(jīng)常使用單眼線索以便在他們的繪畫(huà)中創(chuàng)建深度的感覺(jué)。這些線索包括相對(duì)大小、相對(duì)于水平的高度、遮擋、透視、紋理梯度和照明/陰影。眼球運(yùn)動(dòng)線索是從觀看者眼睛的肌肉的張力導(dǎo)出的深度線索。眼睛具有用于旋轉(zhuǎn)眼睛以及用于拉伸眼睛晶狀體的肌肉。眼睛晶狀體的拉伸和松弛稱為適應(yīng)并且在聚焦到圖像上時(shí)完成。晶狀體肌肉的拉伸或松弛的量提供了目標(biāo)多遠(yuǎn)或多近的線索。進(jìn)行眼睛旋轉(zhuǎn),使得雙眼聚焦到相同的目標(biāo)上,這稱為會(huì)聚。最后,運(yùn)動(dòng)視差是靠近觀看者的目標(biāo)看起來(lái)比遠(yuǎn)離的目標(biāo)移動(dòng)得更快的效應(yīng)。
雙眼視差是從我們的雙眼看見(jiàn)稍微不同的圖像這一事實(shí)導(dǎo)出的深度線索。單眼深度線索可以是且用于任何2D視覺(jué)顯示類型。為了在顯示器中重新創(chuàng)建雙眼視差,要求顯示器可以為左眼和右眼分割視圖,使得每只眼睛在顯示器上看見(jiàn)稍微不同的圖像??梢灾匦聞?chuàng)建雙眼視差的顯示器是我們將稱為3D或立體顯示器的特殊顯示器。3D顯示器能夠沿著人眼實(shí)際感知的深度維顯示圖像,在本文中稱為具有顯示深度范圍的3D顯示器。因此,3D 顯示器向左眼和右眼提供不同的視圖??梢蕴峁﹥蓚€(gè)不同視圖的3D顯示器已經(jīng)存在了很長(zhǎng)的時(shí)間。大多數(shù)這些3D顯示器基于使用眼鏡分離左眼和右眼視圖?,F(xiàn)在,隨著顯示技術(shù)的進(jìn)步,新的顯示器已經(jīng)進(jìn)入市場(chǎng),其可以在不使用眼鏡的情況下提供立體視圖。這些顯示器稱為自動(dòng)立體顯示器。第一種方法基于允許用戶在沒(méi)有眼鏡的情況下看見(jiàn)立體視頻的IXD顯示器。這些顯示器基于兩種技術(shù),即柱透鏡屏幕和屏障顯示器中任一種。對(duì)于柱透鏡顯示器而言,LCD 由柱透鏡片覆蓋。這些透鏡衍射來(lái)自顯示器的光,使得左眼和右眼接收到來(lái)自不同像素的光。這允許顯示兩幅不同的圖像,一幅圖像用于左眼視圖,一幅圖像用于右眼視圖。柱透鏡屏幕的可替換方案是屏障顯示器,其使用LCD之后且在背光之前的視差屏障以分離來(lái)自LCD中的像素的光。屏障使得從屏幕之前的設(shè)定位置來(lái)看,左眼看見(jiàn)不同于右眼的像素。屏障也可以位于LCD與人類觀看者之間,使得顯示器的行中的像素交替地對(duì)于左眼和右眼可見(jiàn)。屏障顯示器的一個(gè)問(wèn)題是視亮度和分辨率的損失,而且具有非常窄的觀看角。這使得它與柱透鏡屏幕相比作為起居室電視不那么吸引人,所述柱透鏡屏幕例如具有9個(gè)視圖以及多個(gè)觀看區(qū)。另一方法仍然基于與可以以高刷新率(例如120Hz)顯示幀的高分辨率射束器結(jié)合使用快門(mén)眼鏡。高刷新率是需要的,因?yàn)閷?duì)于快門(mén)眼鏡方法,左眼和右眼視圖交替地顯示。 對(duì)于戴著眼鏡的觀看者感知60Hz的立體視頻??扉T(mén)眼鏡方法允許實(shí)現(xiàn)高質(zhì)量的視頻以及強(qiáng)烈的深度水平。自動(dòng)立體顯示器和快門(mén)眼鏡方法的確都存在適應(yīng)-會(huì)聚失配的不足。這的確限制可以使用這些設(shè)備舒適地觀看的深度量和時(shí)間。存在諸如全息和體積顯示器之類的其他顯示技術(shù),這些顯示技術(shù)不存在這個(gè)問(wèn)題。應(yīng)當(dāng)指出的是,本發(fā)明可以用于具有深度范圍的任何類型的3D顯示器。假定用于3D顯示器的圖像數(shù)據(jù)作為電子數(shù)據(jù)(通常為數(shù)字?jǐn)?shù)據(jù))是可用的。本發(fā)明涉及這樣的圖像數(shù)據(jù)并且在數(shù)字域操作該圖像數(shù)據(jù)。圖像數(shù)據(jù)在傳輸自某個(gè)源時(shí)可能已經(jīng)例如通過(guò)使用雙照相機(jī)而包含3D信息,或者專用預(yù)處理系統(tǒng)可以被包含以便從2D圖像 (重新)創(chuàng)建3D信息。圖像數(shù)據(jù)可以是靜態(tài)的,比如幻燈片,或者可以包括運(yùn)動(dòng)視頻,比如電影。通常稱為圖形數(shù)據(jù)的其他圖像數(shù)據(jù)可以作為存儲(chǔ)的對(duì)象而可用,或者如應(yīng)用所需要的即時(shí)產(chǎn)生。例如,可以向其他圖像數(shù)據(jù)添加像菜單、導(dǎo)航項(xiàng)目或文本和幫助注釋那樣的用戶控制信息。存在其中可以對(duì)立體圖像格式化(稱為3D圖像格式)的許多不同方式。一些格式基于使用2D通道以便也攜帶立體信息。例如,左視圖和右視圖可以交織或者可以并排地和上下地放置。這些方法犧牲分辨率以攜帶立體信息。另一個(gè)選項(xiàng)是犧牲顏色,該方法稱為補(bǔ)色立體。補(bǔ)色立體使用光譜復(fù)用,其基于以互補(bǔ)色顯示兩幅分開(kāi)的覆蓋的圖像。通過(guò)使用具有濾色片的眼鏡,每只眼睛僅僅看見(jiàn)具有與該眼睛之前的濾色片相同顏色的圖像。因此,例如右眼僅僅看見(jiàn)紅色圖像并且左眼僅僅看見(jiàn)綠色圖像。一種不同的3D格式基于兩個(gè)視圖,其使用2D圖像和附加的深度圖像(所謂的深度圖),該深度圖像傳遞關(guān)于2D圖像中的目標(biāo)的深度的信息。稱為圖像+深度的該格式的不同之處在于,它是2D圖像與所謂的“深度”或視差圖的組合。這是灰度圖像,其中像素的灰度值指示關(guān)聯(lián)2D圖像中相應(yīng)像素的視差量(或者在深度圖的情況下為深度)。顯示設(shè)備將 2D圖像作為輸入,使用視差、深度或者視差圖以計(jì)算附加的視圖。這可以以各種不同的方式完成,在最簡(jiǎn)單的形式下,其近似于根據(jù)與像素關(guān)聯(lián)的視差值將這些像素移向左邊或右邊。 Christoph Fen 的題為"Depth image based rendering, compression and transmission for a new approach on 3D TV”的論文給出了該技術(shù)的很好的綜述(參見(jiàn)http://iphome. hhi.de/fehn/Publications/fehn_EI2004. pdf)。圖2示出了 3D圖像數(shù)據(jù)的實(shí)例。該圖像數(shù)據(jù)的左邊部分是通常為彩色的2D圖像 21,并且該圖像數(shù)據(jù)的右邊部分為深度圖22。2D圖像信息可以以任何適當(dāng)?shù)膱D像格式表示。深度圖信息可以是具有每個(gè)像素的深度值的附加數(shù)據(jù)流,其與2D圖像相比分辨率可能降低。在深度圖中,灰度值指示2D圖像中的關(guān)聯(lián)像素的深度。白色指示靠近觀看者,并且黑色指示遠(yuǎn)離觀看者的大的深度。3D顯示器可以通過(guò)使用來(lái)自深度圖的深度值并且通過(guò)計(jì)算所需的像素變換而計(jì)算立體所需的附加視圖。遮擋可以通過(guò)使用估計(jì)技術(shù)或者孔填充技術(shù)來(lái)解決。附加的幀可以包含于數(shù)據(jù)流中,例如進(jìn)一步添加到圖像和深度圖格式,比如遮擋圖、視差圖和/或在背景之前運(yùn)動(dòng)的透明目標(biāo)的透明度圖。當(dāng)視頻從諸如藍(lán)光光盤(pán)播放器之類的播放設(shè)備發(fā)送到立體顯示器時(shí),將立體添加到視頻中也影響視頻的格式。在2D情況下,只發(fā)送2D視頻流(解碼的畫(huà)面數(shù)據(jù))。利用立體視頻,這被增大,因?yàn)楝F(xiàn)在必須發(fā)送包含第二視圖(用于立體)或深度圖的第二流。這可能加倍電氣接口上所需的比特率。一種不同的方法是犧牲分辨率并且將該流格式化,使得第二視圖或深度圖與2D視頻交織或者與2D視頻并排放置。圖2示出了 2D數(shù)據(jù)和深度圖的一個(gè)實(shí)例。深度顯示參數(shù)被發(fā)送到顯示器以便允許顯示器正確地解釋深度信息。ISO標(biāo)準(zhǔn)23002-3 "Representation of auxiliary video and supplemental information”(例如參見(jiàn) 2007 年 7 月的 IS0/IEC JTC1/SC29/WG11 N8259)中描述了在視頻中包含附加信息的實(shí)例。取決于輔助流的類型,附加的圖像數(shù)據(jù)包含4個(gè)參數(shù)或2個(gè)參數(shù)。幀類型同步指示符可以包括指示3D顯示信號(hào)后續(xù)部分中的對(duì)應(yīng) 3D視頻傳輸格式的3D視頻格式指示符。這允許指示或改變3D視頻傳輸格式,或者重置傳輸序列或者設(shè)置或重置另外的同步參數(shù)。在一個(gè)實(shí)施例中,幀類型同步指示符包括指示至少一種幀類型的頻率的幀序列指示符。應(yīng)當(dāng)指出的是,一些幀類型允許對(duì)感知的3D圖像沒(méi)有明顯惡化的較低的傳送頻率, 例如遮擋數(shù)據(jù)。此外,可以將不同幀類型的順序指示為要重復(fù)的不同幀類型序列。
在一個(gè)實(shí)施例中,幀類型同步指示符以及3D傳輸信息包括幀序列號(hào)。也可以向各幀提供幀序列號(hào)。例如當(dāng)發(fā)送了構(gòu)成單幅3D圖像的所有幀并且接下來(lái)的幀屬于下一幅3D 圖像時(shí),序列號(hào)規(guī)則地增加。因此,序列號(hào)對(duì)于每個(gè)同步循環(huán)是不同的,或者可能僅對(duì)于較大的部分改變。因此,當(dāng)執(zhí)行跳變時(shí),必須在可以恢復(fù)圖像顯示之前傳輸具有相同對(duì)應(yīng)序列號(hào)的幀集合。顯示設(shè)備將檢測(cè)偏離的幀序列號(hào)并且將僅組合完整的幀集合。這防止了在跳變到新位置之后使用錯(cuò)誤的幀組合。當(dāng)在視頻上添加圖形時(shí),可以在顯示單元中使用另外的單獨(dú)的數(shù)據(jù)流覆蓋附加層。這樣的層數(shù)據(jù)包含在不同的幀類型中,這些幀類型通過(guò)如下面所詳細(xì)討論的在3D顯示信號(hào)中添加對(duì)應(yīng)的幀類型同步指示符而單獨(dú)地標(biāo)記?,F(xiàn)在,3D視頻傳輸格式包括主視頻以及通過(guò)對(duì)應(yīng)幀類型而傳輸?shù)闹辽僖粋€(gè)附加視頻層,并且?guī)愋屯街甘痉ㄖ鲙愋椭甘痉透郊訉訋愋椭甘痉械闹辽僖粋€(gè)。所述附加視頻層可以例如是字幕或其他圖形信息,比如菜單或任何其他屏上數(shù)據(jù)(0SD)。用于幀單位的一種可能的格式將參照?qǐng)D4-7進(jìn)行描述。EP申請(qǐng)no 09150947. 1 (申請(qǐng)人案卷號(hào)PH 012841)中也描述了該格式,本發(fā)明要求該文獻(xiàn)的優(yōu)先權(quán)并且該文獻(xiàn)通過(guò)引用插入此處。接收的壓縮流包括允許在立體和自動(dòng)立體顯示器上復(fù)合和再現(xiàn)的3D信息,即該壓縮流包括用于允許基于2D+深度信息進(jìn)行再現(xiàn)的左右視頻幀以及深度(D)、透明度(T)和遮擋(0)信息。在下文中,深度(D)、透明度(T)和遮擋(0)信息將簡(jiǎn)寫(xiě)成DOT。取決于顯示器的類型和大小,作為壓縮流的立體和DOT的存在允許實(shí)現(xiàn)被顯示器優(yōu)化的復(fù)合和再現(xiàn),同時(shí)復(fù)合仍然受內(nèi)容作者控制。以下分量通過(guò)顯示接口傳送
-解碼視頻數(shù)據(jù)(未與PG和IG/BD-J混合) -演示圖形(PG)數(shù)據(jù)
-交互式圖形(IG)或BD-Java生成(BD-J)圖形數(shù)據(jù) -解碼視頻DOT -演示圖形(PG) DOT
-交互式圖形(IG)或BD-Java生成(BD-J)圖形。圖4和圖5示意性地示出了要通過(guò)視頻接口發(fā)送的幀單位。輸出級(jí)通過(guò)接口(優(yōu)選地HDMI)發(fā)送如下組織的6幀的單位
幀1 左(L)視頻和DOT視頻的YUV分量組合到一個(gè)MHz RGB輸出幀中,分量如圖9的頂部圖所示。在視頻處理領(lǐng)域,YUV通常指定為標(biāo)準(zhǔn)亮度(Y)和色度(UV)分量幀2 右(R)視頻未修改地優(yōu)選地以MHz發(fā)送出去,如圖9的底部圖所示。幀3 =PC顏色(PG-C)作為RGB分量未修改地優(yōu)選地以MHz發(fā)送出去
幀4 =PG顏色的透明度拷貝到單獨(dú)的圖形DOT輸出平面中并且與用于各種不同平面的深度和960x540遮擋和遮擋深度(OD)分量組合,如圖10的頂部圖所示幀5 :BD-J/IG顏色(C)未修改地優(yōu)選地以MHz發(fā)送出去。幀6 :BD-J/IG顏色的透明度拷貝到單獨(dú)的圖形DOT輸出平面中并且與深度和 960x540遮擋和遮擋深度(OD)分量組合,如圖10的底部圖所示。圖6示意性地示出了依照本發(fā)明優(yōu)選實(shí)施例的通過(guò)視頻接口的幀的時(shí)間輸出。在這里,分量通過(guò)144Hz的接口頻率的HDMI接口以MHz發(fā)送到顯示器,分量在時(shí)間上交織。該3D視頻格式的優(yōu)點(diǎn)為
-全分辨率的靈活3D立體+DOT格式和3D HDMI輸出允許對(duì)于各種不同的3D顯示器 (立體和自動(dòng)立體)實(shí)現(xiàn)增強(qiáng)的3D視頻(對(duì)于顯示器大小依賴性,基線可變)和增強(qiáng)的3D圖形(較少的圖形限制,3D TV OSD)。-不損害質(zhì)量、創(chuàng)作靈活性且播放器硬件成本最小。復(fù)合和再現(xiàn)在3D顯示器中完成。-對(duì)于41^業(yè)格式,所需的較高的視頻接口速度在HDMI中定義,且已經(jīng)利用雙鏈接 HDMI實(shí)現(xiàn)。雙鏈接HDMI也支持較高的幀速率,例如30Hz等等。3D傳輸信息指示符可以針對(duì)所述附加視頻層包括層信令參數(shù)。這些參數(shù)可以指示以下至少一個(gè)
-附加層的類型和/或格式; -附加層顯示相對(duì)于主視頻顯示的位置; -附加層顯示的大小;
-附加層顯示的出現(xiàn)、消失時(shí)間和或持續(xù)時(shí)間; -附加3D顯示設(shè)置或3D顯示參數(shù)。下文中討論了另外的詳細(xì)實(shí)例。圖3示出了回放設(shè)備和顯示設(shè)備組合。播放器10讀取顯示器13的性能并且調(diào)節(jié)視頻的格式和時(shí)序參數(shù)以便發(fā)送顯示器可以處理的空間以及時(shí)間上的最高分辨率視頻。在實(shí)踐中,使用了稱為EDID的標(biāo)準(zhǔn)。擴(kuò)展顯示標(biāo)識(shí)數(shù)據(jù)(EDID)是一種由顯示設(shè)備提供以向圖像源(例如圖形卡)描述其性能的數(shù)據(jù)結(jié)構(gòu)。它使得現(xiàn)代個(gè)人計(jì)算機(jī)能夠知道連接了什么種類的監(jiān)視器。EDID由視頻電子標(biāo)準(zhǔn)協(xié)會(huì)(VESA)公布的標(biāo)準(zhǔn)定義。進(jìn)一步的詳情請(qǐng)參閱可通過(guò)http://www. vesa. org/而獲得的 VESA DisplayPort Standard Version 1, Revision la, January 11, 2008。EDID包括制造商名稱、產(chǎn)品類型、磷光體或?yàn)V光器類型、顯示器支持的時(shí)序、顯示大小、亮度數(shù)據(jù)和(僅僅對(duì)于數(shù)字顯示器而言)像素映射數(shù)據(jù)。用于將EDID從顯示器傳送到圖形卡的通道通常是所謂的1 總線。EDID和I2C的組合稱為顯示數(shù)據(jù)通道第2版或者 DDC2。版本2有別于VESA的原始DDC,該原始DDC使用不同的串行格式。EDID經(jīng)常存儲(chǔ)在監(jiān)視器中的存儲(chǔ)設(shè)備中,該存儲(chǔ)設(shè)備稱為串行PROM (可編程只讀存儲(chǔ)器)或EEPROM (電可擦除PR0M),其與I2C總線兼容。回放設(shè)備通過(guò)DDC2通道向顯示器發(fā)送E-EDID請(qǐng)求。顯示器通過(guò)發(fā)送E-EDID信息而做出響應(yīng)。播放器確定最佳的格式并且開(kāi)始通過(guò)視頻通道傳送。在更舊類型的顯示器中,顯示器連續(xù)地在DDC通道上發(fā)送E-EDID信息。沒(méi)有請(qǐng)求被發(fā)送。為了進(jìn)一步限定接口上使用的視頻格式,另一組織(消費(fèi)者電子協(xié)會(huì);CEA)定義了 E-EDID的若干附加限制和擴(kuò)展以使其更適合與電視類型的顯示器一起使用。除了特定E-EDID要求之外的HDMI標(biāo)準(zhǔn)(上文曾提及)支持用于許多不同視頻格式的標(biāo)識(shí)碼和相關(guān)時(shí)序信息。例如,接口標(biāo)準(zhǔn)HDMI中采用了 CEA 861-D標(biāo)準(zhǔn)。HDMI定義了物理鏈接并且它支持CEA 861-D和VESA E-EDID標(biāo)準(zhǔn)處理更高級(jí)別的信令。VESA E-EDID標(biāo)準(zhǔn)允許顯示器指示它是否支持立體視頻傳送以及以什么格式傳送。應(yīng)當(dāng)指出的是,這樣的關(guān)于顯示器的性能的信息向后傳播到源設(shè)備。已知的VESA標(biāo)準(zhǔn)沒(méi)有定義控制顯示器中的3D處理的任何前向3D信息。在一個(gè)實(shí)施例中,3D顯示信號(hào)中的3D傳輸信息在標(biāo)識(shí)與其相關(guān)的對(duì)應(yīng)幀的同時(shí)例如作為數(shù)據(jù)流中的單獨(dú)的分組而異步地傳輸。該分組可以包括用于幀與視頻精確地同步的另外的數(shù)據(jù),并且可以在適當(dāng)?shù)臅r(shí)間插入到連續(xù)視頻幀之間的消隱間隔中。在一個(gè)實(shí)際的實(shí)施例中,將3D傳輸信息插入到HDMI數(shù)據(jù)島內(nèi)的分組中。在音視頻數(shù)據(jù)(AV)流中的如HDMI中所定義的輔助視頻信息(AVI)中包含3D傳輸信息的一個(gè)實(shí)例如下。AVI在AV流中作為信息幀從源設(shè)備攜帶到數(shù)字電視(DTV)監(jiān)視器。 如果源設(shè)備支持傳送輔助視頻信息(AVI)并且如果它確定DTV監(jiān)視器能夠接收該信息,那么它應(yīng)當(dāng)每VSYNC周期向DTV監(jiān)視器發(fā)送AVI —次。該數(shù)據(jù)適用于下一個(gè)全幀視頻數(shù)據(jù)。在下面的部分中,將給出HMDI信令的簡(jiǎn)短描述。在HDMI中,具有HDMI輸出的設(shè)備稱為信源,而具有HDMI輸入的設(shè)備稱為信宿。hfoFrame (信息幀)是CEA-861-D中定義的一種數(shù)據(jù)結(jié)構(gòu),其被設(shè)計(jì)成攜帶各種各樣的關(guān)于音頻或視頻流或者源設(shè)備的輔助數(shù)據(jù)項(xiàng)并且通過(guò)HDMI從信源攜帶到信宿。視頻場(chǎng)是從一個(gè)VSYNC活動(dòng)邊緣到下一個(gè)VSYNC活動(dòng)邊緣的周期。視頻格式被充分地定義,使得當(dāng)在監(jiān)視器處接收視頻格式時(shí),監(jiān)視器具有向用戶正確地顯示視頻的足夠信息。每種格式的定義包括視頻格式時(shí)序、畫(huà)面縱橫比和色度空間。視頻格式時(shí)序是與視頻格式關(guān)聯(lián)的波形。應(yīng)當(dāng)指出的是,特定視頻格式時(shí)序可以與超過(guò)一種視頻格式(例如720x480p@4:3以及720x480p@169)關(guān)聯(lián)。HDMI包括三個(gè)單獨(dú)的通信通道TMDS、DDC和可選的CEC。TMDS用來(lái)攜帶所有的音頻和視頻數(shù)據(jù)以及輔助數(shù)據(jù),包括描述活動(dòng)音頻和視頻流的AVI和音頻信息幀。DDC通道由 HDMI信源用來(lái)通過(guò)讀取E-EDID數(shù)據(jù)結(jié)構(gòu)確定信宿的性能和特性。HDMI信源預(yù)期讀取信宿的E-EDID并且僅僅輸送受信宿支持的音頻和視頻格式。 此外,HDMI信宿預(yù)期檢測(cè)信息幀并且適當(dāng)?shù)靥幚斫邮盏囊纛l和視頻數(shù)據(jù)。CEC通道可選地用于更高級(jí)別的用戶功能,例如自動(dòng)設(shè)置任務(wù)或者典型地與紅外遠(yuǎn)程控制用途關(guān)聯(lián)的任務(wù)。HDMI鏈接工作于三種模式之一視頻數(shù)據(jù)周期、數(shù)據(jù)島周期以及控制周期。在視頻數(shù)據(jù)周期期間,傳送活動(dòng)視頻線的活動(dòng)像素。在數(shù)據(jù)島周期期間,使用一系列分組傳送音頻和輔助數(shù)據(jù)。當(dāng)不必傳送視頻、音頻或輔助數(shù)據(jù)時(shí),使用控制周期。在不是控制周期的任何兩個(gè)周期之間,需要控制周期。表1示出了 HDMI數(shù)據(jù)島中的分組類型
權(quán)利要求
1.傳輸三維[3D]圖像數(shù)據(jù)的方法,該方法包括在3D源設(shè)備處,-處理源圖像數(shù)據(jù)以產(chǎn)生3D顯示信號(hào),該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀序列,所述3D視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期,這些分組包括信息幀分組,以及-輸出3D顯示信號(hào); 并且在3D顯示設(shè)備處, -接收3D顯示信號(hào),以及-處理3D顯示信號(hào)以便產(chǎn)生用于在3D顯示器上再現(xiàn)3D圖像數(shù)據(jù)的顯示控制信號(hào), 所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;-單位中的每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D數(shù)據(jù)結(jié)構(gòu),并且其中該方法包括,在3D源設(shè)備處,-在附加信息幀分組中包含3D傳輸信息,該3D傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量,該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);并且-所述產(chǎn)生顯示控制信號(hào)是根據(jù)3D傳輸信息而執(zhí)行的。
2.依照權(quán)利要求1的方法,其中在關(guān)于復(fù)用方案的信息中,復(fù)用方案組進(jìn)一步包括以下至少一個(gè)-場(chǎng)交替復(fù)用; -行交替復(fù)用;-并排幀復(fù)用,該并排幀復(fù)用指示所述數(shù)量的幀并排設(shè)置在所述視頻數(shù)據(jù)周期內(nèi); -2D和深度幀復(fù)用; -2D、深度、圖形和圖形深度幀復(fù)用。
3.依照權(quán)利要求1的方法,其中3D傳輸信息包括像素大小和幀頻率變化率的信息。
4.依照權(quán)利要求3的方法,其中視頻傳輸格式為HDMI。
5.依照權(quán)利要求4的方法,其中3D傳輸信息包含在AVI信息幀中。
6.依照權(quán)利要求4的方法,其中3D傳輸信息包含在供應(yīng)商特定信息幀中。
7.用于將三維[3D]圖像數(shù)據(jù)傳輸?shù)?D顯示設(shè)備的3D源設(shè)備,該設(shè)備包括-用于處理源圖像數(shù)據(jù)以產(chǎn)生3D顯示信號(hào)(56 )的生成裝置(52 ),該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀序列,所述3D視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期, 這些分組包括信息幀分組,以及-用于輸出3D顯示信號(hào)的輸出接口裝置(12),每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D數(shù)據(jù)結(jié)構(gòu),所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;其中輸出接口裝置適于在附加信息幀分組中傳送3D傳輸信息,該3D傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量, 該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);用于在顯示設(shè)備處根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)。
8.如權(quán)利要求7所述的3D源設(shè)備,其中輸出接口裝置適于通過(guò)復(fù)用方案組提供關(guān)于復(fù)用方案的進(jìn)一步信息,該復(fù)用方案組進(jìn)一步包括以下至少一個(gè)-場(chǎng)交替復(fù)用; -行交替復(fù)用;-并排幀復(fù)用,該并排幀復(fù)用指示所述數(shù)量的幀并排設(shè)置在所述視頻數(shù)據(jù)周期內(nèi); -2D和深度幀復(fù)用; -2D、深度、圖形和圖形深度幀復(fù)用。
9.3D顯示設(shè)備,包括-用于顯示3D圖像數(shù)據(jù)的3D顯示器(17),-用于接收3D顯示信號(hào)的輸入接口裝置(14 ),該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀,所述3D視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期,這些分組包括信息幀分組,以及-用于產(chǎn)生用于在3D顯示器上再現(xiàn)3D圖像數(shù)據(jù)的顯示控制信號(hào)的處理裝置(18), -每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D 數(shù)據(jù)結(jié)構(gòu),并且所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;-其中附加信息幀分組中的3D傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成 3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量,該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);并且 -處理裝置(18)被設(shè)置用于根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)。
10.如權(quán)利要求9所述的3D顯示設(shè)備,其中處理裝置(18)被設(shè)置用于根據(jù)關(guān)于復(fù)用方案組的復(fù)用方案的進(jìn)一步信息產(chǎn)生顯示控制信號(hào),該復(fù)用方案組進(jìn)一步包括以下至少一個(gè)-場(chǎng)交替復(fù)用; -行交替復(fù)用;-并排幀復(fù)用,該并排幀復(fù)用指示所述數(shù)量的幀并排設(shè)置在所述視頻數(shù)據(jù)周期內(nèi); -2D和深度幀復(fù)用; -2D、深度、圖形和圖形深度幀復(fù)用。
11.如權(quán)利要求10所述的3D顯示設(shè)備,其中視頻傳輸格式為HDMI。
12.如權(quán)利要求11所述的3D顯示設(shè)備,其中3D傳輸信息包含在AVI信息幀中。
13.如權(quán)利要求11所述的3D顯示設(shè)備,其中3D傳輸信息包含在供應(yīng)商特定信息幀中。
14.用于將三維[3D]圖像數(shù)據(jù)傳輸?shù)?D顯示設(shè)備的3D顯示信號(hào),該3D顯示信號(hào)包含依照3D視頻傳輸格式構(gòu)成3D圖像數(shù)據(jù)的幀序列,所述3D視頻格式包括其間活動(dòng)視頻的像素被傳送的視頻數(shù)據(jù)周期以及其間音頻和輔助數(shù)據(jù)使用一系列分組來(lái)傳送的數(shù)據(jù)島周期, 這些分組包括信息幀分組,所述幀序列包括若干單位,單位是從一個(gè)垂直同步信號(hào)到下一個(gè)垂直同步信號(hào)的周期,每個(gè)單位與依照復(fù)用方案設(shè)置的一定數(shù)量的幀相應(yīng),所述一定數(shù)量的幀包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息;其中-每幀具有用于表示數(shù)字圖像像素?cái)?shù)據(jù)序列的數(shù)據(jù)結(jié)構(gòu),并且每種幀類型代表部分3D 數(shù)據(jù)結(jié)構(gòu),其中所述3D顯示信號(hào)包括-附加信息幀分組中的3D傳輸信息,該3D傳輸信息至少包括關(guān)于復(fù)用方案的信息,包括要組成3D顯示信號(hào)中的單幅3D圖像的單位中的視頻幀數(shù)量,該復(fù)用方案選自至少包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);用于在顯示設(shè)備處根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)。
15.如權(quán)利要求14所述的3D顯示信號(hào),其中在關(guān)于復(fù)用方案的信息中,復(fù)用方案組進(jìn)一步包括以下至少一個(gè)-場(chǎng)交替復(fù)用;-行交替復(fù)用;-并排幀復(fù)用,該并排幀復(fù)用指示所述數(shù)量的幀并排設(shè)置在所述視頻數(shù)據(jù)周期內(nèi);-2D和深度幀復(fù)用;-2D、深度、圖形和圖形深度幀復(fù)用。
全文摘要
描述了一種傳輸三維(3D)圖像數(shù)據(jù)的系統(tǒng)。3D源設(shè)備(10)經(jīng)由像HDMI那樣的高速數(shù)字接口提供用于顯示器(13)的3D顯示信號(hào)(56)。該3D顯示信號(hào)包含幀序列。該幀序列包括若干單位,每個(gè)單位與包含預(yù)期要被復(fù)合且顯示為3D圖像的視頻信息的幀相應(yīng)。3D源設(shè)備包括3D傳輸信息,該3D傳輸信息至少包括關(guān)于單位中的視頻幀的信息。顯示器檢測(cè)3D傳輸信息,并且根據(jù)3D傳輸信息產(chǎn)生顯示控制信號(hào)。附加信息幀分組中的3D傳輸信息包括關(guān)于將幀復(fù)用到3D顯示信號(hào)中的復(fù)用方案的信息,該復(fù)用方案選自包括幀交替復(fù)用的復(fù)用方案組,所述幀交替指示所述數(shù)量的幀順序地設(shè)置在所述視頻數(shù)據(jù)周期內(nèi)。
文檔編號(hào)H04N13/00GK102292996SQ201080004997
公開(kāi)日2011年12月21日 申請(qǐng)日期2010年1月14日 優(yōu)先權(quán)日2009年1月20日
發(fā)明者W. T. 范 德 海登 G., C. 塔爾斯特拉 J., S. 牛頓 P. 申請(qǐng)人:皇家飛利浦電子股份有限公司