專(zhuān)利名稱(chēng)：立體圖像數(shù)據(jù)發(fā)送設(shè)備、立體圖像數(shù)據(jù)發(fā)送方法和立體圖像數(shù)據(jù)接收設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及立體圖像數(shù)據(jù)發(fā)送設(shè)備、立體圖像數(shù)據(jù)發(fā)送方法和立體圖像數(shù)據(jù)接收設(shè)備，并且具體涉及能夠在接收側(cè)執(zhí)行諸如OSD等的圖形信息的良好顯示的立體圖像數(shù)據(jù)發(fā)送設(shè)備等。
背景技術(shù)：
例如，在PTLl中提出了使用電視電波的立體圖像數(shù)據(jù)的發(fā)送方法。利用該發(fā)送方法，發(fā)送具有用于左眼的圖像數(shù)據(jù)和用于右眼的圖像數(shù)據(jù)的立體圖像數(shù)據(jù)，并且在電視接收機(jī)執(zhí)行使用雙眼視差的立體圖像顯示。圖35圖示屏幕上對(duì)象(object)的左和右圖像的顯示位置以及使用雙眼視差執(zhí)行立體圖像顯示時(shí)其立體圖像的再現(xiàn)位置之間的關(guān)系。例如，對(duì)于對(duì)象A，如圖所示其顯示有在屏幕上左圖像La向右側(cè)偏移并 且右圖像Ra向左側(cè)偏移，左和右視線(xiàn)在屏幕表面前方交叉，所以其立體圖像的再現(xiàn)位置在屏幕表面的近側(cè)。DPa代表關(guān)于對(duì)象A在水平方向的視差矢量(視差信息)。此外，例如，如屏幕上所示，對(duì)于其中左圖像Lb和右圖像Rb顯示在同一位置的對(duì)象B，左和右視線(xiàn)在屏幕表面上交叉，所以其立體圖像的再現(xiàn)位置在屏幕表面上，即監(jiān)視器位置。此外，例如，對(duì)于對(duì)象C，如圖所示其顯示有在屏幕上左圖像Lc向左側(cè)偏移并且右圖像Re向右側(cè)偏移，所以其立體圖像的再現(xiàn)位置在屏幕表面的后面。DPc代表關(guān)于對(duì)象C在水平方向的視差矢量。引用列表專(zhuān)利文獻(xiàn)PTLl :日本未審專(zhuān)利申請(qǐng)公開(kāi)No. 2005-611
發(fā)明內(nèi)容
技術(shù)問(wèn)題如上所述，在立體圖像顯示的情況下，觀看者將通常利用雙眼視差感覺(jué)立體圖像的透視。期望重疊在圖像上的重疊信息(諸如像例如OSD (屏幕上顯示)等的圖形信息)將不但在二維空間渲染，而且利用三維深度感結(jié)合立體圖像顯示渲染。例如，如果執(zhí)行諸如OSD等的圖形信息在圖像上的重疊顯示(疊加顯示)，則觀看者可能感覺(jué)透視上的不一致，除非使得顯示在透視方面比圖像內(nèi)的最近對(duì)象(ob ject)的平面(下文中稱(chēng)為“立體圖像平面”)更接近觀看者。也就是說(shuō)，在執(zhí)行諸如OSD等的圖形信息在圖像上的重疊顯示的情況下，期望將根據(jù)圖像內(nèi)的對(duì)象的透視進(jìn)行視差調(diào)整，以便保持透視上的一致性。本發(fā)明的目的在于當(dāng)在立體圖像顯示中顯示諸如像例如OSD等的圖形信息的重疊信息時(shí)，對(duì)于圖像中的對(duì)象保持透視上的一致性。
問(wèn)題的解決方案本發(fā)明的一個(gè)概念是一種立體圖像數(shù)據(jù)發(fā)送設(shè)備，包括圖像數(shù)據(jù)輸出單元，配置為輸出構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)；深度信息輸出單元，配置為輸出對(duì)應(yīng)于所述立體圖像的深度信息；以及發(fā)送單元，配置為發(fā)送所述圖像數(shù)據(jù)和所述深度信息；其中，所述深度信息包括圖像顯示平面的分割信息以及分割區(qū)域的深度信息；并且其中，所述發(fā)送單元發(fā)送具有包括所述圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，并且將包括所述深度信息的描述符插入所述復(fù)用數(shù)據(jù)流。在本發(fā)明的情況下，圖像數(shù)據(jù)輸出單元輸出構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。此外，深度信息輸出單元輸出對(duì)應(yīng)于所述立體圖像的深度信息。發(fā)送單元然后發(fā)送所述圖像數(shù)據(jù)和所述深度信息。所述深度信息包括圖像顯示平面的分割信息以及分割區(qū)域的深度信息。例如，深度信息可以是指示立體圖像平面(在透視方面圖像中最接近對(duì)象的平面)是否在距監(jiān)視器位置的近側(cè)的圖像平面信息。該圖像平面信息還可以例如是構(gòu)成左眼圖像和右眼圖像的視差信息(視差矢量)的代碼信息。如果視差信息的代碼是負(fù)的，那么可以理解的是立體圖像平面在距監(jiān)視器位置的近側(cè)。此外，例如，深度信息可以是指示立體圖像平面是否在距監(jiān)視器位置的近側(cè)的圖像平面信息，或者是左眼圖像和右眼圖像的視差信息，并且指示所述視差信息存在的標(biāo)記Ih息可以插入所述深度彳目息。例如，深度/[目息可以是構(gòu)成所述視差彳目息的代碼彳目息，或者是構(gòu)成所述代碼息和所述視差息 的絕對(duì)值息。在此情況下，視差息的代碼息構(gòu)成圖像平面信息。通過(guò)除了圖像平面信息外包括視差信息作為深度信息，不但可以在接收側(cè)理解立體圖像平面的位置是否是在距監(jiān)視器位置的近側(cè)，而且還可以更詳細(xì)理解其位置。此外，由于插入標(biāo)記信息，可以選擇性地僅僅發(fā)送圖像平面信息或者圖像平面信息和視差信息兩者。例如，分割信息可以由指示分割類(lèi)型的信息和指示分割數(shù)目的信息構(gòu)成。由于分割信息以此方式由兩個(gè)信息構(gòu)成，所以可以用較少數(shù)目的信息指定更大數(shù)目的分割圖案。例如，分割類(lèi)型包括其中使用對(duì)角線(xiàn)分割所述圖像顯示平面的分割類(lèi)型。此外，例如，所述分割類(lèi)型包括其中使用水平方向線(xiàn)和/或垂直方向線(xiàn)分割所述圖像顯示平面的分割類(lèi)型。發(fā)送單元發(fā)送具有包括所述圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流。將包括所述深度信息的描述符插入所述復(fù)用數(shù)據(jù)流。例如，所述復(fù)用數(shù)據(jù)流包括用作節(jié)目專(zhuān)用信息的節(jié)目圖表，其指示包括在所述復(fù)用數(shù)據(jù)流中的每個(gè)基本流所屬于的節(jié)目，并且所述描述符插入所述節(jié)目圖表下面。在此情況下，在節(jié)目期間順序發(fā)送描述符，使得能夠在節(jié)目期間動(dòng)態(tài)改變深度信息。此外，例如，所述復(fù)用數(shù)據(jù)流包括用作服務(wù)信息的事件信息表，用于以事件為增量執(zhí)行管理，并且所述描述符插入所述事件信息表下面。在此情況下，在節(jié)目的開(kāi)始發(fā)送描述符，并且深度信息在節(jié)目期間固定。因此，在本發(fā)明的情況下，連同構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，發(fā)送對(duì)應(yīng)于該立體圖像的深度信息。因此，通過(guò)在接收側(cè)使用深度信息，可以使用諸如例如像OSD的圖形信息的要重疊在左眼圖像和右眼圖像上的重疊信息，作為已經(jīng)根據(jù)與圖像中的各對(duì)象的透視經(jīng)歷視差調(diào)整的重疊信息。因此，例如在顯示像OSD的圖形信息時(shí)，可以保持與圖像中各對(duì)象的透視一致性。此外，在本發(fā)明的情況下，深度信息包括圖像顯示平面的分割信息以及每個(gè)顯示區(qū)域的深度信息，所述深度信息包括在插入復(fù)用數(shù)據(jù)流的描述符中并且發(fā)送，所述復(fù)用數(shù)據(jù)流具有包括立體圖像數(shù)據(jù)的數(shù)據(jù)流。也就是說(shuō)，可以容易地執(zhí)行深度信息到接收側(cè)的發(fā)送。注意到，在本發(fā)明的情況下，可以進(jìn)行這樣的安排，其中例如所述發(fā)送單元對(duì)應(yīng)于所述圖像數(shù)據(jù)的每個(gè)預(yù)定時(shí)段的開(kāi)始時(shí)間點(diǎn)，將所述描述符插入所述復(fù)用數(shù)據(jù)流，并且其中，對(duì)應(yīng)于每個(gè)預(yù)定時(shí)段的開(kāi)始時(shí)間點(diǎn)插入所述復(fù)用數(shù)據(jù)流的描述符包括比所述時(shí)段更晚時(shí)段的深度信息。因此，在接收側(cè)，通過(guò)使用包括在該時(shí)段和該時(shí)段之前和之后時(shí)段的深度信息中的視差信息的內(nèi)插處理，可以獲得在時(shí)間方向(幀方向)具有平滑改變(即，具有平滑更新曲線(xiàn))的視差信息，作為在為每個(gè)時(shí)段提供左眼重疊信息和右眼重疊信息之間的視差時(shí)使用的視差信息。此外，本發(fā)明的另一概念是一種立體圖像數(shù)據(jù)接收設(shè)備，包括

接收單元，配置為接收具有包括構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，所述復(fù)用數(shù)據(jù)流中插入包括對(duì)應(yīng)于所述立體圖像的深度信息的描述符，所述深度信息由圖像顯示平面的分割信息以及分割區(qū)域的深度信息構(gòu)成；重疊信息數(shù)據(jù)輸出單元，配置為輸出從所述復(fù)用數(shù)據(jù)流獲得的對(duì)應(yīng)于所述左眼圖像數(shù)據(jù)的左眼重疊信息的數(shù)據(jù)，以及從所述復(fù)用數(shù)據(jù)流獲得的對(duì)應(yīng)于所述右眼圖像數(shù)據(jù)的右眼重疊信息的數(shù)據(jù)；以及數(shù)據(jù)重疊單元，配置為將所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)重疊在從所述復(fù)用數(shù)據(jù)流獲得的所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)上；其中，所述重疊信息數(shù)據(jù)輸出單元基于從所述復(fù)用數(shù)據(jù)流獲得的所述深度信息，提供所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)之間的視差。在本發(fā)明的情況下，接收單元接收具有包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流。在該復(fù)用數(shù)據(jù)流中插入描述符，所述描述符包括圖像顯示平面的分割信息以及分割區(qū)域的深度信息。例如，該描述符插入節(jié)目圖表或事件信息表下面。重疊信息數(shù)據(jù)輸出單元輸出對(duì)應(yīng)于所述左眼圖像數(shù)據(jù)的左眼重疊信息的數(shù)據(jù)，以及對(duì)應(yīng)于所述右眼圖像數(shù)據(jù)的右眼重疊信息的數(shù)據(jù)。此外，數(shù)據(jù)重疊單元將所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)重疊在從所述復(fù)用數(shù)據(jù)流獲得的所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)上。因此，諸如OSD等的圖形信息可以在立體圖像上重疊顯示。所述重疊信息數(shù)據(jù)輸出單元基于從所述復(fù)用數(shù)據(jù)流獲得的所述深度信息，提供所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)之間的視差。因此，在本發(fā)明的情況下，例如在顯示像OSD的圖形信息時(shí)，可以保持與圖像中各對(duì)象的透視一致性。注意到，在本發(fā)明的情況下，例如，可以進(jìn)行這樣的安排，其中在基于在所述深度信息中的視差信息提供所述左眼重疊信息和所述右眼重疊信息之間的視差時(shí)，如果存在通過(guò)在所述接收單元接收的新的描述符更新視差信息，那么所述重疊信息數(shù)據(jù)輸出單元對(duì)于多個(gè)幀使用通過(guò)內(nèi)插處理獲得的視差信息，以便在所述多個(gè)幀上達(dá)到新的視差信息。因此，可以使得用于提供視差的視差信息的改變平滑，并且可以抑制提供到左眼和右眼圖形信息的視差突然改變，給觀看者不自然感覺(jué)的情況。此外，在本發(fā)明的情況下，例如，可以進(jìn)行這樣的安排，其中已經(jīng)對(duì)應(yīng)于所述圖像數(shù)據(jù)的每個(gè)預(yù)定時(shí)段的開(kāi)始時(shí)間點(diǎn)，將所述描述符插入所述復(fù)用數(shù)據(jù)流，并且其中對(duì)應(yīng)于每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)插入所述復(fù)用數(shù)據(jù)流的描述符包括比所述時(shí)段更晚時(shí)段的深度信息，并且其中在每個(gè)時(shí)段中提供所述左眼重疊信息和所述右眼重疊信息之間的視差時(shí)，所述重疊信息數(shù)據(jù)輸出單元使用通過(guò)內(nèi)插處理獲得的視差信息，所述內(nèi)插處理使用包括在所述時(shí)段和所述時(shí)段之前和之后時(shí)段的所述深度信息中的視差信息。因此，可以使得用于提供視差的視差信息的改變?cè)跁r(shí)間方向(幀方向)平滑(即，具有用于提供視差的視差信息的平滑更新曲線(xiàn))，并且可以抑制提供到左眼和右眼圖形信息的視差突然改變，給觀看者不自然感覺(jué)的情況。本發(fā)明的另一概念是是一種立體圖像數(shù)據(jù)接收設(shè)備，包括接收單元，配置為接收具有包括構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，所述復(fù)用數(shù)據(jù)流中插入包括對(duì)應(yīng)于所述立體圖像的深度信息的描述符，所述深度信息由圖像顯示平面的分割信息以及分割區(qū)域的深度信息構(gòu)成；以及發(fā)送單元，配置為經(jīng)由發(fā)送路徑，發(fā)送從所述復(fù)用數(shù)據(jù)流獲得的所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)以及所述深度信息到外部設(shè)備。在本發(fā)明的情況下，接收單元接收具有包括構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流。所述復(fù)用數(shù)據(jù)流中插入包括對(duì)應(yīng)于所述立體圖像的深度信息的描述符，所述深度信息由圖像顯示平面的分割信息以及分割區(qū)域的深度信息構(gòu)成。例如，該描述符插入節(jié)目圖表或事件信息表下面。發(fā)送單元經(jīng)由發(fā)送路徑，發(fā)送從所述復(fù)用數(shù)據(jù)流獲得的所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)以及所述深度信息到 外部設(shè)備。例如，所述發(fā)送單元通過(guò)差分信號(hào)，經(jīng)由多個(gè)信道中的所述發(fā)送路徑，發(fā)送所述圖像數(shù)據(jù)到所述外部設(shè)備，并且其中所述深度信息插入所述圖像數(shù)據(jù)的消隱時(shí)段中，從而發(fā)送所述深度信息到所述外部設(shè)備。因此，在本發(fā)明的情況下，連同構(gòu)成立體圖像的左眼數(shù)據(jù)和右眼數(shù)據(jù)，經(jīng)由發(fā)送路徑發(fā)送對(duì)應(yīng)于該立體圖像的深度信息到外部設(shè)備。因此，在外部設(shè)備(諸如例如像電視接收機(jī)的圖像顯示設(shè)備)，通過(guò)使用深度信息，要重疊在左眼圖像和右眼圖像上的重疊信息(諸如例如像OSD的圖形信息)，可以用作根據(jù)與圖像中各對(duì)象的透視已經(jīng)經(jīng)歷視差調(diào)整的重疊信息。因此，例如在顯示像OSD的圖形信息時(shí)，可以保持與圖像中各對(duì)象的透視一致性。本發(fā)明的有益效果根據(jù)本發(fā)明，當(dāng)在立體圖像顯示時(shí)顯示重疊信息(諸如例如像OSD的圖形信息)時(shí)，可以容易地實(shí)現(xiàn)保持與圖像中每個(gè)對(duì)象的透視一致性。


圖1是圖示作為本發(fā)明實(shí)施例的立體圖像顯示系統(tǒng)的配置示例的框圖。圖2是圖示廣播站處的發(fā)送數(shù)據(jù)生成單元的配置示例的框圖。圖3是圖示1920X1080p像素格式的圖像數(shù)據(jù)的圖。圖4是用于描述作為立體圖像數(shù)據(jù)(3D圖像數(shù)據(jù))的發(fā)送格式的“上下”格式、“并排”格式和“幀順序”格式的圖。圖5是用于描述檢測(cè)右眼圖像對(duì)于左眼圖像的視差矢量的示例的圖。圖6是用于描述通過(guò)塊匹配格式獲得視差矢量的圖。圖7是圖示在利用分割類(lèi)型I的四路(four-way)分割情況下的位置圖示例的圖，在分割類(lèi)型I中使用對(duì)角線(xiàn)分割圖像顯示平面。圖8是圖示OSD圖形信息已經(jīng)偏移到圖像的邊緣部分的重疊顯示的情況的圖。圖9是圖示在利用分割類(lèi)型I的八路分割情況下的位置圖示例的圖，在分割類(lèi)型I中使用對(duì)角線(xiàn)分割圖像顯示平面。圖10是圖示在利用分割類(lèi)型2的四路分割情況下的位置圖示例的圖，在分割類(lèi)型2在水平方向和垂直方向上均等分割圖像顯示平面。圖11是圖示OSD圖形信息已經(jīng)偏移到圖像的角部部分的重疊顯示的情況的圖。圖12是圖示在利用分割類(lèi)型2的九路分割情況下的位置圖示例的圖，在分割類(lèi)型2中在水平方向和垂直方向上均等分割圖像顯示平面。圖13是圖示在利用分割類(lèi)型3的五路分割情況下的位置圖示例的圖，在分割類(lèi)型3中使用對(duì)角線(xiàn)和矩形的邊分割圖像顯示平面。圖14是圖示在分割圖案中的每個(gè)分割區(qū)域中獲得視差信息的表現(xiàn)的方式的圖，在該分割圖案中使用對(duì)角線(xiàn)四路分割圖像顯示平面。
`
圖15是描述在已經(jīng)偏移到圖像的邊緣部分的OSD圖形信息的重疊顯示的情況下，可以使用對(duì)應(yīng)于重疊顯示位置的分割區(qū)域的視差信息(表現(xiàn))提供視差到左眼和右眼OSD圖形信息的圖。圖16是圖示復(fù)用數(shù)據(jù)流的配置示例的圖，在該復(fù)用數(shù)據(jù)流中描述符(z表面描述符)位于PMT內(nèi)的節(jié)目描述符(Program Descriptor)中，也就是說(shuō)PMT下面(情況I)。圖17是圖示復(fù)用數(shù)據(jù)流的配置示例的圖，在該復(fù)用數(shù)據(jù)流中描述符(z表面描述符)位于視頻基本環(huán)(視頻Es環(huán))的描述符(descriptor)中，也就是說(shuō)PMT下面(情況2)。圖18是圖示復(fù)用數(shù)據(jù)流的配置示例的圖，在該復(fù)用數(shù)據(jù)流中描述符(z表面描述符)位于EIT下面(情況3)。圖19圖示將描述符(z表面描述符)插入PMT下面并且在節(jié)目時(shí)段期間順序發(fā)送描述符，使得深度信息動(dòng)態(tài)改變的情況的圖。圖20是用于描述場(chǎng)景檢測(cè)和描述符發(fā)送的概述的流程圖。圖21是圖不在每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)中包括后一時(shí)段的深度信息的情況下，描述符的發(fā)送定時(shí)以及包括在描述符中的深度信息之間的關(guān)系的圖。圖22是圖示在節(jié)目時(shí)段期間固定深度信息的、插入EIT下面的描述符(z表面描述符)的情況的圖。圖23是圖示描述符(z表面描述符)的配置示例(語(yǔ)法)的圖。圖24是圖示描述符(z表面描述符)的配置示例中主要信息(語(yǔ)法)的內(nèi)容的圖。圖25是圖示描述符(z表面描述符)的另一配置示例(語(yǔ)法)的圖。圖26是圖示機(jī)頂盒的配置示例的圖。圖27是用于描述OSD顯示數(shù)據(jù)生成單元處的視差信息的內(nèi)插處理的圖。
圖28是用于描述在對(duì)應(yīng)于每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)中包括后一時(shí)段的深度信息的情況下的內(nèi)插處理的示例的圖。圖29是圖示電視接收機(jī)的配置示例的框圖。圖30是圖示HDMI發(fā)送單元(HDMI源)和HDMI接收單元(HDMI宿)的配置示例的框圖。圖31是圖示TMDS發(fā)送數(shù)據(jù)(水平X垂直為1920像素X 1080線(xiàn)的情況發(fā)送的圖像數(shù)據(jù)的情況)的配置示例的圖。圖32是圖示源設(shè)備和宿設(shè)備的HDMI線(xiàn)纜連接到的HDMI端子的管腳陣列(類(lèi)型A)的圖。圖33是圖示在使用用于深度信息組的發(fā)送的HDMI廠商專(zhuān)用信息幀(HDMI VendorSpecific InfoFrame)的情況下的HDMI廠商專(zhuān)用信息巾貞的分組配置示例的圖。圖34是圖示立體圖像顯示系統(tǒng)的另一配置示例的框圖。圖35是用于描述在使用雙眼視差的圖像顯示時(shí)，屏幕上對(duì)象的左和右圖像的顯示位置以及其立體圖像的再現(xiàn)位置之間的關(guān)系的圖。
具體實(shí)施例方式現(xiàn)在將描述用于實(shí)施本發(fā)明的模式(下文中，稱(chēng)為“實(shí)施例”)。注意到，將按以下順序進(jìn)行描述。1.實(shí)施例2.修改 〈1.實(shí)施例 >[立體圖像顯示系統(tǒng)的配置示例]圖1圖示作為實(shí)施例的立體圖像顯示系統(tǒng)10的配置示例。該立體圖像顯示系統(tǒng)10包括廣播站100、機(jī)頂盒(STB) 200和電視接收機(jī)(TV) 300。機(jī)頂盒200和電視接收機(jī)300經(jīng)由HDMI (高清晰度多媒體接口)線(xiàn)纜400連接。在機(jī)頂盒200的情況下，提供HDMI端子202。在電視接收機(jī)300的情況下，提供HDMI端子
302。HDMI線(xiàn)纜400的一端連接到機(jī)頂盒200的HDMI端子202，并且該HDMI線(xiàn)纜400的另一端連接到電視接收機(jī)300的HDMI端子302。[廣播站的描述]廣播站100通過(guò)在廣播波上攜帶位流數(shù)據(jù)BSD，發(fā)送該位流數(shù)據(jù)BSD。廣播站100具有生成位流數(shù)據(jù)BSD的發(fā)送數(shù)據(jù)生成單元110。該位流數(shù)據(jù)BSD包括圖像數(shù)據(jù)、音頻數(shù)據(jù)、深度信息等。在此，圖像數(shù)據(jù)(下文中適當(dāng)?shù)胤Q(chēng)為“立體圖像數(shù)據(jù)”)包括構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。音頻數(shù)據(jù)是對(duì)應(yīng)于該立體圖像數(shù)據(jù)的音頻數(shù)據(jù)。深度信息對(duì)應(yīng)于該立體圖像，并且包括圖像顯示平面的分割信息以及用于每個(gè)分割區(qū)域的深度信肩、O[發(fā)送數(shù)據(jù)生成單元的配置示例]圖2圖示在廣播站100中生成發(fā)送數(shù)據(jù)的發(fā)送數(shù)據(jù)生成單元110的配置示例。該發(fā)送數(shù)據(jù)生成單元Iio具有相機(jī)IllL和111R、視頻構(gòu)造單元112、視差圖生成單元113、麥克風(fēng)114、數(shù)據(jù)提取單元115和切換開(kāi)關(guān)116到118、發(fā)送數(shù)據(jù)生成單元110還具有視頻編碼器119、音頻編碼器120、深度信息集創(chuàng)建單元122和多工器126。相機(jī)IllL拍攝左眼圖像并且獲得用于立體圖像顯示的左眼圖像。相機(jī)IllR拍攝右眼圖像并且獲得用于立體圖像顯示的右眼圖像。視頻構(gòu)造單元112將用相機(jī)IllL獲得的左眼圖像數(shù)據(jù)和用相機(jī)IllR獲得的右眼圖像數(shù)據(jù)處理為對(duì)應(yīng)于發(fā)送格式的立體圖像數(shù)據(jù)(3D圖像數(shù)據(jù))。該視頻構(gòu)造單元112配置圖像數(shù)據(jù)輸出單元。將描述立體圖像數(shù)據(jù)的發(fā)送格式的示例。盡管給出以下第一到第三格式作為發(fā)送格式，但是可以使用不同于這些的發(fā)送格式。在此，如圖3所示，將對(duì)于左眼(L)和右眼(R)的每條圖像數(shù)據(jù)是具有確定分辨率(例如，1920X1080的像素格式)的圖像數(shù)據(jù)的情況進(jìn)行描述作為示例。第一種發(fā)送格式是上下(Top & Bottom)格式，并且如圖4 (a)所示是用于在垂直方向的前半發(fā)送左眼圖像數(shù)據(jù)的每條線(xiàn)的數(shù)據(jù)，并且在垂直方向的后半發(fā)送左眼圖像數(shù)據(jù)的每條線(xiàn)的數(shù)據(jù)。在此情況下，左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的線(xiàn)稀疏到1/2，所以垂直分辨率減小為對(duì)于原始信號(hào)的一半。第二種發(fā)送格式是并排(Side By Side)格式，并且如圖4 (b)所示是用于在水平方向的前半發(fā)送左眼圖像數(shù)據(jù)的像素?cái)?shù)據(jù)，并且在水平方向的后半發(fā)送右眼圖像數(shù)據(jù)的像素?cái)?shù)據(jù)。在此情況下，左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)每個(gè)具有其像素?cái)?shù)據(jù)在水平方向稀疏為1/2，所以水平分辨率減小為對(duì)于原始信號(hào)的一半。第三種發(fā)送格式是巾貞順序(FrameSequntial)格式,并且如圖4 (C)所示是用于通過(guò)對(duì)于每幀順序切換左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，發(fā)送左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的格式。該巾貞順序格式有時(shí)也稱(chēng) 為全巾貞(Full Frame)格式或后向兼容(BackwardCompatible)格式。返回圖2，視差圖生成單元113例如基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，檢測(cè)用于構(gòu)成圖像的每個(gè)像素的視差信息(視差矢量)，并且創(chuàng)建視差圖。視差信息由代碼信息和絕對(duì)值信息配置。例如，感覺(jué)為比監(jiān)視器位置更近的像素(Pixel)的視差信息的代碼是負(fù)的，并且感覺(jué)為比監(jiān)視器位置更遠(yuǎn)的像素(pixel)的視差信息的代碼是正的。此外，感覺(jué)像素越遠(yuǎn)離監(jiān)視器位置，視差信息的絕對(duì)值越大。將描述視差矢量的檢測(cè)示例。在此，將描述檢測(cè)右眼圖像相對(duì)于左眼圖像的視差矢量的示例。如圖5所示，將取左眼圖像為檢測(cè)圖像，并且取右眼圖像為參考圖像。在此示例的情況下，將檢測(cè)(xi，yi)和(xj，yj)的位置的視差矢量。作為示例，將對(duì)于其中檢測(cè)(xi，yi)的位置的視差矢量的情況進(jìn)行描述。在此情況下，例如在(xi，yi)的像素位置作為左上情況下4X4、8X8或16X16的像素塊(視差檢測(cè)塊)Bi設(shè)置到左眼圖像。隨后，在右眼圖像的情況下，搜索與像素塊Bi匹配的像素塊。在此情況下，以(xi，yi)的位置作為中心的搜索范圍設(shè)置到右眼圖像，并且如在上面像素塊Bi的情況下，在搜索范圍內(nèi)的每個(gè)像素順序取為感興趣的像素的情況下，順序設(shè)置例如4X4、8X8或16X16的比較塊。獲得像素塊Bi和順序設(shè)置的比較塊之間的每個(gè)相應(yīng)像素的差別的絕對(duì)值的和。在此，如圖6所示，如果說(shuō)像素塊Bi的像素值是L (x, y)，并且比較塊的像素值是R(x, y)，那么比較塊Bi和特定比較塊之間差的絕對(duì)值的和用Σ |L(x，y)-R(x，y) I代表。當(dāng)η個(gè)像素包括在設(shè)置到右眼圖像的搜索范圍時(shí)，最后，獲得η個(gè)和SI到Sn，選擇其最小和Smin。隨后，從已經(jīng)從其獲得和Smin的比較塊獲得左上像素的位置(xi’，yi’)。因此，檢測(cè)(xi，yi)的位置的視差矢量為(xi’-xi，yi’-yi)。盡管省略詳細(xì)描述，但是同樣對(duì)于位置(xj，yj)的視差矢量，例如在(xj，yj)的像素位置作為左上的情況下4X4、8X8或16X16的像素塊Bj設(shè)置到左眼圖像，并且在相同的處理中進(jìn)行檢測(cè)。麥克風(fēng)114對(duì)于用相機(jī)IllL和IllR拍攝的圖像檢測(cè)音頻，并且獲得音頻數(shù)據(jù)。在可拆卸地安裝數(shù)據(jù)記錄介質(zhì)115a的狀態(tài)下使用數(shù)據(jù)提取單元115。該數(shù)據(jù)記錄介質(zhì)115a是盤(pán)形記錄介質(zhì)、半導(dǎo)體存儲(chǔ)器等。數(shù)據(jù)記錄介質(zhì)115a連同包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)，以相關(guān)聯(lián)方式在其中記錄音頻數(shù)據(jù)和視差圖。數(shù)據(jù)提取單元115從數(shù)據(jù)記錄介質(zhì)115a提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)和視差圖，并且輸出。數(shù)據(jù)提取單元115配置圖像數(shù)據(jù)輸出單元?，F(xiàn)在，在數(shù)據(jù)記錄介質(zhì)115a中記錄的立體圖像數(shù)據(jù)等價(jià)于在視頻構(gòu)造單元112獲得的立體圖像數(shù)據(jù)。此外，數(shù)據(jù)記錄介質(zhì)115a中的音頻數(shù)據(jù)等價(jià)于在麥克風(fēng)114獲得的音頻數(shù)據(jù)。此外，數(shù)據(jù)記錄介質(zhì)115a中記錄的視差圖等價(jià)于在視差圖生成單元113生成的視
差矢量。切換開(kāi)關(guān)116選擇性地提取在視頻構(gòu)造單元112獲得的立體圖像數(shù)據(jù)或從數(shù)據(jù)提取單元115輸出的立體圖像數(shù)據(jù)。在此情況下，切換開(kāi)關(guān)116在實(shí)況模式中連接到a側(cè)，并且提取在視頻構(gòu)造單元112獲得的立體圖像數(shù)據(jù)，而在回放模式中連接到b側(cè)，并且提取從數(shù)據(jù)提取單元115輸出的立體圖像數(shù)據(jù)。切換開(kāi)關(guān)117選擇性地提取在視差圖生成單元113生成的視差圖或從數(shù)據(jù)提取單元115輸出的視差圖。在此情況下，切換開(kāi)關(guān)117在實(shí)況模式中連接到a側(cè)，并且提取在視差圖生成單元113生成的視差圖，而在回放模式中連接到b側(cè)，并且提取從數(shù)據(jù)提取單元115輸出的視差圖。 切換開(kāi)關(guān)118選擇性地提取在麥克風(fēng)114獲得的音頻數(shù)據(jù)或從數(shù)據(jù)提取單元115輸出的音頻數(shù)據(jù)。在此情況下，切換開(kāi)關(guān)118在實(shí)況模式中連接到a側(cè)，并且提取在麥克風(fēng)114獲得的音頻數(shù)據(jù)，而在回放模式中連接到b側(cè)，并且提取從數(shù)據(jù)提取單元115輸出的音頻數(shù)據(jù)。視頻編碼器119使在切換開(kāi)關(guān)116提取的立體圖像數(shù)據(jù)經(jīng)歷諸如MPEG4-AVC、MPEG2、VC-1等的編碼，并且生成視頻數(shù)據(jù)流(視頻基本流)。音頻編碼器120使在切換開(kāi)關(guān)118提取的音頻數(shù)據(jù)經(jīng)歷諸如AC3、AAC等的編碼，并且生成音頻數(shù)據(jù)流(音頻基本流)。深度信息集創(chuàng)建單元122基于在切換開(kāi)關(guān)117提取的視差圖，創(chuàng)建對(duì)應(yīng)于從切換開(kāi)關(guān)116輸出的預(yù)定節(jié)目的立體圖像數(shù)據(jù)的深度信息集。該深度信息集包括圖像顯示平面的分割信息以及每個(gè)分割區(qū)域的深度信息。將對(duì)于圖像顯示平面的分割信息進(jìn)行描述。該分割信息由指示分割類(lèi)型的信息和指示分割數(shù)目的信息構(gòu)成。例如，分割類(lèi)型包括使用對(duì)角線(xiàn)執(zhí)行圖像顯示平面的分割、使用水平方向線(xiàn)和/或垂直方向線(xiàn)執(zhí)行圖像顯示平面的分割等的分割類(lèi)型。確定分割類(lèi)型和分割的數(shù)目唯一地確定圖像顯示平面的分割圖案。分割類(lèi)型和分割的數(shù)目可以由用戶(hù)設(shè)置。圖7圖示在利用分割類(lèi)型I四路分割圖像顯示平面的情況下的位置圖示例，在分割類(lèi)型I中使用對(duì)角線(xiàn)分割圖像顯示平面。在該示例的情況下，使用對(duì)角線(xiàn)四路分割圖像顯示平面，其中上分割區(qū)域由“0000”代表，右分割區(qū)域由“0001”代表，下分割區(qū)域由“0010”代表，并且左分割區(qū)域由“0011 ”代表。圖7中示出的分割示例也適于例如如圖8所示的利用偏移到圖像的邊緣部分的OSD圖形信息執(zhí)行重疊顯示的情況，因?yàn)榭梢园l(fā)送對(duì)應(yīng)于重疊顯示位置的深度信息。圖9圖示在利用分割類(lèi)型I八路分割圖像顯示平面的情況下的位置圖示例，在分割類(lèi)型I中使用對(duì)角線(xiàn)分割圖像顯示平面。在該示例的情況下，使用對(duì)角線(xiàn)和矩形的邊八路分割圖像顯示平面，其中分割區(qū)域由“0000”到“0111”代表。圖10圖示在利用分割類(lèi)型2四路分割圖像顯示平面的情況下的位置圖示例，在分割類(lèi)型2中使用水平方向線(xiàn)和垂直方向線(xiàn)分割圖像顯示平面。在該示例的情況下，使用對(duì)角線(xiàn)四路分割圖像顯示平面，其中右上分割區(qū)域由“0000”代表，右下分割區(qū)域由“0001”代表，左下分割區(qū)域由“0010”代表，并且左上分割區(qū)域由“0011”代表。圖10中示出的分割示例也適于例如如圖11所示的利用偏移到圖像的角部部分的OSD圖形信息執(zhí)行重疊顯示的情況，因?yàn)榭梢园l(fā)送對(duì)應(yīng)于重疊顯示位置的深度信息。圖12圖示在利用分割類(lèi)型2九路分割圖像顯示平面的情況下的位置圖示例，在分割類(lèi)型2中使用水平方向線(xiàn)和垂直方向線(xiàn)分割圖像顯示平面。在該示例的情況下，使用水平方向線(xiàn)和垂直方向線(xiàn)九路分割圖像顯示平面，其中分割區(qū)域由“0000”到“1000”代表。圖13圖示在利用分割類(lèi)型3五路分割圖像顯示平面的情況下的位置圖示例，在分割類(lèi)型3中使用對(duì)角線(xiàn)和矩形的邊分割圖像顯示平面。在該示例的情況下，使用對(duì)角線(xiàn)和矩形的邊五路分割圖像顯示平面，其中上分割區(qū)域由“0000”代表，右分割區(qū)域由“0001”代表，下分割區(qū)域由“0010”代表，左分割區(qū)域由“0011”代表，并且中分割區(qū)域由“0100”代表。圖13中示出的分割示例也適于利用偏移到圖像的邊緣部分或重疊在圖像的中部顯示的OSD圖形信息執(zhí)行重疊顯示的 情況，因?yàn)榭梢园l(fā)送對(duì)應(yīng)于重疊顯示位置的深度信息。接下來(lái)，將對(duì)于用于每個(gè)分割區(qū)域的深度信息進(jìn)行描述。深度信息包括圖像平面信息。該圖像平面信息是指示立體圖像平面是否處于監(jiān)視器位置的近側(cè)。該立體圖像平面意味著在透視方面在相應(yīng)區(qū)域的圖像中最接近對(duì)象的平面。該圖像平面信息是構(gòu)成對(duì)應(yīng)于立體圖像平面的透視信息(透視矢量)的代碼信息。在此情況下，如果立體圖像平面處于監(jiān)視器位置的近側(cè)，則代碼信息是“負(fù)的”。此外，除了上述圖像平面信息外，深度信息包括視差信息。對(duì)于該視差信息，例如代表性地使用構(gòu)成相應(yīng)區(qū)域的圖像的像素(像素)的視差信息(視差矢量)中、在透視方面感覺(jué)為最近的視差信息。在此情況下，如果存在“負(fù)的”視差信息，則這是具有其最大絕對(duì)值的視差信息。此外，在此情況下，如果不存在“負(fù)的”視差信息，則這是具有最小絕對(duì)值的視差息。因此，如果包括視差息，則當(dāng)圖像平面息是如上所述構(gòu)成視差息的代碼信息時(shí)，需要的是進(jìn)一步包括構(gòu)成視差信息的絕對(duì)值通過(guò)以?huà)呙桧樞驅(qū)γ總€(gè)像素或預(yù)定大小的每個(gè)塊比較視差信息，可以獲得每個(gè)分割區(qū)域中視差信息的代表。圖14圖示在如上所述的通過(guò)對(duì)角線(xiàn)四路分割圖像顯示平面的分割圖案的情況下，獲得分割區(qū)域中的視差信息的代表的方式。在此情況下，對(duì)于每個(gè)分割區(qū)域獲得〃Disparity_00 "、〃Disparity_01"、" Disparity_10 "和"Disparity_ll "作為代表視差信息。例如，在通過(guò)對(duì)角線(xiàn)四路分割圖像顯示平面的分割圖案的情況下，如果除了每個(gè)分割區(qū)域的圖像平面信息外還發(fā)送視差信息，那么使用如上所述獲得的每個(gè)分割區(qū)域的視差信息的代表。在此情況下，如果如圖15所示OSD圖形信息的重疊顯示偏移到邊緣部分，那么使用對(duì)應(yīng)于其重疊顯示位置的用于分割區(qū)域的視差信息(代表)，可以提供視差到用于左眼和右眼的OSD圖形信息。深度信息集已經(jīng)在其中插入標(biāo)記信息，該標(biāo)記信息指示視差信息的存在，用于每個(gè)分割區(qū)域或共同用于所有分割區(qū)域。通過(guò)除了圖像平面信息外包括視差信息作為深度信息，在接收側(cè)不但可以理解立體圖像平面的位置是否在監(jiān)視器位置的近側(cè)，而且可以更詳細(xì)理解其位置。此外，由于標(biāo)記信息插入其中，可以選擇性地僅發(fā)送圖像平面信息或發(fā)送屏幕信息和視差信息兩者作為深度信息。當(dāng)在接收側(cè)將OSD圖形信息重疊在圖像上時(shí)，OSD圖形信息必須提供給OSD圖形信息的情況是立體圖像平面處于監(jiān)視器位置的近側(cè)的情況。在此情況下，需要提供具有視差的左和右OSD圖形信息，使得OSD圖形信息感覺(jué)為處于立體圖像平面的近側(cè)。然而，注意可以在接收側(cè)可選地設(shè)置多少視差提供到左和右OSD圖形信息，并且因此，僅發(fā)送圖像平面信息也是非常有意義的。多工器126復(fù)用來(lái)自視頻編碼器119和音頻編碼器120的數(shù)據(jù)流，并且獲得復(fù)用數(shù)據(jù)流作為位流數(shù)據(jù)(發(fā)送流)BSD。此外，多工器126將在深度信息集創(chuàng)建單元122創(chuàng)建的深度信息集插入該位流數(shù)據(jù)BSD。具體地，多工器126在位流數(shù)據(jù)BSD中插入在插入的PSI信息或SI信息中包括預(yù)定位置的深度信息集的描述符(z表面描述符)。稍后將描述該描述符。將簡(jiǎn)要描述圖2中示出的發(fā)送數(shù)據(jù)生成單元110的操作。相機(jī)IllL拍攝左眼圖像。將在相機(jī)IllL處獲得的用于立體圖像顯示的左眼圖像數(shù)據(jù)提供到視頻構(gòu)造單元112。此外，相機(jī)IllR拍攝右眼圖像。將在相機(jī)IllR處獲得的用于立體圖像顯示的右眼圖像數(shù)據(jù)提供到視頻構(gòu)造單元112。在視頻構(gòu)造單元112，左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)處理為對(duì)應(yīng)于發(fā)送格式的狀態(tài)，從而產(chǎn)生立體圖像數(shù)據(jù)(見(jiàn)圖4 (a)到(C))。將在視頻構(gòu)造單元112處獲得的立體圖像數(shù)據(jù)提供到切換開(kāi)關(guān)116的a側(cè)固定端子。此外，將在數(shù)據(jù)提取單元115處獲得的立體圖像數(shù)據(jù)提供到切換開(kāi)關(guān)116的b側(cè)固定端子。在實(shí)況模式下，切換開(kāi)關(guān)116連接到a側(cè)，并且從切換開(kāi)關(guān)116提取在視頻構(gòu)造單元112處獲得的立體圖像數(shù)據(jù)。在回放模式下，切換開(kāi)關(guān)116連接到b側(cè)，并且從切換開(kāi)關(guān)116提取從數(shù)據(jù)提取單元115獲得的立體圖像數(shù)據(jù)。將在切換開(kāi)關(guān)116提取的立體圖像數(shù)據(jù)提供到視頻編碼器119。在視頻編碼器119，立體圖像數(shù)據(jù)經(jīng)歷諸如MPEG4-AVC、MPEG2、VC-1等的編碼，從而生成包括編碼視頻數(shù)據(jù)的視頻數(shù)據(jù)流。將該視頻數(shù)據(jù)流提供到多工器126。將在麥克風(fēng)114處獲得的音頻數(shù)據(jù)提供到切換開(kāi)關(guān)118的a側(cè)固定端子。此外，將在數(shù)據(jù)提取單元115處獲得的音頻數(shù)據(jù)提供到切換開(kāi)關(guān)118的b側(cè)固定端子。在實(shí)況模式下，切換開(kāi)關(guān)118連接到a側(cè)，并且從切換開(kāi)關(guān)118提取在麥克風(fēng)114處獲得的音頻數(shù)據(jù)。在回放模式下，切換開(kāi)關(guān)118連接到b側(cè)，并且從切換開(kāi)關(guān)118提取從數(shù)據(jù)提取單元115獲得的音頻數(shù)據(jù)。將在切換開(kāi)關(guān)118提取的音頻數(shù)據(jù)提供到音頻編碼器120。在音頻編碼器120，音頻數(shù)據(jù)經(jīng)歷諸如MPEG-2Audio AAC或MPEG-4AAC等的編碼， 從而生成包括編碼音頻數(shù)據(jù)的音頻數(shù)據(jù)流。將該音頻數(shù)據(jù)流提供到多工器126。
將在相機(jī)IllL和IllR處獲得的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)經(jīng)由視頻構(gòu)造單元112提供到視差圖生成單元113。在該視差圖生成單元113，基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)對(duì)于每個(gè)像素(Pixel)檢測(cè)視差矢量，并且生成視差圖。將該視差圖提供到切換開(kāi)關(guān)117的a側(cè)的固定端子。此外，將從數(shù)據(jù)提取單元115輸出的視差圖提供到切換開(kāi)關(guān)117的b側(cè)的固定端子。在實(shí)況模式下，切換開(kāi)關(guān)117連接到a側(cè)，并且從切換開(kāi)關(guān)117提取在視差圖生成單元113處生成的視差圖。在回放模式下，切換開(kāi)關(guān)117連接到b側(cè)，并且從切換開(kāi)關(guān)117提取從數(shù)據(jù)提取單元115輸出的視差圖。將在切換開(kāi)關(guān)117處提取的視差圖提供到深度信息集創(chuàng)建單元122。在深度信息集創(chuàng)建單元122，基于視差圖創(chuàng)建對(duì)應(yīng)于從切換開(kāi)關(guān)116輸出的用于預(yù)定節(jié)目的立體圖像數(shù)據(jù)的深度信息集。該深度信息集包括圖像顯示平面的分割信息以及每個(gè)分割區(qū)域的深度信息。將該深度信息集提供到多工器126。在多工器126，復(fù)用來(lái)自視頻編碼器119和音頻編碼器120的數(shù)據(jù)流，從而產(chǎn)生復(fù)用數(shù)據(jù)流作為位流數(shù)據(jù)(傳輸流)BSD。多工器126將在深度信息集創(chuàng)建單元122處創(chuàng)建的深度信息集插入該位流數(shù)據(jù)BSD。也就是說(shuō)，多工器126在位流數(shù)據(jù)BSD中插入包括在插入的PSI信息或SI信息中的預(yù)定位置的深度信息集的描述符(z表面描述符)。[復(fù)用數(shù)據(jù)流的配置示例]圖16到圖18圖示復(fù)用數(shù)據(jù)流(傳輸流)的配置示例。該復(fù)用數(shù)據(jù)流包括通過(guò)分組基本流獲得的PES分組。在該配置示例的情況下，包括視頻基本流“視頻PES”的PES分組和音頻基本流(音頻PES)的PES分組。此外，傳輸流 包括PMT (節(jié)目圖表)作為PSI (節(jié)目專(zhuān)用信息)。該P(yáng)SI是描述傳輸流中包括的每個(gè)基本流所屬的節(jié)目的信息。此外，傳輸流包括EIT (事件信息表)作為以事件為增量執(zhí)行管理的SI (服務(wù)信息)。在該EIT中描述節(jié)目的增量中的元數(shù)據(jù)。其中是涉及整個(gè)節(jié)目的描述信息的節(jié)目描述符(ProgramDescriptor)存在于PMT中。具有涉及每個(gè)基本流的信息的基本環(huán)存在于該P(yáng)MT中。在該配置示例的情況下，存在視頻基本環(huán)和音頻基本環(huán)。每個(gè)基本環(huán)具有諸如位于其中的用于每個(gè)流的分組標(biāo)識(shí)符(PID)的信息，并且還具有位于其中的描述涉及基本流的信息的描述符(描述符)，盡管附圖中未圖示。圖16和圖17所示的復(fù)用數(shù)據(jù)流的配置是包括深度信息集的描述符(z表面描述符)插入PMT下面的示例。也就是說(shuō)，在圖16所示的復(fù)用數(shù)據(jù)流配置示例(情況I)的情況下，描述符(z表面描述符)位于PMT中的節(jié)目描述符(ProgramDescriptor)。在圖17所示的復(fù)用數(shù)據(jù)流配置示例(情況2)的情況下，描述符(z表面描述符)位于視頻基本環(huán)(視頻ES環(huán))的描述符(描述符)部分。此外，圖18所示的復(fù)用數(shù)據(jù)流配置示例(情況3)是這樣的示例，其中包括深度信息集的描述符(z表面描述符)插入EIT下面。如果包括深度信息集的描述符(z表面描述符)插入PMT下面，那么可以在節(jié)目時(shí)段期間的預(yù)定定時(shí)發(fā)送描述符，并且可以在節(jié)目時(shí)段期間動(dòng)態(tài)改變，如圖19所示。在圖19所示的示例的情況下，在節(jié)目時(shí)段期間深度信息a、深度信息b和深度信息c以此順序動(dòng)態(tài)改變。深度信息的更新時(shí)段例如是100毫秒或者大于100毫秒的時(shí)段。
對(duì)于發(fā)送描述符的定時(shí)，例如，可以構(gòu)思場(chǎng)景改變點(diǎn)。在此情況下，在節(jié)目時(shí)段期間的頭部定時(shí)發(fā)送描述符，并且隨后在每個(gè)場(chǎng)景改變點(diǎn)發(fā)送描述符，從而更新深度信息。圖20圖示場(chǎng)景檢測(cè)和描述符發(fā)送的處理概述。在此情況下，在當(dāng)前幀中包括的所有塊和來(lái)自后面幀的圖像數(shù)據(jù)之間進(jìn)行比較，并且檢測(cè)運(yùn)動(dòng)矢量。然后，計(jì)算當(dāng)前幀和后一幀的幀之間每個(gè)塊的運(yùn)動(dòng)矢量(幅值)的差值的和Σ (mv((t-l)-mv(t))，作為相關(guān)度的檢測(cè)值。以相同方式，計(jì)算后一幀的幀和后兩幀的幀之間每個(gè)塊的運(yùn)動(dòng)矢量(幅值)的差值的和Σ (mV((t-2)-mV(t-l))，作為相關(guān)度的檢測(cè)值。如果后一幀的幀和后兩幀的幀之間運(yùn)動(dòng)矢量之間的相關(guān)性大，并且此外當(dāng)前幀和后一幀的幀之間運(yùn)動(dòng)矢量之間的相關(guān)性小，那么確定已經(jīng)存在場(chǎng)景改變。也就是說(shuō)，如果“Σ (mv((t-2)-mv(t-l))< 閾值 2)”有效,但是“Σ (mv ((t-1)-mv (t)) < 閾值 I)”無(wú)效,則確定已經(jīng)存在場(chǎng)景改變。如果已經(jīng)以此方式確定已經(jīng)存在場(chǎng)景改變，則執(zhí)行描述發(fā)送。該描述符包括對(duì)應(yīng)于場(chǎng)景改變之后的圖像(當(dāng)前幀的圖像)的深度信息。注意到，場(chǎng)景檢測(cè)方法當(dāng)然不限于上述示例。如上所述，在節(jié)目時(shí)段期間可以發(fā)送包括用于每個(gè)預(yù)定時(shí)段的深度信息的描述符，并且在此情況下，對(duì)應(yīng)于每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送描述符(z表面描述符)，如圖19所示。在此情況下，還可以構(gòu)思這樣的安排，其中除了描述符中該時(shí)段的深度信息外，包括用于該時(shí)段稍后時(shí)段的深度信息(例如，用于一個(gè)時(shí)段后的深度信息)作為所謂提前信息。圖21圖示在此情況下描述符(z表面描述符)的發(fā)送定時(shí)與每個(gè)描述符中包括的深度信息之間的關(guān)系。例如，在時(shí)段A的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)包括時(shí)段B的深度信息b。此外，在時(shí)段B的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)包括時(shí)段C的深度信息C。這對(duì)于在隨后時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(Z表面描述符)是相同的，其中描述符包括下一個(gè)時(shí)段的深度信息。

通過(guò)在每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)中包括用于隨后時(shí)段(例如一個(gè)時(shí)段后)的深度信息作為提前信息，允許要在接收側(cè)獲得的視差信息具有時(shí)間方向的平滑改變。也就是說(shuō)，使用包括在當(dāng)前時(shí)段和當(dāng)前時(shí)段之前和之后時(shí)段的深度信息集中的視差信息作為要使用的視差信息，以提供左眼重疊信息和右眼重疊信息之間的視差。因此，可以獲得在時(shí)間方向(幀方向)具有平滑改變(即，具有平滑更新曲線(xiàn))的視差信息。注意到，在圖21中，虛線(xiàn)SI代表在發(fā)送的立體圖像數(shù)據(jù)中視差信息曲線(xiàn)(視頻視差曲線(xiàn))的示例，并且實(shí)線(xiàn)S2圖示根據(jù)每個(gè)時(shí)段更新的視差信息(視差更新)的示例。在圖21的情況下，虛線(xiàn)S3圖示在接收側(cè)通過(guò)內(nèi)插處理獲得的視差信息曲線(xiàn)(接收器內(nèi)插曲線(xiàn))的示例。在此情況下，在接收側(cè)，執(zhí)行例如諸如以下的內(nèi)插處理。也就是說(shuō)，在每個(gè)時(shí)段的前半，在之前時(shí)段的視差信息和當(dāng)前時(shí)段的視差信息的混合比率中，當(dāng)前時(shí)段的視差信息順序上升，從而獲得每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。此外，在每個(gè)時(shí)段的后半，在當(dāng)前時(shí)段的視差信息和隨后時(shí)段的視差信息的混合比率中，隨后時(shí)段的視差信息順序上升，從而獲得每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。此外，在EIT下面插入包括深度信息集的描述符(z表面描述符)的情況下，可以在如圖22所示的節(jié)目的開(kāi)始發(fā)送描述符，并且在節(jié)目時(shí)段期間固定深度信息。
[描述符(z表面描述符)的配置示例]圖23圖示描述符(z表面描述符)的配置示例(語(yǔ)法)。圖24圖示在圖23所示的配置示例中的主要信息內(nèi)容(語(yǔ)義)?！癲escriptorjag”的8位字段代表描述符(描述符)的類(lèi)型，指示在此情況下的描述符(z表面描述符)?！癲escriptor_length”的8位字段是指示描述符的長(zhǎng)度(大小)的8位數(shù)據(jù)。該數(shù)據(jù)指示“descriptorjength”之后的字節(jié)數(shù)，作為描述符的長(zhǎng)度?！癲isplay_partition_type”的2位字段指示圖像顯示平面的分割類(lèi)型(見(jiàn)圖7到圖^^“numberjf^partition”的4位字段指示圖像顯示平面的分割的數(shù)目。在此，“0000”指示沒(méi)有分割圖像顯示平面，即指示分割的數(shù)目=1。在此情況下，對(duì)于整個(gè)圖像顯示平面的單個(gè)深度信息包括在描述符(z表面描述符)中。“z_depth_negative”的I位字段指示圖像平面信息。如上所述，該圖像平面信息指示立體圖像平面(相應(yīng)的分割區(qū)域內(nèi)在透視方面最接近對(duì)象的平面)對(duì)于監(jiān)視器位置是否是負(fù)的(近側(cè))?！癐”指示對(duì)于監(jiān)視器位置立體圖像是負(fù)的(近側(cè))?！癐”指示立體圖像是與監(jiān)視器位置相同，或者對(duì)于監(jiān)視器位置是正的(遠(yuǎn)側(cè))。

注意到在本實(shí)施例的情況下，如上所述，構(gòu)成視差信息的代碼信息用作“z_cbpth_negative”的I位字段。在此情況下的視差信息是在構(gòu)成相應(yīng)區(qū)域的圖像的每個(gè)像素(pixel)的視差信息(視差矢量)中，在透視方面感覺(jué)為最接近的像素的視差信息，并且是構(gòu)成立體圖像平面的像素的視差信息?！癲isparity_value_flag”是指不除了上述圖像平面彳目息外是否存在視差彳目息的I位標(biāo)記信息。在此情況下的視差信息是構(gòu)成上述立體圖像平面的像素的視差信息?！癐”指示視差信息存在，并且“O”指示視差信息不存在。如果該標(biāo)記信息是“1”，那么“abS0lute_disparity_value”的8位字段存在。該“absolute_disparity_value”指示構(gòu)成視差信息的絕對(duì)值信息。由該絕對(duì)值信息和上述圖像平面信息配置視差信息。圖25圖示描述符(z表面描述符)的另一配置示例(語(yǔ)法)。在該配置示例中，“disparity_value_f lag”在各分割區(qū)域中保持共用，并且位于for循環(huán)的外部?！皕_depth_negative”的I位字段存在于for循環(huán)內(nèi)。此外，如果“disparity_value_flag”是“ I”,并且指示視差信息存在，那么“absolute_disparity_value”的7位字段存在于該for循環(huán)內(nèi)，否則7位“reserved”存在。在圖25所示的描述符(z表面描述符)的情況下，確保for循環(huán)內(nèi)字節(jié)對(duì)齊(ByteAlign)。也就是說(shuō)，在圖25所示的描述符的結(jié)構(gòu)示例的情況下，用于確保for循環(huán)內(nèi)字節(jié)對(duì)齊(Byte Align)的 “bit_stuffing” 是不需要的。在圖2所示的發(fā)送數(shù)據(jù)生成單元110的情況下，連同具有左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的預(yù)定節(jié)目的立體圖像數(shù)據(jù)，對(duì)應(yīng)于預(yù)定節(jié)目的立體圖像數(shù)據(jù)的深度信息集包括在從多工器126輸出的位流數(shù)據(jù)BSD中。因此，例如通過(guò)在接收側(cè)使用深度信息集，已經(jīng)根據(jù)圖像內(nèi)各對(duì)象的透視經(jīng)歷視差調(diào)整的深度信息可以用作要重疊在左眼和右眼圖像上的重疊信息，諸如像OSD等的圖形信息。因此，例如在像OSD的圖形信息的顯示時(shí)，可以保持與圖像中各對(duì)象的透視一致性。此外，在圖2所示的發(fā)送數(shù)據(jù)生成單元110的情況下，深度信息集包括圖像顯示平面的分割信息以及每個(gè)分割區(qū)域的深度信息，并且包括在插入位流數(shù)據(jù)(復(fù)用數(shù)據(jù)流)BSD描述符中，該位流數(shù)據(jù)(復(fù)用數(shù)據(jù)流)BSD具有包括圖像數(shù)據(jù)并且被發(fā)送的數(shù)據(jù)流。也就是說(shuō)，可以使用描述符容易地將深度信息發(fā)送到接收側(cè)。[機(jī)頂盒的描述]返回圖1，機(jī)頂盒200從廣播站100接收在廣播波上發(fā)送的位流數(shù)據(jù)(傳輸流)。該位流數(shù)據(jù)BSD包括具有左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)立體圖像數(shù)據(jù)、音頻數(shù)據(jù)以及深度信息集。機(jī)頂盒200包括位流處理單元201。該位流處理單元201從位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、深度信息集等。該位流處理單元201適當(dāng)?shù)厣删哂兄丿B在其上的諸如OSD等的圖形信息的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。在此情況下，提供要重疊在左眼圖像上的左眼圖形和要重疊在右眼圖像上的右眼圖形之間的視差。因此，通過(guò)提供左眼圖形和右眼圖形之間的視差，用戶(hù)例如可以識(shí)別要重疊在立體圖像上的諸如OSD等的圖形信息比圖像更接近。[機(jī)頂盒的配置示例]將描述機(jī)頂盒200的配置示例。圖26圖示機(jī)頂盒200的配置示例。該機(jī)頂盒200包括位流處理單元201、HDMI端子202、天線(xiàn)端子203、數(shù)字調(diào)諧器204、視頻信號(hào)處理電路205、HDMI發(fā)送單元206和音頻信號(hào)處理電路207。此外，該機(jī)頂盒200包括CPU211、閃速R0M212、DRAM213、內(nèi)部總線(xiàn)214、遙控接收單元215和遙控發(fā)送器216。天線(xiàn)端子203是用于輸入由接收天線(xiàn)(未圖示)接收的電視廣播信號(hào)的端子。數(shù)字調(diào)諧器204處理輸入到天線(xiàn)端子203的電視廣播信號(hào)，并且輸出對(duì)應(yīng)于由用戶(hù)選擇的頻道的預(yù)定位流數(shù)據(jù)(傳輸流)BSD。位流處理單元201從 位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)等，并且輸出這些。該位流處理單元201還適當(dāng)?shù)赝较馩SD等的圖形信息的顯示數(shù)據(jù)與立體圖像數(shù)據(jù)。此時(shí)，位流處理單元201適當(dāng)?shù)靥峁┮丿B在左眼圖像上的左眼圖形信息和要重疊在右眼圖像上的右眼圖形信息之間的視差。視頻信息處理電路205使在位流處理單元201獲得的輸出立體圖像數(shù)據(jù)根據(jù)需要經(jīng)歷圖像質(zhì)量調(diào)整處理，并且將其處理后的輸出立體圖像數(shù)據(jù)提供到HDMI發(fā)送單元206。音頻信號(hào)處理電路207使從位流處理單元201輸出的音頻數(shù)據(jù)根據(jù)需要經(jīng)歷音頻質(zhì)量調(diào)整處理，并且將其處理后的音頻數(shù)據(jù)提供到HDMI發(fā)送單元206。HDMI發(fā)送單元206通過(guò)符合HDMI的通信例如從HDMI端子202發(fā)送未壓縮的圖像數(shù)據(jù)和音頻數(shù)據(jù)。在此情況下，因?yàn)橥ㄟ^(guò)HDMI TMDS信道發(fā)送數(shù)據(jù)，所以圖像數(shù)據(jù)和音頻數(shù)據(jù)經(jīng)歷封裝，并且從HDMI發(fā)送單元206輸出到HDMI端子202。此外，HDMI發(fā)送單元206通過(guò)HDMI接口發(fā)送上述深度信息集到電視接收機(jī)300。稍后將描述HDMI發(fā)送單元206的細(xì)節(jié)。CPU211控制機(jī)頂盒200的每個(gè)單元的操作。閃速R0M212執(zhí)行控制軟件的存儲(chǔ)和數(shù)據(jù)的存儲(chǔ)。DRAM213配置CPU211的工作區(qū)。CPU211將從R0M212讀出的軟件和數(shù)據(jù)加載到DRAM213，并且啟動(dòng)軟件以控制機(jī)頂盒200的每個(gè)單元。遙控接收單元215接收從遙控發(fā)送器216發(fā)送的遙控信號(hào)(遙控代碼)，并且提供到CPU211。CPU211基于該遙控代碼控制機(jī)頂盒200的每個(gè)單元。CPU211、閃速R0M212和DRAM213連接到內(nèi)部總線(xiàn)214。
將描述位流處理單元201。位流處理單元201包括信號(hào)分離器220、視頻解碼器221、音頻解碼器224、0SD顯示數(shù)據(jù)生成單元226和視頻重疊單元228。信號(hào)分離器220從位流數(shù)據(jù)BSD提取視頻和音頻的分組，并且發(fā)送到解碼器。此外，信號(hào)分離器220從位流數(shù)據(jù)BSD提取深度信息集，并且發(fā)送到OSD顯示數(shù)據(jù)生成單元226和上述HDMI發(fā)送單元206。視頻解碼器221從在信號(hào)分離器220提取的視頻分組重建視頻基本流，并且執(zhí)行解碼處理，從而獲得包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。音頻解碼器224從在信號(hào)分離器220提取的音頻分組重建音頻基本流，并且執(zhí)行解碼處理，從而獲得從位流處理單元201外部輸出的音頻數(shù)據(jù)。OSD顯示數(shù)據(jù)生成單元226生成對(duì)應(yīng)于包括在立體圖像數(shù)據(jù)中的左眼圖像數(shù)據(jù)的左眼圖形信息的數(shù)據(jù)，以及對(duì)應(yīng)于包括在立體圖像數(shù)據(jù)中的右眼圖像數(shù)據(jù)的右眼圖形信息的數(shù)據(jù)。在此情況下，OSD顯示數(shù)據(jù)生成單元226基于包括在從信號(hào)分離器220提取的深度信息集中的圖像平面信息或圖像平面信息和視差信息，適當(dāng)?shù)靥峁┳笱蹐D形信息和右眼圖形信息之間的視差。例如，如果基于圖像平面信息，立體圖像平面位于距監(jiān)視器位置的近側(cè)，那么提供已經(jīng)預(yù)先確定的預(yù)定視差，使得圖形信息感覺(jué)為在立體圖像平面的近側(cè)。此外，如果基于圖像平面信息，立體圖像平面位于與監(jiān)視器位置的相同位置或者在其遠(yuǎn)離側(cè)，則不提供視差。此外，例如，基于視差信息提供視差，使得圖形信息感覺(jué)為在距立體圖像平面的近側(cè)。現(xiàn)在，在包括深度信息的描述符(z表面描述符)插入PMT下面情況下，使得能夠在節(jié)目時(shí)段期間更新用于每個(gè)分割區(qū)域的深度信息(見(jiàn)圖19)。OSD顯示數(shù)據(jù)生成單元226通過(guò)使用以此方式更新的深度信息(例如，視差信息)，可以動(dòng)態(tài)改變要提供到用于左眼和右眼的圖形信息的視差。在此情況下，OSD顯示數(shù)據(jù)生成單元226可以重復(fù)地對(duì)于每幀重復(fù)使用包括在某一描述符(z表面描述符)中的視差信息，直到發(fā)送下一個(gè)描述符(z表面描述符)。然而,在此情況下，在發(fā)送描述符和更新視差信`息的點(diǎn)，提供到左眼和右眼的視差可能突然改變，給予觀看者不自然的感覺(jué)。因此，在本實(shí)施例的情況下，如果發(fā)送描述符(z表面描述符)，則OSD顯示數(shù)據(jù)生成單元226不立即使用包括在該描述符中的視差信息，如圖27所示。也就是說(shuō)，OSD顯示數(shù)據(jù)生成單元226使用根據(jù)對(duì)于多個(gè)幀的內(nèi)插處理的視差信息(由虛線(xiàn)圖示的)，以便在該多個(gè)幀上得到新的視差信息。由于該處理，可以使得用于提供視差的視差信息的時(shí)間方向(幀方向)上的改變平滑，并且可以抑制要提供到用于左眼和右眼的圖形信息的視差突然改變并且觀看者具有不自然感覺(jué)的情況。上述圖27中圖示的內(nèi)插處理指示用于當(dāng)前時(shí)段的深度信息包括在根據(jù)每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)中的情況。將對(duì)于在根據(jù)每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(Z表面描述符)包括用于隨后時(shí)段(例如，一個(gè)時(shí)段之后)的深度信息的情況下的內(nèi)插處理的示例進(jìn)行描述。圖28圖示該情況的內(nèi)插處理示例。在此情況下，在時(shí)段A的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)包括時(shí)段B的深度信息b。此外，在時(shí)段B的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)包括時(shí)段C的深度信息C。對(duì)于在隨后時(shí)段中的開(kāi)始時(shí)間點(diǎn)發(fā)送的描述符(z表面描述符)同樣如此，其中描述符包括下一個(gè)時(shí)段的深度信息。
在此情況下，執(zhí)行諸如隨后的內(nèi)插處理，并且獲得在每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。也就是說(shuō)，在每個(gè)時(shí)段的前半，在之前時(shí)段的視差信息與當(dāng)前時(shí)段的視差信息的混合比中，當(dāng)前時(shí)段的混合比順序上升，從而獲得在每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。此外，在每個(gè)時(shí)段的后半，在當(dāng)前時(shí)段的視差信息與之后時(shí)段的視差信息的混合比中，之后時(shí)段的混合比順序上升，從而獲得在每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。例如，通過(guò)順序改變時(shí)段A的視差信息和時(shí)段B的視差信息的混合比，獲得在從時(shí)段A的中間點(diǎn)到時(shí)段B的中間點(diǎn)的時(shí)段T_AB中的每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。在此情況下，時(shí)段A的視差信息從100%順序改變?yōu)?%，并且時(shí)段B的視差信息從0%順序改變?yōu)?00%。此外，例如，通過(guò)順序改變時(shí)段B的視差信息和時(shí)段C的視差信息的混合比，獲得在從時(shí)段B的中間點(diǎn)到時(shí)段C的中間點(diǎn)的時(shí)段T_BC中的每個(gè)時(shí)間點(diǎn)的內(nèi)插視差信息。在此情況下，時(shí)段B的視差信息從100%順序改變?yōu)?%，并且時(shí)段C的視差信息從0%順序改變?yōu)?100%O注意到在圖28中，虛線(xiàn)SI代表發(fā)送的立體圖像數(shù)據(jù)中視差信息曲線(xiàn)(視頻視差曲線(xiàn))的示例，并且實(shí)線(xiàn)S2圖示根據(jù)每個(gè)時(shí)段更新的視差信息(視差更新)的示例。此外，在圖28中，虛線(xiàn)S3圖示通過(guò)內(nèi)插處理獲得的視差信息曲線(xiàn)(接收器內(nèi)插曲線(xiàn))的示例。由于執(zhí)行諸如圖28所示的內(nèi)插處理，可以使得用于提供視差的視差信息的時(shí)間方向(幀方向)的改變平滑。因此，可以抑制要提供到用于左眼和右眼的圖形信息的視差突然改變并且觀看者具有不自然感覺(jué)的情況。視頻重疊單元228將在OSD顯示數(shù)據(jù)生成單元226生成的用于左眼和右眼的圖形信息的數(shù)據(jù)重疊在視頻解碼器221獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)，右眼圖像數(shù)據(jù))上，并且獲得用于顯示的立體圖像數(shù)據(jù)。視頻重疊單元228然后從位流處理單元201向外輸出用于顯示的立體圖像數(shù)據(jù)。

將簡(jiǎn)要描述機(jī)頂盒200的操作。將輸入天線(xiàn)端子203的電視廣播信號(hào)提供到數(shù)字調(diào)諧器204。利用該數(shù)字調(diào)諧器204，處理電視廣播信號(hào)，并且輸出對(duì)應(yīng)于用戶(hù)選擇的頻道的預(yù)定位流數(shù)據(jù)(發(fā)送流)BSD。從數(shù)字調(diào)諧器204輸出的位流數(shù)據(jù)BSD提供到位流處理單元201。利用該位流處理單元201，從位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、深度信息集等。在位流處理單元201，相對(duì)于立體圖像數(shù)據(jù)適當(dāng)?shù)赝街T如OSD等的圖形信息的顯示數(shù)據(jù)。此時(shí)，在位流處理單元201，基于深度信息集，在要重疊在左眼圖像上用于左眼的圖形信息以及要重疊在右眼圖像上用于右眼的圖形信息之間提供視差。因此，對(duì)于重疊在立體圖像上要顯示的諸如OSD等的圖形信息，可以以最佳狀態(tài)保持與圖像中各對(duì)象的透視上的一致性。在位流處理單元201獲得的用于顯示的立體圖像數(shù)據(jù)提供到視頻信號(hào)處理電路205。在該視頻信號(hào)處理電路205，根據(jù)需要對(duì)用于顯示的立體圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)整等。從視頻信號(hào)處理電路205輸出的處理之后的用于顯示的立體圖像數(shù)據(jù)提供到HDMI發(fā)送單元206。此外，在位流處理單元201獲得的音頻數(shù)據(jù)提供到音頻信號(hào)處理電路207。在音頻信號(hào)處理電路207，音頻數(shù)據(jù)根據(jù)需要經(jīng)歷音頻質(zhì)量調(diào)整處理。從音頻信號(hào)處理電路207輸出的處理之后的音頻數(shù)據(jù)提供到HDMI發(fā)送單元206。提供到HDMI發(fā)送單元206的立體圖像數(shù)據(jù)和音頻數(shù)據(jù)通過(guò)HDMITMDS信道從HDMI端子202發(fā)送到HDMI線(xiàn)纜400。[電視接收機(jī)的描述]返回圖1，電視接收機(jī)300接收經(jīng)由HDMI線(xiàn)纜400從機(jī)頂盒200發(fā)送的立體圖像數(shù)據(jù)。該電視接收機(jī)300包括3D信號(hào)處理單元301。該3D信號(hào)處理單元301使立體圖像數(shù)據(jù)經(jīng)歷對(duì)應(yīng)于發(fā)送格式的處理(解碼處理)，從而生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。該3D信號(hào)處理單元301獲得構(gòu)成立體圖像數(shù)據(jù)的左眼圖像和右眼圖像。[電視接收機(jī)的配置示例]將描述電視接收機(jī)300的配置示例。圖29圖示電視接收機(jī)300的配置示例。電視接收機(jī)300包括3D信號(hào)處理單元301、HDMI端子302、HDMI接收單元303、天線(xiàn)端子304、數(shù)字調(diào)諧器305和位流處理單元306。此外，該電視接收機(jī)300包括OSD顯示數(shù)據(jù)生成單元313、視頻重疊單元314、視頻處理電路307、面板驅(qū)動(dòng)電路308、顯示面板309、音頻信號(hào)處理電路310、音頻放大器電路311和揚(yáng)聲器312。此外，該電視接收機(jī)300包括CPU321、閃速R0M322、DRAM323、內(nèi)部總線(xiàn)324、遙控接收單元325和遙控發(fā)送器326。天線(xiàn)端子304是 用于輸入在接收天線(xiàn)(未圖示)接收的電視廣播信號(hào)的端子。數(shù)字調(diào)諧器305處理輸入到天線(xiàn)端子304的電視廣播信號(hào)，并且輸出對(duì)應(yīng)于由用戶(hù)選擇的頻道的預(yù)定位流數(shù)據(jù)(傳輸流)。位流處理單元306已與機(jī)頂盒200的位流處理單元201相同方式配置。該位流處理單元306從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、深度信息集等。HDMI接收單元303接收通過(guò)符合HDMI的通信經(jīng)由HDMI線(xiàn)纜400提供到HDMI端子302的未壓縮的圖像數(shù)據(jù)和音頻數(shù)據(jù)。該HDMI接收單元303的版本例如是HDMI1. 4a，并且處于能夠處理立體圖像數(shù)據(jù)的狀態(tài)。此外，該HDMI接收單元303利用HDMI接口從機(jī)頂盒200接收上述深度信息集。稍后將描述HDMI接收單元303的細(xì)節(jié)。3D信號(hào)處理單元301使在HDMI接收單元303接收的或在位流處理單元306獲得的立體圖像數(shù)據(jù)經(jīng)歷解碼處理，并且生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。3D信號(hào)處理單元301在由位流處理單元306獲得的立體圖像數(shù)據(jù)執(zhí)行對(duì)應(yīng)于發(fā)送數(shù)據(jù)格式的解碼處理。此外，3D信號(hào)處理單元301對(duì)在HDMI接收單元303獲得的立體圖像數(shù)據(jù)執(zhí)行對(duì)應(yīng)于TMDS發(fā)送數(shù)據(jù)結(jié)構(gòu)的解碼處理。OSD顯示數(shù)據(jù)生成單元313生成對(duì)應(yīng)于包括在立體圖像數(shù)據(jù)中的左眼圖像數(shù)據(jù)的左眼圖形信息的數(shù)據(jù)，并且生成對(duì)應(yīng)于包括在立體圖像數(shù)據(jù)中的右眼圖像數(shù)據(jù)的右眼圖形信息的數(shù)據(jù)。該圖形信息是用于諸如菜單、節(jié)目列表等的OSD顯示的重疊信息。在此情況下，OSD顯示數(shù)據(jù)生成單元313基于在位流處理單元306獲得的或者用HDMI接收單元303接收的深度信息，提供左眼圖形信息和右眼圖形信息之間的視差。注意到，OSD顯示數(shù)據(jù)生成單元313基于包括在深度信息集中的圖像平面信息或者圖像平面信息和視差信息，適當(dāng)?shù)靥峁┳笱蹐D形信息和右眼圖形信息之間的視差。例如，如果基于圖像平面信息，立體圖像平面位于距監(jiān)視器位置的近側(cè)，那么提供已經(jīng)預(yù)先確定的預(yù)定視差，使得圖形信息感覺(jué)為在立體圖像平面的近側(cè)。此外，如果基于圖像平面信息，立體圖像平面位于與監(jiān)視器位置的相同位置或者在其遠(yuǎn)側(cè)，那么不提供視差。此外，例如，基于視差信息提供視差，使得圖形信息感覺(jué)為在距立體圖像平面的近側(cè)。視頻重疊單元314將在OSD顯示數(shù)據(jù)生成單元313生成的用于左眼和右眼的圖形信息的數(shù)據(jù)重疊在3D信號(hào)處理單元301獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上，并且獲得用于顯示的立體圖像數(shù)據(jù)。視頻處理電路307基于在3D信號(hào)處理單元301生成的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，生成用于顯示立體圖像的圖像數(shù)據(jù)。此外，視頻處理電路307使圖像數(shù)據(jù)根據(jù)需要經(jīng)歷圖像質(zhì)量調(diào)整處理。面板驅(qū)動(dòng)電路308基于從視頻處理電路307輸出的圖像數(shù)據(jù)，驅(qū)動(dòng)顯示面板309。顯示面板309例如由IXD (液晶顯示器)、Η)Ρ (等離子體顯示面板)等配置。音頻信號(hào)處理電路310使在HDMI接收單元303接收的或在位流處理單元306獲得的音頻數(shù)據(jù)執(zhí)行需要的處理，諸如D/A轉(zhuǎn)換等。音頻放大器電路311放大從音頻信號(hào)處理電路310輸出的音頻信號(hào)，并且將其提供到揚(yáng)聲器312。CPU321控制電視接收機(jī)300的每個(gè)單元的操作。閃速R0M322執(zhí)行控制軟件的存儲(chǔ)和數(shù)據(jù)的存儲(chǔ)。DRAM323構(gòu)成CPU321的工作區(qū)域。CPU321將從閃速R0M322讀出的軟件和數(shù)據(jù)加載到DRAM323，并且控制電視接收機(jī)300的每個(gè)單元。遙控接收單 元325接收從遙控發(fā)送器326發(fā)送的遙控信號(hào)(遙控代碼)，并且將其提供到CPU321。CPU321基于該遙控代碼控制電視接收機(jī)300的每個(gè)單元。CPU321、閃速R0M322和DRAM323連接到內(nèi)部總線(xiàn)324。將簡(jiǎn)要描述圖29中圖示的電視接收機(jī)300的操作。HDMI接收單元303接收從經(jīng)由HDMI線(xiàn)纜400連接到HDMI端子302的機(jī)頂盒200發(fā)送的立體圖像數(shù)據(jù)和音頻數(shù)據(jù)。在HDMI接收單元303接收的立體圖像數(shù)據(jù)提供到3D信號(hào)處理單元301。此外，在該HDMI接收單元303接收的音頻數(shù)據(jù)提供到音頻信號(hào)處理電路310。將輸入天線(xiàn)端子304的電視廣播信號(hào)提供到數(shù)字調(diào)諧器305。利用該數(shù)字調(diào)諧器305，處理該電視廣播信號(hào)，并且輸出對(duì)應(yīng)于用戶(hù)選擇的頻道的預(yù)定位流數(shù)據(jù)(傳送流)BSD。從數(shù)字調(diào)諧器305輸出的位流數(shù)據(jù)BSD提供到位流處理單元306。利用該位流處理單元306中，從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、深度信息集等。此外，在位流處理單元306獲得的音頻數(shù)據(jù)提供到音頻處理電路310。利用3D信號(hào)處理單元301，使在HDMI接收單元303接收的或在位流處理單元306獲得的立體圖像數(shù)據(jù)經(jīng)歷解碼處理，并且生成全分辨率左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。將左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)提供到視頻重疊單元314。OSD顯示數(shù)據(jù)生成單元313生成對(duì)應(yīng)于包括在立體圖像數(shù)據(jù)中的左眼圖像數(shù)據(jù)的左眼圖形信息的數(shù)據(jù)，并且生成對(duì)應(yīng)于包括在立體圖像數(shù)據(jù)中的右眼圖像數(shù)據(jù)的右眼圖形信息的數(shù)據(jù)。在此情況下，OSD顯示數(shù)據(jù)生成單元313基于在位流處理單元306獲得的或者用HDMI接收單元303接收的深度信息，提供左眼圖形信息和右眼圖形信息之間的視差。在視頻重疊單元314，將在OSD顯示數(shù)據(jù)生成單元313生成的用于左眼和右眼的圖形信息的數(shù)據(jù)重疊在3D信號(hào)處理單元301獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上，從而獲得用于顯示的立體圖像數(shù)據(jù)。在視頻處理電路307，基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，生成用于顯示立體圖像的圖像數(shù)據(jù)，并且還根據(jù)需要執(zhí)行圖像質(zhì)量調(diào)整處理。在該視頻處理電路307獲得的圖像數(shù)據(jù)提供到面板驅(qū)動(dòng)電路308。因此，在顯示面板309上顯示立體圖像。例如，以時(shí)分方式交替顯示根據(jù)左眼圖像數(shù)據(jù)的左眼圖像和根據(jù)右眼圖像數(shù)據(jù)的右眼圖像。觀看者可以由左眼單獨(dú)觀看左眼圖像，并且由右眼單獨(dú)觀看右眼圖像，并且結(jié)果通過(guò)佩戴快門(mén)眼鏡可以感覺(jué)立體圖像，在快門(mén)眼鏡中，左眼快門(mén)和右眼快門(mén)與顯示面板309的顯示同步交替打開(kāi)。此外，在音頻信號(hào)處理電路310，使在HDMI接收單元303接收的或在位流處理單元306獲得的音頻數(shù)據(jù)經(jīng)歷需要的處理，諸如D/A轉(zhuǎn)換等。在音頻放大器電路311放大該音頻信號(hào)，并且然后將其提供到揚(yáng)聲器312。因此，從揚(yáng)聲器312輸出對(duì)應(yīng)于顯示面板309的顯示圖像的音頻。[HDMI發(fā)送單元和HDMI接收單元的配置示例]圖30圖示在圖1所示的立體圖像顯示系統(tǒng)10的情況下，機(jī)頂盒200的HDMI發(fā)送單元(HDMI源)206和電視接收機(jī)300的HDMI接收單元(HDMI宿)303的配置示例。HDMI發(fā)送單元206在有效圖像部分(下文中，也稱(chēng)為“活動(dòng)視頻部分”)期間在一個(gè)方向上，發(fā)送對(duì)應(yīng)于值未壓縮的一個(gè)屏幕的圖像的像素?cái)?shù)據(jù)的差分信號(hào)到HDMI接收單元
303。在此，有效圖像部分是通過(guò)從特定垂直同步信號(hào)和下一個(gè)垂直同步信號(hào)之間的部分移除水平消隱部分和垂直消隱部分獲得的部分。此外，HDMI發(fā)送單元206在水平消隱部分或垂直消隱部分期間，使用多個(gè)信道在一個(gè)方向上至少跟隨圖像發(fā)送對(duì)應(yīng)于音頻數(shù)據(jù)、控制數(shù)據(jù)、其他輔助數(shù)據(jù)等的差分信號(hào)到HDMI接收單元303。提供以下發(fā)送信道作為由HDMI發(fā)送單元206和HDMI接收單元303構(gòu)成的HDMI系統(tǒng)的發(fā)送信道。具體地，存在三個(gè)TMDS信道#0到#2，用作用于與像素時(shí)鐘同步在一個(gè)方向并行發(fā)送來(lái)自HDMI發(fā)送單元206的像素?cái)?shù)據(jù)和音頻數(shù)據(jù)到HDMI接收單元303的發(fā)送信道。此外，存在TMDS時(shí)鐘信道，用作用于發(fā)送像素時(shí)鐘的發(fā)送信道。HDMI發(fā)送單元 206包括HDMI發(fā)送器81。發(fā)送器81例如將未壓縮圖像的像素?cái)?shù)據(jù)轉(zhuǎn)換為相應(yīng)的差分信號(hào)，并且通過(guò)作為多個(gè)信道的三個(gè)TMDS信道#0、#1和#2在一個(gè)方向并行發(fā)送到經(jīng)由HDMI線(xiàn)纜400連接的HDMI接收單元303。此外，發(fā)送器81將跟隨未壓縮圖像的音頻數(shù)據(jù)、進(jìn)一步需要的控制數(shù)據(jù)和其他輔助數(shù)據(jù)等轉(zhuǎn)換為相應(yīng)的差分信號(hào)，并且通過(guò)三個(gè)TMDS信道#0、#1和#2在一個(gè)方向并行發(fā)送到HDMI接收單元303。此外，發(fā)送器81使用TMDS時(shí)鐘信道，與通過(guò)三個(gè)信道#0、#1和#2發(fā)送的像素?cái)?shù)據(jù)同步，發(fā)送像素時(shí)鐘到經(jīng)由HDMI線(xiàn)纜400連接的HDMI接收單元303。在此，利用一個(gè)TMDS信道#i (i=0, I, 2)，在像素時(shí)鐘的一個(gè)時(shí)鐘期間發(fā)送10位像素?cái)?shù)據(jù)。HDMI接收單元303使用多個(gè)信道，接收對(duì)應(yīng)于在活動(dòng)視頻部分期間，在一個(gè)方向從HDMI發(fā)送單元206發(fā)送的像素?cái)?shù)據(jù)的差分信號(hào)。此外，該HDMI接收單元303使用多個(gè)信道，接收對(duì)應(yīng)于在水平消隱部分或垂直消隱部分期間，在一個(gè)方向從HDMI發(fā)送單元206發(fā)送的音頻數(shù)據(jù)和控制數(shù)據(jù)的差分信號(hào)。具體地，HDMI接收單元303包括HDMI接收器82。該HDMI接收器82使用TMDS信道#0、#1和#2，接收差分信號(hào)，并且該差分信號(hào)對(duì)應(yīng)于在一個(gè)方向從HDMI發(fā)送單元206發(fā)送的音頻數(shù)據(jù)和控制數(shù)據(jù)。在此情況下，HDMI接收器與通過(guò)TMDS時(shí)鐘信道從HDMI發(fā)送單元206發(fā)送的像素時(shí)鐘同步接收差分信號(hào)。除了上面的TMDS信道#0到#2以及TMDS時(shí)鐘信道外，HDMI系統(tǒng)的發(fā)送信道包括稱(chēng)為DDC (顯示數(shù)據(jù)信道)83和CEC線(xiàn)84的發(fā)送信道。DDC83是由包括在HDMI線(xiàn)纜400中的未顯示的兩條信號(hào)線(xiàn)構(gòu)成的。DDC83用于HDMI發(fā)送單元206從HDMI接收單元303讀出E-EDID (增強(qiáng)的擴(kuò)展顯示標(biāo)識(shí)數(shù)據(jù))。具體地，HDMI接收單元303包括EDID ROM (只讀存儲(chǔ)器)85，其中存儲(chǔ)作為除了HDMI接收器81外涉及它自身性能(配置/容量)的性能信息的E-EDID。HDMI發(fā)送單元206例如響應(yīng)于來(lái)自CPU211的請(qǐng)求，經(jīng)由DDC83從經(jīng)由HDMI線(xiàn)纜400連接的HDMI接收單元303 讀出 E-EDID (見(jiàn)圖 26)。HDMI發(fā)送單元206發(fā)送讀出的E-EDID到CPU211。CPU211在閃速R0M212或DRAM213中存儲(chǔ)該E-EDID0 CPU211基于E-EDID，識(shí)別HDMI接收單元303的性能設(shè)置。例如，CPU211識(shí)別包括在HDMI接收單元303中的電視接收機(jī)300是否可以處理圖像數(shù)據(jù)，并且如果可以處理立體圖像數(shù)據(jù)，就進(jìn)一步識(shí)別可以處理什么種類(lèi)的TMDS發(fā)送數(shù)據(jù)結(jié)構(gòu)。CEC線(xiàn)84由包括在HDMI線(xiàn)纜400中的未示出的一條信號(hào)線(xiàn)構(gòu)成，并且用于執(zhí)行用于HDMI發(fā)送單元206和HDMI接收單元303之間控制的數(shù)據(jù)的雙向通信。該CEC線(xiàn)84構(gòu)成控制數(shù)據(jù)線(xiàn)。此外，HDMI線(xiàn)纜400包括連接到稱(chēng)為HPD (熱插拔檢測(cè))的管腳的線(xiàn)(HPD線(xiàn))86。源設(shè)備可以通過(guò)利用該線(xiàn)86檢測(cè)宿設(shè)備的連接。注意到，該HPD線(xiàn)86還用作構(gòu)成雙向通信路徑的HEAC-線(xiàn)。此外，HDMI線(xiàn)纜400包括用于從源設(shè)備提供功率到宿設(shè)備的線(xiàn)(電源線(xiàn))87。此外，HDMI線(xiàn)纜400包括應(yīng)用線(xiàn)88。該應(yīng)用線(xiàn)88用作構(gòu)成雙向通信路徑的HEAC+線(xiàn)。

圖31圖示TMDS發(fā)送數(shù)據(jù)的結(jié)構(gòu)示例。該圖31圖示在使用TMDS信道#0、#1和#2發(fā)送具有1920像素X 1080線(xiàn)的寬度X長(zhǎng)度的圖像數(shù)據(jù)情況下的各種類(lèi)型的發(fā)送數(shù)據(jù)的各部分。在其中使用HDMI的三個(gè)TMDS信道#0、#1和#2發(fā)送發(fā)送數(shù)據(jù)的視頻場(chǎng)(視頻場(chǎng))的情況下，根據(jù)發(fā)送的類(lèi)型存在三個(gè)類(lèi)型的部分。這三個(gè)類(lèi)型的部分是視頻數(shù)據(jù)部分(視頻數(shù)據(jù)時(shí)段)、數(shù)據(jù)島部分(數(shù)據(jù)島時(shí)段)和控制部分(控制時(shí)段)。在此，視頻場(chǎng)部分是從特定垂直同步信號(hào)的前緣(活動(dòng)邊緣)到下一個(gè)垂直同步信號(hào)的前緣的部分。該視頻場(chǎng)部分分為水平消隱時(shí)段(水平消隱)、垂直消隱時(shí)段(垂直消隱)和活動(dòng)視頻部分(活動(dòng)視頻)。該活動(dòng)視頻部分是通過(guò)從視頻場(chǎng)部分移除水平消隱時(shí)段和垂直消隱時(shí)段獲得的部分。視頻數(shù)據(jù)部分分配到活動(dòng)視頻部分。在該視頻數(shù)據(jù)部分的情況下，發(fā)送構(gòu)成值未壓縮的一個(gè)屏幕的圖像數(shù)據(jù)的值1920像素X 1080線(xiàn)的有效像素(有效像素)的數(shù)據(jù)。數(shù)據(jù)島部分和控制部分分配到水平消隱時(shí)段和垂直消隱時(shí)段。在數(shù)據(jù)島部分和控制部分的情況下，發(fā)送輔助數(shù)據(jù)(輔助數(shù)據(jù))。也就是說(shuō)，數(shù)據(jù)島部分分配給水平消隱時(shí)段和垂直消隱時(shí)段的一部分。在該數(shù)據(jù)島部分的情況下，發(fā)送輔助數(shù)據(jù)的不涉及控制的數(shù)據(jù)(例如，音頻數(shù)據(jù)的分組等)。將控制部分分配給島水平消隱時(shí)段和垂直消隱時(shí)段的另一部分。在該控制部分的情況下，發(fā)送輔助數(shù)據(jù)的涉及控制的數(shù)據(jù)(例如，垂直同步信號(hào)和水平同步信號(hào)、控制分組
O圖32圖示HDMI端子的管腳分配的示例。圖32中圖示的管腳分配稱(chēng)為類(lèi)型(類(lèi)型A)。作為T(mén)MDS信道#i的差分信號(hào)的TMDS數(shù)據(jù)#i+和TMDS數(shù)據(jù)#i由作為差分線(xiàn)的兩條線(xiàn)發(fā)送。這兩條線(xiàn)連接到對(duì)其分配TMDS數(shù)據(jù)#i+的管腳(具有1、4或7的管腳號(hào)的管腳)和對(duì)其分配TMDS數(shù)據(jù)#1-的管腳(具有3、6或9的管腳號(hào)的管腳)。此外，其中發(fā)送作為用于控制的數(shù)據(jù)的CEC信號(hào)的CEC線(xiàn)84連接到其管腳號(hào)是13的管腳。此外，其中發(fā)送諸如E-EDID等的SDA (串行數(shù)據(jù))信號(hào)的線(xiàn)連接到其管腳號(hào)是16的管腳。其中發(fā)送SCL (串行時(shí)鐘)信號(hào)的線(xiàn)連接到其管腳號(hào)是15的管腳，SCL (串行時(shí)鐘)信號(hào)是在SDA信號(hào)的發(fā)送/接收時(shí)用于同步的時(shí)鐘信號(hào)。上述DDC83由發(fā)送SDA信號(hào)的線(xiàn)和發(fā)送SCL信號(hào)的線(xiàn)配置。此外，如上所述用于源設(shè)備檢測(cè)宿設(shè)備的連接的HDP線(xiàn)(HEAC-線(xiàn))86連接到其管腳號(hào)是19的管腳。此外，應(yīng)用線(xiàn)(HEAC+線(xiàn))88連接到其管腳號(hào)是14的管腳。此外，如上所述用于提供電源的線(xiàn)87連接到其管腳號(hào)是18的管腳。[利用HDMI發(fā)送深度信息集的方法]對(duì)于利用HDMI接口發(fā)送深度信息集的方法，例如可以構(gòu)思使用HDMI廠商專(zhuān)用信息中貞(Vendor Specific InfoFrame)的方法。在該方法的情況下,在HDMI廠商專(zhuān)用信息中貞分組中，設(shè)置HDMI_Video_Format=〃010〃和3D_Meta_present=l,并且指定廠商專(zhuān)用信息中貞擴(kuò)展。在此情況下，3D_Metadata_type例如定義為未使用的“ 100”,并且指定深度信息集。圖33圖示HDMI廠商專(zhuān)用信息幀的分組結(jié)構(gòu)。該HDMI廠商專(zhuān)用信息幀以CEA-861-D定義，所以將省略其詳細(xì)描述。指示圖像數(shù)據(jù)的類(lèi)型的3位信息“HDMI_Vide0_F0rmat”位于第4字節(jié)(PB4)的第7位到第5位。如果圖像數(shù)據(jù)是3D圖像數(shù)據(jù)，那么這三位的信息是“010”。此外，如果圖像數(shù)據(jù)是以此方式的3D圖像數(shù)據(jù)，那么指示TMDS發(fā)送數(shù)據(jù)的結(jié)構(gòu)的4位信息“3D_StrUCtUre”位于第5字節(jié)(PB5)的第7位到第4位。例如，在幀封裝格式的情況下，這四位的信息是“0000”。 此外，“3D_Meta_present”位于第5字節(jié)(PB5)的第三位,并且在指定廠商專(zhuān)用信息幀擴(kuò)展的情況下，這一個(gè)字節(jié)設(shè)為“I”。此外，“3D_Metadata_type”位于第7字節(jié)(PB7)的第7位到第5位。如果指定深度信息集的信息，那么這3位的信息例如設(shè)為未使用“ 100”。此外，“3D_Metadata_length”位于第7字節(jié)(PB7)的第4位到第O位。這5位信息指示隨后3D_Metadata區(qū)域的長(zhǎng)度。此外，2位信息“display_partition_type”位于第8字節(jié)(PB8)的第7位到第6位。此外，4位信息“number_of_partition”位于第8字節(jié)(PB8)的第3位到第O位。隨后,放置數(shù)目對(duì)應(yīng)于圖像顯示平面的分割數(shù)目的深度信息。該深度信息包括“z_cbpth_negatiVe”的I位信息(圖像平面信息)，并且此外，當(dāng)“diSparity_ValUe_flag”指示視差信息存在時(shí)，包括“absolute_disparity_value” 的 8 位信息。如上所述，在圖1所示的圖像發(fā)送/接收系統(tǒng)10的情況下，連同具有左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的預(yù)定節(jié)目的立體圖像數(shù)據(jù)，從廣播站100 (發(fā)送數(shù)據(jù)生成單元201)發(fā)送對(duì)應(yīng)于該立體圖像數(shù)據(jù)的深度信息集到機(jī)頂盒200和電視接收機(jī)300。因此，在接收側(cè)，通過(guò)使用該深度信息集，根據(jù)與圖像中各對(duì)象的透視經(jīng)歷視差調(diào)整的諸如例如像OSD等的圖形信息可以用作要重疊在左眼圖像和右眼圖像上的重疊信息。因此，這使得能夠在顯示例如OSD等的圖形信息時(shí)，保持與圖像中的每個(gè)對(duì)象透視上的一致性。此外，在圖1所示的圖像發(fā)送/接收系統(tǒng)10的情況下，從廣播站100(發(fā)送數(shù)據(jù)生成單元201)發(fā)送到機(jī)頂盒200和電視接收機(jī)300的深度信息集包括圖像顯示平面的分割信息和每個(gè)分割區(qū)域的深度信息，并且已經(jīng)包括在插入位流數(shù)據(jù)(復(fù)用數(shù)據(jù)流)BSD的描述符中發(fā)送，該位流數(shù)據(jù)具有包括立體圖像數(shù)據(jù)的數(shù)據(jù)流。也就是說(shuō)，廣播站100可以使用描述符容易地發(fā)送深度信息集到接收側(cè)。此外，在圖1所示的圖像發(fā)送/接收系統(tǒng)10的情況下，連同預(yù)定節(jié)目的立體圖像數(shù)據(jù)，與其對(duì)應(yīng)的深度信息集(包括圖像顯示平面的分割信息和每個(gè)分割區(qū)域的深度信息)經(jīng)由HDMI線(xiàn)纜400從機(jī)頂盒200發(fā)送到電視接收機(jī)300。因此，在電視接收機(jī)300，通過(guò)使用該深度信息集，根據(jù)與圖像中各對(duì)象的透視經(jīng)歷視差調(diào)整的諸如例如像OSD等的圖形信息可以用作要重疊在左眼圖像和右眼圖像上的重疊信息。因此，這使得能夠在顯示諸如例如OSD等的圖形信息時(shí)，保持與圖像中的每個(gè)對(duì)象透視上的一致性。<2.修改〉

注意到，在上述實(shí)施例的情況下，已經(jīng)圖示這樣的安排，其中由廣播站100、機(jī)頂盒200和電視接收機(jī)300配置圖像發(fā)送/接收系統(tǒng)10。然而，電視接收機(jī)300具有位流處理單元306，其等價(jià)于機(jī)頂盒200內(nèi)的位流處理單元201運(yùn)行，如圖29所示。因此，還可以構(gòu)思如圖34所示的圖像發(fā)送/接收系統(tǒng)10A，其由廣播站100和電視接收機(jī)300配置。此外，在上述實(shí)施例的情況下，已經(jīng)圖示這樣的安排，其中HDMI廠商專(zhuān)用信息幀用作用于從機(jī)頂盒200發(fā)送深度信息集到電視接收機(jī)300的方法?？商娲?，可以構(gòu)思使用活動(dòng)空間(Active Space)并且此外在由HPD線(xiàn)86 (HEAC-線(xiàn))和應(yīng)用線(xiàn)88 (HEAC+線(xiàn))配置的雙向通信路徑上發(fā)送的方法。此外，在上述實(shí)施例的情況下，已經(jīng)圖示這樣的安排，其中機(jī)頂盒200和電視接收機(jī)300通過(guò)HDMI數(shù)字接口連接。然而，不用說(shuō)即使在這些通過(guò)類(lèi)似于HDMI數(shù)字接口的數(shù)字接口(除了線(xiàn)纜外，包括無(wú)線(xiàn))連接的情況下，也可以應(yīng)用本發(fā)明。此外，在上述實(shí)施例的情況下，已經(jīng)圖示這樣的安排，其中在位流處理單元201使用的深度信息集通過(guò)HDMI接口從機(jī)頂盒200發(fā)送到電視接收機(jī)300。然而，不用說(shuō)用于以此方式經(jīng)由HDMI接口發(fā)送深度信息集的技術(shù)還可以應(yīng)用于其他源設(shè)備和宿設(shè)備的組合。例如，可構(gòu)思的源設(shè)備包括諸如BD和DVD等的盤(pán)播放器，以及此外的游戲設(shè)備等，并且可構(gòu)思的宿設(shè)備包括監(jiān)視器設(shè)備、投影儀設(shè)備等。工業(yè)應(yīng)用性本發(fā)明實(shí)現(xiàn)在立體圖像顯示時(shí)重疊信息(諸如例如像OSD的圖形信息)的良好顯示，并且可應(yīng)用于立體圖像顯示系統(tǒng)等。參考標(biāo)號(hào)列表10, IOA立體圖像顯示系統(tǒng)100廣播站110發(fā)送數(shù)據(jù)生成單元111L，IllR 相機(jī)112視頻構(gòu)造單元113視差圖創(chuàng)建單元114麥克風(fēng)115數(shù)據(jù)提取單元
116到118切換開(kāi)關(guān)
119視頻編碼器
120音頻編碼器
122深度信息集創(chuàng)建單元
126多工器
200機(jī)頂盒(STB)
201位流處理單元
202HDMI端子
203天線(xiàn)端子
204數(shù)字調(diào)諧器
205視頻處理電路
206HDMI發(fā)送單元
207音頻處理電路
211CPU
215遙控接收單元
216遙控發(fā)送器
220信號(hào)分離器
221視頻解碼器
224音頻解碼器
226OSD顯示數(shù)據(jù)生成單元
228視頻重疊單元
300電視接收機(jī)(TV)
3013D信號(hào)處理單元
302HDMI端子
303HDMI接收單元
304天線(xiàn)端子
305數(shù)字調(diào)諧器
306位流處 理單元
307視頻處理單元
308面板驅(qū)動(dòng)電路
309顯示面板
310音頻處理電路
311音頻放大器電路
312揚(yáng)聲器
313OSD顯示數(shù)據(jù)生成單元
314視頻重疊單元
321CPU
325遙控接收單元
326遙控發(fā)送器
400 HDMI 線(xiàn)纜
權(quán)利要求
1.一種立體圖像數(shù)據(jù)發(fā)送設(shè)備，包括圖像數(shù)據(jù)輸出單元，配置為輸出構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)；深度信息輸出單元，配置為輸出對(duì)應(yīng)于所述立體圖像的深度信息；以及發(fā)送單元，配置為發(fā)送所述圖像數(shù)據(jù)和所述深度信息；其中，所述深度信息包括圖像顯示平面的分割信息以及分割區(qū)域的深度信息；并且其中，所述發(fā)送單元發(fā)送具有包括所述圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，并且將包括所述深度信息的描述符插入所述復(fù)用數(shù)據(jù)流。
2.如權(quán)利要求1所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述深度信息是指示立體圖像平面是否在距監(jiān)視器位置的近側(cè)的圖像平面信息。
3.如權(quán)利要求2所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述圖像平面信息是構(gòu)成左眼圖像和右眼圖像的視差信息的代碼信息。
4.如權(quán)利要求1所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述深度信息是指示立體圖像平面是否在距監(jiān)視器位置的近側(cè)的圖像平面信息，或者是所述圖像平面信息和左眼圖像和右眼圖像的視差信息；并且其中，指示所述視差信息存在的標(biāo)記信息插入所述深度信息。
5.如權(quán)利要求4所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述深度信息是構(gòu)成所述視差信息的代碼息，或者是構(gòu)成所述代碼息和所述視差息的絕對(duì)值信息。
6.如權(quán)利要求1所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述復(fù)用數(shù)據(jù)流包括用作節(jié)目專(zhuān)用信息的節(jié)目圖表，其指示包括在所述復(fù)用數(shù)據(jù)流中的每個(gè)基本流所屬于的節(jié)目；并且其中，所述描述符插入所述節(jié)目圖表下面。
7.如權(quán)利要求1所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述復(fù)用數(shù)據(jù)流包括用作服務(wù)信息的事件信息表，用于以事件為增量執(zhí)行管理；并且其中，所述描述符插入所述事件信息表下面。
8.如權(quán)利要求1所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述分割信息由指示分割類(lèi)型的信息和指示分割數(shù)目的信息構(gòu)成。
9.如權(quán)利要求8所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述分割類(lèi)型包括其中使用對(duì)角線(xiàn)分割所述圖像顯示平面的分割類(lèi)型。
10.如權(quán)利要求8所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述分割類(lèi)型包括其中使用水平方向線(xiàn)和/或垂直方向線(xiàn)分割所述圖像顯示平面的分割類(lèi)型。
11.如權(quán)利要求1所述的立體圖像數(shù)據(jù)發(fā)送設(shè)備，其中所述發(fā)送單元對(duì)應(yīng)于所述圖像數(shù)據(jù)的每個(gè)預(yù)定時(shí)段的開(kāi)始時(shí)間點(diǎn)，將所述描述符插入所述復(fù)用數(shù)據(jù)流；并且其中，對(duì)應(yīng)于每個(gè)預(yù)定時(shí)段的開(kāi)始時(shí)間點(diǎn)插入所述復(fù)用數(shù)據(jù)流的描述符包括比所述時(shí)段更晚時(shí)段的深度信息。
12.—種立體圖像數(shù)據(jù)發(fā)送方法，包括圖像數(shù)據(jù)輸出步驟，用于輸出構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)；深度信息輸出步驟，用于輸出對(duì)應(yīng)于所述立體圖像的深度信息；以及發(fā)送步驟，用于發(fā)送所述圖像數(shù)據(jù)和所述深度信息；其中，所述深度信息包括圖像顯示平面的分割信息以及分割區(qū)域的深度信息；并且其中，在所述發(fā)送步驟中，發(fā)送具有包括所述圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，并且將包括所述深度信息的描述符插入所述復(fù)用數(shù)據(jù)流。
13.—種立體圖像數(shù)據(jù)發(fā)送設(shè)備，包括圖像數(shù)據(jù)輸出單元，配置為輸出構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)；深度信息輸出單元，配置為輸出對(duì)應(yīng)于所述立體圖像的深度信息；以及發(fā)送單元，配置為發(fā)送所述圖像數(shù)據(jù)和所述深度信息；其中，所述深度信息包括圖像顯示平面的分割信息以及分割區(qū)域的深度信息；并且其中，所述深度信息是指示立體圖像平面是否在距監(jiān)視器位置的近側(cè)的圖像平面信息。
14.一種立體圖像數(shù)據(jù)接收設(shè)備，包括接收單元，配置為接收具有包括構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，所述復(fù)用數(shù)據(jù)流中插入包括對(duì)應(yīng)于所述立體圖像的深度信息的描述符，所述深度信息由圖像顯示平面的分割信息以及分割區(qū)域的深度信息構(gòu)成；重疊信息數(shù)據(jù)輸出單元，配置為輸出從所述復(fù)用數(shù)據(jù)流獲得的對(duì)應(yīng)于所述左眼圖像數(shù)據(jù)的左眼重疊信息的數(shù)據(jù)，以及從所述復(fù)用數(shù)據(jù)流獲得的對(duì)應(yīng)于所述右眼圖像數(shù)據(jù)的右眼重疊信息的數(shù)據(jù)；以及數(shù)據(jù)重疊單元，配置為將所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)重疊在從所述復(fù)用數(shù)據(jù)流獲得的所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)上；其中，所述重疊信息數(shù)據(jù)輸出單元基于從所述復(fù)用數(shù)據(jù)流獲得的所述深度信息，提供所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)之間的視差。
15.如權(quán)利要求14所述的立體圖像數(shù)據(jù)接收設(shè)備，其中，在基于包括在所述深度信息中的視差信息提供所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)之間的視差時(shí)，如果通過(guò)在所述接收單元接收的新的所述描述符更新視差信息，那么所述重疊信息數(shù)據(jù)輸出單元對(duì)于多個(gè)幀使用通過(guò)內(nèi)插處理獲得的視差信息，以便在所述多個(gè)幀上達(dá)到所述新的視差/[目息。
16.如權(quán)利要求14所述的立體圖像數(shù)據(jù)接收設(shè)備，其中已經(jīng)對(duì)應(yīng)于所述圖像數(shù)據(jù)的每個(gè)預(yù)定時(shí)段的開(kāi)始時(shí)間點(diǎn)，將所述描述符插入所述復(fù)用數(shù)據(jù)流；并且其中，對(duì)應(yīng)于每個(gè)時(shí)段的開(kāi)始時(shí)間點(diǎn)插入所述復(fù)用數(shù)據(jù)流的描述符包括比所述時(shí)段更晚時(shí)段的深度信息；并且其中，在每個(gè)時(shí)段中提供所述左眼重疊信息的數(shù)據(jù)和所述右眼重疊信息的數(shù)據(jù)之間的視差時(shí)，所述重疊信息數(shù)據(jù)輸出單元使用通過(guò)內(nèi)插處理獲得的視差信息，所述內(nèi)插處理使用包括在所述時(shí)段和所述時(shí)段之前和之后的時(shí)段的所述深度信息中的視差信息。
17.—種立體圖像數(shù)據(jù)接收設(shè)備，包括接收單元，配置為接收具有包括構(gòu)成立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的數(shù)據(jù)流的復(fù)用數(shù)據(jù)流，所述復(fù)用數(shù)據(jù)流中插入包括對(duì)應(yīng)于所述立體圖像的深度信息的描述符，所述深度信息由圖像顯示平面的分割信息以及分割區(qū)域的深度信息構(gòu)成；以及發(fā)送單元，配置為經(jīng)由發(fā)送路徑，發(fā)送從所述復(fù)用數(shù)據(jù)流獲得的所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)以及所述深度信息到外部設(shè)備。
18.如權(quán)利要求17所述的立體圖像數(shù)據(jù)接收設(shè)備，其中所述發(fā)送單元通過(guò)差分信號(hào)，經(jīng)由多個(gè)信道中的所述發(fā)送路徑，發(fā)送所述圖像數(shù)據(jù)到所述外部設(shè)備；并且其中，所述深度信息插入所述圖像數(shù)據(jù)的消隱時(shí)段中，從而發(fā)送所述深度信息到所述外`部設(shè)備。
全文摘要
[問(wèn)題]在顯示立體圖像時(shí)，在諸如OSD或其他圖形信息的重疊信息的顯示中，容易地保持圖像中各對(duì)象之間距離感知的一致性。[解決方案]深度信息輸出單元輸出對(duì)應(yīng)于立體圖像的深度信息。深度信息包括代表圖像顯示平面的分割的信息以及用于每個(gè)分割區(qū)域的深度信息。深度信息由例如指示立體圖像平面是否位于監(jiān)視器位置前面的圖像平面信息，或者由該圖像平面信息和視差信息的組合構(gòu)成。指示視差信息存在的標(biāo)記信息插入深度信息。深度信息包括在插入PMT、EIT之下的描述符或者復(fù)用數(shù)據(jù)流的其他表中，并且發(fā)送深度信息。
文檔編號(hào)H04N13/00GK103053166SQ20118003760
公開(kāi)日2013年4月17日 申請(qǐng)日期2011年11月1日 優(yōu)先權(quán)日2010年11月8日
發(fā)明者塚越郁夫 申請(qǐng)人:索尼公司