專利名稱：圖像處理設(shè)備和方法以及程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理設(shè)備和方法以及程序，具體涉及可以更容易地獲得從多個(gè)不同的視角位置觀看的對(duì)象的立體圖像的圖像處理設(shè)備和方法以及程序。
背景技術(shù)：
相關(guān)技術(shù)中，已知利用通過(guò)從不同視點(diǎn)(viewpoint)拍攝同一對(duì)象而獲得的一對(duì)圖像來(lái)立體顯示該對(duì)象的技術(shù)(例如，見(jiàn)PTL1)。例如，在典型相機(jī)的情況下，在相機(jī)的光軸基本上與地面水平的狀態(tài)下拍攝對(duì)象， 并且將獲得的圖像投影在與地面垂直的屏幕上。在這種情況下，可認(rèn)為觀看所顯示的圖像的用戶的視角位置位于與顯示圖像的屏幕基本垂直的直線上。因此，當(dāng)要利用這種顯示系統(tǒng)立體顯示圖像時(shí)，用戶雙眼的不一致/視差表現(xiàn)為圖像的左右偏移。即，利用在這樣的方向上具有視差的一對(duì)圖像來(lái)立體顯示對(duì)象該方向與用戶的視線(sight line)方向垂直，并且用戶的左眼和右眼沿該方向布置。引用的專利文獻(xiàn)PTLl 日本未審專利申請(qǐng)，公開(kāi)號(hào)2010-8575。

發(fā)明內(nèi)容
技術(shù)問(wèn)題另一方面，如圖1所示，在相機(jī)11在其光軸處于垂直于地面的方向上的狀態(tài)下拍攝對(duì)象，并且將所獲取的圖像投影到與地面平行的屏幕上的顯示系統(tǒng)的情況下，關(guān)于平行于地面的屏幕的垂直軸方向的旋轉(zhuǎn)角度保留為一個(gè)自由度。應(yīng)注意，在圖1中，相互正交的右斜線方向、左斜線方向和豎直方向分別表示X方向、y方向和Z方向。在圖1的示例中，以這樣的狀態(tài)由相機(jī)11拍攝對(duì)象Hll 相機(jī)11的光軸平行于ζ 方向，即，從該圖的上方。對(duì)象Hll的圖像被顯示在平行于xy平面的屏幕上。因此，這種顯示系統(tǒng)允許用戶以ζ軸為旋轉(zhuǎn)軸從各個(gè)方向觀察該屏幕，這使得難以立體顯示對(duì)象Hll。在利用以狹縫光柵方案或柱狀透鏡(lenticular)方案為代表的裸眼顯示方案作為顯示立體圖像的方法的情況下，通過(guò)對(duì)設(shè)置在該圖像顯示裝置中的狹縫或柱狀透鏡的布置方向來(lái)物理地限制視差的方向。例如，如果狹縫或柱狀透鏡被布置在圖中的X方向上，則利用在X方向上具有視差的一對(duì)圖像來(lái)立體顯示對(duì)象H11。因此，除非用戶以視線方向變?yōu)槠叫杏趛方向的方式來(lái)觀看屏幕，否則不以立體方式觀察到對(duì)象Hl 1。應(yīng)當(dāng)注意的是，在通過(guò)液晶快門(mén)方案立體顯示圖像的情況下，與肉眼顯示方案的情況不同的是，沒(méi)有對(duì)視差方向的物理限制。因而，原理上，無(wú)論用戶從哪個(gè)方向觀看屏幕， 都可立體顯示對(duì)象Hll。然而，在通過(guò)液晶快門(mén)方案顯示立體圖像的情況下，需要在垂直于用戶視線方向的方向上具有視差的一對(duì)圖像。例如，如果用戶的視線方向平行于X方向，為了圖像的立體顯示，需要在y方向上具有視差的一對(duì)圖像，而如果用戶的視線方向平行于y方向，則需要在χ方向上具有視差的一對(duì)圖像。這樣，在液晶快門(mén)方案中，如果利用在垂直于用戶視線方向的方向上具有視差的一對(duì)圖像，則無(wú)論用戶的視線方向如何，都可以立體顯示對(duì)象Hl 1。但是，通常，假設(shè)用戶的視線方向?qū)τ诶缫Ⅲw顯示的內(nèi)容的圖像來(lái)說(shuō)沒(méi)有變化。因此，只準(zhǔn)備了在某個(gè)特定方向上具有視差的一對(duì)圖像，因而無(wú)法處理用戶視線方向的變化?？紤]到上述情況而作出本發(fā)明公開(kāi)的實(shí)施例，并且使得可以更容易地獲得從多個(gè)不同視角位置觀看的對(duì)象的立體圖像。問(wèn)題解決方案公開(kāi)了一種用于處理具有已知視點(diǎn)的源圖像的設(shè)備。該設(shè)備可以包括，視點(diǎn)確定部分，用于相對(duì)于該已知視點(diǎn)確定觀察者的左眼視點(diǎn)和右眼視點(diǎn)。另外，該設(shè)備可包括視差圖像生成部分。視差生成部分可以基于所確定的左眼視點(diǎn)選擇源圖像中的至少之一的數(shù)據(jù)作為原始左眼數(shù)據(jù)。此外，視差生成部分可以基于所確定的右眼視點(diǎn)選擇源圖像中的至少之一的數(shù)據(jù)作為原始右眼數(shù)據(jù)。視差生成部分還可以用于基于該原始左眼數(shù)據(jù)輸出左眼圖像數(shù)據(jù)。另外，視差生成部分可以用于基于該原始右眼數(shù)據(jù)輸出右眼圖像數(shù)據(jù)。還公開(kāi)了一種處理具有已知視點(diǎn)的源圖像的方法。處理器可以執(zhí)行程序以使得某個(gè)設(shè)備執(zhí)行該方法。該程序可以被存儲(chǔ)在計(jì)算機(jī)可讀介質(zhì)中。該方法可以包括相對(duì)于該已知視點(diǎn)確定觀察者的左眼視點(diǎn)和右眼視點(diǎn)。該方法還可以包括基于所確定的左眼視點(diǎn)， 選擇源圖像中的至少之一的數(shù)據(jù)作為原始左眼數(shù)據(jù)。此外，該方法可以包括基于所確定的右眼視點(diǎn)，選擇源圖像中的至少之一的數(shù)據(jù)作為原始右眼數(shù)據(jù)。該方法還可以包括基于該原始左眼數(shù)據(jù)，輸出左眼圖像數(shù)據(jù)。另外，該方法可以包括基于該原始右眼數(shù)據(jù)，輸出右眼圖像數(shù)據(jù)。發(fā)明的有益效果根據(jù)公開(kāi)的實(shí)施例的一個(gè)方面，可以更容易地獲得從多個(gè)不同視點(diǎn)位置觀看的對(duì)象的立體圖像。


[圖1]圖1是說(shuō)明根據(jù)相關(guān)技術(shù)的立體圖像的成像系統(tǒng)和顯示系統(tǒng)之間關(guān)系的圖。[圖2]圖2是說(shuō)明與本發(fā)明實(shí)施例一致的圖像處理設(shè)備的立體圖像顯示的圖。[圖3]圖3是說(shuō)明源圖像的圖。[圖4]圖4是示出與本發(fā)明實(shí)施例一致的圖像處理設(shè)備的配置示例的圖。[圖5]圖5是說(shuō)明立體顯示過(guò)程的流程圖。[圖6]圖6是說(shuō)明視差圖像的顯示視點(diǎn)的圖。[圖7]圖7是說(shuō)明視差圖像的生成的圖。[圖8]圖8是示出圖像處理設(shè)備的另一配置示例的圖。[圖9]圖9是說(shuō)明立體顯示過(guò)程的流程圖。[圖10]圖10是說(shuō)明記錄源圖像的生成的圖。[圖11]圖11是說(shuō)明視差圖像的生成的圖。
[圖12]圖12是說(shuō)明立體顯示過(guò)程的流程圖。[圖13]圖13是說(shuō)明視差圖像的生成的圖。[圖14]圖14是示出圖像處理設(shè)備的另一配置示例的圖。[圖15]圖15是說(shuō)明立體顯示過(guò)程的流程圖。[圖16]圖16是示出圖像處理設(shè)備的另一配置示例的圖。[圖17]圖17是說(shuō)明立體顯示過(guò)程的流程圖。[圖18]圖18是說(shuō)明立體顯示過(guò)程的流程圖。[圖19]圖19是示出計(jì)算機(jī)的配置示例的框圖。
具體實(shí)施例方式下面將參照附圖對(duì)本發(fā)明的實(shí)施例進(jìn)行說(shuō)明。〈第一實(shí)施例〉本發(fā)明的概述例如，如圖2所示，與本發(fā)明實(shí)施例一致的圖像處理設(shè)備在顯示屏幕與地面水平的顯示部分41上以立體的方式顯示對(duì)象。應(yīng)注意，在圖2中，縱向、橫向和深度方向分別表示y方向、χ方向和ζ方向。例如，通過(guò)液晶快門(mén)方案，圖像處理設(shè)備通過(guò)在平行于xy平面的屏幕上交替顯示相對(duì)于彼此具有視差的視差圖像來(lái)顯示立體圖像。即，立體顯示視差圖像上的對(duì)象。此時(shí)， 圖像處理設(shè)備檢測(cè)正在觀看所顯示的立體圖像的用戶在xy平面上的位置，并根據(jù)該位置確定用戶視線的方向。應(yīng)當(dāng)注意，假設(shè)用戶觀看立體圖像，從而從顯示部分41的邊緣附近基本上在ζ方向上俯視顯示部分41。此外，假設(shè)用戶的視線方向?yàn)槠叫杏趚y平面的方向。在確定了用戶的視線方向時(shí)，基于該視線方向，圖像處理設(shè)備控制立體圖像的顯示，從而當(dāng)從用戶的視點(diǎn)位置觀看該立體圖像時(shí)，以立體方式觀察立體圖像上的對(duì)象。更具體地，如圖3左上部所示，圖像處理設(shè)備記錄多個(gè)相互間具有視差的圖像(也就是多個(gè)圖像數(shù)據(jù))(下文中稱為源圖像)，通過(guò)在xy平面上被取作視點(diǎn)的每個(gè)點(diǎn)處對(duì)特定對(duì)象進(jìn)行拍攝而獲得這些圖像。應(yīng)注意到，在圖3中，縱向和橫向分別表示y方向和χ方向。此外，圖中，每一個(gè)矩形代表一個(gè)源圖像，并且在圖中，右下方的每一個(gè)圓代表一個(gè)源圖像的視點(diǎn)。在圖3的示例中，預(yù)先準(zhǔn)備有5 (χ方向)*5(y方向)，總共25個(gè)源圖像。圖3中， 以陣列布置的源圖像間的位置關(guān)系與各源圖像的視點(diǎn)位置之間的位置關(guān)系相同。因此，這些源圖像是顯示有從相互不同的視點(diǎn)觀看的同一對(duì)象的圖像。接下來(lái)，如圖3的右下部所示，通過(guò)將每個(gè)源圖像的視點(diǎn)位置取作網(wǎng)格點(diǎn)，圖3的左上部所示的以陣列布置的源圖像被認(rèn)為是xy平面上的網(wǎng)格點(diǎn)的集合。這里，在圖中右下部的每個(gè)視點(diǎn)附近，示出了該視點(diǎn)在xy坐標(biāo)系中的坐標(biāo)。例如，在圖中，右下部的網(wǎng)格點(diǎn)集合中，位于左邊緣最上面的視點(diǎn)附近的(1，1)表示該視點(diǎn)在xy坐標(biāo)系中的坐標(biāo)(x，y)。艮口， 坐標(biāo)(1，1)表示χ坐標(biāo)和y坐標(biāo)都為1的視點(diǎn)位置。在該圖像處理設(shè)備中，在xy平面上的網(wǎng)格點(diǎn)集合被取為位于圖2中顯示部分41 的前景側(cè)的情況下，根據(jù)單個(gè)視點(diǎn)的源圖像產(chǎn)生視差圖像。即，在xyz空間中，假設(shè)顯示部分41的顯示屏幕的中心與每個(gè)源圖像的視點(diǎn)之間的位置關(guān)系與源圖像的對(duì)象與每個(gè)源圖像視點(diǎn)之間的關(guān)系相同。應(yīng)當(dāng)注意的是，這些源圖像由光場(chǎng)相機(jī)等拍攝，利用這種相機(jī)，可在以陣列布置的同時(shí)拍攝多視點(diǎn)的圖像。此外，源圖像可以是靜止圖像，也可以是運(yùn)動(dòng)圖像。根據(jù)用戶的視線方向和要顯示的視差圖像的視差d，圖像處理設(shè)備確定xy平面上的一對(duì)點(diǎn)(以下指顯示視點(diǎn))，其被布置在與該視線方向垂直的方向上，并且其間距與視差 d的長(zhǎng)度相同。然后，關(guān)于每個(gè)顯示視點(diǎn)，圖像處理設(shè)備選擇視點(diǎn)位置(即已知視點(diǎn))位于該顯示視點(diǎn)附近的多個(gè)源圖像，根據(jù)所選擇的源圖像生成相應(yīng)顯示視點(diǎn)的視差圖像，并基于所獲得的視差圖像對(duì)顯示立體圖像。由于以這種方式獲得的視差圖像對(duì)在xy平面上與用戶視線方向垂直的方向上具有視差d，從而用戶以立體方式觀察到該視差圖像上的對(duì)象。<圖像處理設(shè)備的配置>接下來(lái)，對(duì)上面描述的圖像處理設(shè)備的具體實(shí)施例進(jìn)行說(shuō)明。圖4是示出與本發(fā)明實(shí)施例一致的圖像處理設(shè)備的配置示例的圖。應(yīng)注意在圖中，用相同符號(hào)表示與圖2中相對(duì)應(yīng)的部分，并且適當(dāng)省略其說(shuō)明。圖4中的圖像處理設(shè)備71包括顯示部分41、獲取部分81、記錄部分82、傳感器 83、圖像處理部分84和顯示控制部分85。顯示部分41被設(shè)置為顯示屏幕基本上垂直于豎直方向，S卩，平行于地面。基于由顯示控制部分85提供的視差圖像，顯示部分41利用液晶快門(mén)方案顯示立體圖像。獲取部分81從例如可移除介質(zhì)或安裝在圖像處理設(shè)備71上的相機(jī)獲得參照?qǐng)D3 描述的源圖像，并將源圖像提供給記錄部分82以供記錄。記錄部分82記錄由獲取部分81 提供的源圖像，并根據(jù)需要將這些源圖像提供給圖像處理部分84。更具體地，記錄部分82 記錄各個(gè)源圖像和彼此關(guān)聯(lián)的源圖像的視點(diǎn)位置。傳感器83由多個(gè)人體傳感器、圖像傳感器等組成，其被設(shè)置在支持顯示部分41或者容納顯示部分41的臺(tái)面上，從而圍繞顯示部分41的顯示屏幕。傳感器83檢測(cè)出現(xiàn)在顯示部分41附近的用戶(人)的位置，并將檢測(cè)結(jié)果提供給圖像處理部分84。根據(jù)由傳感器83提供的檢測(cè)結(jié)果和記錄在記錄部分82中的源圖像，圖像處理部分84生成一對(duì)視差圖像。圖像處理部分84包括，視線方向確定部分101、視點(diǎn)位置確定部分(即，視點(diǎn)確定部分)102和視差圖像生成部分103。根據(jù)傳感器83提供的對(duì)用戶位置的檢測(cè)結(jié)果，視線方向確定部分101確定用戶的視線方向，并將獲得的視線方向提供給視點(diǎn)位置確定部分102。根據(jù)預(yù)先指定的視差d和來(lái)自視線方向確定部分101的視線方向，視點(diǎn)位置確定部分102確定作為視差圖像的視點(diǎn)位置的顯示視點(diǎn)，并將這些顯示視點(diǎn)提供給視差圖像生成部分103?；谟梢朁c(diǎn)位置確定部分102提供的顯示視點(diǎn)，視差圖像生成部分103從記錄部分82讀取需要的源圖像，并基于所讀取的源圖像生成視差圖像。視差圖像生成部分103將所生成的視差圖像對(duì)提供給顯示控制部分85。顯示控制部分85將由視差圖像生成部分103 提供的該對(duì)視差圖像提供給顯示部分41，并使得立體顯示該視差圖像?！戳Ⅲw顯示過(guò)程的說(shuō)明〉附帶地，當(dāng)用戶操作圖像處理設(shè)備71以指示立體圖像的顯示時(shí)，圖像處理設(shè)備71響應(yīng)于用戶的指令執(zhí)行立體顯示過(guò)程，并使立體圖像被顯示。下文中，將參照?qǐng)D5中的流程圖對(duì)圖像處理設(shè)備71的圖像處理過(guò)程進(jìn)行說(shuō)明。在步驟Sll中，視線方向確定部分101確定用戶的視線方向。S卩，傳感器83檢測(cè)出現(xiàn)在顯示部分41周圍的用戶的位置，并將檢測(cè)的結(jié)果提供給視線方向確定部分101。然后，根據(jù)來(lái)自傳感器83的檢測(cè)結(jié)果，視線方向確定部分101確定用戶的視線方向，并將該視線方向提供給視點(diǎn)位置確定部分102。例如，將起點(diǎn)為用戶在平行于xy平面的平面上的位置，而終點(diǎn)為顯示部分41的顯示屏幕中心位置的矢量的方向定義為視線方向。應(yīng)當(dāng)注意，在傳感器83在顯示部分41的周圍檢測(cè)到多個(gè)用戶的情況下，選擇其中一個(gè)用戶，并確定該用戶的視線方向。在圖像處理設(shè)備71中，當(dāng)用戶視線方向改變時(shí)視差圖像的視差方向也改變，為了視差圖像的時(shí)間穩(wěn)定性，希望一旦從多個(gè)用戶中選擇出一個(gè)用戶，則在立體圖像的播放期間持續(xù)選擇該用戶。在步驟S12中，根據(jù)由視線方向確定部分101提供的用戶視線方向和預(yù)先指定的視差d，視點(diǎn)位置確定部分102找出視差圖像的一對(duì)顯示視點(diǎn)(即，左眼視點(diǎn)和右眼視點(diǎn))。 這里，視差d例如是假設(shè)的在觀察立體圖像時(shí)用戶雙眼的間距長(zhǎng)度，其可由用戶指定或者預(yù)先定義。例如，如圖6所示，視點(diǎn)位置確定部分102在xy平面上以源圖像的各視點(diǎn)(網(wǎng)格點(diǎn))集合的中心位置(下面稱為參考位置)為圓心、d/2為半徑虛擬地畫(huà)出圓SC11。應(yīng)注意在圖6中，縱向和橫向分別表示y方向和χ方向，每個(gè)單獨(dú)的圓表示單個(gè)源圖像的視點(diǎn)。隨著以d/2為半徑畫(huà)圓SC11，視點(diǎn)位置確定部分102隨后找出由用戶視線方向 SDll和平行于χ方向的虛擬χ軸AXll構(gòu)成的角θ，并找出圓SCll的處于角e的切線Lll 和切線L12。這些切線Lll和切線L12都是平行于視線方向SDll的直線。隨著以這種方式找出切線Lll和切線L12，視點(diǎn)位置確定部分102定義所獲得的切線Lll和切線L12與圓SCll間的切點(diǎn)作為一對(duì)顯示視點(diǎn)。在圖6的示例中，獲得顯示視點(diǎn) HSll和顯示視點(diǎn)HS12，顯示視點(diǎn)HSll和顯示視點(diǎn)HS12之間的距離是要顯示的視差圖像之間的視差d，而連接顯示視點(diǎn)HSll和顯示視點(diǎn)HS12的直線與視線方向SDll正交。因此，如果立體地顯示視點(diǎn)位置為這些顯示視點(diǎn)HSll和顯示視點(diǎn)HS12的一對(duì)視差圖像，那么從視線方向SDll觀看視差圖像的用戶應(yīng)當(dāng)能夠看到以立體方式顯示的視差圖像上的對(duì)象。應(yīng)當(dāng)注意到，顯示視點(diǎn)HSll是被用戶左眼觀察的左眼視差圖像的視點(diǎn)，而顯示視點(diǎn)HS12是被用戶右眼觀察的右眼視差圖像的視點(diǎn)。當(dāng)通過(guò)液晶快門(mén)方案顯示這些用于右眼和左眼的視差圖像時(shí)，顯示立體圖像?；氐綄?duì)圖5中流程圖的描述，在找到該對(duì)顯示視點(diǎn)之后，視點(diǎn)位置確定部分102將找到的顯示視點(diǎn)提供給視差圖像生成部分103，處理過(guò)程進(jìn)行到步驟S13。在步驟S13中，基于由視點(diǎn)位置確定部分102提供的顯示視點(diǎn)，視差圖像生成部分 103選擇視點(diǎn)位于xy平面上的每個(gè)顯示視點(diǎn)附近的若干源圖像。例如，在圖6的示例中，視差圖像生成部分103選擇位于顯示視點(diǎn)HSll附近且圍繞顯示視點(diǎn)HSll的四個(gè)視點(diǎn)SPll到SP14(即，位于矩形頂點(diǎn)處的四個(gè)視點(diǎn))，選擇這些視點(diǎn)的源圖像(即，原始左眼數(shù)據(jù))，并從記錄部分82讀取所選擇的源圖像。同樣地，視差圖像生成部分103選擇視點(diǎn)位于顯示視點(diǎn)HS12附近的四個(gè)視點(diǎn)(即，位于矩形頂點(diǎn)處的四個(gè)視點(diǎn))，選擇這些視點(diǎn)的源圖像(即，原始右眼數(shù)據(jù))，并從記錄部分82讀取所選擇的源圖像。在步驟S14中，對(duì)于每個(gè)顯示視點(diǎn)，通過(guò)利用在步驟S13中選擇的、位于顯示視點(diǎn)附近的視點(diǎn)的源圖像，視差圖像生成部分103生成視差圖像(即，完成包括左眼圖像數(shù)據(jù)或右眼圖像數(shù)據(jù)的至少之一的圖像數(shù)據(jù))。例如，如圖7所示，通過(guò)對(duì)視點(diǎn)位于顯示視點(diǎn)HSll附近的源圖像進(jìn)行合成，視差圖像生成部分103生成視點(diǎn)為顯示視點(diǎn)HSll的視差圖像。應(yīng)當(dāng)注意，圖7是放大顯示圖6中的顯示視點(diǎn)HSll附近區(qū)域的圖。圖中，用相同的符號(hào)表示與圖6中相應(yīng)的部分，并省略對(duì)其的說(shuō)明。而且，圖7中，縱向和橫向分別表示y方向和χ方向。首先，視差圖像生成部分103通過(guò)變形(morphing)方法等對(duì)位于坐標(biāo)(χ'，y') 的視點(diǎn)SPll的源圖像和位于坐標(biāo)(X'，y' +1)的視點(diǎn)SP12的源圖像進(jìn)行合成，由此生成位于坐標(biāo)(χ'，y)處的視點(diǎn)Gll的圖像。例如，在源圖像的合成中，可通過(guò)這樣的方式得出視點(diǎn)Gll的圖像中像素的像素值根據(jù)從視點(diǎn)Gll到視點(diǎn)SPll和視點(diǎn)SP12的距離，以一定的比例對(duì)這兩個(gè)源圖像中的像素的像素值進(jìn)行內(nèi)插。在以這種方式生成視點(diǎn)Gll的圖像之后，通過(guò)變形方法等，視差圖像生成部分103 類似地對(duì)位于坐標(biāo)(x' +l，y')的視點(diǎn)SP13的源圖像和位于坐標(biāo)(x' +l,y' +1)的視點(diǎn)SP14的源圖像進(jìn)行合成，由此生成位于坐標(biāo)(χ' +1，y)的視點(diǎn)G12的圖像。此外，視差圖像生成部分103通過(guò)變形方法等將視點(diǎn)Gll的圖像和視點(diǎn)G12的圖像進(jìn)行合成，由此生成位于坐標(biāo)(X，y)處的顯示視點(diǎn)HSll的視差圖像。應(yīng)注意，在圖7的示例中，在對(duì)y方向布置的源圖像進(jìn)行合成之后，對(duì)在χ方向布置的圖像進(jìn)行合成，由此生成視差圖像。然而，也可以對(duì)χ方向上布置的源圖像執(zhí)行合成，然后對(duì)y方向上布置的圖像進(jìn)行合成，由此生成視差圖像。返回到對(duì)圖5中流程圖的描述，在生成該對(duì)顯示視點(diǎn)的視差圖像之后，視差圖像生成部分103將所生成的視差圖像對(duì)提供給顯示控制部分85，并且處理進(jìn)行到步驟S15。在步驟S15中，顯示控制部分85將由視差圖像生成部分103提供的視差圖像對(duì)提供給顯示部分41，并通過(guò)液晶快門(mén)方案使得該視差圖像對(duì)被立體地顯示。這樣，在佩戴液晶快門(mén)的專用眼鏡的情況下正在觀看顯示部分41的用戶能夠以立體方式觀看該視差圖像。 艮P，立體圖像被觀察到。在步驟S16中，視線方向確定部分101判斷用戶的視線方向是否發(fā)生了改變。例如，當(dāng)根據(jù)由傳感器83提供的對(duì)用戶的檢測(cè)結(jié)果檢測(cè)到用戶視線方向發(fā)生變化時(shí)，判斷該視線方向發(fā)生了改變。如果在步驟S16中判斷視線方向發(fā)生了改變，則處理返回到步驟S11，并重復(fù)上述過(guò)程。即，檢測(cè)用戶的新視線方向，生成在垂直于該視線方向的方向上具有視差的視差圖像對(duì)，并顯示立體圖像。另一方面，如果在步驟S16中判斷視線方向沒(méi)有改變，在步驟S17中，圖像處理設(shè)備71判斷是否結(jié)束顯示立體圖像的過(guò)程。例如，當(dāng)用戶操作該圖像處理設(shè)備71時(shí)判斷結(jié)束該過(guò)程，并指示結(jié)束立體圖像的顯示。如果在步驟S17中判斷不結(jié)束該處理，則該處理返回到步驟S16，并重復(fù)上述過(guò)程。即，連續(xù)顯示同樣的立體圖像，直到用戶的視線方向發(fā)生改變?yōu)橹埂?br> 另一方面，如果在步驟S17中判斷結(jié)束該處理，則圖像處理設(shè)備71使立體圖像的顯示結(jié)束，并且立體顯示過(guò)程結(jié)束。以上述方式，圖像處理設(shè)備71檢測(cè)出現(xiàn)在顯示部分41周圍的用戶的視線方向，并根據(jù)該視線方向找出要顯示的每個(gè)視差圖像的顯示視點(diǎn)。然后，圖像處理設(shè)備71對(duì)多個(gè)不同視點(diǎn)的源圖像中視點(diǎn)位于該顯示視點(diǎn)附近的源圖像進(jìn)行合成，由此生成該顯示視點(diǎn)的視
差圖像。以這種方式，通過(guò)檢測(cè)用戶的視線方向，根據(jù)該視線方向找出視差圖像的顯示視點(diǎn)，并根據(jù)視點(diǎn)位于它們的顯示視點(diǎn)附近的源圖像來(lái)生成視差圖像，無(wú)論用戶的視點(diǎn)位置在哪里，都可以容易地獲得視差圖像，用戶通過(guò)該視差圖像以立體的方式觀察對(duì)象。此外，根據(jù)該圖像處理設(shè)備71，能夠容易地獲得與任意視線方向相應(yīng)的視差圖像。 由此，即使在觀看立體圖像期間用戶的視線方向發(fā)生變化，隨著視線方向的該變化，能夠立體顯示具有不同方向上的視差的視差圖像。即，不管用戶從顯示部分41周圍360度的哪個(gè)位置觀看顯示部分41的顯示屏幕，用戶都能以立體方式看到視差圖像上的對(duì)象。如上所述，根據(jù)該圖像處理設(shè)備71，通過(guò)利用現(xiàn)有的三維圖像顯示裝置，實(shí)現(xiàn)了新的能力，由此，以能夠從360度的自由視點(diǎn)立體地觀看對(duì)象的方式顯示立體圖像。應(yīng)當(dāng)注意的是，如上所述的圖像處理設(shè)備71可應(yīng)用到嵌入臺(tái)面類型的信息顯示器、用于外科手術(shù)成像的投影儀等。特別有效的是，例如，將該圖像處理設(shè)備71應(yīng)用于播放系統(tǒng)，該系統(tǒng)從正上方通過(guò)光場(chǎng)相機(jī)拍攝正在被實(shí)施外科手術(shù)的操作部位，并以三維方式重建從各個(gè)位置觀看的該操作部位以用于立體顯示。在這種情況下，將由光場(chǎng)相機(jī)拍攝的源圖像提供給圖像處理設(shè)備71。在圖像處理設(shè)備71中，根據(jù)這些源圖像，作為視差圖像生成外科手術(shù)期間的圖像，并進(jìn)行立體顯示。在根據(jù)相關(guān)技術(shù)的播放系統(tǒng)中，只有在固定基線(baseline)上的視差圖像被立體顯示。然而，根據(jù)圖像處理設(shè)備71，能從任意方向立體顯示對(duì)象，而不受特定基線的限制。 由此，可以在手術(shù)期間以更加真實(shí)的感覺(jué)重現(xiàn)器械的運(yùn)動(dòng)，以及被實(shí)施外科手術(shù)的器官等的形狀。此外，還可以在手術(shù)期間以外科手術(shù)操作者的視點(diǎn)觀察圖像。應(yīng)當(dāng)注意的是，前面的描述針對(duì)視差d不大于源圖像的視點(diǎn)集合(網(wǎng)格點(diǎn))中各視點(diǎn)間的最大間距的情況。在這個(gè)情況下，通過(guò)將視點(diǎn)位于其顯示視點(diǎn)附近的源圖像內(nèi)插而進(jìn)行的合成，生成每個(gè)視差圖像。但是，并不限于這種情況，視差d可能大于源圖像的視點(diǎn)集合中視點(diǎn)間的最大間距。在這種情況下，通過(guò)將其顯示視點(diǎn)周圍最近的四個(gè)視點(diǎn)的源圖像內(nèi)插和外插而進(jìn)行的合成，生成每個(gè)視差圖像。另外，在源圖像的視點(diǎn)間距足夠窄，并且空間分辨率非常好的情況下，不是生成每個(gè)顯示視點(diǎn)的視差圖像，而是可以將視點(diǎn)與距顯示視點(diǎn)最近的源圖像按原樣作為視差圖像顯示。同樣在這種情況下，可獲得與根據(jù)若干源圖像生成每個(gè)視差圖像的情況基本相同的效果，由此，允許以十分立體的方式顯示對(duì)象。<第二實(shí)施例><圖像處理設(shè)備的配置>另外，在上述的情況下，假設(shè)作為用戶的雙眼間距的視差d恒定，其遵循無(wú)論用戶的視線方向如何，顯示視點(diǎn)都位于半徑為d/2的圓周上。因此，通過(guò)利用所獲得的源圖像， 對(duì)要預(yù)先記錄的源圖像組的信息量進(jìn)行壓縮，為了記錄的目的，可生成視點(diǎn)位于圓周上的源圖像，并且只有視點(diǎn)位于圓周上的所生成的源圖像(下文也稱為記錄源圖像)才可以預(yù)先記錄。在這種情況下，例如，對(duì)圖像處理設(shè)備71被如圖8所示地配置。在圖8所示的圖像處理設(shè)備71中，還在圖4的圖像處理設(shè)備71中設(shè)置了記錄源圖像生成部分131。除此之外，其配置與圖4中的圖像處理設(shè)備71相同。S卩，在圖8的圖像處理設(shè)備71中，記錄源圖像生成部分131被設(shè)置在獲取部分81 和記錄部分82之間。應(yīng)注意，在圖8中，用相同的符號(hào)表示與圖4中相對(duì)應(yīng)的部分，并適當(dāng)省略其描述。根據(jù)由獲取部分81獲取的源圖像，記錄源圖像生成部分131生成視點(diǎn)位于xy平面上預(yù)定位置處的記錄源圖像，并將該記錄源圖像提供給記錄部分82。應(yīng)當(dāng)注意的是，所生成的記錄源圖像被記錄在記錄部分82中。〈立體顯示過(guò)程的說(shuō)明〉接下來(lái)，參照?qǐng)D9的流程圖，對(duì)圖8中的圖像處理設(shè)備71執(zhí)行的立體顯示過(guò)程進(jìn)行說(shuō)明。在步驟S41中，基于預(yù)先指定的視差d，記錄源圖像生成部分131定義記錄源圖像的視點(diǎn)位置。具體地，獲取部分81獲取多個(gè)源圖像，并將這些源圖像提供給記錄源圖像生成部分131。然后，例如，如圖10所示，記錄源圖像生成部分131在xy平面上以該源圖像的視點(diǎn)集合(網(wǎng)格點(diǎn))的基準(zhǔn)位置為中心，d/2為半徑，虛擬地畫(huà)圓SC11。應(yīng)注意，在圖10中，縱向和橫向分別表示y方向和χ方向，位于不同于圓SCll的圓周上的位置的位置處的每一單個(gè)圓表示一個(gè)源圖像的視點(diǎn)。此外，在圖10中，用相同的符號(hào)表示與圖6相對(duì)應(yīng)的部分，并省略其說(shuō)明。隨著在xy平面上畫(huà)圓SC11，記錄源圖像生成部分131然后定義12個(gè)點(diǎn)作為記錄源圖像的視點(diǎn)VPl到VP12，這些點(diǎn)等分圓SCll的圓周。應(yīng)當(dāng)注意的是，將圓SCll等分的點(diǎn) (視點(diǎn))的數(shù)目和位置是任意數(shù)目和位置。另外，記錄源圖像的視點(diǎn)可以不必是圓SCll的圓周的等分點(diǎn)。在步驟S42中，通過(guò)利用從獲取部分81提供的源圖像，記錄源圖像生成部分131 生成各視點(diǎn)的記錄源圖像，并將這些記錄源圖像提供給記錄部分82。例如，記錄源圖像生成部分131生成其相應(yīng)視點(diǎn)為圖10中的視點(diǎn)VPl到VP12的共計(jì)12個(gè)記錄源圖像。具體地，對(duì)于視點(diǎn)VPlJlg VP4、視點(diǎn)VP7和視點(diǎn)VP10，已經(jīng)存在其視點(diǎn)位于該相同位置的源圖像，由此，那些源圖像被定義為視點(diǎn)VPlJlg VP4、視點(diǎn)VP7和視點(diǎn)VPlO的相應(yīng)記錄源圖像。另外，通過(guò)對(duì)該記錄源圖像的視點(diǎn)周圍的四個(gè)最近的視點(diǎn)執(zhí)行變形方法來(lái)進(jìn)行合成，生成其它視點(diǎn)的記錄源圖像的每個(gè)。即，在圖10的示例中，通過(guò)對(duì)視點(diǎn)位于附近的源圖像的內(nèi)插而進(jìn)行的合成，生成視點(diǎn)VP2、視點(diǎn)VP3、視點(diǎn)VP5、視點(diǎn)VP6、視點(diǎn)VP8、視點(diǎn)VP9、視點(diǎn)VPll和視點(diǎn)VP12的記錄源圖像的每個(gè)。在以這種方式獲得記錄源圖像之后，記錄源圖像生成部分131將所生成的記錄源
11圖像提供給記錄部分82。然后，在步驟S43，記錄部分82記錄由記錄源圖像生成部分131 提供的記錄源圖像。以這種方式，通過(guò)生成視點(diǎn)位于xy平面上的以基準(zhǔn)點(diǎn)為圓心、d/2為半徑的圓周上的記錄源圖像，并預(yù)先記錄該記錄源圖像，能夠減少要預(yù)先記錄的圖像的數(shù)量。例如，在圖10的示例中，僅需預(yù)先記錄12個(gè)記錄源圖像，否則需預(yù)先記錄25個(gè)源圖像。一旦記錄了記錄源圖像，其后，執(zhí)行步驟S44和S45的過(guò)程，并找到顯示視點(diǎn)。由于這些過(guò)程與圖5中的步驟Sll和步驟S12的過(guò)程相同，省略其說(shuō)明。在步驟S46中，對(duì)于由視點(diǎn)位置確定部分102提供的每個(gè)顯示視點(diǎn)，視差圖像生成部分103選擇視點(diǎn)位于該顯示視點(diǎn)附近的記錄源圖像(即，原始左眼數(shù)據(jù)或原始右眼數(shù)據(jù))。具體地，由于找到圖10中位于圓SCll上的點(diǎn)作為每個(gè)顯示視點(diǎn)，選擇視點(diǎn)VPl到 VP12中鄰近圓SCll上的該顯示視點(diǎn)并且在該顯示視點(diǎn)兩側(cè)的視點(diǎn)的記錄源圖像。例如，如果一個(gè)顯示視點(diǎn)位于圓SCll上的視點(diǎn)VPl和視點(diǎn)VP2之間，則選擇視點(diǎn)VPl的記錄源圖像和視點(diǎn)VP2的記錄源圖像。隨著對(duì)視點(diǎn)位于顯示視點(diǎn)附近的記錄源圖像的選擇，視差圖像生成部分103從記錄部分82讀取所選擇的記錄源圖像，而處理過(guò)程進(jìn)行到步驟S47。在步驟S47中，視差圖像生成部分103找出連接該顯示視點(diǎn)與所選擇的記錄源圖像的視點(diǎn)中距離該顯示視點(diǎn)較遠(yuǎn)的視點(diǎn)的直線，和連接所選擇的記錄源圖像的視點(diǎn)中距離該顯示視點(diǎn)較近的視點(diǎn)與該基準(zhǔn)位置的直線的交點(diǎn)。針對(duì)每個(gè)顯示視點(diǎn)找出這個(gè)交點(diǎn) (即，中間視點(diǎn))。在步驟S48中，視差圖像生成部分103生成視點(diǎn)位置是針對(duì)每個(gè)顯示視點(diǎn)找出的交點(diǎn)的位置的記錄源圖像(即，中間圖像數(shù)據(jù))。然后，在步驟S49中，視差圖像生成部分 103根據(jù)在步驟S48中找出的記錄源圖像以及距離該顯示視點(diǎn)較遠(yuǎn)的視點(diǎn)的記錄源圖像來(lái)生成視差圖像。例如，如圖11所示，考慮在以基準(zhǔn)位置011為圓心、d/2為半徑的圓SCll上生成顯示視點(diǎn)HS21和顯示視點(diǎn)HS22的視差圖像的情況。應(yīng)注意，在圖11中，用同樣的符號(hào)表示與圖10中相對(duì)應(yīng)的部分，而適當(dāng)省略對(duì)其的說(shuō)明。此外，在圖11的右側(cè)，對(duì)圖中左上部的顯示視點(diǎn)HS21附近的部分進(jìn)行放大顯示。首先，當(dāng)生成顯示視點(diǎn)HS21的視差圖像時(shí)，在步驟S46中，視差圖像生成部分103 選擇與顯示視點(diǎn)HS21鄰近的視點(diǎn)VPll和視點(diǎn)VP12。然后，視差圖像生成部分103在xy平面上找出連接視點(diǎn)VP12和基準(zhǔn)位置011的直線L31，其中視點(diǎn)VP12是視點(diǎn)VPll和VP12中距離顯示視點(diǎn)HS21較近的視點(diǎn)。應(yīng)當(dāng)注意的是，直線L31也可以說(shuō)是連接視點(diǎn)VP6和視點(diǎn) VP12的直線，其中，視點(diǎn)VP6位于圓SCl 1上與視點(diǎn)VP12相對(duì)的位置，即，視點(diǎn)VP6位于視點(diǎn) VP12的相對(duì)側(cè)。接下來(lái)，視差圖像生成部分103找出連接視點(diǎn)VPll (其為鄰近顯示視點(diǎn)HS21的視點(diǎn)VPll和視點(diǎn)VP12中距顯示視點(diǎn)HS21較遠(yuǎn)的一個(gè))和顯示視點(diǎn)HS21的直線L32，并找出直線L32和直線L31之間的交點(diǎn)IP11。尋找交點(diǎn)IPll的該過(guò)程是步驟S47中的過(guò)程。此外，利用變形方法等，視差圖像生成部分103對(duì)位于直線L31上的視點(diǎn)VP12的記錄源圖像和視點(diǎn)VP6的記錄源圖像進(jìn)行合成，由此生成視點(diǎn)位置為交點(diǎn)IPll的記錄源圖像。更具體地，視差圖像生成部分103找出視點(diǎn)VP12到交點(diǎn)IPll的距離RD，并以距離 RD和從視點(diǎn)VP12到視點(diǎn)VP6的距離d的比，即，比例d RD,對(duì)視點(diǎn)VP12的記錄源圖像和視點(diǎn)VP6的記錄源圖像進(jìn)行外插。這個(gè)生成視點(diǎn)位置是交點(diǎn)IPll的記錄源圖像的過(guò)程是步驟S48中的過(guò)程。此外，通過(guò)變形方法等，視差圖像生成部分103對(duì)視點(diǎn)VPll的記錄源圖像和視點(diǎn)位置在該交點(diǎn)IPll的記錄源圖像進(jìn)行合成，由此生成顯示視點(diǎn)HS21的視差圖像。更具體地，視差圖像生成部分103確定從視點(diǎn)VPll到顯示視點(diǎn)HS21的距離DX11， 以及從顯示視點(diǎn)HS21到交點(diǎn)IPll的距離DX12。然后，視差圖像生成部分103以比例 DXll DX12對(duì)交點(diǎn)IPll的記錄源圖像和視點(diǎn)VPll的記錄源圖像進(jìn)行內(nèi)插，由此生成顯示視點(diǎn)HS21的視差圖像。這個(gè)生成視差圖像的過(guò)程是步驟S49中的過(guò)程。應(yīng)當(dāng)注意的是，顯示視點(diǎn)HS22的視差圖像也是以與顯示視點(diǎn)HS21的視差圖像相同的方式生成的。當(dāng)以這種方式根據(jù)視點(diǎn)位于它們的顯示視點(diǎn)附近的記錄源圖像生成視差圖像時(shí)，可以容易地獲得更接近真實(shí)圖像，并且視點(diǎn)為找到的顯示視點(diǎn)的視差圖像。另外，在圖11的示例中，主要針對(duì)通過(guò)對(duì)距離顯示視點(diǎn)HS21較遠(yuǎn)的視點(diǎn)VPll的記錄源圖像和在較近的視點(diǎn)VP12附近的交點(diǎn)IPll的記錄源圖像進(jìn)行合成而生成視差圖像的情況進(jìn)行說(shuō)明。但是，這不應(yīng)作為限制性的解釋。顯示視點(diǎn)HS21的視差圖像可通過(guò)對(duì)較近視點(diǎn)VP12的記錄源圖像和在較遠(yuǎn)視點(diǎn)VPll附近與交點(diǎn)IPll相應(yīng)點(diǎn)的記錄源圖像進(jìn)行合成而生成。但是，應(yīng)當(dāng)注意到，在這種情況下，在視點(diǎn)VPll附近與交點(diǎn)IPll相應(yīng)的點(diǎn)的位置比交點(diǎn)IPll距離圓SCll的距離更遠(yuǎn)。由此，由于在生成記錄源圖像時(shí)進(jìn)行的外插而導(dǎo)致的圖像質(zhì)量的降低變得比在生成交點(diǎn)IPll的記錄源圖像時(shí)更大。由于這個(gè)原因，希望通過(guò)利用距顯示視點(diǎn)HS21較遠(yuǎn)的視點(diǎn)VPll和交點(diǎn)IPll的記錄源圖像來(lái)生成顯示視點(diǎn)HS21的視差圖像。返回到對(duì)圖9流程圖的說(shuō)明，一旦生成了視差圖像，之后，執(zhí)行步驟S50到S52的過(guò)程，并且立體顯示過(guò)程結(jié)束。由于這些處理與圖15中的步驟S15到S17的過(guò)程相同，因此省略其說(shuō)明。以這種方式，在圖像處理設(shè)備71中，根據(jù)獲得的源圖像生成記錄源圖像，并且僅預(yù)先記錄該記錄源圖像。由此，能減少獲得視差圖像所需要的圖像記錄空間。此外，在圖像處理設(shè)備71中，根據(jù)用戶的視線方向?qū)ふ绎@示視點(diǎn)，并通過(guò)利用已記錄的記錄源圖像生成該顯示視點(diǎn)的視差圖像。由此，不論用戶的視點(diǎn)位置如何，都可容易地獲得視差圖像，用戶利用該視差圖像以立體的方式觀看對(duì)象。應(yīng)當(dāng)注意的是，當(dāng)利用已記錄在記錄部分82中的記錄源圖像生成視差圖像時(shí)，不需要生成記錄源圖像。因此，不執(zhí)行圖9中的步驟S41到步驟S43的過(guò)程。另外，前面的說(shuō)明針對(duì)在通過(guò)生成視點(diǎn)位于圓SCll的圓周上的記錄源圖像而執(zhí)行的信息壓縮，假設(shè)作為用戶雙眼的間距的視差d具有固定值。但是，視差d可以是可化。在這種情況下，例如，通過(guò)使用圖11中的視點(diǎn)VP12和視點(diǎn)VP6的記錄源圖像而進(jìn)行的外插，視差圖像生成部分103能夠生成視點(diǎn)位于圓SCll之外的記錄源圖像。因此，例如，獲得位于圓SCll之外的視點(diǎn)VP12'和視點(diǎn)VP6'的記錄源圖像。通過(guò)利用這些記錄源圖像，可獲得位于圓SCll之外的、視差被增強(qiáng)的顯示視點(diǎn)的視差圖像對(duì)。S卩，在這種情況下，視點(diǎn)位置確定部分102畫(huà)圓SCll'，其直徑等于已經(jīng)變化的視差d'，其中心(基準(zhǔn)位置011)與視差d變化之前的圓SCll的中心位置相同，視點(diǎn)位置確定部分102確定位于圓SCll'上的每個(gè)新顯示視點(diǎn)。通過(guò)利用記錄在記錄部分82中的記錄源圖像，視差圖像生成部分103生成視點(diǎn)位于圓SCll'上的視點(diǎn)VP12'等的記錄源圖像， 并通過(guò)利用所獲得的記錄源圖像中視點(diǎn)位于新的顯示視點(diǎn)附近的記錄源圖像，在視差改變之后生成每個(gè)視差圖像。同樣地，通過(guò)利用對(duì)圖11中的各視點(diǎn)VPl到VP12的記錄源圖像進(jìn)行內(nèi)插，視差圖像生成部分103還能生成視點(diǎn)位于圓SCll的圓周之內(nèi)的記錄源圖像。當(dāng)利用通過(guò)內(nèi)插而獲得的記錄源圖像時(shí)，可以獲得具視差被壓縮的、顯示視點(diǎn)位于圓SCll之內(nèi)的視差圖像。在這種方式中，由于通過(guò)內(nèi)插和外插能夠獲得任意視點(diǎn)的記錄源圖像，視差圖像生成部分103能生成關(guān)于任意視線方向的具有指定的任意視差d的視差圖像對(duì)。應(yīng)當(dāng)注意的是，由于內(nèi)插通常引起比外插更少的圖像劣化，在假設(shè)能從視點(diǎn)被以陣列布置的源圖像獲得最大周長(zhǎng)的情況下生成記錄源圖像時(shí)，能夠關(guān)于任意視差d獲得具有更好圖像質(zhì)量的視差圖像。〈第三實(shí)施例〉〈立體顯示過(guò)程的說(shuō)明〉此外，在圖11的示例中，主要針對(duì)生成視點(diǎn)位置為交點(diǎn)IPll的記錄源圖像，以及利用該記錄源圖像和視點(diǎn)VPll的記錄源圖像生成視差圖像的情況的說(shuō)明。在這種情況下， 圖像合成需要執(zhí)行兩次，以生成一個(gè)視差圖像。結(jié)果，最終獲得的視差圖像的圖像質(zhì)量?jī)?yōu)勢(shì)可能有會(huì)變壞。因此，可利用視點(diǎn)位于每個(gè)顯示視點(diǎn)附近的記錄源圖像，近似地生成該顯示視點(diǎn)的視差圖像。下面，參照?qǐng)D12的流程圖，對(duì)立體顯示的過(guò)程進(jìn)行說(shuō)明，當(dāng)圖8中的圖像處理設(shè)備71近似地生成每個(gè)顯示視點(diǎn)的視差圖像時(shí)執(zhí)行該過(guò)程。應(yīng)當(dāng)注意的是，由于步驟S81到步驟S86的過(guò)程與圖9中的步驟S41到步驟S46 的過(guò)程相同，因此省略其說(shuō)明。在步驟S87中，視差圖像生成部分103通過(guò)利用從記錄部分82讀取的記錄源圖像來(lái)生成視差圖像。例如，如圖13所示，考慮生成顯示視點(diǎn)HS21和顯示視點(diǎn)HS22的視差圖像的情況。 應(yīng)注意，在圖13中，由相同的符號(hào)表示與圖11中相對(duì)應(yīng)的部分，并且省略其說(shuō)明。此外，在圖13的右側(cè)，對(duì)圖中左上部分中顯示視點(diǎn)HS21附近的部分進(jìn)行放大顯示。例如，假設(shè)為了生成顯示視點(diǎn)HS21的視差圖像，選擇圓SCll上鄰近顯示視點(diǎn)HS21 且位于顯示視點(diǎn)HS21兩側(cè)的視點(diǎn)VPll和視點(diǎn)VP12的記錄源圖像。即，假設(shè)通過(guò)利用視點(diǎn) VPll和視點(diǎn)VP12的記錄源圖像生成視差圖像。在這種情況下，視差圖像生成部分103將連接視點(diǎn)VPll和VP12的直線L51和經(jīng)過(guò)基準(zhǔn)位置011的直線L52的交點(diǎn)位置定義為顯示視點(diǎn)HS21'。然后，視差圖像生成部分103近似地將顯示視點(diǎn)HS21'作為顯示視點(diǎn)HS21，根據(jù)視點(diǎn)VPll和視點(diǎn)VP12的記錄源圖像生成視點(diǎn)位置為顯示視點(diǎn)HS21'的視差圖像，并將所獲得的視差圖像定義為顯示視點(diǎn)HS21的視差圖像。S卩，將圓SCll的從視點(diǎn)VPll到視點(diǎn)VP12的弧線視為直線，而由顯示視點(diǎn)HS21'代替實(shí)際的顯示視點(diǎn)HS21。利用變形方法等對(duì)VPll的記錄源圖像和視點(diǎn)HS21'的記錄源圖像進(jìn)行合成，生成顯示視點(diǎn)HS21'的視差圖像。更具體地，例如，視差圖像生成部分103確定由連接視點(diǎn)VP12與基準(zhǔn)位置011的直線和連接VPll與基準(zhǔn)位置011的直線形成的角Φ，以及由連接VP12與基準(zhǔn)位置011的直線和直線L52形成的角θ。然后，視差圖像生成部分103以角(φ-θ)與角θ的比，即比例(Φ- θ ) θ，對(duì)視點(diǎn)VP12的記錄源圖像和視點(diǎn)VPll的記錄源圖像進(jìn)行內(nèi)插，由此生成顯示視點(diǎn)HS21'的視差圖像。應(yīng)當(dāng)注意的是，顯示視點(diǎn)HS22的視差圖像也以與顯示視點(diǎn)HS21的視差圖像相同的方式生成。當(dāng)以這種方式通過(guò)對(duì)視點(diǎn)位于它們的顯示視點(diǎn)附近的記錄源圖像進(jìn)行合成而生成視差圖像時(shí)，可以容易地獲得更接近真實(shí)圖像的并且其視點(diǎn)為找到的顯示視點(diǎn)的視差圖像。返回對(duì)圖12中流程圖的描述，一旦生成視差圖像，其后，執(zhí)行步驟S88到步驟S90 的過(guò)程，立體顯示過(guò)程結(jié)束。由于這些過(guò)程與圖9中的步驟S50到步驟S52的過(guò)程相同，省略其說(shuō)明。以這種方式，圖像處理設(shè)備71根據(jù)用戶的視線方向找出顯示視點(diǎn)，并對(duì)視點(diǎn)位于該顯示視點(diǎn)附近的記錄源圖像進(jìn)行合成，由此近似地生成視點(diǎn)為顯示視點(diǎn)的視差圖像。由此，可以容易并快速地獲得視差圖像，利用該視差圖像，不論用戶的觀察位置如何，用戶以立體的方式觀察對(duì)象?！吹谒膶?shí)施例〉<圖像處理設(shè)備的配置>應(yīng)注意，在上述的實(shí)施例中，通過(guò)液晶快門(mén)方案立體顯示視差圖像對(duì)。因此，如果視線方向基本上平行于xy平面，不管用戶從哪個(gè)方向觀看顯示部分41，用戶都能以立體的方式觀察對(duì)象。但是，在通過(guò)狹縫光柵方案、柱狀透鏡方案、偏振方案等顯示立體圖像的情況下， 對(duì)于要以立體方式觀看的對(duì)象來(lái)說(shuō)，在觀察立體圖像時(shí)，用戶必須要從特定的方向(下文中稱為觀看方向)觀看該立體圖像。因此，在用戶觀看方向受限制的情況下，可允許用戶以任意方式關(guān)于該對(duì)象指定視線方向，由此用戶能夠從所指定的觀看方向觀察對(duì)象的立體圖像。在這種情況下，例如，如圖14所示地配置圖像處理設(shè)備71。應(yīng)注意，在圖14中，以相同的符號(hào)表示與圖4中相對(duì)應(yīng)的部分，并適當(dāng)省略其說(shuō)明。圖14中的圖像處理設(shè)備71包括獲取部分81、記錄部分82、圖像處理部分84、顯示控制部分85、輸入部分171和顯示部分172。例如，輸入部分171由諸如撥號(hào)盤(pán)(dial)或鼠標(biāo)的輸入裝置組成，并且在諸如輸入視線方向時(shí)的情況下進(jìn)行操作。即，輸入部分171接受視線方向等的輸入。圖像處理部分84包括視點(diǎn)位置確定部分102、視差圖像生成部分103和旋轉(zhuǎn)處理部分181。視點(diǎn)位置確定部分102基于由輸入部分171提供的視線方向，在xy平面上確定視差圖像的顯示視點(diǎn)，并將該顯示視點(diǎn)提供給視差圖像生成部分103。視差圖像生成部分103從記錄部分82讀取源圖像，并利用讀取的源圖像生成由視點(diǎn)位置確定部分102提供的顯示視點(diǎn)的視差圖像。另外，視差圖像生成部分103將所生成的視差圖像提供給旋轉(zhuǎn)處理部分181。旋轉(zhuǎn)處理部分181將由視差圖像生成部分103提供的視差圖像以由輸入部分171提供的視線方向定義的角度進(jìn)行旋轉(zhuǎn)，并將該視差圖像提供給顯示控制部分85。顯示部分172以這種方式安裝顯示屏幕在垂直于豎直方向的方向上，即，在平行于xy平面的方向上。顯示部分172以諸如狹縫光柵方案、柱狀透鏡方案或偏振方案的預(yù)定的顯示方案顯示由顯示控制部分85提供的視差圖像。這里，如顯示部分41的情況，假設(shè)顯示部分172的顯示屏幕的中心與xyz空間上的每個(gè)源圖像的視點(diǎn)之間的空間位置關(guān)系和該源圖像的對(duì)象與每個(gè)源圖像在視點(diǎn)之間的位置關(guān)系相同。應(yīng)當(dāng)注意的是，在用戶從特定方向觀察該立體圖像時(shí)，只要該顯示方案允許以立體方式觀看立體圖像上的對(duì)象，則用于在顯示部分172中顯示視差圖像的顯示方案可以是任意顯示方案。另外，在下面，假設(shè)顯示部分172以這樣的方式顯示立體圖像在用戶的觀看方向基本上與y方向平行時(shí)允許用戶以立體方式觀看立體圖像上的對(duì)象。此外，雖然下面的說(shuō)明針對(duì)顯示部分172的顯示屏幕在平行于xy平面的方向上的情況，但是，顯示部分172的顯示屏幕的安裝方向可以是任意方向。〈立體顯示過(guò)程的說(shuō)明〉接下來(lái)，參考圖15的流程圖，對(duì)由圖14中的圖像處理設(shè)備71執(zhí)行的立體顯示過(guò)程進(jìn)行說(shuō)明。應(yīng)當(dāng)注意的是，由于步驟Slll到步驟S113中的過(guò)程與圖5中步驟S12到步驟S14的過(guò)程相同，因此省略其說(shuō)明。應(yīng)注意，在步驟Slll中，視點(diǎn)位置確定部分102基于由輸入部分171提供的視線方向確定一對(duì)顯示視點(diǎn)。另外，將所生成的視差圖像從視差圖像生成部分103提供到旋轉(zhuǎn)處理部分181。在步驟S114中，根據(jù)由輸入部分171提供的視線方向，旋轉(zhuǎn)處理部分181對(duì)由視差圖像生成部分103提供的視差圖像進(jìn)行旋轉(zhuǎn)，并將該視差圖像提供給顯示控制部分85。例如，假設(shè)在圖6所示的示例中，通過(guò)輸入部分171的操作來(lái)輸入視線方向SD11， 并生成顯示視點(diǎn)HSll和顯示視點(diǎn)HS12的視差圖像。另外，假設(shè)用戶的觀看方向是圖中從下面到上面的方向。在這個(gè)示例中，由于用戶的觀看方向平行于y方向，為了使用戶能夠以立體方式感覺(jué)該對(duì)象，該視差圖像對(duì)必須在X方向上具有視差。另一方面，由于由視線方向和X方向構(gòu)成的角度是θ，從而視差圖像對(duì)的視差的真實(shí)方向關(guān)于X方向傾斜角度((π/2)-θ)。因此，圖6中，旋轉(zhuǎn)處理部分181對(duì)該視差圖像順時(shí)針旋轉(zhuǎn)角度((η /2) - θ )，并將經(jīng)旋轉(zhuǎn)的視差圖像對(duì)作為最終的視差圖像對(duì)提供給顯示控制部分85。通過(guò)以這種方式將視差圖像旋轉(zhuǎn)視差方向傾斜的角度量，經(jīng)旋轉(zhuǎn)的視差圖像對(duì)在χ方向上具有視差。由此，即使在用戶的觀看方向受限制的情況下，也可以以立體的方式顯示從任意方向觀看的對(duì)象的圖像。返回到圖15流程圖的說(shuō)明，一旦將經(jīng)旋轉(zhuǎn)的視差圖像提供給顯示控制部分85，處理從步驟Sl 14進(jìn)行到步驟Sl 15。在步驟S115中，顯示控制部分將由旋轉(zhuǎn)處理部分181提供的視差圖像對(duì)提供給顯
1示部分172，并使得以柱狀透鏡方案等立體顯示該視差圖像對(duì)。由此，用肉眼觀看顯示部分 172的用戶以立體方式觀看視差圖像上的對(duì)象。即，顯示立體圖像。在步驟S116中，視點(diǎn)位置確定部分102判斷用戶的視線方向是否已改變。例如， 當(dāng)從輸入部分171提供了新的視線方向時(shí)，判斷視線方向發(fā)生了改變。如果在步驟S116中判斷視線方向發(fā)生了改變，則處理返回到步驟S111，并重復(fù)上述過(guò)程。即，基于新輸入的視線方向，生成在χ方向上具有視差的視差圖像，并進(jìn)行立體顯
7J\ ο另一方面，如果在步驟S116中判斷視線方向沒(méi)有發(fā)生改變，在步驟S117中，圖像處理設(shè)備71判斷是否結(jié)束立體圖像的顯示過(guò)程。如果在步驟S117中判斷不結(jié)束該處理， 則處理返回到步驟S116，并重復(fù)上述過(guò)程。另一方面，如果在步驟S117中判斷結(jié)束該處理，則圖像處理設(shè)備71使立體圖像的顯示結(jié)束，并且立體顯示過(guò)程結(jié)束。以上述方式，基于輸入的視線方向，圖像處理設(shè)備71在進(jìn)行旋轉(zhuǎn)的情況下使得顯示視差圖像，從而該視差方向和觀看方向互相正交。通過(guò)以這種方式根據(jù)輸入的視線方向旋轉(zhuǎn)視差圖像，即使在立體圖像的觀看方向被限定的情況下，用戶仍能夠在自由改變視線方向的情況下從任意方向以立體方式觀察對(duì)象?！吹谖鍖?shí)施例〉<圖像處理設(shè)備的配置>另外，在通過(guò)柱狀透鏡方案等立體顯示視差圖像的情況下，如圖8所示的圖像處理設(shè)備71的情況，可通過(guò)根據(jù)源圖像生成記錄源圖像來(lái)減少要預(yù)先記錄的圖像數(shù)據(jù)量。在這種情況下，例如，如圖16所示地配置圖像處理設(shè)備71。應(yīng)當(dāng)注意的是，在圖 16中，用相同的符號(hào)表示與圖8或圖14中相對(duì)應(yīng)的部分，并省略其說(shuō)明。圖16中的圖像處理設(shè)備71被配置為使得圖8中所示的記錄源圖像生成部分131 也被設(shè)置在圖14中的圖像處理設(shè)備中。即，在記錄源圖像生成部分131中，根據(jù)由獲取部分81獲取的源圖像生成記錄源圖像，并將所生成的記錄源圖像記錄在記錄部分82中?！戳Ⅲw顯示過(guò)程的說(shuō)明〉接下來(lái)，參照?qǐng)D17的流程圖，對(duì)由圖16中的圖像處理設(shè)備71執(zhí)行的立體顯示過(guò)程進(jìn)行說(shuō)明。應(yīng)當(dāng)注意的是，在步驟S141到步驟S143中，執(zhí)行與圖9的步驟S41到步驟S43相同的過(guò)程。即，將xy平面上以預(yù)定參考位置為中心的圓周上的點(diǎn)定義為記錄源圖像的視點(diǎn)位置，并根據(jù)視點(diǎn)位于每個(gè)視點(diǎn)附近的一個(gè)或者多個(gè)源圖像，生成記錄源圖像，并記錄在記錄部分82中。然后，在此之后執(zhí)行步驟S144到步驟S148的過(guò)程。應(yīng)當(dāng)注意的是，由于這些過(guò)程與圖9中步驟S45到步驟S49的過(guò)程相同，省略其詳細(xì)說(shuō)明。但是，應(yīng)當(dāng)注意的是，在步驟S144中，根據(jù)由輸入部分171提供的視線方向和所指定的視差d，視點(diǎn)位置確定部分102確定視差圖像的顯示視點(diǎn)。另外，通過(guò)參照?qǐng)D11描述的過(guò)程生成該顯示視點(diǎn)的視差圖像。將以這種方式生成的視差圖像從視差圖像生成部分103 提供到旋轉(zhuǎn)處理部分181。在步驟S149中，基于由輸入部分171提供的視線方向，旋轉(zhuǎn)處理部分181對(duì)由視
17差圖像生成部分103提供的視差圖像進(jìn)行旋轉(zhuǎn)，并將該視差圖像提供給顯示控制部分85。 艮口，在步驟S149中，執(zhí)行與圖15中的步驟S114相同的過(guò)程。一旦生成了經(jīng)旋轉(zhuǎn)的視差圖像，此后，執(zhí)行步驟S150到步驟S152中的過(guò)程，并且立體顯示過(guò)程結(jié)束。由于這些處理與圖15中步驟S115到步驟S117的過(guò)程相同，省略其說(shuō)明。以這種方式，在用柱狀透鏡方案等顯示視差圖像的情況下，當(dāng)根據(jù)源圖像生成記錄源圖像并預(yù)先記錄時(shí)，能夠減少生成視差圖像所需要的圖像記錄容量?！吹诹鶎?shí)施例〉〈立體顯示過(guò)程的說(shuō)明〉此外，通過(guò)執(zhí)行與參照?qǐng)D13描述的過(guò)程相同的過(guò)程，圖16中的圖像處理設(shè)備71 可以生成視差圖像。下面，將參照?qǐng)D18中的流程圖，對(duì)立體顯示過(guò)程進(jìn)行說(shuō)明，在圖16中的圖像處理設(shè)備71近似地生成顯示視點(diǎn)的視差圖像的情況下執(zhí)行該過(guò)程。應(yīng)當(dāng)注意的是，由于步驟S181到步驟S184中的過(guò)程與圖17中步驟S141到步驟 S144中的過(guò)程相同，省略其說(shuō)明。在步驟S185中，對(duì)于由視點(diǎn)位置確定部分102提供的每個(gè)顯示視點(diǎn)，視差圖像生成部分103選擇視點(diǎn)位于顯示視點(diǎn)附近的記錄源圖像，并從記錄部分82讀取所選擇的記錄源圖像。例如，如圖13所示，選擇并讀取鄰近顯示視點(diǎn)HS21且位于顯示視點(diǎn)HS21兩側(cè)的視點(diǎn)VPll和視點(diǎn)VP12的記錄源圖像，以及鄰近顯示視點(diǎn)HS22且位于顯示視點(diǎn)HS22兩側(cè)的視點(diǎn)VP5和視點(diǎn)VP6的記錄源圖像。在步驟S186中，視差圖像生成部分103利用所讀取的記錄源圖像生成視差圖像， 并將該視差圖像提供給旋轉(zhuǎn)處理部分181。例如，在圖13中的示例中，通過(guò)變形方法等將視點(diǎn)VPll和視點(diǎn)VP12的記錄源圖像合成為視差圖像，并且同樣地，通過(guò)變形方法等將視點(diǎn) VP5和視點(diǎn)VP6的記錄源圖像合成為視差圖像。然后，在此之后執(zhí)行步驟S187到步驟S190中的過(guò)程，并且立體顯示過(guò)程結(jié)束。由于這些過(guò)程與圖17中的步驟S149到步驟S152的過(guò)程相同，省略其說(shuō)明。即，根據(jù)該視線方向旋轉(zhuǎn)所獲得的視差圖像并立體顯示。以上述的方式，通過(guò)根據(jù)所輸入的視線方向來(lái)尋找顯示視點(diǎn)，以及對(duì)視點(diǎn)位于顯示視點(diǎn)附近的記錄源圖像進(jìn)行合成，由此近似地生成視點(diǎn)為該顯示視點(diǎn)的視差圖像，可以容易并快速地獲得視差圖像，用戶利用該視差圖像以立體的方式觀察對(duì)象。上述一系列過(guò)程能夠由硬件或者軟件來(lái)執(zhí)行。如果通過(guò)軟件運(yùn)行該一系列處理， 將構(gòu)成該軟件的程序從程序記錄介質(zhì)(即，非暫時(shí)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì))安裝到嵌入專用硬件的計(jì)算機(jī)中，或者例如安裝到當(dāng)裝入各種程序時(shí)能夠運(yùn)行各種功能的通用個(gè)人計(jì)算機(jī)
絕由寸T。圖19是示出執(zhí)行上述一系列過(guò)程的計(jì)算機(jī)的硬件配置示例的框圖。在該計(jì)算機(jī)中，CPU (中央處理單元)301、ROM (只讀存儲(chǔ)器)302和RAM(隨機(jī)存取存儲(chǔ)器)303經(jīng)由總線304相互連接。總線304還連接到輸入/輸出接口 305。該輸入/輸出接口 305連接到由鍵盤(pán)、 鼠標(biāo)、麥克風(fēng)等組成的輸入部分306，由顯示器、揚(yáng)聲器等組成的輸出部分307，由硬盤(pán)、非易失存儲(chǔ)器等組成的記錄部分308，由網(wǎng)絡(luò)接口等組成的通信部分309，以及用于驅(qū)動(dòng)諸如磁盤(pán)、光盤(pán)、磁光盤(pán)或半導(dǎo)體存儲(chǔ)器的可移除介質(zhì)311的驅(qū)動(dòng)器310。在如上所述地配置的計(jì)算機(jī)中，例如，當(dāng)CPU 301經(jīng)由輸入/輸出接口 305和總線 304將記錄在記錄部分308中的程序加載到RAM 303中并執(zhí)行該程序時(shí)，執(zhí)行上述一系列過(guò)程。通過(guò)記錄在可移除介質(zhì)311中而提供由計(jì)算機(jī)(CPU 301)執(zhí)行的程序，可移除介質(zhì)311是由例如磁盤(pán)(包括軟盤(pán))、光盤(pán)(例如CD-ROM(壓縮盤(pán)只讀存儲(chǔ)器))或者DVD (數(shù)字通用盤(pán))、磁光盤(pán)、半導(dǎo)體存儲(chǔ)器等組成的封裝介質(zhì)，或者經(jīng)由諸如局域網(wǎng)、因特網(wǎng)或數(shù)字衛(wèi)星廣播有線或無(wú)線傳輸介質(zhì)提供該程序。 然后，通過(guò)將可移除介質(zhì)311裝配在驅(qū)動(dòng)器310中，可經(jīng)由輸入/輸出接口 305將程序安裝在記錄部分308中。另外，該程序可由通信部分309經(jīng)由有線或無(wú)線傳輸介質(zhì)接收，并安裝在記錄部分308中。可選地，程序可預(yù)裝在ROM 302或者記錄部分308中。應(yīng)當(dāng)注意的是，由計(jì)算機(jī)執(zhí)行的程序可以是其處理以本說(shuō)明書(shū)描述的順序、按時(shí)間序列執(zhí)行的程序，或者可以是其處理在需要時(shí)，諸如被調(diào)用時(shí)執(zhí)行的程序。應(yīng)當(dāng)注意的是，本發(fā)明實(shí)施例并不限于上述實(shí)施例，可進(jìn)行各種修改而不脫離本發(fā)明的范圍。附圖標(biāo)記列表41顯示部分71圖像處理設(shè)備83傳感器84圖像處理部分101視線方向確定部分102視點(diǎn)位置確定部分103視差圖像生成部分131記錄源圖像生成部分181旋轉(zhuǎn)處理部分
權(quán)利要求
1.一種處理具有已知視點(diǎn)的源圖像的方法，包括相對(duì)于所述已知視點(diǎn)確定觀看者的左眼視點(diǎn)和右眼視點(diǎn)；基于所確定的左眼視點(diǎn)，選擇所述源圖像的至少之一的數(shù)據(jù)作為原始左眼數(shù)據(jù)；基于所確定的右眼視點(diǎn)，選擇所述源圖像的至少之一的數(shù)據(jù)作為原始右眼數(shù)據(jù)；基于所述原始左眼數(shù)據(jù)，輸出左眼圖像數(shù)據(jù)；以及基于所述原始右眼數(shù)據(jù)，輸出右眼圖像數(shù)據(jù)。
2.如權(quán)利要求1所述的方法，其中，將所述左眼圖像數(shù)據(jù)和所述右眼圖像數(shù)據(jù)輸出到顯示屏幕。
3.如權(quán)利要求2所述的方法，包括沿平行于所述顯示屏幕的平面的平面，確定所述觀看者的視線方向；以及基于所確定的視線方向，確定所述觀看者的所述左眼視點(diǎn)和所述右眼視點(diǎn)。
4.如權(quán)利要求3所述的方法，包括檢測(cè)所述觀看者在平行于所述顯示屏幕的平面的所述平面中的位置；以及基于檢測(cè)到的所述觀看者的位置確定所述視線方向。
5.如權(quán)利要求4所述的方法，包括基于所述顯示屏幕的中心位置確定所述視線方向。
6.如權(quán)利要求3所述的方法，包括基于代表所述觀看者的眼睛之間的距離的視差，確定所述觀看者的所述左眼視點(diǎn)和所述右眼視點(diǎn)。
7.如權(quán)利要求1所述的方法，其中，所述原始左眼數(shù)據(jù)和所述原始右眼數(shù)據(jù)中的每個(gè)代表所述源圖像中的四個(gè)源圖像。
8.如權(quán)利要求7所述的方法，其中，所述四個(gè)源圖像具有位于矩形的頂點(diǎn)處的已知視點(diǎn)ο
9.如權(quán)利要求8所述的方法，包括基于位于所述矩形的頂點(diǎn)處的所述已知視點(diǎn)，對(duì)所完成的包括所述左眼圖像數(shù)據(jù)或所述右眼圖像數(shù)據(jù)的至少之一的圖像數(shù)據(jù)進(jìn)行內(nèi)插。
10.如權(quán)利要求1所述的方法，其中，所述原始左眼數(shù)據(jù)不同于所述原始右眼數(shù)據(jù)。
11.如權(quán)利要求1所述的方法，其中，所述原始左眼數(shù)據(jù)和所述原始右眼數(shù)據(jù)中的每個(gè)代表所述源圖像中的兩個(gè)源圖像。
12.如權(quán)利要求11所述的方法，其中，所述兩個(gè)源圖像具有位于圓上的已知視點(diǎn)，所述圓的直徑等于所確定的左眼視點(diǎn)和右眼視點(diǎn)之間的距離。
13.如權(quán)利要求12所述的方法，包括基于位于所述圓上的所述已知視點(diǎn)，對(duì)所完成的包括所述左眼圖像數(shù)據(jù)或所述右眼圖像數(shù)據(jù)的至少之一的圖像數(shù)據(jù)進(jìn)行內(nèi)插。
14.如權(quán)利要求12所述的方法，其中，第三源圖像具有已知視點(diǎn)，該已知視點(diǎn)位于所述圓上并且從所述兩個(gè)源圖像的已知視點(diǎn)之一垂直穿過(guò)所述圓。
15.如權(quán)利要求14所述的方法，包括基于⑴所述兩個(gè)源圖像的所述已知視點(diǎn)之一， 和(ii)所述第三源圖像的所述已知視點(diǎn)，對(duì)代表具有中間視點(diǎn)的圖像的中間圖像數(shù)據(jù)進(jìn)行外插。
16.如權(quán)利要求15所述的方法，包括基于(i)所述兩個(gè)源圖像的所述已知視點(diǎn)中的另一個(gè)，和(ii)所述中間視點(diǎn)，對(duì)所完成的包括所述左眼圖像數(shù)據(jù)或所述右眼圖像數(shù)據(jù)中的至少之一的圖像數(shù)據(jù)進(jìn)行內(nèi)插。
17.一種用于處理具有已知視點(diǎn)的源圖像的設(shè)備，包括視點(diǎn)確定部分，用于相對(duì)于所述已知視點(diǎn)確定觀看者的左眼視點(diǎn)和右眼視點(diǎn)； 視差圖像生成部分，用于基于所確定的左眼視點(diǎn)，選擇所述源圖像的至少之一的數(shù)據(jù)作為原始左眼數(shù)據(jù)；和基于所確定的右眼視點(diǎn)，選擇所述源圖像的至少之一的數(shù)據(jù)作為原始右眼數(shù)據(jù)； 基于所述原始左眼數(shù)據(jù)，輸出左眼圖像數(shù)據(jù)；和基于所述原始右眼數(shù)據(jù)，輸出右眼圖像數(shù)據(jù)。
18. 一種存儲(chǔ)程序的非暫態(tài)、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，當(dāng)通過(guò)處理器執(zhí)行所述程序時(shí)，使設(shè)備執(zhí)行處理具有已知視點(diǎn)的源圖像的方法，所述方法包括 相對(duì)于所述已知視點(diǎn)確定觀看者的左眼視點(diǎn)和右眼視點(diǎn)； 基于所確定的左眼視點(diǎn)，選擇所述源圖像的至少之一的數(shù)據(jù)作為原始左眼數(shù)據(jù)； 基于所確定的右眼視點(diǎn)，選擇所述源圖像的至少之一的數(shù)據(jù)作為原始右眼數(shù)據(jù)； 基于所述原始左眼數(shù)據(jù)，輸出左眼圖像數(shù)據(jù)；以及基于所述原始右眼數(shù)據(jù)，輸出右眼圖像數(shù)據(jù)。
全文摘要
公開(kāi)了一種用于處理具有已知視點(diǎn)的源圖像的設(shè)備。該設(shè)備可包括視點(diǎn)確定部分，用于相對(duì)于該已知視點(diǎn)確定觀看者的左眼視點(diǎn)和右眼視點(diǎn)。此外，該設(shè)備可包括視差圖像生成部分。該視差生成部分可用于基于所確定的左眼視點(diǎn)選擇源圖像的至少之一作為原始左眼數(shù)據(jù)。另外，該視差生成部分可基于所確定的右眼視點(diǎn)選擇源圖像的至少之一作為原始右眼數(shù)據(jù)。該視差生成部分還可用于基于該原始左眼數(shù)據(jù)輸出左眼圖像數(shù)據(jù)。另外，該視差生成部分可用于基于該右眼原始數(shù)據(jù)輸出右眼圖像數(shù)據(jù)。
文檔編號(hào)H04N13/04GK102473321SQ20118000299
公開(kāi)日2012年5月23日 申請(qǐng)日期2011年5月20日 優(yōu)先權(quán)日2010年5月28日
發(fā)明者坂口龍己 申請(qǐng)人:索尼公司