專利名稱：圖像顯示系統(tǒng)、圖像顯示方法以及圖像顯示程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像顯示系統(tǒng)、圖像顯示方法以及圖像顯示程序，特別涉及用于監(jiān)視的圖像顯示系統(tǒng)、圖像顯示方法以及圖像顯示程序。
背景技術(shù)：
人的視野是有限的，一個(gè)人在短時(shí)間內(nèi)不可能在視覺上捕捉所有方位。在人要求在視覺上捕捉超過該人的視野的范圍(以下成為寬范圍)的情況下，需要特殊的監(jiān)視系統(tǒng)。作為該特殊的系統(tǒng)中使用的技術(shù)，公知如下技術(shù)使用寬范圍攝影用的攝影裝置(以下稱為寬范圍攝影裝置)對(duì)監(jiān)視對(duì)象的圖像進(jìn)行攝影，通過以將該攝影后的圖像收納在視野內(nèi)的方式加工的圖像(以下成為寬范圍圖像)可進(jìn)行寬范圍的觀察。
寬范圍攝影裝置中存在全景攝影機(jī)等可以單一裝置進(jìn)行寬范圍的攝影的攝影裝置。此外，還存在將由多個(gè)攝影裝置攝影的圖像進(jìn)行組合做成寬范圍圖像的寬范圍攝影裝置等。觀察者通過觀看顯示在顯示裝置中的寬范圍圖像，能夠在視覺上捕捉超過其視野的范圍。
在以足夠大的圖像尺寸和分辨率顯示寬范圍圖像的情況下，圖像顯示所需的顯示裝置的畫面尺寸變大了。因此，為了使用寬范圍圖像對(duì)監(jiān)視對(duì)象進(jìn)行監(jiān)視，要求能夠顯示該寬范圍圖像的大型的顯示裝置。
在設(shè)置大型的顯示裝置困難的情況下，存在縮小上述寬范圍圖像的圖像尺寸(降低分辨率)并顯示在小型的顯示裝置上的技術(shù)。公知如下技術(shù)通過使用縮小圖像執(zhí)行監(jiān)視，即使是更小規(guī)模的系統(tǒng)也可進(jìn)行寬范圍的觀察。根據(jù)該技術(shù)，可降低與系統(tǒng)構(gòu)筑有關(guān)的成本。此外，可構(gòu)筑利用有限的空間來監(jiān)視寬范圍的系統(tǒng)。
在縮小寬范圍圖像進(jìn)行顯示的情況下，存在從該縮小的圖像(以下稱為縮小顯示圖像)得到監(jiān)視所需要的信息較困難的情況。在這樣的情況下，公知如下技術(shù)通過提高縮小顯示圖像的指定的區(qū)域(以下稱為指定區(qū)域)的分辨率或者進(jìn)行放大顯示，能夠得到所希望的信息量。
作為這樣的技術(shù)，例如，在特開平5-139209號(hào)公報(bào)中公開了一種視覺信息提供裝置。該視覺信息提供裝置具備第1生成單元、第1顯示單元、第2生成單元、第2顯示單元、提示單元、切換信號(hào)發(fā)生單元、圖像控制裝置。第1生成單元生成第1視覺信息。第1顯示單元顯示所述第1視覺信息作為第1圖像。第2生成單元生成由右眼用的信息和左眼用的信息構(gòu)成的第2視覺信息。第2顯示單元對(duì)所述第2視覺信息進(jìn)行顯示作為三維的第2圖像。提示單元可單獨(dú)或者重疊地對(duì)所述第1以及第2圖像進(jìn)行提示。切換信號(hào)發(fā)生單元輸出該提示單元中提示的圖像的選擇切換信號(hào)。圖像控制裝置基于所述切換信號(hào)對(duì)所述提示單元進(jìn)行控制。
為了執(zhí)行該放大顯示，需要選擇上述指定區(qū)域。以往，操作顯示裝置外部具備的切換開關(guān)進(jìn)行該選擇動(dòng)作。在外部不具備切換開關(guān)的系統(tǒng)中，對(duì)觀察者看到的畫面上的指定部分(以下稱為視點(diǎn))進(jìn)行檢測(cè)，將對(duì)應(yīng)于該視點(diǎn)的區(qū)域作為指定區(qū)域。如上所述，在特開平5-139209號(hào)公報(bào)中，重疊使用高分辨率的顯示裝置和低分辨率的顯示裝置這兩種。對(duì)觀察者的視線的方向進(jìn)行檢測(cè)，在高分辨率顯示裝置中顯示視線方向區(qū)域的圖像，在低分辨率顯示裝置中顯示其周邊的區(qū)域。
在對(duì)上述視線方向進(jìn)行檢測(cè)的系統(tǒng)中，為了指定視線方向，需要對(duì)觀察者的視線進(jìn)行檢測(cè)的眼球方向(視線)檢測(cè)傳感器。視線檢測(cè)傳感器例如安裝在觀察者的頭部，響應(yīng)其動(dòng)作，對(duì)頭部的傾斜進(jìn)行檢測(cè)，根據(jù)該傾斜指定視點(diǎn)。作為其他的例子，以戴眼鏡的方式安裝在觀察者身上，響應(yīng)其眼球的動(dòng)作指定視點(diǎn)。作為使用后者的技術(shù)，例如，有特開平9-305156號(hào)公報(bào)。
特開平9-305156號(hào)公報(bào)公開了一種影像顯示方法和裝置。該影像顯示方法是高速生成清晰的影像進(jìn)行顯示的圖像顯示方法。應(yīng)顯示的影像整體以通常的精度進(jìn)行影像的生成，使用眼球方向檢測(cè)單元連續(xù)地對(duì)視線進(jìn)行檢測(cè)，計(jì)算各瞬間的視野中心是否相當(dāng)于所述影像上的哪個(gè)位置，基于該計(jì)算的結(jié)果，使用增多顯示像素?cái)?shù)的高分辨率和增多顯示色的數(shù)目或灰度的高再現(xiàn)性中的至少一種，生成該視野中心附近的影像。
在特開平5-139209號(hào)公報(bào)中記載的技術(shù)中，為了圖像顯示的高速化，只在根據(jù)眼球方向檢測(cè)求出的視線方向的區(qū)域生成高分辨率的圖像。特開平5-139209號(hào)公報(bào)以及特開平9-305156號(hào)公報(bào)中記載的技術(shù)，根據(jù)眼球運(yùn)動(dòng)推定單元自動(dòng)地對(duì)觀察者的視線方向進(jìn)行檢測(cè)，以高分辨率對(duì)其視線方向的區(qū)域進(jìn)行顯示。由此，不進(jìn)行開關(guān)操作等也能夠以高分辨率自動(dòng)地對(duì)觀察者需要的部分進(jìn)行顯示。
希望適當(dāng)?shù)卦谟^察者的視野內(nèi)對(duì)沒有完全進(jìn)入觀察者的視野的寬范圍的圖像或多視點(diǎn)的圖像進(jìn)行提示。進(jìn)而，希望如下的技術(shù)不在觀察者身上安裝用于對(duì)眼球的運(yùn)動(dòng)進(jìn)行檢測(cè)的特殊的裝置，適當(dāng)?shù)卦谟^察者的視野內(nèi)對(duì)沒有完全進(jìn)入觀察者的視野的寬范圍圖像或多視點(diǎn)的圖像進(jìn)行提示。
作為相關(guān)技術(shù)，在特開2000-59665號(hào)公報(bào)中公開了一種攝像裝置。該攝像裝置由在一個(gè)攝像部的左右兩側(cè)配置兩個(gè)攝像部的3個(gè)攝像部構(gòu)成。該攝像裝置有如下的光軸關(guān)系，即，相對(duì)中央的攝像部的光軸，左側(cè)的攝像部和右側(cè)的攝像部的光軸交叉的角度是同一角度，光軸的交叉點(diǎn)成為同一點(diǎn)。在比所述光軸交叉點(diǎn)位置更接近拍攝體一側(cè)的方向，三個(gè)攝像部位于從所述光軸的交叉點(diǎn)到各攝像部的前側(cè)主點(diǎn)的距離為同一距離的位置上。
特開平8-116556號(hào)公報(bào)中公開了一種圖像處理方法以及裝置。該圖像處理方法的特征在于，具備如下步驟輸入根據(jù)配置在多個(gè)不同的直線上的多個(gè)視點(diǎn)位置得到的圖像的多視點(diǎn)圖像輸入步驟；對(duì)觀看所述圖像的觀察者的眼睛的位置以及所觀看的方向進(jìn)行檢測(cè)的視點(diǎn)檢測(cè)步驟；根據(jù)多視點(diǎn)圖像數(shù)據(jù)對(duì)從由所述視點(diǎn)檢測(cè)步驟檢測(cè)出的視點(diǎn)位置能看到的圖像進(jìn)行再構(gòu)成的圖像再構(gòu)成步驟；以及經(jīng)由圖像輸出裝置對(duì)所述再構(gòu)成的圖像進(jìn)行輸出的圖像輸出步驟。

發(fā)明內(nèi)容
本發(fā)明的目的在于，提供一種根據(jù)沒有完全進(jìn)入人的視野的寬范圍的圖像或者從多視點(diǎn)攝影的圖像來適當(dāng)?shù)卦陲@示裝置上提示必要的信息量的圖像顯示系統(tǒng)以及圖像顯示方法。
進(jìn)而，本發(fā)明的目的在于，提供一種圖像顯示系統(tǒng)以及圖像顯示方法，其中，不在人身上安裝對(duì)眼球運(yùn)動(dòng)或者頭部的傾斜進(jìn)行檢測(cè)用的特殊裝置，就能在該人的視野內(nèi)適當(dāng)?shù)靥崾緵]有完全進(jìn)入該人的視野的寬范圍的圖像或者從多視點(diǎn)攝影的圖像，并能從該圖像適當(dāng)?shù)靥崛〕霰匾男畔⒘俊?br> 進(jìn)而，本發(fā)明的目的在于，雖然人們?yōu)榱碎g斷地看到有意注視的部分以外的區(qū)域而無意地移動(dòng)視點(diǎn)，但是，可提供一種不被該無意的視點(diǎn)移動(dòng)所擾亂地可穩(wěn)定地對(duì)人有意需要的區(qū)域進(jìn)行顯示的圖像顯示系統(tǒng)以及圖像顯示方法。
為了解決所述課題，本發(fā)明的圖像顯示系統(tǒng)具備圖像顯示裝置、圖像生成裝置、面部圖像攝影裝置、面部正面點(diǎn)檢測(cè)裝置。圖像生成裝置生成在圖像顯示裝置中顯示的顯示圖像的顯示圖像數(shù)據(jù)。顯示圖像具有多個(gè)區(qū)域。面部圖像攝影裝置對(duì)觀看顯示圖像的人的面部圖像進(jìn)行攝影。面部正面點(diǎn)檢測(cè)裝置根據(jù)面部圖像生成面部圖像數(shù)據(jù)，基于面部圖像數(shù)據(jù)，檢測(cè)顯示圖像上的作為位于人的面部的正面的點(diǎn)的面部正面點(diǎn)。圖像生成裝置根據(jù)多個(gè)區(qū)域指定與面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成顯示圖像數(shù)據(jù)。
在所述圖像顯示系統(tǒng)中，優(yōu)選面部正面點(diǎn)檢測(cè)裝置對(duì)新的面部正面點(diǎn)進(jìn)行檢測(cè)。優(yōu)選圖像生成裝置在新的面部正面點(diǎn)從指定區(qū)域轉(zhuǎn)移的情況下，指定新的區(qū)域，使與新的區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成新的顯示圖像數(shù)據(jù)。
在所述圖像顯示系統(tǒng)中，優(yōu)選圖像生成裝置通過使在圖像顯示裝置中顯示時(shí)的圖像的顯示尺寸相對(duì)地增大，從而進(jìn)行圖像所提供的信息量的增加。
在所述圖像顯示系統(tǒng)中，優(yōu)選圖像生成裝置通過使在圖像顯示裝置中顯示時(shí)的圖像的分辨率相對(duì)地提高，從而進(jìn)行圖像所提供的信息量的增加。
在所述圖像顯示系統(tǒng)中，優(yōu)選圖像生成裝置使利用寬范圍攝影裝置攝影的寬范圍圖像構(gòu)成為顯示圖像，該寬范圍攝影裝置對(duì)超過人的視野范圍的范圍的圖像進(jìn)行攝影。優(yōu)選圖像顯示裝置將由寬范圍圖像構(gòu)成的顯示圖像數(shù)據(jù)顯示成與多個(gè)區(qū)域相對(duì)應(yīng)地進(jìn)入人的視野范圍內(nèi)。
在所述圖像顯示系統(tǒng)中，優(yōu)選圖像生成裝置將由作為寬范圍攝影裝置的多個(gè)攝影裝置中攝影的多個(gè)圖像合成為顯示圖像。優(yōu)選圖像顯示裝置以進(jìn)入人的視野的范圍內(nèi)的方式，與多個(gè)區(qū)域相對(duì)應(yīng)地對(duì)顯示圖像數(shù)據(jù)進(jìn)行顯示。
在所述圖像顯示系統(tǒng)中，優(yōu)選圖像生成裝置具有信息存儲(chǔ)部。信息存儲(chǔ)部存儲(chǔ)表示圖像顯示裝置的信息的顯示裝置數(shù)據(jù)和表示面部圖像攝影裝置的信息的面部圖像攝影裝置數(shù)據(jù)。面部正面點(diǎn)檢測(cè)裝置基于面部圖像執(zhí)行三維圖像處理，生成面部圖像數(shù)據(jù)，基于面部圖像數(shù)據(jù)、顯示裝置數(shù)據(jù)以及面部圖像攝影裝置數(shù)據(jù)，對(duì)面部正面點(diǎn)進(jìn)行檢測(cè)。
為了解決所述課題，本發(fā)明的圖像顯示方法具備如下步驟(a)生成在圖像顯示裝置中顯示的顯示圖像的顯示圖像數(shù)據(jù)，顯示圖像具有多個(gè)區(qū)域；(b)對(duì)觀看顯示圖像的人的面部圖像進(jìn)行攝影；(c)根據(jù)面部圖像生成面部圖像數(shù)據(jù)，基于面部圖像數(shù)據(jù)檢測(cè)顯示圖像上的位于人的面部的正面的點(diǎn)作為人的面部正面點(diǎn)；(d)根據(jù)多個(gè)區(qū)域指定與面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成顯示圖像數(shù)據(jù)；以及(e)利用圖像顯示裝置顯示顯示圖像數(shù)據(jù)。
在所述圖像顯示方法中，優(yōu)選還具備如下步驟(f)對(duì)新的面部正面點(diǎn)進(jìn)行檢測(cè)；以及(g)在新的面部正面點(diǎn)從指定區(qū)域轉(zhuǎn)移的情況下，指定新的指定區(qū)域，使與新的指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成新的顯示圖像數(shù)據(jù)。
在所述圖像顯示方法中，優(yōu)選通過使在圖像顯示裝置中顯示時(shí)的圖像的顯示尺寸相對(duì)地增大，從而進(jìn)行圖像所提供的信息量的增加。
在所述圖像顯示方法中，優(yōu)選通過使在圖像顯示裝置中顯示時(shí)的圖像的分辨率相對(duì)地提高，從而進(jìn)行圖像所提供的信息量的增加。
在所述圖像顯示方法中，優(yōu)選(a)步驟具備(a1)步驟，其中使利用寬范圍攝影裝置攝影的寬范圍圖像構(gòu)成為顯示圖像，該寬范圍攝影裝置對(duì)超過人的視野范圍的范圍的圖像進(jìn)行攝影。優(yōu)選(e)步驟具備(e1)步驟，其中將由寬范圍圖像構(gòu)成的顯示圖像數(shù)據(jù)顯示成與多個(gè)區(qū)域相對(duì)應(yīng)地進(jìn)入人的視野范圍內(nèi)。
在所述圖像顯示方法中，優(yōu)選(a1)步驟具備(a11)步驟，其中將由作為寬范圍攝影裝置的多個(gè)攝影裝置攝影的多個(gè)圖像合成為顯示圖像。多個(gè)區(qū)域的每一個(gè)對(duì)應(yīng)于多個(gè)圖像的每一個(gè)。優(yōu)選(e1)步驟具備(e11)步驟，其中以進(jìn)入人的視野范圍內(nèi)的方式，與多個(gè)區(qū)域相對(duì)應(yīng)地對(duì)顯示圖像數(shù)據(jù)進(jìn)行顯示。
在所述圖像顯示方法中，優(yōu)選(c)步驟具備如下步驟(c1)讀出表示圖像顯示裝置的信息的顯示裝置數(shù)據(jù)和表示對(duì)面部圖像進(jìn)行攝影的面部圖像攝影裝置的信息的面部圖像攝影裝置數(shù)據(jù)；以及(c2)基于面部圖像執(zhí)行三維圖像處理，生成面部圖像數(shù)據(jù)，基于面部圖像數(shù)據(jù)、顯示裝置數(shù)據(jù)以及面部圖像攝影裝置數(shù)據(jù)，檢測(cè)面部正面點(diǎn)。
為解決所述課題，本發(fā)明可由計(jì)算機(jī)執(zhí)行具備如下步驟的方法的程序，該步驟為(h)生成在圖像顯示裝置中顯示的顯示圖像的顯示圖像數(shù)據(jù)，顯示圖像具有多個(gè)區(qū)域；(i)根據(jù)觀看顯示圖像的人的面部圖像生成面部圖像數(shù)據(jù)，基于面部圖像數(shù)據(jù)，對(duì)顯示圖像上的位于人的面部的正面的點(diǎn)進(jìn)行檢測(cè)，作為人的面部正面點(diǎn)；(j)根據(jù)多個(gè)區(qū)域指定與面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成顯示圖像數(shù)據(jù)；以及(k)將顯示圖像數(shù)據(jù)向圖像顯示裝置輸出。
在所述程序中，優(yōu)選還具備如下步驟(l)對(duì)新的面部正面點(diǎn)進(jìn)行檢測(cè)；以及(m)在新的面部正面點(diǎn)從指定區(qū)域轉(zhuǎn)移的情況下，指定新的指定區(qū)域，使與新的指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成新的顯示圖像數(shù)據(jù)。
在所述程序中，優(yōu)選通過使在圖像顯示裝置中顯示時(shí)的圖像的顯示尺寸相對(duì)地增大，從而進(jìn)行圖像所提供的信息量的增加。
在所述程序中，優(yōu)選通過使在圖像顯示裝置中顯示時(shí)的圖像的分辨率相對(duì)地提高，從而進(jìn)行圖像所提供的信息量的增加。
在所述程序中，優(yōu)選(h)步驟具備(h1)步驟，其中使利用寬范圍攝影裝置攝影的寬范圍圖像構(gòu)成為顯示圖像，該寬范圍攝影裝置對(duì)超過人的視野范圍的范圍的圖像進(jìn)行攝影。優(yōu)選(k)步驟具具備(k1)步驟，其中以將由寬范圍圖像構(gòu)成的顯示圖像數(shù)據(jù)顯示成與多個(gè)區(qū)域相對(duì)應(yīng)地進(jìn)入人的視野范圍內(nèi)的方式，將顯示圖像數(shù)據(jù)向圖像顯示裝置輸出。
在所述程序中，優(yōu)選(h1)步驟具備(h11)步驟，其中將由作為寬范圍攝影裝置的多個(gè)攝影裝置攝影的多個(gè)圖像合成為顯示圖像。多個(gè)區(qū)域的每一個(gè)對(duì)應(yīng)于多個(gè)圖像的每一個(gè)。優(yōu)選(k1)步驟具備(k11)步驟，其中以進(jìn)入人的視野的范圍內(nèi)、與多個(gè)區(qū)域相對(duì)應(yīng)地對(duì)顯示圖像數(shù)據(jù)進(jìn)行顯示的方式，將顯示圖像數(shù)據(jù)向圖像顯示裝置輸出。
在所述程序中，優(yōu)選(i)步驟具備如下步驟(i1)讀出表示圖像顯示裝置的信息的顯示裝置數(shù)據(jù)和表示對(duì)面部圖像進(jìn)行攝影的面部圖像攝影裝置的信息的面部圖像攝影裝置數(shù)據(jù)；以及(i2)基于面部圖像執(zhí)行三維圖像處理，生成面部圖像數(shù)據(jù)，基于面部圖像數(shù)據(jù)、顯示裝置數(shù)據(jù)以及面部圖像攝影裝置數(shù)據(jù)，檢測(cè)面部正面點(diǎn)。
按照本發(fā)明，可提供一種圖像顯示系統(tǒng)，其根據(jù)沒有完全進(jìn)入人的視野的寬范圍的圖像或者從多視點(diǎn)攝影的圖像來適當(dāng)?shù)卦陲@示裝置中對(duì)必要的信息量進(jìn)行提示。
進(jìn)而，按照本發(fā)明，不在人身上安裝對(duì)眼球運(yùn)動(dòng)或者頭部的傾斜進(jìn)行檢測(cè)用的特殊裝置，就能在該人的視野內(nèi)適當(dāng)?shù)靥崾緵]有完全進(jìn)入該人的視野的寬范圍的圖像或者從多視點(diǎn)攝影的圖像，并能從該圖像適當(dāng)?shù)靥崛〕霰匾男畔⒘俊?br>

圖1是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的結(jié)構(gòu)的概念圖。
圖2是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的動(dòng)作的概念圖。
圖3是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的詳細(xì)結(jié)構(gòu)的框圖。
圖4是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的動(dòng)作的流程圖。
圖5是表示在車輛的運(yùn)行中應(yīng)用圖像顯示系統(tǒng)時(shí)的結(jié)構(gòu)的圖。
圖6是例示在第1圖像攝影裝置～第3圖像攝影裝置攝影的外部圖像數(shù)據(jù)的圖。
圖7是表示根據(jù)第1圖像數(shù)據(jù)～第3圖像數(shù)據(jù)生成顯示圖像數(shù)據(jù)的動(dòng)作的圖。
圖8是表示將本實(shí)施方式應(yīng)用在寬區(qū)域監(jiān)視的情況下的結(jié)構(gòu)的概念圖。
圖9是表示將本發(fā)明應(yīng)用于寬區(qū)域監(jiān)視系統(tǒng)的情況下的動(dòng)作的概念圖。
具體實(shí)施例方式
下面，參照附圖對(duì)本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式進(jìn)行說明。圖1是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的結(jié)構(gòu)的概念圖。本實(shí)施方式中的圖像顯示系統(tǒng)1具備監(jiān)視對(duì)象圖像攝影裝置2、面部圖像攝影裝置3、圖像顯示裝置4、計(jì)算機(jī)5。監(jiān)視對(duì)象圖像攝影裝置2和計(jì)算機(jī)5相互電連接。計(jì)算機(jī)5接收從監(jiān)視對(duì)象圖像攝影裝置2輸出的數(shù)據(jù)。面部圖像攝影裝置3和計(jì)算機(jī)5相互電連接。計(jì)算機(jī)5接收從面部圖像攝影裝置3輸出的數(shù)據(jù)。圖像顯示裝置電連接在計(jì)算機(jī)5上。接收從計(jì)算機(jī)5發(fā)送的顯示圖像數(shù)據(jù)，對(duì)圖像進(jìn)行顯示?？梢越?jīng)由預(yù)定的網(wǎng)絡(luò)進(jìn)行監(jiān)視對(duì)象圖像攝影裝置2、面部圖像攝影裝置3、圖像顯示裝置4以及計(jì)算機(jī)5的連接。
觀察者10對(duì)顯示在圖像顯示裝置4上的圖像進(jìn)行觀察。圖1所示的面部正面點(diǎn)P表示在觀察者10觀看顯示在圖像顯示裝置4上的圖像時(shí)位于其面部的正面圖像顯示裝置4的畫面上的部分。在本發(fā)明中，不存在對(duì)觀察者10的限制。即，按照本發(fā)明，觀察者10不具有關(guān)于圖像顯示系統(tǒng)1的技術(shù)的詳細(xì)知識(shí)也可利用圖像顯示系統(tǒng)1。
監(jiān)視對(duì)象圖像攝影裝置2對(duì)超過人的視野的范圍的范圍(以下稱為寬范圍)的圖像進(jìn)行攝影。例如是光學(xué)攝像機(jī)或者CCD攝像機(jī)。監(jiān)視對(duì)象圖像攝影裝置2由多個(gè)攝影裝置構(gòu)成。由此，還可執(zhí)行從多個(gè)地點(diǎn)對(duì)指定的地點(diǎn)進(jìn)行觀察的多視點(diǎn)監(jiān)視。將監(jiān)視對(duì)象圖像攝影裝置2攝影的觀察對(duì)象的圖像轉(zhuǎn)換為觀察圖像數(shù)據(jù)發(fā)送至計(jì)算機(jī)5。本發(fā)明的監(jiān)視對(duì)象圖像攝影裝置2不限于該結(jié)構(gòu)。例如，在從指定的地點(diǎn)進(jìn)行寬范圍的觀察時(shí)，可以由全景攝影機(jī)這樣的能夠進(jìn)行寬范圍的攝影的單一攝影裝置構(gòu)成。
面部圖像攝影裝置3對(duì)觀察者10的面部圖像進(jìn)行攝影。例如是光學(xué)攝像機(jī)或者CCD攝像機(jī)。面部圖像攝影裝置3將所攝影的面部圖像做成面部圖像數(shù)據(jù)發(fā)送至計(jì)算機(jī)5。面部圖像攝影裝置3優(yōu)選設(shè)置在可指定相對(duì)觀察者10的面部的位置的相對(duì)位置的地方?；蛘撸瑢D像顯示裝置4的預(yù)定位置作為原點(diǎn)，指定面部圖像攝影裝置3的坐標(biāo)，由此，可以指定面部圖像攝影裝置3的設(shè)置位置。
計(jì)算機(jī)5基于從監(jiān)視對(duì)象圖像攝影裝置2和面部圖像攝影裝置3發(fā)送的圖像數(shù)據(jù)(觀察圖像數(shù)據(jù)/面部圖像數(shù)據(jù))執(zhí)行數(shù)據(jù)處理。例如是工作站或者個(gè)人計(jì)算機(jī)。計(jì)算機(jī)5響應(yīng)所接收的數(shù)據(jù)(觀察圖像數(shù)據(jù)/面部圖像數(shù)據(jù))來執(zhí)行預(yù)定的程序，進(jìn)行圖像處理。計(jì)算機(jī)5將通過圖像處理生成的顯示圖像數(shù)據(jù)向圖像顯示裝置4輸出。圖像顯示裝置4對(duì)從計(jì)算機(jī)5發(fā)送的顯示圖像數(shù)據(jù)進(jìn)行顯示。例如是CRT或者液晶顯示器。
圖2是表示本發(fā)明的圖像顯示系統(tǒng)實(shí)施方式的動(dòng)作的概念圖。此處，監(jiān)視對(duì)象圖像攝影裝置2使用第1～第3這三臺(tái)攝影裝置對(duì)觀察對(duì)象進(jìn)行攝影。例如，各攝影裝置在具有大致水平夾角90度的視角的情況下，根據(jù)所述三臺(tái)攝影裝置可進(jìn)行水平角270度的觀察。
監(jiān)視對(duì)象圖像攝影裝置2使用三臺(tái)攝影裝置對(duì)觀察對(duì)象進(jìn)行攝影。而且，取得多個(gè)圖像數(shù)據(jù)。作為多個(gè)圖像數(shù)據(jù)的第1圖像數(shù)據(jù)G1、第2圖像數(shù)據(jù)G2、第3圖像數(shù)據(jù)G3的每一個(gè)表示在該第1～第3攝影裝置中攝影的各自的圖像。監(jiān)視對(duì)象圖像攝影裝置2將所攝影的多個(gè)圖像數(shù)據(jù)發(fā)送給計(jì)算機(jī)5。
計(jì)算機(jī)5基于所發(fā)送的多個(gè)圖像數(shù)據(jù)生成一個(gè)基準(zhǔn)圖像數(shù)據(jù)G0。此外，面部圖像攝影裝置3對(duì)觀察者10的面部圖像進(jìn)行攝影，將該面部圖像數(shù)據(jù)發(fā)送給計(jì)算機(jī)5。計(jì)算機(jī)5響應(yīng)所接收的面部圖像數(shù)據(jù)執(zhí)行預(yù)定的運(yùn)算，算出面部正面點(diǎn)P。
計(jì)算機(jī)5基于基準(zhǔn)圖像數(shù)據(jù)G0和面部正面點(diǎn)P生成顯示圖像數(shù)據(jù)，發(fā)送給圖像顯示裝置4。在圖2的例子中，計(jì)算機(jī)5根據(jù)基準(zhǔn)圖像數(shù)據(jù)G0和面部正面點(diǎn)P，判斷為觀察者10關(guān)注第1圖像數(shù)據(jù)G1。計(jì)算機(jī)5生成能使高分辨率或者顯示區(qū)域變大地來顯示第1圖像數(shù)據(jù)G1這樣的顯示圖像數(shù)據(jù)。此時(shí)，第2圖像數(shù)據(jù)G2以及第3圖像數(shù)據(jù)G3成為低分辨率或者較窄的顯示區(qū)域。計(jì)算機(jī)5將所生成的顯示圖像數(shù)據(jù)發(fā)送給圖像顯示裝置4。圖像顯示裝置4基于所接收的顯示圖像數(shù)據(jù)在顯示畫面上顯示放大顯示(高分辨率顯示)有第1圖像數(shù)據(jù)G1的顯示圖像40。觀察者10根據(jù)所顯示的顯示圖像40可執(zhí)行對(duì)存在于超過觀察者10個(gè)人視野范圍的范圍的觀察對(duì)象的觀察。
下面，對(duì)本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式進(jìn)行更加詳細(xì)地說明。圖3是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的詳細(xì)結(jié)構(gòu)的框圖。如圖1的說明所述，本實(shí)施方式的圖像顯示系統(tǒng)1具備監(jiān)視對(duì)象圖像攝影裝置2、面部圖像攝影裝置3、圖像顯示裝置4、以及計(jì)算機(jī)5。在以下的說明中，對(duì)于與所述的圖1的結(jié)構(gòu)相同的部分省略其詳細(xì)說明。監(jiān)視對(duì)象圖像攝影裝置2由多個(gè)攝影裝置(2-1～2-n)構(gòu)成。監(jiān)視對(duì)象圖像攝影裝置2分別將多個(gè)攝影裝置(2-1～2-n)配置在任意的位置上，由此，可執(zhí)行寬范圍的監(jiān)視或者從多視點(diǎn)的監(jiān)視。
計(jì)算機(jī)5具備CPU6、存儲(chǔ)器7、存儲(chǔ)裝置8。計(jì)算機(jī)5可與網(wǎng)絡(luò)(未圖示)連接。CPU6、存儲(chǔ)器7、存儲(chǔ)裝置8經(jīng)由總線9相互連接。CPU6是計(jì)算機(jī)5中至少具有一個(gè)的運(yùn)算處理裝置。CPU6執(zhí)行內(nèi)置或者外置在計(jì)算機(jī)5上的裝置的控制用的命令或者針對(duì)所輸入的數(shù)據(jù)的運(yùn)算處理，輸出其運(yùn)算處理結(jié)果。
存儲(chǔ)器7是計(jì)算機(jī)5所具有的信息存儲(chǔ)裝置。存儲(chǔ)器7例如是RAM這樣的半導(dǎo)體存儲(chǔ)裝置。響應(yīng)來自CPU6的命令，存儲(chǔ)預(yù)定的數(shù)據(jù)。存儲(chǔ)裝置8是計(jì)算機(jī)5所具有的大容量存儲(chǔ)裝置。存儲(chǔ)裝置8例如是HDD，具有非易失性的存儲(chǔ)區(qū)。存儲(chǔ)本實(shí)施方式中使用的電子數(shù)據(jù)(11～14)或者計(jì)算機(jī)程序(21～24)。
存儲(chǔ)裝置8中存儲(chǔ)的電子數(shù)據(jù)包含顯示裝置數(shù)據(jù)11、面部圖像攝影裝置數(shù)據(jù)12、面部姿勢(shì)初始數(shù)據(jù)13以及布局設(shè)計(jì)數(shù)據(jù)14。為了執(zhí)行圖像顯示系統(tǒng)1的動(dòng)作，使用顯示裝置數(shù)據(jù)11、面部圖像攝影裝置數(shù)據(jù)12、面部姿勢(shì)初始數(shù)據(jù)13以及布局設(shè)計(jì)數(shù)據(jù)14的每一個(gè)。
顯示裝置數(shù)據(jù)11是表示關(guān)于圖像顯示裝置4的信息的數(shù)據(jù)。該數(shù)據(jù)例如是為了將圖像顯示在顯示畫面上所需要的、圖像顯示裝置4的顯示畫面尺寸或者可顯示分辨率等信息。
面部圖像攝影裝置數(shù)據(jù)12是表示面部圖像攝影裝置3的設(shè)置位置的數(shù)據(jù)。該數(shù)據(jù)例如是為了根據(jù)面部圖像攝影裝置3所攝影的圖像數(shù)據(jù)算出面部姿勢(shì)數(shù)據(jù)(用于指定觀察者10的視線方向的數(shù)據(jù))所需要的、關(guān)于面部圖像攝影裝置3的設(shè)置位置的信息。
面部姿勢(shì)初始數(shù)據(jù)13是為了算出面部姿勢(shì)數(shù)據(jù)所使用的初始數(shù)據(jù)。該數(shù)據(jù)例如是觀察者10注視圖像顯示裝置4的顯示畫面的左角的面部圖像數(shù)據(jù)的面部姿勢(shì)初始數(shù)據(jù)13。預(yù)想存儲(chǔ)面部姿勢(shì)初始數(shù)據(jù)13，由此，能夠降低面部正面點(diǎn)P的計(jì)算所需要的信息處理量。也可以將觀察者10與圖像顯示裝置4的指定點(diǎn)的相對(duì)距離作為面部姿勢(shì)初始數(shù)據(jù)13進(jìn)行存儲(chǔ)。
布局設(shè)計(jì)數(shù)據(jù)14是關(guān)于在圖像顯示裝置4上顯示監(jiān)視對(duì)象圖像時(shí)的顯示布局設(shè)計(jì)的數(shù)據(jù)。對(duì)于監(jiān)視對(duì)象的圖像(寬范圍圖像或者多視點(diǎn)圖像)，通過在計(jì)算機(jī)5中進(jìn)行圖像處理來生成監(jiān)視對(duì)象圖像攝影裝置2所攝影的圖像。計(jì)算機(jī)5在將所生成的監(jiān)視對(duì)象圖像顯示在圖像顯示裝置4上的情況下，指定與面部正面點(diǎn)P相對(duì)應(yīng)的區(qū)域。計(jì)算機(jī)5以能夠以高分辨率對(duì)該指定的區(qū)域進(jìn)行顯示的方式生成顯示數(shù)據(jù)。因此，通過在布局設(shè)計(jì)數(shù)據(jù)14中改變?cè)O(shè)定，能任意地變更圖像顯示裝置4中的顯示方式。
存儲(chǔ)裝置8中存儲(chǔ)的計(jì)算機(jī)程序包含基準(zhǔn)圖像數(shù)據(jù)生成程序21、面部姿勢(shì)數(shù)據(jù)生成程序22、面部正面點(diǎn)檢測(cè)程序23以及顯示圖像數(shù)據(jù)生成程序24。為了執(zhí)行圖像顯示系統(tǒng)1的動(dòng)作，使用基準(zhǔn)圖像數(shù)據(jù)生成程序21、面部姿勢(shì)數(shù)據(jù)生成程序22、面部正面點(diǎn)檢測(cè)程序23以及顯示圖像數(shù)據(jù)生成程序24的每一個(gè)。
基準(zhǔn)圖像數(shù)據(jù)生成程序21基于從監(jiān)視對(duì)象圖像攝影裝置2發(fā)送的監(jiān)視對(duì)象的圖像數(shù)據(jù)(例如圖2的G1～G3)，生成成為顯示圖像數(shù)據(jù)生成用的基準(zhǔn)的基準(zhǔn)圖像數(shù)據(jù)(例如圖2的G0)。例如，基準(zhǔn)圖像數(shù)據(jù)生成程序21在多個(gè)攝影裝置(2-1～2-n)所攝影的圖像中存在重疊時(shí)，生成對(duì)應(yīng)于沒有重疊的無縫的圖像的基準(zhǔn)圖像數(shù)據(jù)。
面部姿勢(shì)數(shù)據(jù)生成程序22基于從面部圖像攝影裝置3發(fā)送的面部圖像數(shù)據(jù)、面部姿勢(shì)初始數(shù)據(jù)13、顯示裝置數(shù)據(jù)11，生成關(guān)于觀察者10的當(dāng)前的面部姿勢(shì)數(shù)據(jù)(用于指定觀察者10的視線方向的數(shù)據(jù))。
面部正面點(diǎn)檢測(cè)程序23基于由面部姿勢(shì)數(shù)據(jù)生成程序22所生成的面部姿勢(shì)數(shù)據(jù)、顯示裝置數(shù)據(jù)11、面部圖像攝影裝置數(shù)據(jù)12，算出圖像顯示裝置4的顯示畫面上的面部正面點(diǎn)P。
顯示圖像數(shù)據(jù)生成程序24基于由基準(zhǔn)圖像數(shù)據(jù)生成程序21生成的基準(zhǔn)圖像數(shù)據(jù)、面部正面點(diǎn)檢測(cè)程序23算出的面部正面點(diǎn)P、布局設(shè)計(jì)數(shù)據(jù)14，生成顯示圖像數(shù)據(jù)。
另外，為了得到本發(fā)明的作用效果，不一定要求所有的所述的各數(shù)據(jù)或者各程序。例如，在使用更高性能的計(jì)算機(jī)5等情況下，可以是面部姿勢(shì)數(shù)據(jù)生成程序22不使用布局設(shè)計(jì)數(shù)據(jù)14地生成顯示圖像數(shù)據(jù)的結(jié)構(gòu)。在此種情況下，不影響本發(fā)明的作用效果。
然后，對(duì)本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的動(dòng)作進(jìn)行說明。圖4是表示本發(fā)明的圖像顯示系統(tǒng)的實(shí)施方式的動(dòng)作的流程圖。在以下的動(dòng)作中，設(shè)所需要的數(shù)據(jù)預(yù)先存儲(chǔ)在存儲(chǔ)裝置8中進(jìn)行說明。
啟動(dòng)圖像顯示系統(tǒng)1，圖像顯示裝置4顯示監(jiān)視對(duì)象圖像。所顯示的圖像是由監(jiān)視對(duì)象圖像攝影裝置2以預(yù)定的時(shí)間間隔連續(xù)地?cái)z影、在計(jì)算機(jī)5中執(zhí)行預(yù)定的圖像處理后的基準(zhǔn)圖像數(shù)據(jù)。對(duì)基準(zhǔn)圖像數(shù)據(jù)進(jìn)行連續(xù)地更新。觀察者10以肉眼對(duì)該顯示的圖像進(jìn)行觀看。
在步驟S101中，面部圖像攝影裝置3對(duì)觀察者10的面部圖像進(jìn)行攝影。執(zhí)行該攝影的時(shí)間間隔以比可充分檢測(cè)觀察者10的面部正面點(diǎn)移動(dòng)的程度短的間隔進(jìn)行。面部圖像攝影裝置3將所攝影的面部圖像作為面部圖像數(shù)據(jù)，在形式上轉(zhuǎn)換為可進(jìn)行數(shù)據(jù)處理的形式，通過網(wǎng)絡(luò)發(fā)送給計(jì)算機(jī)5。
在步驟S102中，計(jì)算機(jī)5響應(yīng)從面部圖像攝影裝置3發(fā)送的面部圖像數(shù)據(jù)，啟動(dòng)面部姿勢(shì)數(shù)據(jù)生成程序22。計(jì)算機(jī)5的CPU6響應(yīng)面部姿勢(shì)數(shù)據(jù)生成程序22的啟動(dòng)，讀入面部姿勢(shì)初始數(shù)據(jù)13和顯示裝置數(shù)據(jù)11。而且，基于面部姿勢(shì)初始數(shù)據(jù)13、面部圖像數(shù)據(jù)、顯示裝置數(shù)據(jù)11，算出觀察者10的當(dāng)前的面部姿勢(shì)數(shù)據(jù)。作為進(jìn)行該處理的技術(shù)的一例，可利用“3D アピアランスモデルを用いた高速·高精度な顏?zhàn)藙?shì)推定(2004年 電子情報(bào)通信學(xué)會(huì)総合大會(huì)論文集D-12-99)”中記載的面部姿勢(shì)推定技術(shù)。通過在面部姿勢(shì)數(shù)據(jù)生成程序22中包含該面部姿勢(shì)推定技術(shù)，由此，可算出針對(duì)面部圖像攝影裝置3的觀察者10的面部姿勢(shì)。因此，預(yù)先求出面部圖像攝影裝置3和圖像顯示裝置4之間安的位置關(guān)系，從而能夠以運(yùn)算求出針對(duì)圖像顯示裝置4的觀察者10的面部姿勢(shì)數(shù)據(jù)。計(jì)算機(jī)5響應(yīng)面部姿勢(shì)數(shù)據(jù)算出結(jié)束，進(jìn)入到步驟S103的處理。
在步驟S103中，計(jì)算機(jī)5啟動(dòng)面部正面點(diǎn)檢測(cè)程序23。計(jì)算機(jī)5的CPU6響應(yīng)面部正面點(diǎn)檢測(cè)程序23的啟動(dòng)，進(jìn)而，讀入面部圖像攝影裝置數(shù)據(jù)12。而且，基于面部姿勢(shì)數(shù)據(jù)、顯示裝置數(shù)據(jù)11、面部圖像攝影裝置數(shù)據(jù)12，指定面部正面點(diǎn)P。計(jì)算機(jī)5響應(yīng)面部正面點(diǎn)P的指定完成，進(jìn)入到步驟S103的處理。
在步驟S104中，計(jì)算機(jī)5啟動(dòng)顯示圖像數(shù)據(jù)生成程序24。計(jì)算機(jī)5的CPU6響應(yīng)顯示圖像數(shù)據(jù)生成程序24的啟動(dòng)，監(jiān)視對(duì)象圖像攝影裝置2進(jìn)行攝影，基于在計(jì)算機(jī)5中進(jìn)行圖像處理后的基準(zhǔn)圖像數(shù)據(jù)、面部正面點(diǎn)P、布局設(shè)計(jì)數(shù)據(jù)14生成顯示圖像數(shù)據(jù)。以在與面部正面點(diǎn)P相對(duì)應(yīng)的顯示區(qū)域(高分辨率顯示區(qū)域)上顯示高分辨率圖像的方式生成顯示圖像數(shù)據(jù)。計(jì)算機(jī)5響應(yīng)顯示圖像數(shù)據(jù)的生成結(jié)束，進(jìn)入到步驟S105。
在步驟S105中，執(zhí)行在執(zhí)行步驟S104期間面部正面點(diǎn)P是否移動(dòng)的判斷。例如，再次執(zhí)行步驟S103的過程，前次指定的面部正面點(diǎn)與這次指定的面部正面點(diǎn)若相同，則判定為沒有移動(dòng)。該判斷的結(jié)果是沒有檢測(cè)出面部正面點(diǎn)的移動(dòng)時(shí)(步驟S105“否”)，計(jì)算機(jī)5通過網(wǎng)絡(luò)將在步驟S104中生成的顯示圖像數(shù)據(jù)發(fā)送給圖像顯示裝置4。生成顯示圖像數(shù)據(jù)后，在檢測(cè)出面部正面點(diǎn)移動(dòng)的情況下(步驟S105“是”)，處理進(jìn)入到步驟S106。
在步驟S106中，計(jì)算機(jī)5執(zhí)行關(guān)于檢測(cè)出的移動(dòng)后的面部正面點(diǎn)P(在步驟S105中算出的點(diǎn))的數(shù)據(jù)(以下稱為面部正面點(diǎn)數(shù)據(jù))的讀入。作為面部正面點(diǎn)數(shù)據(jù)，例如是圖像顯示裝置4的畫面內(nèi)的坐標(biāo)。
在步驟S107中，計(jì)算機(jī)5響應(yīng)面部正面點(diǎn)數(shù)據(jù)的讀入結(jié)束，執(zhí)行顯示圖像數(shù)據(jù)(步驟S104中生成的數(shù)據(jù))的讀入。響應(yīng)面部正面點(diǎn)數(shù)據(jù)、顯示圖像數(shù)據(jù)的每一個(gè)的讀入結(jié)束，處理進(jìn)入到步驟S108。
在步驟S108中，計(jì)算機(jī)5執(zhí)行面部正面點(diǎn)P是否對(duì)應(yīng)于所讀入的顯示圖像數(shù)據(jù)的高分辨率顯示區(qū)域的判斷。該判斷結(jié)果為對(duì)應(yīng)于當(dāng)前的顯示圖像數(shù)據(jù)時(shí)、以高分辨率顯示圖像的區(qū)域(高分辨率顯示區(qū)域)與面部正面點(diǎn)P不對(duì)應(yīng)時(shí)(步驟S108“是”)，處理返回步驟S101，進(jìn)行新的顯示圖像數(shù)據(jù)的生成。在步驟S108中，雖然面部正面點(diǎn)P欲移動(dòng)，但是，沒有離開以高分辨率顯示圖像的區(qū)域時(shí)(步驟S108“否”)，計(jì)算機(jī)5通過網(wǎng)絡(luò)將在步驟S104中生成的顯示圖像數(shù)據(jù)發(fā)送給圖像顯示裝置4，處理進(jìn)入到步驟S109。
在步驟S109中，圖像顯示裝置4接收從計(jì)算機(jī)5發(fā)送的顯示圖像數(shù)據(jù)，在顯示畫面上顯示對(duì)應(yīng)于該顯示圖像數(shù)據(jù)的圖像。重復(fù)該動(dòng)作，由此，圖像顯示系統(tǒng)1追隨觀察者10的面部正面點(diǎn)移動(dòng)，自動(dòng)地以高分辨率顯示對(duì)應(yīng)于觀察者10注目之處的區(qū)域。
另外，在所述動(dòng)作中，也可以省略步驟S105～步驟S108。此時(shí)，圖像顯示的執(zhí)行、更新更加迅速。
然后，對(duì)本發(fā)明的圖像顯示系統(tǒng)的具體利用進(jìn)行說明。圖5是表示將圖像顯示系統(tǒng)1應(yīng)用到車輛的運(yùn)行中時(shí)的結(jié)構(gòu)的圖。車輛30是具有圖像顯示系統(tǒng)1的移動(dòng)體。圖5表示該車輛30進(jìn)入十字路口P的情況。參照?qǐng)D5，在車輛30的左前附近行駛兩輪車B1，相對(duì)車輛30的行進(jìn)方向在右前方的道路上存在汽車C1。車輛30中具有監(jiān)視對(duì)象圖像攝影裝置2(2-1～2-3)、面部圖像攝影裝置3、圖像顯示裝置4、計(jì)算機(jī)5。此外，觀察者10(車輛30的駕駛者)一邊觀看圖像顯示裝置4所顯示的圖像一邊駕駛車輛。第1圖像攝影裝置2-1對(duì)與視野R1對(duì)應(yīng)的范圍的外部圖像進(jìn)行攝影。第2圖像攝影裝置2-2對(duì)與視野R2對(duì)應(yīng)的范圍的外部圖像進(jìn)行攝影。第3圖像攝影裝置2-3對(duì)與視野R3對(duì)應(yīng)的范圍的外部圖像進(jìn)行攝影。面部圖像攝影裝置3設(shè)置在車輛30的內(nèi)部，始終對(duì)觀察者10的面部圖像進(jìn)行攝影。
第1圖像攝影裝置2-1～第3圖像攝影裝置2-3對(duì)所攝影的外部圖像進(jìn)行電子數(shù)據(jù)化。而且，在計(jì)算機(jī)5中形式轉(zhuǎn)換為可進(jìn)行信息處理的形式，通過車輛30內(nèi)部的網(wǎng)絡(luò)(未圖示)發(fā)送給計(jì)算機(jī)5。同樣，面部圖像攝影裝置3對(duì)所攝影的面部圖像進(jìn)行電子數(shù)據(jù)化。而且，在計(jì)算機(jī)5中形式轉(zhuǎn)換為能進(jìn)行信息處理的形式，通過網(wǎng)絡(luò)發(fā)送給計(jì)算機(jī)5。計(jì)算機(jī)5基于所接收的外部圖像數(shù)據(jù)和面部圖像數(shù)據(jù)執(zhí)行圖像處理，生成顯示圖像數(shù)據(jù)。所生成的顯示圖像數(shù)據(jù)通過所述網(wǎng)絡(luò)發(fā)送給圖像顯示裝置4。
圖6是例示第1圖像攝影裝置2-1～第3圖像攝影裝置2-3所攝影的外部圖像數(shù)據(jù)的圖。第1圖像數(shù)據(jù)G1表示由第1圖像攝影裝置2-1所攝影的圖像數(shù)據(jù)。同樣，第2圖像數(shù)據(jù)G2表示由第2圖像攝影裝置2-2所攝影的圖像數(shù)據(jù)，第3圖像數(shù)據(jù)G3表示由第3圖像攝影裝置2-3所攝影的圖像數(shù)據(jù)。
圖7是表示根據(jù)所述第1圖像數(shù)據(jù)G1～第3圖像數(shù)據(jù)G3生成顯示圖像數(shù)據(jù)40(40a、40b)的動(dòng)作的圖?；鶞?zhǔn)外部圖像數(shù)據(jù)G0是基于第1圖像數(shù)據(jù)G1～第3圖像數(shù)據(jù)G3生成的基準(zhǔn)圖像數(shù)據(jù)。結(jié)合各圖像數(shù)據(jù)(G1～G3)生成圖7所示的基準(zhǔn)圖像時(shí)間G0，指定各個(gè)圖像數(shù)據(jù)(第1圖像數(shù)據(jù)G1～第3圖像數(shù)據(jù)G3)的相對(duì)位置。另外，為了降低基準(zhǔn)圖像數(shù)據(jù)G0的信息量，可以生成以預(yù)定的比例縮小各圖像(G1～G3)的橫向尺寸的基準(zhǔn)圖像數(shù)據(jù)G0。在沒有檢測(cè)出面部正面點(diǎn)P的情況下在圖像顯示裝置4顯示所生成的基準(zhǔn)圖像數(shù)據(jù)G0。系統(tǒng)進(jìn)行動(dòng)作，執(zhí)行面部正面點(diǎn)P的檢測(cè)時(shí)，生成面部正面點(diǎn)數(shù)據(jù)50。為了容易理解本發(fā)明，面部正面點(diǎn)數(shù)據(jù)50對(duì)應(yīng)于基準(zhǔn)圖像數(shù)據(jù)G0地顯示面部正面點(diǎn)P，但是，實(shí)際的面部正面點(diǎn)數(shù)據(jù)也可以是表示畫面上的坐標(biāo)的數(shù)值數(shù)據(jù)。
此處，如圖7所示，觀察者10的面部正面點(diǎn)P是在坐標(biāo)(50，50)所示的位置的情況下，計(jì)算機(jī)5算出對(duì)應(yīng)于以該坐標(biāo)所示的點(diǎn)的區(qū)域。而且，計(jì)算機(jī)5基于所算出的區(qū)域和面部正面點(diǎn)數(shù)據(jù)50，以用高分辨率顯示對(duì)應(yīng)于所述第1圖像數(shù)據(jù)G1的圖像G1a的方式生成顯示圖像數(shù)據(jù)。所生成的顯示圖像數(shù)據(jù)通過網(wǎng)絡(luò)輸出到圖像顯示裝置4。圖像顯示裝置4基于從計(jì)算機(jī)5供給的顯示圖像數(shù)據(jù)將顯示圖像40a顯示在畫面上。
考慮通過觀察者10移動(dòng)視線，從而判斷為面部正面點(diǎn)P的位置不存在于顯示圖像G1a的區(qū)域的情況。計(jì)算機(jī)5基于從面部圖像攝影裝置3發(fā)送的面部圖像數(shù)據(jù)，監(jiān)視觀察者10的面部正面點(diǎn)移動(dòng)。如圖7所示，觀察者10通過移動(dòng)視線，面部正面點(diǎn)數(shù)據(jù)50的面部正面點(diǎn)P的坐標(biāo)表示面部正面點(diǎn)P(5，25)的情況下(以下將該面部正面點(diǎn)P稱為“新的面部正面點(diǎn)P”)，計(jì)算機(jī)5判斷為該新的面部正面點(diǎn)P不存在于顯示圖像G1a的區(qū)域。
計(jì)算機(jī)5對(duì)應(yīng)該判斷結(jié)果，根據(jù)所述新的面部正面點(diǎn)P的坐標(biāo)(面部正面點(diǎn)P(5，25))和輸出到圖像顯示裝置4的顯示圖像數(shù)據(jù)，以可用高分辨率顯示對(duì)應(yīng)于所述的第2圖像數(shù)據(jù)G2的圖像G2a的方式生成新的顯示圖像數(shù)據(jù)。所生成的新的顯示圖像數(shù)據(jù)通過網(wǎng)絡(luò)輸出給圖像顯示裝置4。圖像顯示裝置4基于從計(jì)算機(jī)5供給的新的顯示圖像數(shù)據(jù)，將新的顯示圖像40b顯示在畫面上。
因此，通過觀察者10僅稍微移動(dòng)面部來指定注目部分的圖像，觀察者10就能夠以高分辨率觀看所指定的區(qū)域的圖像。將本發(fā)明應(yīng)用于車輛運(yùn)行中，由此，可降低觀察者10(車輛的駕駛者)的前方以及左右的影像的死角。例如，觀察者10在使車輛30左轉(zhuǎn)的情況下，必須確認(rèn)在左側(cè)并行的兩輪車B1的卷入。通常，觀察者10為了目視左邊的兩輪車B1，必須轉(zhuǎn)過臉。行進(jìn)中執(zhí)行左邊的目視，由此，存在不注意前方的情況，此外，忘記左邊的目視而變成事故原因的情況也較多。此外，存在注意左側(cè)的兩輪車B1而漏看了從右側(cè)來的汽車C1的可能性。
但是，按照本發(fā)明，在即使在朝向正面的狀態(tài)下也可目視整體的范圍內(nèi)對(duì)圖像進(jìn)行顯示的圖像顯示裝置4中，顯示包含左邊的兩輪車B1以至右邊的汽車C1的寬視野的圖像。因此，觀察者10能夠迅速并且容易地判斷十字路口周圍的狀況。為了正確地進(jìn)行狀況判斷，確認(rèn)到兩輪車B1的相對(duì)距離或者兩輪車B1的大小，需要以高分辨率顯示第2圖像數(shù)據(jù)G2。正在觀看顯示圖像G1a的觀察者10注意顯示圖像G1a中顯示的兩輪車B1的存在的情況下，只要將面部移動(dòng)20～30度(或者其以下的角度)，就能夠在行進(jìn)中觀看與執(zhí)行左邊的目視的情況相同的圖像。此外，右側(cè)的汽車C1也是低分辨率，但始終進(jìn)行顯示，因此，看漏的可能性小，在確認(rèn)兩輪車B1時(shí)能注意到它的存在。
另外，在所述說明中，對(duì)將本發(fā)明的圖像顯示系統(tǒng)應(yīng)用于在道路上行進(jìn)的汽車的情況進(jìn)行了說明，但是，這不是將應(yīng)用本發(fā)明的圖像顯示系統(tǒng)的移動(dòng)體限定為在地上行進(jìn)的車輛。例如，在水上航行的船舶等上可具有與所述圖像顯示系統(tǒng)相同的結(jié)構(gòu)。
本發(fā)明在應(yīng)用于寬區(qū)域監(jiān)視系統(tǒng)(監(jiān)視員監(jiān)視設(shè)置在多個(gè)不同場(chǎng)所的監(jiān)視攝像機(jī)的圖像的系統(tǒng))的情況下，也可發(fā)揮該效果。圖8是表示將本實(shí)施方式應(yīng)用于寬區(qū)域監(jiān)視時(shí)的結(jié)構(gòu)的概念圖。如圖8所示，該寬區(qū)域監(jiān)視系統(tǒng)由對(duì)不同地點(diǎn)進(jìn)行攝影的多個(gè)攝影裝置(2-1～2-6)、面部圖像顯示裝置3、圖像顯示裝置4、計(jì)算機(jī)5構(gòu)成。在以下的說明中，付以與如上所述的裝置相同的符號(hào)的各裝置具有與如上所述相同的結(jié)構(gòu)，省略其詳細(xì)說明。
如圖8所示，多個(gè)攝影裝置(2-1～2-6)的每一個(gè)由作為一例對(duì)六處不同的場(chǎng)所進(jìn)行攝影的六臺(tái)監(jiān)視攝像機(jī)構(gòu)成。各個(gè)攝影裝置通過網(wǎng)絡(luò)(未圖示)與計(jì)算機(jī)5連接。多個(gè)攝影裝置(2-1～2-6)生成對(duì)各個(gè)地點(diǎn)的情況進(jìn)行攝影的預(yù)定的像素的圖像數(shù)據(jù)，通過網(wǎng)絡(luò)輸出給計(jì)算機(jī)5。此外，面部圖像攝影裝置3以及圖像顯示裝置4通過該網(wǎng)絡(luò)與計(jì)算機(jī)5連接。觀察者10是對(duì)顯示在圖像顯示裝置4上的圖像進(jìn)行觀察的人物。
面部圖像攝影裝置3是對(duì)觀察者10的面部進(jìn)行攝影的面部圖像攝影裝置。面部圖像攝影裝置3通過所述網(wǎng)絡(luò)與計(jì)算機(jī)5、圖像顯示裝置4連接。由面部圖像攝影裝置3所攝影的觀察者10的面部圖像轉(zhuǎn)換為面部圖像數(shù)據(jù)輸入給計(jì)算機(jī)5。計(jì)算機(jī)5基于從面部圖像攝影裝置3供給的該面部圖像數(shù)據(jù)檢測(cè)觀察者10的面部正面點(diǎn)P，生成面部正面點(diǎn)數(shù)據(jù)。
圖9是表示將本發(fā)明應(yīng)用于寬區(qū)域監(jiān)視系統(tǒng)時(shí)的動(dòng)作的概念圖。設(shè)置在各攝影地點(diǎn)的攝影裝置(2-1～2-6)將其攝影圖像轉(zhuǎn)換為電子數(shù)據(jù)，發(fā)送給計(jì)算機(jī)5。計(jì)算機(jī)5通過網(wǎng)絡(luò)接收所發(fā)送的圖像數(shù)據(jù)，響應(yīng)該接收，啟動(dòng)基準(zhǔn)圖像數(shù)據(jù)生成程序22。計(jì)算機(jī)5通過執(zhí)行所啟動(dòng)的基準(zhǔn)圖像數(shù)據(jù)生成程序21生成基準(zhǔn)圖像數(shù)據(jù)。對(duì)從第1圖像攝影裝置2-1～2-6發(fā)送的圖像進(jìn)行低分辨率化，并且，統(tǒng)一為可在圖像顯示裝置4上顯示的一張圖像，由此，生成該基準(zhǔn)圖像數(shù)據(jù)。
此外，計(jì)算機(jī)5基于從面部圖像攝影裝置3發(fā)送的面部圖像數(shù)據(jù)生成面部姿勢(shì)數(shù)據(jù)。所生成的面部圖像數(shù)據(jù)通過執(zhí)行面部姿勢(shì)數(shù)據(jù)生成程序22而生成。計(jì)算機(jī)5使用由面部姿勢(shì)數(shù)據(jù)生成程序22檢測(cè)出的面部姿勢(shì)數(shù)據(jù)和顯示裝置數(shù)據(jù)11的畫面的位置信息，決定面部正面點(diǎn)P(位于面部的正面的畫面上的點(diǎn))的位置，作為面部正面點(diǎn)P進(jìn)行輸出。進(jìn)而，使顯示在包含面部正面點(diǎn)P的區(qū)域上的監(jiān)視攝像機(jī)圖像的分辨率提高，使其他的監(jiān)視攝像機(jī)圖像的分辨率下降，由此，生成顯示圖像數(shù)據(jù)。
對(duì)所述動(dòng)作進(jìn)行具體說明。構(gòu)成寬區(qū)域監(jiān)視系統(tǒng)的第1圖像攝影裝置2-1～第6圖像攝影裝置2-6對(duì)不同地點(diǎn)的圖像數(shù)據(jù)G1～圖像數(shù)據(jù)G6進(jìn)行攝影。所攝影的各圖像數(shù)據(jù)(G1～G6)通過網(wǎng)絡(luò)發(fā)送給計(jì)算機(jī)5。此處，設(shè)所發(fā)送的各個(gè)圖像數(shù)據(jù)的像素是360×240像素，設(shè)圖像顯示裝置4的可顯示像素尺寸為360×240像素。
計(jì)算機(jī)5執(zhí)行基準(zhǔn)圖像數(shù)據(jù)生成程序21，如圖9的顯示圖像40c所示，將第1圖像攝影裝置2-1～第6圖像攝影裝置2-6所攝影的圖像分割為五個(gè)120×80像素的區(qū)域(區(qū)域42～區(qū)域46)和一個(gè)大約是其兩倍的分辨率的240×160像素的區(qū)域(區(qū)域41)。在系統(tǒng)開始動(dòng)作的時(shí)刻(初始狀態(tài))，如顯示圖像40c所示，計(jì)算機(jī)5將區(qū)域41分配為240×160像素的區(qū)域、將區(qū)域42～區(qū)域46分配為120×80像素的區(qū)域，顯示在圖像顯示裝置4上。
在系統(tǒng)進(jìn)行動(dòng)作的情況下，計(jì)算機(jī)5使用面部圖像攝影裝置3繼續(xù)對(duì)觀察者10的面部圖像進(jìn)行攝影。計(jì)算機(jī)5執(zhí)行面部姿勢(shì)數(shù)據(jù)生成程序22，基于從面部圖像攝影裝置3發(fā)送的面部圖像數(shù)據(jù)，檢測(cè)觀察者10的面部的三維位置以及朝向。進(jìn)而，計(jì)算機(jī)5使用通過執(zhí)行面部姿勢(shì)數(shù)據(jù)生成程序22算出的面部姿勢(shì)數(shù)據(jù)、顯示裝置數(shù)據(jù)11、面部圖像攝影裝置數(shù)據(jù)12，決定面部正面點(diǎn)P(從面部的位置向面部的朝向延伸的直線與圖像顯示裝置4的畫面的交點(diǎn))，作為面部正面點(diǎn)P。
此處，計(jì)算機(jī)5判定該面部正面點(diǎn)P是否包含在區(qū)域41～區(qū)域46的哪個(gè)區(qū)域中，生成新的顯示圖像數(shù)據(jù)，以使包含面部正面點(diǎn)P的區(qū)域成為240×160像素的區(qū)域。在系統(tǒng)啟動(dòng)時(shí)刻以外，基于在進(jìn)行前次顯示后的時(shí)刻的顯示圖像數(shù)據(jù)，判別面部正面點(diǎn)P是在哪個(gè)區(qū)域。例如，面部正面點(diǎn)P在區(qū)域46的區(qū)域內(nèi)的情況下，為顯示在顯示圖像40d上，計(jì)算機(jī)5使區(qū)域46成為左下方的240×160像素的區(qū)域，生成顯示圖像數(shù)據(jù)。在該顯示圖像數(shù)據(jù)中，使區(qū)域41～區(qū)域45為120×80像素的區(qū)域。即，在圖像顯示裝置4中顯示的監(jiān)視對(duì)象圖像將圖像數(shù)據(jù)G1～圖像數(shù)據(jù)G6分別變更為區(qū)域41～區(qū)域46的分辨率，對(duì)顯示圖像數(shù)據(jù)進(jìn)行顯示。
雖然在上述的例子中，使分辨率的放大量為以兩倍恒定，但是，這可以通過變更布局設(shè)計(jì)數(shù)據(jù)14的設(shè)定來任意地變更。特別是，通過進(jìn)行在面部的位置接近顯示器的情況下增大、在遠(yuǎn)離時(shí)減小等的處理，收看者就能夠按照需要來改變分辨率的變化量。
這樣，通過將本發(fā)明應(yīng)用到寬范圍監(jiān)視系統(tǒng)中，監(jiān)視員能夠始終一次對(duì)多個(gè)地點(diǎn)進(jìn)行監(jiān)視，并且，能夠?qū)︼@示可能發(fā)生異常的地點(diǎn)的圖像進(jìn)行放大顯示，以追蹤視線。通過本發(fā)明，觀察者10即使不進(jìn)行開關(guān)操作等，而只稍稍移動(dòng)面部，就能夠以高分辨率顯示對(duì)象區(qū)域并進(jìn)行確認(rèn)，所以，在產(chǎn)生異常時(shí)能夠迅速地加以應(yīng)對(duì)。此外，通過本發(fā)明，觀察者10不安裝特別的裝置就能夠執(zhí)行寬范圍監(jiān)視。
權(quán)利要求
1.一種圖像顯示系統(tǒng)，其中，具備圖像顯示裝置；圖像生成裝置，生成在所述圖像顯示裝置中顯示的顯示圖像的顯示圖像數(shù)據(jù)，所述顯示圖像具有多個(gè)區(qū)域；面部圖像攝影裝置，對(duì)觀看所述顯示圖像的人的面部圖像進(jìn)行攝影；以及面部正面點(diǎn)檢測(cè)裝置，根據(jù)所述面部圖像生成面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)，檢測(cè)所述顯示圖像上的作為位于所述人的面部的正面的點(diǎn)的面部正面點(diǎn)，所述圖像生成裝置根據(jù)所述多個(gè)區(qū)域指定與所述面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與所述指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成所述顯示圖像數(shù)據(jù)。
2.如權(quán)利要求1記載的圖像顯示系統(tǒng)，其中所述面部正面點(diǎn)檢測(cè)裝置對(duì)新的面部正面點(diǎn)進(jìn)行檢測(cè)，所述圖像生成裝置在所述新的面部正面點(diǎn)從所述指定區(qū)域轉(zhuǎn)移時(shí)，指定新的區(qū)域，使與所述新的區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成新的顯示圖像數(shù)據(jù)。
3.如權(quán)利要求1或2記載的圖像顯示系統(tǒng)，其中所述圖像生成裝置通過使在所述圖像顯示裝置中顯示時(shí)的圖像的顯示尺寸相對(duì)地增大，從而進(jìn)行圖像所提供的信息量的增加。
4.如權(quán)利要求1至3任意一項(xiàng)記載的圖像顯示系統(tǒng)，其中所述圖像生成裝置通過使在所述圖像顯示裝置中顯示時(shí)的圖像的分辨率相對(duì)地提高，從而進(jìn)行圖像所提供的信息量的增加。
5.如權(quán)利要求1至4任意一項(xiàng)記載的圖像顯示系統(tǒng)，其中所述圖像生成裝置使利用寬范圍攝影裝置攝影的寬范圍圖像構(gòu)成為所述顯示圖像，該寬范圍攝影裝置對(duì)超過所述人的視野范圍的范圍的圖像進(jìn)行攝影，所述圖像顯示裝置將由所述寬范圍圖像構(gòu)成的所述顯示圖像數(shù)據(jù)顯示成與所述多個(gè)區(qū)域相對(duì)應(yīng)地進(jìn)入所述人的視野范圍內(nèi)。
6.如權(quán)利要求5記載的圖像顯示系統(tǒng)，其中所述圖像生成裝置將由作為所述寬范圍攝影裝置的多個(gè)攝影裝置攝影的多個(gè)圖像合成為所述顯示圖像，所述圖像顯示裝置以進(jìn)入所述人的視野范圍內(nèi)的方式，與所述多個(gè)區(qū)域相對(duì)應(yīng)地對(duì)所述顯示圖像數(shù)據(jù)進(jìn)行顯示。
7.如權(quán)利要求1至6的任何一項(xiàng)記載的圖像顯示系統(tǒng)，其中所述圖像生成裝置具有信息存儲(chǔ)部，所述信息存儲(chǔ)部存儲(chǔ)表示所述圖像顯示裝置的信息的顯示裝置數(shù)據(jù)和表示所述面部圖像攝影裝置的信息的面部圖像攝影裝置數(shù)據(jù)，所述面部正面點(diǎn)檢測(cè)裝置基于所述面部圖像執(zhí)行三維圖像處理，生成所述面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)、所述顯示裝置數(shù)據(jù)以及所述面部圖像攝影裝置數(shù)據(jù)，對(duì)所述面部正面點(diǎn)進(jìn)行檢測(cè)。
8.一種圖像顯示方法，具備如下步驟(a)生成在圖像顯示裝置中顯示的顯示圖像的顯示圖像數(shù)據(jù)，所述顯示圖像具有多個(gè)區(qū)域；(b)對(duì)觀看所述顯示圖像的人的面部圖像進(jìn)行攝影；(c)根據(jù)所述面部圖像生成面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)檢測(cè)所述顯示圖像上的位于所述人的面部的正面的點(diǎn)作為所述人的面部正面點(diǎn)；(d)根據(jù)所述多個(gè)區(qū)域指定與所述面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與所述指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成所述顯示圖像數(shù)據(jù)；以及(e)利用所述圖像顯示裝置顯示所述顯示圖像數(shù)據(jù)。
9.如權(quán)利要求8記載的圖像顯示方法，其中，還具備如下步驟(f)對(duì)新的面部正面點(diǎn)進(jìn)行檢測(cè)；以及(g)在所述新的面部正面點(diǎn)從所述指定區(qū)域轉(zhuǎn)移的情況下，指定新的指定區(qū)域，使與所述新的指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成新的顯示圖像數(shù)據(jù)。
10.如權(quán)利要求8或9記載的圖像顯示方法，其中通過使在所述圖像顯示裝置中顯示時(shí)的圖像的顯示尺寸相對(duì)地增大，從而進(jìn)行圖像所提供的信息量的增加。
11.如權(quán)利要求8至10任意一項(xiàng)記載的圖像顯示方法，其中通過使在所述圖像顯示裝置中顯示時(shí)的圖像的分辨率相對(duì)地提高，從而進(jìn)行圖像所提供的信息量的增加。
12.如權(quán)利要求8至11任意一項(xiàng)記載的圖像顯示方法，其中所述(a)步驟具備(a1)步驟，其中使利用寬范圍攝影裝置攝影的寬范圍圖像構(gòu)成為所述顯示圖像，該寬范圍攝影裝置對(duì)超過所述人的視野范圍的范圍的圖像進(jìn)行攝影，所述(e)步驟具備(e1)步驟，其中將由所述寬范圍圖像構(gòu)成的所述顯示圖像數(shù)據(jù)顯示成與所述多個(gè)區(qū)域相對(duì)應(yīng)地進(jìn)入所述人的視野范圍內(nèi)。
13.如權(quán)利要求12記載的圖像顯示方法，其中所述(a1)步驟具備(a11)步驟，其中將由作為所述寬范圍攝影裝置的多個(gè)攝影裝置攝影的多個(gè)圖像合成為所述顯示圖像，所述多個(gè)區(qū)域的每一個(gè)對(duì)應(yīng)于所述多個(gè)圖像的每一個(gè)，所述(e1)步驟具備(e11)步驟，其中以進(jìn)入所述人的視野范圍內(nèi)的方式，與所述多個(gè)區(qū)域相對(duì)應(yīng)地對(duì)所述顯示圖像數(shù)據(jù)進(jìn)行顯示。
14.如權(quán)利要求8至13的任意一項(xiàng)記載的圖像顯示方法，其中所述(c)步驟具備如下步驟(c1)讀出表示所述圖像顯示裝置的信息的顯示裝置數(shù)據(jù)和表示對(duì)所述面部圖像進(jìn)行攝影的面部圖像攝影裝置的信息的面部圖像攝影裝置數(shù)據(jù)；以及(c2)基于所述面部圖像執(zhí)行三維圖像處理，生成所述面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)、所述顯示裝置數(shù)據(jù)以及所述面部圖像攝影裝置數(shù)據(jù)，檢測(cè)所述面部正面點(diǎn)。
15.一種可由計(jì)算機(jī)執(zhí)行具備如下步驟的方法的程序，該步驟為(h)生成在圖像顯示裝置中顯示的顯示圖像的顯示圖像數(shù)據(jù)，所述顯示圖像具有多個(gè)區(qū)域；(i)根據(jù)觀看所述顯示圖像的人的面部圖像生成面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)，對(duì)所述顯示圖像上的位于所述人的面部的正面的點(diǎn)進(jìn)行檢測(cè)，作為所述人的面部正面點(diǎn)；(j)根據(jù)所述多個(gè)區(qū)域指定與所述面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與所述指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成所述顯示圖像數(shù)據(jù)；以及(k)將所述顯示圖像數(shù)據(jù)向所述圖像顯示裝置輸出。
16.如權(quán)利要求15記載的程序，其中，還具備如下步驟(l)對(duì)新的面部正面點(diǎn)進(jìn)行檢測(cè)；以及(m)在所述新的面部正面點(diǎn)從所述指定區(qū)域轉(zhuǎn)移的情況下，指定新的指定區(qū)域，使與所述新的指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成新的顯示圖像數(shù)據(jù)。
17.如權(quán)利要求15或16記載的程序，其中通過使在所述圖像顯示裝置中顯示時(shí)的圖像的顯示尺寸相對(duì)地增大，從而進(jìn)行圖像所提供的信息量的增加。
18.如權(quán)利要求15至17任意一項(xiàng)記載的程序，其中通過使在所述圖像顯示裝置中顯示時(shí)的圖像的分辨率相對(duì)地提高，從而進(jìn)行圖像所提供的信息量的增加。
19.如權(quán)利要求15至18任意一項(xiàng)記載的程序，其中所述(h)步驟具備(h1)步驟，其中使利用寬范圍攝影裝置攝影的寬范圍圖像構(gòu)成為所述顯示圖像，該寬范圍攝影裝置對(duì)超過所述人的視野范圍的范圍的圖像進(jìn)行攝影，所述(k)步驟具備(k1)步驟，其中以將由所述寬范圍圖像構(gòu)成的所述顯示圖像數(shù)據(jù)顯示成與所述多個(gè)區(qū)域相對(duì)應(yīng)地進(jìn)入所述人的視野范圍內(nèi)的方式，將所述顯示圖像數(shù)據(jù)向所述圖像顯示裝置輸出。
20.如權(quán)利要求19記載的程序，其中所述(h1)步驟具備(h11)步驟，其中將由作為所述寬范圍攝影裝置的多個(gè)攝影裝置攝影的多個(gè)圖像合成為所述顯示圖像，所述多個(gè)區(qū)域的每一個(gè)對(duì)應(yīng)于所述多個(gè)圖像的每一個(gè)，所述(k1)步驟具備(k11)步驟，其中以進(jìn)入所述人的視野的范圍內(nèi)、與所述多個(gè)區(qū)域相對(duì)應(yīng)地對(duì)所述顯示圖像數(shù)據(jù)進(jìn)行顯示的方式，將所述顯示圖像數(shù)據(jù)向所述圖像顯示裝置輸出。
21.如權(quán)利要求15至20的任意一項(xiàng)記載的程序，其中所述(i)步驟具備如下步驟(i1)讀出表示所述圖像顯示裝置的信息的顯示裝置數(shù)據(jù)和表示對(duì)所述面部圖像進(jìn)行攝影的面部圖像攝影裝置的信息的面部圖像攝影裝置數(shù)據(jù)；以及(i2)基于所述面部圖像執(zhí)行三維圖像處理，生成所述面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)、所述顯示裝置數(shù)據(jù)以及所述面部圖像攝影裝置數(shù)據(jù)，檢測(cè)所述面部正面點(diǎn)。
全文摘要
本發(fā)明構(gòu)成一種圖像顯示系統(tǒng)，其具備圖像顯示裝置(4)；圖像生成裝置(5)，生成在所述圖像顯示裝置(4)中顯示的顯示圖像的顯示圖像數(shù)據(jù)；面部圖像攝影裝置(3)，對(duì)觀看所述顯示圖像的人的面部圖像進(jìn)行攝影；面部正面點(diǎn)檢測(cè)裝置，根據(jù)所述面部圖像生成面部圖像數(shù)據(jù)，基于所述面部圖像數(shù)據(jù)，檢測(cè)與所述顯示圖像相對(duì)應(yīng)的所述人的面部正面點(diǎn)。此處，上述顯示圖像數(shù)據(jù)是顯示圖像具有多個(gè)區(qū)域的數(shù)據(jù)。而且，所述圖像生成裝置(5)根據(jù)所述多個(gè)區(qū)域指定與所述面部正面點(diǎn)相對(duì)應(yīng)的指定區(qū)域，使與所述指定區(qū)域相對(duì)應(yīng)的圖像所提供的信息量增加，生成所述顯示圖像數(shù)據(jù)。
文檔編號(hào)H04N7/18GK1969313SQ20058002007
公開日2007年5月23日 申請(qǐng)日期2005年6月8日 優(yōu)先權(quán)日2004年6月18日
發(fā)明者石山塁 申請(qǐng)人:日本電氣株式會(huì)社