專利名稱:成像顯示設(shè)備和方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種在用戶的視場方向是對象方向的情況下可顯示 由成像部分捕獲的圖像的成像顯示設(shè)備和方法。
背景技術(shù):
對于借助于布置在用戶眼睛緊前面的顯示部分,例如眼鏡型或頭 佩戴型單元,的圖像顯示已經(jīng)提出了各種類型的設(shè)備。作為例子,參 考JP-A-8-126031 (專利文件l) 、 JP-A-9-27970 (專利文件2)、及 JP-A-9國185009 (專利文件3)。也提出的是一種借助于附加到眼鏡型或頭佩戴型單元上的小尺 寸照相機捕獲在用戶視場方向上視像的設(shè)備。作為例子,參考 JP誦A-2005畫172851 (專利文件4)。發(fā)明內(nèi)容然而,這樣的以前裝置還未向用戶提供包括在他或她的視場方向 上的視圖的各種類型的圖像。因而希望的是,提供一種可向用戶提供包括在他或她的視場方向 上的視圖的各種類型圖像、使得能夠增強用戶的目視能力、及向用戶 供給可用性和享受的成,顯示設(shè)備。根據(jù)本發(fā)明的實施例,提供有一種成像顯示設(shè)備,該設(shè)備包括
顯示裝置,用于圖像顯示;第一圖像信號產(chǎn)生裝置,用來在用戶視場 方向是對象方向的情況下,基于由成像部分捕獲的捕獲圖像信號而產(chǎn) 生顯示圖像信號;第二圖像信號產(chǎn)生裝置,用來產(chǎn)生與由第一圖像信 號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號; 及控制裝置,用來在顯示裝置上同時允許由第一圖像信號產(chǎn)生裝置產(chǎn) 生的顯示圖像信號的圖像的顯示和由第二圖像信號產(chǎn)生裝置產(chǎn)生的 顯示圖像信號的圖像的顯示。顯示裝置布置在用戶眼睛的前面用于圖像顯示。可選擇地,顯示裝置形成在與其中包括第一圖像信號產(chǎn)生裝置的 底盤不同的底盤中。第一圖像信號產(chǎn)生裝置包括成像部分;和信號處理部分,它對 于由成像部分捕獲的捕獲圖像信號進行信號處理。成像部分構(gòu)造成包括CCD(電荷耦合器件)傳感器或CMOS(互 補型金屬氧化物半導(dǎo)體)傳感器,作為成像元件。第二圖像信號產(chǎn)生裝置基于由成像部分捕獲的捕獲圖像信號產(chǎn) 生要供給到顯示裝置的顯示圖像信號。在這種情況下,第二圖像信號產(chǎn)生裝置包括成像部分;和信號 處理部分,它對于由成像部分捕獲的捕獲圖像信號進行信號處理。成像部分在是用戶枧場方向的對象方向上捕獲視野的圖像??蛇x擇地,成像部分在不是用戶視場方向的對象方向上捕獲視野 的圖像。成像部分在是可變的對象方向上捕獲視野的圖像。 成像部分構(gòu)造成包括CCD傳感器或CMOS傳感器,作為成像元件。第二圖像信號產(chǎn)生裝置通過由成像部分對于成像透鏡系統(tǒng)實行 的操作控制,產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的 圖像不同的圖像的顯示圖像信號。第二圖像信號產(chǎn)生裝置通過在信號處理部分中的信號處理,產(chǎn)生 與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像
的顯示圖像信號。第二圖像信號產(chǎn)生裝置包括從外部裝置接收圖像信號的接收部分,并且基于由接收部分接收的圖像信號,產(chǎn)生與由第一圖像信號產(chǎn) 生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號。第二圖像信號產(chǎn)生裝置包括再現(xiàn)來自記錄介質(zhì)的圖像信號的再 現(xiàn)部分,并且基于由再現(xiàn)部分再現(xiàn)的圖像信號,產(chǎn)生與由第一圖像信 號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號。顯示裝置在屏幕區(qū)域中設(shè)置有主屏幕區(qū)域和次屏幕區(qū)域,并且在 主屏幕區(qū)域或次屏幕區(qū)域中,通過由第一圖像信號產(chǎn)生裝置提供的顯 示圖像信號進行圖像顯示,并且在剩余屏幕區(qū)域上,通過由第二圖像 信號產(chǎn)生裝置提供的顯示圖像信號進行圖像顯示。在顯示裝置中,屏幕區(qū)域分成兩個區(qū)域,并且在兩個區(qū)域之一中, 通過由第一圖像信號產(chǎn)生裝置提供的顯示圖像信號進行圖像顯示,并 且在剩余區(qū)域中,通過由第二圖像信號產(chǎn)生裝置提供的顯示圖像信號 進行圖像顯示。由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通 過近距離成像或遠(yuǎn)距離成像捕獲的圖像信號。由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通 過遠(yuǎn)攝成像或廣角成像捕獲的圖像信號。由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通 過按比例擴大處理或按比例縮小處理捕獲的圖像信號。由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是借 助于成像靈敏度增加或減小捕獲的圖像信號。由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像倌號之一是借 助于紅外線成像靈敏度增加捕獲的圖像信號。由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是借助于紫外線成像靈敏度增加捕獲的圖像信號。由笫一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是在 是對象方向的用戶視場方向上捕獲的圖像信號。
由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是在 作為對象方向的、與用戶視場方向不同的方向上捕獲的圖像信號。根據(jù)本發(fā)明的實施例,提供有一種成像顯示方法,該方法包括 第一圖像信號產(chǎn)生步驟,在用戶視場方向是對象方向的情況下,基于 由成像部分捕獲的捕獲圖像信號而產(chǎn)生顯示圖像信號;第二圖像信號 產(chǎn)生步驟,產(chǎn)生是與在第一圖像信號產(chǎn)生步驟中產(chǎn)生的顯示圖像信號 的圖像不同的圖像的顯示圖像信號;及顯示步驟,同時允許在第一圖 像信號產(chǎn)生步驟中產(chǎn)生的顯示圖像信號的圖像的顯示和在第二圖像 信號產(chǎn)生步驟中產(chǎn)生的顯示圖像信號的圖像的顯示。根據(jù)本發(fā)明的實施例,如以上描述的那樣,當(dāng)用戶佩戴上是例如 眼鏡型或頭佩戴型的本發(fā)明實施例的成像顯示設(shè)備時,成像部分準(zhǔn)備 用來捕獲在用戶視場方向上的視野的圖像。像這樣由成像部件捕獲的 生成圖像,即是在用戶視場方向上的由第一圖像信號產(chǎn)生裝置導(dǎo)出的 視野的圖像的顯示圖像信號,供給到顯示裝置以便在其上顯示。在像 這樣顯示的同時,由第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號也被 顯示,例如,多個圖像可以借助于屏幕分開、畫中畫顯示、及其它一 次全都顯示。由第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像與由第一 圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同。這些圖像的差別 可以由成像方向的差別可變地生成,或者即使對于相同的成像方向, 也由變焦、焦點位置、靈敏度、信號處理、及其它的差別生成,或者 第二圖像信號產(chǎn)生裝置的圖像可以從任何其它設(shè)備提供或從例如記 錄介質(zhì)再現(xiàn)。第一圖像信號產(chǎn)生裝置的顯示閨像信號顯示通常在用戶前面展 開的視野的圖像,并且第二圖像信號產(chǎn)生裝置的顯示圖像信號顯示借 助于任何通常意義的視力通常不能得到的任何圖像。像這樣,可增強 用戶的目視能力,并且可供給感興趣的顯示。這里注意,第一和第二圖像信號產(chǎn)生裝置每個用作用于顯示的顯 示圖像信號源。第一和第二的表述不是限制性地意味著提供圖像信號
產(chǎn)生裝置的兩個,并且這當(dāng)然不妨礙提供三個或更多個圖像信號產(chǎn)生 裝置。根據(jù)本發(fā)明的實施例,在顯示裝置上,第一圖像信號產(chǎn)生裝置的 顯示圖像信號顯示通常在用戶前面展開的視野的圖像,并且第二圖像 信號產(chǎn)生裝置的顯示圖像信號顯示借助于任何通常意義的視力通常 不能得到的任何圖像,從而可增強用戶的目視能力,并且可供給感興 趣的顯示。
圖1A和1B每個是表示本發(fā)明典型實施例的成像顯示設(shè)備的典 型外部視圖的圖;圖2A和2B每個是表示實施例的成像顯示設(shè)備的另一個典型外 部視圖的圖;圖3是表示實施例的成像顯示設(shè)備的又一個典型外部視圖的圖; 圖4是方塊圖,表示實施例的成像顯示設(shè)備; 圖5是另一個方塊圖,表示實施例的成像顯示設(shè)備; 圖6A至6C每個是表示在實施例的成像顯示設(shè)備與外部裝置之間的關(guān)系的圖;圖7是又一個方塊圖,表示實施例的成像顯示設(shè)備; 圖8是又一個方塊圖,表示實施例的成像顯示設(shè)備; 圖9A至9F每個是表示在實施例中的顯示部分的區(qū)域構(gòu)造的圖; 圖IOA至IOC每個是表示在實施例中的顯示部分的另一種區(qū)域構(gòu)造的圖;圖ll是實施例的控制過程的流程圖;圖12A至12C每個是表示實施例的圖像顯示狀態(tài)的圖;圖13A至13C每個是表示實施例的另一種圖像顯示狀態(tài)的圖;圖14A至14C每個是表示實施例的又一種圖像顯示狀態(tài)的圖;圖15A至15C每個是表示實施例的又一種圖像顯示狀態(tài)的圖;圖16A至16C每個是表示實施例的又一種圖像顯示狀態(tài)的及圖17A至17C每個是表示實施例的又一種圖像顯示狀態(tài)的圖。
具體實施方式
在下面,按如下順序描述的是在本發(fā)明實現(xiàn)例中的成像顯示設(shè)備 和方法1. 成像顯示設(shè)備的典型外部視圖和與外部裝置的關(guān)系2. 成像顯示設(shè)備的典型構(gòu)造3. 在屏幕上的區(qū)域構(gòu)造4. 典型顯示操作5. 典型操作觸發(fā)6. 實施例、典型例子、及增強例子的效果。 增強例子l.成像顯示設(shè)備的典型外部視圖和與外部裝置的關(guān)系作為本發(fā)明的實施例,圖1A和1B每個是表示成像顯示設(shè)備1 的典型外部視圖的圖,該成像顯示設(shè)備是眼鏡型顯示照相機。成像顯 示設(shè)備1如圖1B中所示典型地包括框架構(gòu)造的可佩戴單元,即跨過 頭從其側(cè)面到后部半路延伸??膳宕鲉卧鐖D1A中所示放置在用戶 的耳朵上,從而用戶可佩戴成像顯示設(shè)備l。成像顯示設(shè)備1構(gòu)造成,當(dāng)用戶佩戴設(shè)備時, 一對顯示部分2 和2定位在用戶眼睛的緊前面,即在該處定位一幅普通眼鏡的鏡片。 顯示部分2分別為左右眼而提供,并且每個例如是液晶面板。這里注 意,當(dāng)由顯示部分2不進行圖像顯示時,液晶面板可以根據(jù)透射率控 制,并且可以放置在通透狀態(tài)下,即,使得是透明或半透明的。成像顯示設(shè)備1設(shè)有兩個成像透鏡3a和3a,當(dāng)用戶佩戴設(shè)備1 時該成像透鏡3a和3a向用戶的前面方向布置,即兩個成像透鏡3a 和3a都附加成,佩戴成像顯示設(shè)備1的用戶的視場方向(向前)是 對象的方向。成像顯示設(shè)備1設(shè)有照明通過成像透鏡3a和3a成像的方向的發(fā)
光部分4a和4a。發(fā)光部分4a和4a每個例如由LED (發(fā)光二極管) 形成。盡管以后通過參考圖4將給出詳細(xì)描述,但成像透鏡3a和3a 分別包括在成像功能元件(Cl和C2 )中。成像透鏡3a和3a每個提 供是成像結(jié)果的捕獲圖像信號。捕獲圖像信號都經(jīng)受任何預(yù)定處理, 并且生成顯示圖像信號顯示在顯示部分2上。圖1A和1B的構(gòu)造僅僅是例子,并且各種其它構(gòu)造對于成像顯 示設(shè)備l是可能的,以使它適于用戶佩戴。成像顯示設(shè)備l可以形成 有一般為眼鏡或頭佩戴型的可佩戴單元,并且在實施例中,可以在用 戶眼睛前面的附近至少設(shè)有顯示部分2。顯示部分2不必成對地對于 眼睛的每一只而提供,并且可選擇地,可以只為眼睛的一只提供。在可能構(gòu)造中,可以不提供發(fā)光部分4a。在圖1A和1B的構(gòu)造中,成像透鏡3a和3a附加成,用戶的前 面是對象的方向。可選擇地,兩個成像透鏡3a和3a可以附加成,在 與對象的方向不同的每個方向上捕獲視野的圖像。圖2A和2B表示例子。在圖2A和2B的例子中,對于在前面的 成像,提供一個成像透鏡3a和一個發(fā)光部分4a,并且對于位于頭后 側(cè)上的單元,提供另一個成像透鏡3a和另一個發(fā)光部分4a。借助于 這樣一種構(gòu)造,這兩個成像透鏡3a和3a的一個負(fù)責(zé)在用戶視場方向 上的成#>,并且剩余的成像透鏡3a負(fù)責(zé)在與用戶視場方向不同的方 向上,即在這種情況下,在用戶的背后方向上,的成像。在這個實施例中,至少一個成像透鏡3a假定為負(fù)責(zé)在用戶視場 方向上的成像。當(dāng)剩余的成像透鏡3a布置成負(fù)責(zé)在與用戶視場方向 不同的方向上的成像時,對象的方向不必是用戶的背后方向,并且可 以例如是向上、向左、向右、或向下方向。可選擇地,可以提供成像透鏡3a的三個或更多個,并且這些可 以定向在相同的方向上或在每個不同的方向上。在圖1A至2B的典型構(gòu)造中,固定地提供成像透鏡3a和3a, 并且因而固定在成像期間的對象的方向,即在用戶的前面和/或背后。 可選擇地,成像透鏡3a可以經(jīng)可改變對象方向的可動機構(gòu)提供,從 而在成像期間的對象方向可以手動或自動地改變。成像透鏡3a可以是各種類型的,例如完全固定型或可動型、或 部分可動型。圖1A至2B表示其中用于成像的部分與用來監(jiān)視任何捕獲圖像 的顯示部分2形成為一件的成像顯示設(shè)備1。圖3表示其中分離地提 供顯示部分2的成像顯示設(shè)備l的另一種可能構(gòu)造。在圖3的成像顯示設(shè)備1中,分離地提供成像單元部分40和顯 示單元部分30。成像單元部分40由任何預(yù)定可佩戴單元附加到用戶的頭部上。 成像單元部分40設(shè)有成像透鏡3a,當(dāng)用戶佩戴成像顯示設(shè)備1時, 該成像透鏡3a向前指向以便在是對象方向的用戶視場方向上成像。成像單元部分40設(shè)有照明通過成像透鏡3a成像的方向的發(fā)光部 分4a。發(fā)光部分4a例如由LED形成。借助于這樣一種構(gòu)造,盡管細(xì)節(jié)留下以后描述,但成像單元部分 40在其中攜帶用來把任何捕獲圖像的數(shù)據(jù)轉(zhuǎn)送到分離提供的顯示單 元部分30的通信部分。顯示單元部分30假定是用戶可攜帶的,具有輕重量和小尺寸。顯示單元部分30在其中設(shè)有用于與成像單元部分40數(shù)據(jù)通信的 通信部分,并且被操作以在顯示屏幕31上顯示由成像單元部分40提 供的圖像數(shù)據(jù)。用戶可以使用這樣一種成像顯示設(shè)備l,在該成像顯示設(shè)備l中 彼此分離地提供成像單;^部分40和顯示單元部分30。 2.成像顯示設(shè)備的典型構(gòu)造通過參考圖4至8,下面描述的是成像顯示設(shè)備l的典型內(nèi)部構(gòu)造。首先,圖4表示與以上描述的圖1A至2B相對應(yīng)的典型構(gòu)造, 即包括成像功能元件的兩個。系統(tǒng)控制器10由包括CPU (中央處理單元)、ROM (只讀存
儲器)、RAM(隨機存取存儲器)、非易失存儲器部分、及接口部分 的微型計算機構(gòu)造。系統(tǒng)控制器10用作對于成像顯示設(shè)備1作為整 體實行控制的控制部分。這個系統(tǒng)控制器10基于任何內(nèi)部操作程序和來自操作觸發(fā)信息 產(chǎn)生部分16的操作觸發(fā)對于在成像顯示設(shè)備1中的元件實行控制。 系統(tǒng)控制器10然后使顯示部分2在其上進行任何預(yù)定圖像顯示。在成像顯示設(shè)備l中,作為第一成像功能元件C1,提供的是成 像部分3、成像控制部分ll、及成像信號處理部分15。在成像功能元件C1中的成像部分3設(shè)有圖1A和1B或圖2A和 2B的成像透鏡3a、透鏡系統(tǒng)、驅(qū)動系統(tǒng)、固態(tài)成像元件陣列、及其 它。透鏡系統(tǒng)構(gòu)造成包括孔徑、變焦透鏡、聚焦透鏡、及其它。驅(qū)動 系統(tǒng)對于透鏡系統(tǒng)實行控制以完成聚焦操作和變焦操作。固態(tài)成像元 件陣列檢測由透鏡系統(tǒng)導(dǎo)出的成像光,并且通過光電轉(zhuǎn)換產(chǎn)生成像信 號。固態(tài)成像元件陣列由CCD (電荷耦合器件)傳感器、和CMOS (互補型金屬氧化物半導(dǎo)體)傳感器陣列舉例說明。在圖1和2的例子中,在成像功能元件C1中的成像部分3捕獲 在用戶前面的視野的圖像。成像信號處理部分15構(gòu)造成包括樣本保持/AGC (自動增益控 制)電路或視頻A/D (模-數(shù))轉(zhuǎn)換器,并且導(dǎo)出是數(shù)字?jǐn)?shù)據(jù)的成像信 號。樣本保持/AGC電路對于由在成像部分3中的固態(tài)成像元件導(dǎo)出 的信號進行增益調(diào)節(jié)和波形成形。成像信號處理部分15對于成像信 號進行白色平衡、亮度、顏色信號、照相機晃動校正、及其它的處理。成像信號處理部分15假定為也用作所謂的視頻處理器,并且是 用來處理成像信號的部分以實現(xiàn)各種類型的顯示。成像信號處理部分15例如對于成像信號能夠進行強度級、對比 度、及清晰度(邊緣增強)、顏色的校正、及其它的調(diào)節(jié)。成像信號 處理部分15也能夠產(chǎn)生是部分按比例擴大或縮小成像信號的結(jié)果、 和包括鑲嵌、強度轉(zhuǎn)化、軟聚焦、部分高亮顯示、及全部色調(diào)變化的 圖像效果的按比例擴大或按比例縮小圖像。成像信號處理部分15也 能夠處理產(chǎn)生字符圖像和概念圖像,合成對于任何捕獲圖像的產(chǎn)生圖 像,及其它。就是說,成像信號處理部分15對于是成像信號的數(shù)字視頻信號 可完成各種類型的處理。成像控制部分11對于成像部分3和成像信號處理部分15在操作 方面可實行控制,即對于成像功能元件Cl的成像操作的控制。這樣 的控制基于來自系統(tǒng)控制器10的命令實行。例如,成像控制部分ll 對于成像部分3和成像信號處理部分15的操作的通(ON)/斷(OFF ) 實行控制。成像控制部分11假定對成像部分3實行控制,即電機控 制,以完成自動聚焦、自動膝光調(diào)節(jié)、孔徑調(diào)節(jié)、變焦、焦點變化、 及其它的操作。如在上文中描述的那樣,當(dāng)成像顯示設(shè)備1設(shè)有可通過成像透鏡 3a使對象的方向運動的可動機構(gòu)時,成像控制部分11基于來自系統(tǒng) 控制器10的命令在操作方面對可動機構(gòu)進行控制,從而成像透鏡3a 的方向在成像部分3中被改變。成像控制部分11設(shè)有定時發(fā)生器,并且使用由定時發(fā)生器產(chǎn)生 的定時信號,在信號處理操作方面對固態(tài)成像元件和在成像控制部分 11中的元件,即,樣本-保持/AGC電路和A/D轉(zhuǎn)換器,進行控制。 通過這樣的定時控制,成像幀速率也可控制成可變的。成像控制部分11在成像靈敏度和信號處理方面對固態(tài)成像元件 和成像信號處理部分15實行控制。成像靈敏度控制包括例如對于待 從固態(tài)成像元件讀取的信號的增益控制、黑色電平設(shè)置控制、在還是 數(shù)字?jǐn)?shù)據(jù)的成像信號的處理期間的變化系數(shù)控制、及在照相機晃動校 正處理期間的校正量控制。成像靈敏度可以經(jīng)受任何整體靈敏度調(diào)節(jié) 而沒有對于波長帶的特定考慮,或?qū)τ谟脕碚{(diào)節(jié)諸如紅外線區(qū)域或紫 外線區(qū)域之類的任何特定波長帶的成像靈敏度的任何靈敏度調(diào)節(jié),例 如截止任何特定波長帶的成像。在考慮到波長的靈敏度調(diào)節(jié)通過在成 像透鏡系統(tǒng)中的波長濾波器的插入、和通過對于成像信號的波長濾波 器計算處理是可能的。在這些情況下,成像控制部分11例如通過對
于波長濾波器的插入控制、或通過規(guī)定濾波器計算系數(shù)可實行靈敏度 控制。成像控制部分11也基于來自系統(tǒng)控制器10的命令在圖像處理操 作方面對成像信號處理部分15實行控制。就是說,成像控制部分ll 使成像信號處理部分15完成上述各種類型的處理。成像顯示設(shè)備1也設(shè)有成像部分3、成像控制部分11、及成像信 號處理部分15的另一種集合,作為第二成像功能元件C2。在第二成像功能元件C2中的元件,即成像部分3、成像控制部 分11、及成像信號處理部分15,與在第一成像功能元件Cl中的元件, 即成像部分3、成像控制部分ll、及成像信號處理部分15,基本上相 同。在第二成像功能元件C2中的成像部分3設(shè)有圖1A和1B或圖2A和2B的成^^象透鏡3a、透鏡系統(tǒng)、驅(qū)動系統(tǒng)、固態(tài)成像元件陣列、及其它的之一。透鏡系統(tǒng)構(gòu)造成包括孔徑、變焦透鏡、聚焦透鏡、及其它。驅(qū)動系統(tǒng)對于透鏡系統(tǒng)實行控制以完成聚焦操作和變焦操作。固態(tài)成像元件陣列檢測在透鏡系統(tǒng)中導(dǎo)出的成像光,并且通過光電轉(zhuǎn)換產(chǎn)生成像信號。固態(tài)成像元件陣列由CCD傳感器、和CMOS傳感 器陣列舉例說明。在圖1A和1B的例子中,類似于成像功能元件C1,在第二成像 功能元件C2中的成像部分3捕獲在用戶前面的視野的圖像。另一個 方面,在圖2A和2B的例子中,第二成像功能元件C2的成像部分3 捕獲在與用于成像功能元件Cl的方向不同的方向上的視野,例如在 用戶背后方向上的視野,的圖像。成像功能元件C2的成像信號處理部分15也構(gòu)造成包括樣本保 持/AGC (自動增益控制)電路或視頻A/D轉(zhuǎn)換器,并且導(dǎo)出是數(shù)字 數(shù)據(jù)的成像信號。樣本保持/AGC電路對于由在成像部分3中的固態(tài) 成像元件導(dǎo)出的信號進行增益調(diào)節(jié)和波形成形。成像信號處理部分15 對于成像信號進行白色平衡、強度、顏色信號、照相機晃動校正、及 其它的處理。成像信號處理部分15假定為也用作所謂的視頻處理器,
并且是用來處理成像信號的部分以實現(xiàn)各種類型的顯示。成像信號處理部分15例如對于成像信號能夠進行強度級、對比度、及清晰度(邊 緣增強)、顏色的校正、及其它的調(diào)節(jié)。成像信號處理部分15也能 夠產(chǎn)生是部分按比例擴大或縮小成像信號的結(jié)果、和包括鑲嵌、強度 轉(zhuǎn)化、軟聚焦、部分高亮顯示、及全部色調(diào)變化的圖像效果的按比例 擴大或按比例縮小圖像。成像信號處理部分15也能夠處理產(chǎn)生字符 圖像和概念圖像,合成對于任何捕獲圖像的產(chǎn)生圖像,及其它。成像控制部分11對于成像部分3和成像信號處理部分15在操作 方面可實行控制,即對于成像功能元件C2的成像操作的控制。這樣 的控制基于來自系統(tǒng)控制器10的命令實行。例如,成像控制部分ll 對于成像部分3和成像信號處理部分15的操作的通/斷實行控制。成 像控制部分11假定對成像部分3實行控制,即電機控制,以完成自 動聚焦、自動曝光調(diào)節(jié)、孔徑調(diào)節(jié)、變焦、焦點變化、及其它的操作。如在上文中描述的那樣,當(dāng)成像顯示設(shè)備1設(shè)有可通過成像透鏡 3a使對象的方向運動的可動機構(gòu)時,成像控制部分11基于來自系統(tǒng) 控制器10的命令在操作方面對可動機構(gòu)進行控制,從而成像透鏡3a 的方向在成像部分3中被改變。成像控制部分11設(shè)有定時發(fā)生器,并且使用由定時發(fā)生器產(chǎn)生 的定時信號,在信號處理操作方面對固態(tài)成像元件和在成像控制部分 11中的元件,即,樣本-保持/AGC電路和A/D轉(zhuǎn)換器,進行控制。 通過這樣的定時控制,成像幀速率也可控制成可變的。成像控制部分11在成像靈敏度和信號處理方面對固態(tài)成像元件 和成像信號處理部分15實行控制。成像靈敏度控制包括例如對于待 從固態(tài)成像元件讀取的信號的增益控制、黑色電平設(shè)置控制、在還是 數(shù)字?jǐn)?shù)據(jù)的成像信號的處理期間的變化系數(shù)控制、及在照相機晃動校 正處理期間的校正量控制。成像靈敏度可以經(jīng)受任何整體靈敏度調(diào)節(jié) 而沒有對于波長帶的特定考慮,或?qū)τ谟脕碚{(diào)節(jié)諸如紅外線區(qū)域或紫 外線區(qū)域之類的任何特定波長帶的成像靈敏度的任何靈敏度調(diào)節(jié),例 如截止任何特定波長帶的成像。在考慮到波長的靈敏度調(diào)節(jié)通過在成 像透鏡系統(tǒng)中的波長濾波器的插入、和對于成像信號的波長濾波器計 算處理是可能的。在這些情況下,成像控制部分11例如通過對于波 長濾波器的插入控制、或通過規(guī)定濾波器計算系數(shù)可實行靈敏度控 制。成像控制部分ll基于來自系統(tǒng)控制器10的命令根據(jù)圖像處理操 作對于成像信號處理部分15進行控制。也就是說,成像控制部分ll 使成像信號處理部分15完成上述各種類型的處理。這些成像功能元件Cl和C2每個把是成像結(jié)果的捕獲圖像信號 供給到顯示圖像處理部分12,作為用于在顯示部分2上顯示的顯示圖 像信號。在成像顯示設(shè)備l中,負(fù)責(zé)對于用戶的顯示的元件包括顯示部分 2、顯示圖像處理部分12、顯示驅(qū)動部分13、及顯示控制部分14。在成像功能元件Cl和C2中導(dǎo)出的顯示圖像信號供給到顯示圖 像處理部分12。在這種情況下,顯示圖像處理部分12為了在顯示部 分2上一次都顯示由成像功能元件C1和C2,即兩個源(圖像信號產(chǎn) 生裝置),提供的顯示圖像信號的目標(biāo),進行屏幕分開和圖像合成。例如,顯示圖像處理部分12把對于顯示部分2的屏幕區(qū)域設(shè)置 為畫中畫屏幕、分開屏幕、及其它,并且使生成區(qū)域在其中顯示由成像功能元件Cl和C2提供的顯示圖像信號。顯示驅(qū)動部分13由象素驅(qū)動電路構(gòu)造,以便使顯示部分2顯示 來自顯示圖像處理部分12的圖像信號。顯示部分2是液晶顯示器。 就是說,為了像這樣顯示,在顯示部分2中的矩陣中的象素每個基于 視頻信號施加有驅(qū)動信號。信號施加在任何預(yù)定水平/豎直驅(qū)動定時下 進行。這里注意,顯示驅(qū)動部分13根據(jù)象素透射率對顯示部分2實行 控制,以把屏幕放在完全或部分通透狀態(tài)下。顯示控制部分14,按照處理操作對顯示圖像處理部分12、和按 照基于來自系統(tǒng)控制器10的命令的操作對顯示驅(qū)動部分13,實行控 制。
對于成像功能元件Cl和C2的每一個,提供照明部分4和照明 控制部分18。照明部分4由圖lA至2B的發(fā)光部分4a、和發(fā)光電路 構(gòu)造,該發(fā)光電路照亮照明部分4,例如LED。照明控制部分18基 于來自系統(tǒng)控制器10的命令使照明部分4完成發(fā)光操作。借助于在照明部分4中如在圖l和2的例子中表示的那樣附加的 發(fā)光部分4a,照明部分4相對于通過成像透鏡3a的對象方向完成照 明操作。操作觸發(fā)信息產(chǎn)生部分16產(chǎn)生用來啟動或結(jié)束在顯示部分2上 的操作啟動信息、用于顯示模式變化、及其它的操作觸發(fā)信息。這個操作觸發(fā)信息產(chǎn)生部分16可由操作件和操作檢測機構(gòu)構(gòu) 造。操作件例如是由用戶操作的操作鍵或操作刻度盤,并且操作檢測 機構(gòu)檢測操作件如何操作。這種構(gòu)造是對于其中關(guān)于各種類型操作的 操作觸發(fā)信息是用戶的手動操作的情形。操作觸發(fā)信息產(chǎn)生部分16 把用戶的操作信息作為操作觸發(fā)信息供給到系統(tǒng)控制器IO,從而系統(tǒng) 控制器10響應(yīng)用戶的操作對顯示操作實行控制??蛇x擇地,操作觸發(fā)信息產(chǎn)生部分16可以構(gòu)造成能夠檢測任何 用戶信息和外界信息。用戶信息是關(guān)于用戶的視線范圍、身體行為、 身體狀態(tài)、及其它的檢測信息,并且外界信息是關(guān)于成像顯示設(shè)備周 圍的環(huán)境、位置、日期和時間、及對象周圍的情況的信息,和其它。 例如,系統(tǒng)控制器10可以基于這樣的用戶信息和外界信息負(fù)責(zé)確定 是否產(chǎn)生操作觸發(fā)。用戶信息和外界信息的例子將在以后描述,圖5表示成像顯示設(shè)備1的另一種典型構(gòu)造。這里注意,與圖4 的功能方塊相同的任何功能方塊設(shè)有相同的附圖標(biāo)記,并且不描述兩 次。與圖4的構(gòu)造相比,圖5的構(gòu)造不包括第二成像功能元件C2和 與第二成像功能元件C2相對應(yīng)提供的元件,即照明部分4和照明控 制部分18,但新包括通信部分26。通信部分26與任何外部裝置進行數(shù)據(jù)傳輸/接收。外部裝置例如 包括計算機裝置;移動電話;PDA(個人數(shù)字助手);包括視頻存儲
裝置、電視接收機、及其它的AV (聲頻-視頻)設(shè)備;及網(wǎng)絡(luò)服務(wù)器 裝置。通信部分26可以構(gòu)造成,在無線LAN或藍(lán)牙模式中,經(jīng)關(guān)于網(wǎng) 絡(luò)訪問點的近距離無線通信進行網(wǎng)絡(luò)通信。仍然可選擇地,通信部分 26可以直接與設(shè)有任何對應(yīng)通信功能的任何外部裝置進行無線通信。在圖5的例子中,通信部分26與在圖6A至6C中所示的外部裝 置進行通信,并且從外部裝置接收圖像數(shù)據(jù)。通信部分26然后把接 收的圖像數(shù)據(jù)提供給顯示圖像處理部分12作為用于在顯示部分2上 顯示的顯示圖像信號。是在顯示圖像處理部分12中的處理結(jié)果的圖 像信號提供給顯示驅(qū)動部分13以在顯示部分2上顯示。圖6A至6C每個表示與外部裝置相關(guān)的成像顯示設(shè)備1的使用狀態(tài)。圖6A表示例子,其中成像顯示設(shè)備1使用通信部分26與是外 部裝置的成像設(shè)備70進行通信。在這種情況下,成像顯示設(shè)備l接 收由成像設(shè)備70捕獲的圖像,并且使顯示部分2在其上顯示圖像。 外部成像設(shè)備70由攝像機、數(shù)字靜物照相機、及設(shè)有通信能力的其 它來舉例說明??蛇x擇地,與在這個實施例中的成像顯示設(shè)備相類似 的任何其它成像顯示設(shè)備1可以用作外部成像設(shè)備70。外部成像設(shè)備70可以在類型方面變化,例如,由使用成像顯示 設(shè)備l的用戶擁有的成像設(shè)備、由使用成像顯示設(shè)備l的用戶的朋友 擁有的成像設(shè)備、屬于是圖像源或其它的任何公共或服務(wù)公司并且適 于與成〗象顯示設(shè)備1通信的成像設(shè)備。圖6B表示例子,其中成像顯示設(shè)備l提供有通信能力,并且與 外部內(nèi)容源裝置71進行通信。在這種情況下,成像顯示設(shè)備l接收 來自外部內(nèi)容源裝置71的圖像,即運動/靜止圖像,以便在顯示部分 2上顯示。內(nèi)容源裝置71由視頻設(shè)備、電視調(diào)諧器、諸如家庭服務(wù)器裝置 之類的AV (聲頻-可視)設(shè)備、諸如個人計算機之類的信息處理器、 PDA (個人數(shù)字助手)、移動電話、及其它來舉例說明。這樣的內(nèi)容
源裝置71也在類型方面變化,例如,由使用成像顯示設(shè)備1的用戶 的朋友擁有的裝置、或?qū)儆谑歉鞣N類型的內(nèi)容源或其它的任何公共或 服務(wù)公司的服務(wù)器裝置。待從內(nèi)容源裝置71轉(zhuǎn)送到成像顯示設(shè)備1的數(shù)據(jù)為了顯示使用 在類型方面變化,例如諸如電影和視頻剪切圖之類的運動圖像內(nèi)容、 由數(shù)字靜物照相機或其它捕獲的并且記錄在記錄介質(zhì)上的靜止圖像 內(nèi)容、諸如電子圖書之類的數(shù)據(jù)、由使用個人計算機或其它的用戶創(chuàng) 建的圖像數(shù)據(jù)、文本數(shù)據(jù)、諸如電子表格數(shù)據(jù)之類的計算機使用數(shù)據(jù)、 及游戲圖像。圖6C表示例子,其中在成像顯示設(shè)備1中的通信部分26提供 有在諸如互聯(lián)網(wǎng)之類的網(wǎng)絡(luò)73上的通信訪問能力,并且與在網(wǎng)絡(luò)73 上連接的外部成^象設(shè)備70和內(nèi)容源裝置71進行通信。在這種情況下, 成像顯示設(shè)備1在網(wǎng)絡(luò)73上接收圖像數(shù)據(jù),并且基于接收的圖像數(shù) 據(jù),使顯示部分2使用顯示圖像信號進行圖像顯示。圖7表示成像顯示設(shè)備1的另一種典型構(gòu)造。這里注意,與圖4 和5的功能方塊相同的任何功能方塊設(shè)有相同的附圖標(biāo)記,并且不描述兩次o與圖4的構(gòu)造相比,圖7的構(gòu)造不包括第二成像功能元件C2和 與第二成像功能元件C2相對應(yīng)提供的元件,即照明部分4和照明控 制部分18,但新包括存儲部分25。存儲部分25是其中向任何預(yù)定記錄介質(zhì)記錄數(shù)據(jù)和從其再現(xiàn)數(shù) 據(jù)的部分。存儲部分25例如由HDD (硬盤驅(qū)動器)實施。記錄介質(zhì) 當(dāng)然在類型方面變化,例如諸如閃存之類的固態(tài)存儲器、裝有固態(tài)存 儲器的存儲器卡、光盤、磁光盤、及全息存儲器。存儲部分25可以 構(gòu)造成按照使用的記錄介質(zhì)的類型進行記錄和再現(xiàn)。圖像數(shù)據(jù)要經(jīng)圖像輸入/輸出控制部分27供給到存儲部分25。圖 像數(shù)據(jù)這里包括由成像功能元件Cl的成像部分3捕獲的并且由成像 信號處理部分15作為成像信號處理的圖像的數(shù)據(jù)、和由通信部分26 接收的圖像數(shù)據(jù)。聲頻數(shù)據(jù)經(jīng)聲頻輸入/輸出控制部分28供給到存儲 部分25。聲頻數(shù)據(jù)這里包括由聲頻輸入部分6導(dǎo)出的聲頻數(shù)據(jù)、和由 通信部分26接收的聲頻數(shù)據(jù)。在系統(tǒng)控制器10的控制下,存儲部分25再現(xiàn)來自記錄介質(zhì)的圖 像數(shù)據(jù)。是再現(xiàn)結(jié)果的圖像數(shù)據(jù)供給到顯示圖像處理部分12,作為在 顯示部分2上顯示使用的顯示圖像信號。是顯示圖像處理部分12的 處理結(jié)果的圖像信號供給到顯示驅(qū)動部分13,并且顯示在顯示部分2 上。待由存儲部分25再現(xiàn)的數(shù)據(jù)為了使用在類型方面變化,例如諸 如電影和視頻剪切圖之類的運動圖像內(nèi)容、由數(shù)字靜物照相機捕獲的 靜止圖像內(nèi)容或記錄在記錄介質(zhì)上的其它內(nèi)容、諸如電子圖書之類的 數(shù)據(jù)、由使用個人計算機或其它的用戶創(chuàng)建的圖像數(shù)據(jù)、文本數(shù)據(jù)、 諸如電子表格數(shù)據(jù)之類的計算機使用數(shù)據(jù)、及游戲圖像。圖8表示成像顯示設(shè)備1的又一種典型構(gòu)造,即與圖3的例子相 對應(yīng),其中與顯示單元部分30分離地提供成像單元部分40。在這個例子中,類似于圖5,成像單元部分40包括成像功能元 件C1、和通信部分26。待由成像功能元件Cl和通信部分26導(dǎo)出的顯示圖像信號供給 到顯示通信控制部分20。顯示通信控制部分20為了與顯示單元部分 30通信進行編碼處理,即編碼來自成像功能元件Cl和通信部分26 的顯示圖像信號。是顯示通信控制部分20的編碼結(jié)果的圖像數(shù)據(jù)從通信部分21 轉(zhuǎn)送到顯示單元部分30。顯示單元部分30設(shè)有通信部分34、顯示部分31、顯示圖像處理 部分32、顯示驅(qū)動部分33、顯示控制部分35、及操作部分36。通信部分34與成像單元部分40的通信部分21進行通信,即接 收圖像數(shù)據(jù)并且進^t^碼處理。圖像數(shù)據(jù)這里是來自成像單元部分40 的圖像數(shù)據(jù),即圖像數(shù)據(jù)是由成像功能元件Cl和通信部分26導(dǎo)出的 顯示圖像信號。是通信部分34的譯碼結(jié)果的顯示圖像信號供給到顯示圖像處理
部分12。在這種情況下,顯示圖像處理部分12完成屏幕分開和圖像 合成的處理,以便在顯示部分31上一次都顯示來自成像功能元件Cl 和通信部分26,即兩個圖像信號源(圖像信號產(chǎn)生裝置),的顯示圖 像信號。例如,顯示圖像處理部分12把屏幕區(qū)域設(shè)置到顯示部分31作為 畫中畫屏幕、分開屏幕、和其它,并且使生成區(qū)域在其中顯示由成像 功能元件Cl和通信部分26提供的顯示圖像信號的圖像。顯示驅(qū)動部分33由象素驅(qū)動電路構(gòu)造,用來使顯示部分31在其 上顯示來自顯示圖像處理部分32的圖像信號。顯示部分31是液晶顯 示器。就是說,為了像這樣顯示,在顯示部分31中的矩陣中的象素 每個基于視頻信號施加有驅(qū)動信號。信號施加在任何預(yù)定水平/豎直驅(qū) 動定時下進行。顯示控制部分35,按照處理操作對顯示圖像處理部分32、和按 照操作對顯示驅(qū)動部分33,實行控制。例如,顯示控制部分35響應(yīng) 用戶通過操作部分36進行的操作對于顯示操作的通/斷和在屏幕上的 區(qū)域構(gòu)造變化實行控制。當(dāng)來自系統(tǒng)控制器10的命令信息由在通信部分21和34之間建 立的通信提供時,響應(yīng)來自系統(tǒng)控制器10的命令信息,顯示控制部 分35可以對顯示操作的通/斷、在屏幕上的區(qū)域構(gòu)造變化、及其它實 行控制。像這樣,通過參考圖4、 5、 7、及8以上描述的是成像顯示設(shè)備 1的典型構(gòu)造。圖4是例子,其中兩個成像功能元件C1和C2每個提供成用來 產(chǎn)生顯示圖像信號的圖像源(圖像信號產(chǎn)生裝置),該顯示圖像信號 用來在顯示部分2上顯示。圖5是例子,其中成像功能元件Cl和通信部分26每個提供成 用來產(chǎn)生顯示圖像信號的圖像源(圖像信號產(chǎn)生裝置),該顯示圖像 信號用來在顯示部分2上顯示。圖7是例子,其中成像功能元件Cl和存儲部分25每個提供成
用來產(chǎn)生顯示圖像信號的圖像源(圖像信號產(chǎn)生裝置),該顯示圖像信號用來在顯示部分2上顯示。圖8是與圖5中的例子相類似的例子,其中成像功能元件C1和 通信部分26每個提供成用來產(chǎn)生顯示圖像信號的圖像源(圖像信號 產(chǎn)生裝置),并且成像單元部分40和顯示單元部分30彼此分離地提 供。這些構(gòu)造例子當(dāng)然不是限制性的,并且各種其它構(gòu)造對于成像顯 示設(shè)備l也是可能的。盡管以上舉例說明的是其中提供兩個圖像源的例子,但這當(dāng)然不 是限制性的,并且可以提供三個或更多個圖像源??赡軜?gòu)造可以包括成像功能元件C1、通信部分26、及存儲部分 25、或三個或更多個成像功能元件C1、 C2、 C3、及其它。在實施例中,多個圖像源的至少一個假定為捕獲在用戶視場方向 上的視野的圖像。就是說,在構(gòu)造例子的每一個中的成像功能元件 Cl負(fù)責(zé)這樣成像,并且由成像功能元件Cl導(dǎo)出的顯示圖像信號是用 于用戶的視場方向的成像信號。剩余圖像源每個負(fù)責(zé)產(chǎn)生顯示圖像信號,該顯示圖像信號用來顯 示與由成像功能元件Cl捕獲的圖像不同的圖像。這里,由成像功能元件C1導(dǎo)出的顯示圖像信號,即與對于在用 戶視場方向上的視野捕獲的圖像不同的圖像,能以各種方式獲得。當(dāng)成像功能元件C2例如正在覆蓋與由成像功能元件Cl覆蓋的 方向不同的方向時,由成像功能元件C2本身捕獲的圖像與由成像功 能元件Cl捕獲的圖像不同。由通信部分26接收的圖像和由存儲部分 25再現(xiàn)的圖像也與由成像功能元件Cl捕獲的圖像不同。即使當(dāng)成像功能元件C2如在圖1A和1B中那樣正在覆蓋與由成 像功能元件Cl覆蓋的方向相同的方向,即用戶的視場方向時,成像 功能元件C2的生成圖像依據(jù)成像操作的方式和成像信號處理,也可 能與成像功能元件Cl的生成圖像不同。在這個實施例中,來自這些圖像源的顯示圖像信號都一次顯示在200710180244.2說明書第20/45頁顯示部分2上,由此把各種多個圖像提供給用戶。 3.在屏幕上的區(qū)域構(gòu)造圖9A至10C每個表示當(dāng)來自多個圖像源的顯示圖像信號的圖像 都一次顯示在顯示部分2的屏幕上時的典型區(qū)域構(gòu)造。在顯示部分2 (在圖8的例子中,顯示裝置的顯示部分31)中, 為了一次都顯示來自多個圖像源的圖像,屏幕可以設(shè)置有主屏幕區(qū)域 和次屏幕區(qū)域,或者可以分成多個區(qū)域。在圖9A至9F中,區(qū)域AR1和AR2每個指示用于由每個不同 圖像源提供的圖像的顯示的區(qū)域。圖9A表示例子,其中區(qū)域AR2設(shè)置到在顯示部分2的屏幕區(qū) 域,即區(qū)域AR1,中的右下部分,用作次屏幕,并且區(qū)域AR1和AR2 都負(fù)責(zé)圖像顯示。圖9B表示例子,其中區(qū)域AR2設(shè)置到在顯示部分2的屏幕區(qū)域, 即區(qū)域AR1,中的左下部分,用作次屏幕,并且區(qū)域AR1和AR2都 負(fù)責(zé)圖像顯示。盡管未表示,對于這樣設(shè)置的次屏幕,有對于是在區(qū)域AR1中 的次屏幕的區(qū)域AR2可能的各種其它方位,例如右上、左上、中心、 中心右邊、及中心左邊。圖9C表示其中減小區(qū)域AR2的尺寸的例子。圖9D表示其中增大區(qū)域AR2的尺寸的例子。圖9E表示其中顯示部分2的屏幕區(qū)域被等分、并且生成區(qū)域 AR1和AR2彼此相鄰放置的例子。圖9F表示其中顯示部分2的屏幕區(qū)域被等分、并且生成區(qū)域 AR1和AR2彼此上下放置的例子。對于在圖4至8的構(gòu)造中的圖像顯示,例如,對于在圖9A至9F 中的區(qū)域構(gòu)造,區(qū)域AR1對于成像功能元件C1的圖像源可以顯示用 戶視場的圖像,并且區(qū)竭AR2可以顯示由任何其它圖像源,例如成 像功能元件C2、通信部分26、及存儲部分25,提供的圖像。系統(tǒng)控制器10可以參考由操作觸發(fā)信息產(chǎn)生部分16提供的信25
息,例如用戶的操作信息、用戶信息、外界信息,以選擇用于圖像顯示的圖9A至9F的區(qū)域構(gòu)造的任一種,或者改變其上的區(qū)域構(gòu)造。例 如,系統(tǒng)控制器IO,響應(yīng)用戶的操作可以改變是如圖9A和9B所示 的次屏幕的區(qū)域AR2的位置,可以改變?nèi)鐖D9C和9D中所示區(qū)域AR2 的尺寸,或者可以等分如圖9E和9F中所示顯示部分2的屏幕,由此 能夠滿足用戶的喜好。對于所謂的顯示區(qū)域構(gòu)造變化,在圖9A至9F中的區(qū)域AR1和 AR2可以在位置方面被改變,并且區(qū)域AR2可以借助于是圖像源的 成像功能元件Cl顯示用戶視場的圖像,并且區(qū)域AR1可以顯示任何 其它圖像源,即成像功能元件C2、通信部分26、及存儲部分25,的 圖像。圖10A至10C每個表示在具有三個圖像源的顯示部分2的屏幕 中的典型區(qū)域構(gòu)造,并JL在圖10A至10C中,區(qū)域AR1、 AR2、 AR3 每個指示用于由每個不同圖像源提供的圖像,即顯示圖像信號,的顯 示的區(qū)域。圖IOA表示例子,其中區(qū)域AR2設(shè)置到在顯示部分2的屏幕區(qū) 域,即區(qū)域AR1,中的左下部,并且區(qū)域AR3設(shè)置到其中的右下部, 每個用作次屏幕,并且區(qū)域AR1、 AR2、 AR3負(fù)責(zé)圖像顯示。圖IOB表示例子,其中區(qū)域AR2設(shè)置到在顯示部分2的屏幕區(qū) 域中區(qū)域AR1的左邊,并且區(qū)域AR3設(shè)置到其右邊,并且區(qū)域AR1、 AR2、 AR3每個負(fù)責(zé)圖像顯示。圖IOC表示例子,其中區(qū)域AR2設(shè)置到在顯示部分2的屏幕區(qū) 域中區(qū)域AR1的上方,并且區(qū)域AR3設(shè)置到其下方,并且區(qū)域AR1、 AR2、 AR3每個負(fù)責(zé)圖像顯示。盡管未表示,顯示部分2的屏幕可以等分成具有相同尺寸的區(qū)域 AR1、 AR2、 AR3。類似于圖9A至9F的情形,在系統(tǒng)控制器10的控制下,圖10A 至10C的區(qū)域構(gòu)造也被改變或者區(qū)域的位置被改變。這里注意,在其中提供圖像源的三個或更多個的情況下,借助于
如在圖9A至9F中那樣的區(qū)域構(gòu)造對于圖像顯示可以選擇這些圖像源 中的兩個。這當(dāng)然不是限制性的,并且當(dāng)提供圖像源的四個或更多個時,來 自這些圖像源的圖像每個可以被顯示,或者圖像源的任何選擇的兩個或更多個可以#皮顯示。當(dāng)如圖1A和2A中所示,兩個顯示部分2分別供左右眼之用時, 顯示部分2的屏幕之一可以顯示由圖像源之一提供的圖像,并且剩余 屏幕可以顯示剩余圖像源的圖像。而且,在多屏幕顯示器的多個屏幕的每一個上可以進行圖像顯 示,例如,市場上買得到的可攜帶游戲機的兩屏幕顯示器。4.典型顯示操作在實施例中在如圖4至8中所示的構(gòu)造變化的成像顯示設(shè)備1 中,來自多個圖像源的顯示圖像信號顯示在顯示部分2上。圖像源之 一是成像功能元件Cl,并且捕獲在用戶視場方向上的視野的圖像; 并且剩余圖像源產(chǎn)生是與由成像功能元件Cl捕獲的圖像不同的圖像 的顯示圖像信號。像這樣,可增強用戶的目視能力,并且生成顯示看 著更有趣。下面描述的是通過系統(tǒng)控制器10的控制應(yīng)用和由此的典型各種 顯示操作。圖ll表示由系統(tǒng)控制器IO進行的控制處理。在步驟F101中,系統(tǒng)控制器10確定對于多個圖像是否產(chǎn)生顯 示開始觸發(fā)。對于這樣一種確定,例如,操作件可以提供為操作觸發(fā) 信息產(chǎn)生部分16以使它適用于用戶的操作,并且當(dāng)用戶操作這樣一 種預(yù)定操作件時,系統(tǒng)控制器10可以確定對于多個圖像的開始顯示 產(chǎn)生觸發(fā)??蛇x擇地,盡管細(xì)節(jié)留下以后描述,但操作觸發(fā)信息產(chǎn)生 部分16可以檢測用戶的狀態(tài)或外界的狀態(tài),并且基于任何預(yù)定要求, 系統(tǒng)控制器IO可以確定對于多個圖像的開始顯示產(chǎn)生觸發(fā)。這里注意,在直到對于多個圖像產(chǎn)生這樣一種顯示開始觸發(fā)的時 間段中,顯示部分2可以可控制地放置在通透狀態(tài)下,或者由成像功
能元件Cl捕獲的圖像例如可以可控制地僅顯示在顯示部分2上??蛇x擇地,當(dāng)成像顯示設(shè)備l被接通時,多個圖像可以相應(yīng)地顯 示,并且借助于這樣一種觸發(fā),成像顯示設(shè)備l可以總是顯示多個圖 像。當(dāng)進行為顯示多個圖像產(chǎn)生顯示開始觸發(fā)的確定時,程序轉(zhuǎn)到步 驟F102,并且系統(tǒng)控制器10實行控制以開始顯示多個顯示圖像信號。 就是說,系統(tǒng)控制器10對顯示部分2施加控制以借助于由成像功能 元件Cl提供的顯示圖像信號和由任何其它圖像源提供的顯示圖像信 號進行圖像顯示。如果對于圖4的構(gòu)造,則成像功能元件Cl和C2的成像操作在 步驟F102中開始,并且成像功能元件C1和C2的顯示圖像信號供給 到顯示圖像處理部分12。對于圖9A至9F的區(qū)域構(gòu)造,顯示部分2 控制成在其上顯示生成圖像。這里注意,當(dāng)如圖2A和2B中所示成像功能元件C1和C2正在 覆蓋每個與對象的方向不同的方向時,由成像功能元件C2通常捕獲 的圖像將與成像功能元件Cl的圖像不同,從而顯示部分2在其上在 其分成多個區(qū)域的屏幕上顯示各種圖像。另一方面,如圖1A和1B中所示,當(dāng)成像功能元件C1和C2正 在覆蓋與對象的方向相同的方向時,系統(tǒng)控制器10發(fā)出指導(dǎo)在成像 功能元件C2中的成像操作和信號處理的方式的命令。借助于這樣的 控制應(yīng)用,使成像功能元件Cl和C2捕獲每個不同的圖像,從而顯 示部分2在其上在多個區(qū)域上顯示各種圖像。對于圖5的構(gòu)造,在步驟F102中,開始成像功能元件C1的成 像操作,并且由成像功能元件Cl捕獲的生成顯示圖像信號供給到顯 示圖像處理部分12。由通信部分26接收的圖像數(shù)據(jù)也供給到顯示圖 像處理部分12作為顯示圖像信號。此后,對于通過參考圖9A至9F 所描述的區(qū)域構(gòu)造,顯示部分2控制成在其上顯示圖像??蛇x擇地,對于圖5的構(gòu)造,當(dāng)通信部分26提供有來自外部裝 置的圖像數(shù)據(jù)時,在步驟FIOI中確定產(chǎn)生顯示開始觸發(fā),并且在步
驟F102中借助于都是圖像源的成像功能元件Cl和通信部分26可以 開始圖像顯示。在當(dāng)通信部分26不是正在接收圖像數(shù)據(jù)的時間段中, 顯示部分2例如可以控制成在其上僅顯示由成像功能元件Cl提供的 顯示圖像信號。對于圖7的構(gòu)造,在步驟F102中開始成像功能元件Cl的成像 操作,并且由成像功能元件Cl捕獲的生成顯示圖像信號供給到顯示 圖像處理部分12。而且也在步驟F102中,對于存儲部分25發(fā)出進行 再現(xiàn)操作的命令,并且生成再現(xiàn)圖像數(shù)據(jù)供給到顯示圖像處理部分12 作為顯示圖像信號。此后,對于通過參考圖9A至9F所描述的區(qū)域構(gòu) 造,顯示部分2控制成在其上顯示圖像。注意,對于圖7的構(gòu)造,當(dāng) 對于存儲部分25響應(yīng)用戶的操作、用戶狀態(tài)、外界狀態(tài)、及其它, 產(chǎn)生再現(xiàn)開始觸發(fā)時,在步驟F101中確定產(chǎn)生顯示開始觸發(fā)。對于 這樣一種確定,在步驟F102中,借助于都是圖像源的成像功能元件 Cl和存儲部分25可以開始圖像顯示。在當(dāng)存儲部分25不是處于再 現(xiàn)過程中的時間段中,顯示部分2例如可以控制成在其上僅顯示由成 像功能元件Cl提供的顯示圖像信號。當(dāng)例如借助于圖9A至10的區(qū)域構(gòu)造開始多個圖像的顯示時, 系統(tǒng)控制器10在步驟F103中監(jiān)視是否產(chǎn)生顯示變化觸發(fā),并且在步 驟F104中監(jiān)視對于多個圖像是否產(chǎn)生顯示結(jié)束觸發(fā)。在步驟F103中顯示變化觸發(fā)的產(chǎn)生是指系統(tǒng)控制器10基于用 戶操作、或用戶狀態(tài)、或外界狀態(tài)確定進行顯示圖像變化的情形。顯示圖像變化包括一個或多個圖像的內(nèi)容變化、和區(qū)域構(gòu)造變化。顯示圖像的內(nèi)容變化廣泛地改變,并且包括作為在成像功能元件 Cl和C2的成像部分3中的變焦處理和焦點位置變化的結(jié)果的圖像變 化、作為成像靈敏度變化的結(jié)果的圖像變化、作為在成像信號處理部 分15中的信號處理的結(jié)果的圖像變化、如果對于是可動照相機的成 像部分3則作為成像方向變化(對象方向)的結(jié)果的圖像變化、如果 對于顯示圖像信號的三個或更多個圖像源則作為圖像源變化的結(jié)果
的圖像變化、及其它。區(qū)域構(gòu)造變化包括在畫中畫屏幕中的位置變化、在主次屏幕之間 的位置變化、是屏幕分開的結(jié)果的屏幕的位置變化或移動、對于整個 屏幕顯示的變化、及其它。對于這樣一種區(qū)域構(gòu)造變化,可控制地,例如,圖9A的狀態(tài)變化到圖9B的狀態(tài),或圖9A的狀態(tài)變化到圖9E 的狀態(tài)。關(guān)于在步驟F104中對于多個圖像的顯示結(jié)束觸發(fā),當(dāng)用戶例如 操作預(yù)定操作件以結(jié)束圖像顯示時,系統(tǒng)控制器10可以把它確定為 在當(dāng)前狀態(tài)下用來結(jié)束多個圖像的顯示的觸發(fā)的產(chǎn)生。可選擇地,系 統(tǒng)控制器10可以檢測用戶狀態(tài)或外界狀態(tài),并且按照任何預(yù)定要求, 確定產(chǎn)生用于多個圖像的開始顯示的觸發(fā)。當(dāng)系統(tǒng)控制器10在步驟F103中確定產(chǎn)生顯示變化觸發(fā)時,程 序轉(zhuǎn)到F105,并且系統(tǒng)控制器IO對圖像顯示操作實行變化控制。這 相應(yīng)地改變在顯示部分2中的某一區(qū)域,即區(qū)域AR1和AR2的一個 或兩個,中顯示的圖像的細(xì)節(jié),或者改變顯示部分2的區(qū)域構(gòu)造。在步驟F105之后,即對顯示變化的控制應(yīng)用,系統(tǒng)控制器10 在步驟F103和F104中保持監(jiān)視任何觸發(fā)操作。當(dāng)系統(tǒng)控制器10在步驟F104中確定產(chǎn)生用于多個圖像的顯示 結(jié)束觸發(fā)時,程序轉(zhuǎn)到F106,由此結(jié)束在顯示部分2上一次都顯示由 多個圖像源提供的圖像的操作。這樣的顯示結(jié)束控制改變,并且包括僅顯示由成像功能元件 Cl提供的圖像的顯示變化;在顯示部分2上的圖像顯示終止;或顯 示部分2的狀態(tài)變化,例如通過在顯示部分2上的圖像顯示終止、或 例如斷電的通透狀態(tài)。對于如圖11中所示由系統(tǒng)控制器IO實行的這樣控制,顯示部分 2在其上相應(yīng)地一次都顯示來自多個圖像的圖像。通過參考圖12和其后下面描述的是由多個圖像源提供的圖像的 典型同時顯示。通過參考圖12A至13C,對于在圖1A和1B及圖4的典型構(gòu)造中的成像顯示設(shè)備1,現(xiàn)在描述的是其中成像功能元件Cl和C2構(gòu)造 成捕獲在用戶前面,即在用戶視場方向上,的視野的圖像的情形。圖12A表示完全在顯示部分2的屏幕上的正常圖像顯示,例如 只有由成像功能元件Cl正常捕獲的圖像顯示在顯示部分2上。另一方面,圖12B表示在顯示部分2上的同時圖像顯示,即由 多個圖像源提供的圖像通過這個實施例的操作都一次顯示。對于這樣 的同時圖像顯示,由成像功能元件Cl正常捕獲的圖像的顯示圖像信 號顯示在區(qū)域AR1中,并且同時,由成像功能元件C2捕獲的圖像的 顯示圖像信號顯示在區(qū)域AR2中。系統(tǒng)控制器IO按照遠(yuǎn)攝變焦正在 對成像功能元件C2的成像部分3實行操作控制。對于由成像功能元 件C2進行的遠(yuǎn)攝成像,區(qū)域AR2的圖像看起來與區(qū)域AR1的圖像 不同。相應(yīng)地,在正常視野處觀看的同時,用戶也可享受用普通意義 的視力得不到的遠(yuǎn)攝圖像。這里舉例說明的是成像功能元件C2供給遠(yuǎn)攝圖像的情形??蛇x 擇地,通過進行廣角變焦的成像功能元件C2,區(qū)域AR2可在其中顯 示近距離視野的廣角圖像。為了導(dǎo)出這樣的遠(yuǎn)攝圖像和廣角圖像,除 對在成像功能元件C2的成像部分3中的變焦透鏡實行的驅(qū)動控制之 外,在成像功能元件C2中的成像信號處理部分15中將進行信號處理。盡管未表示,可選擇地,處于近距離或遠(yuǎn)距離中的圖像可以被捕 獲,以便在顯示部分2中的區(qū)域AR2中顯示。不是用于變焦而是用 于在成像功能元件C2的成像部分3中的焦點變化,響應(yīng)由系統(tǒng)控制 器10發(fā)出的命令可以進行這種成像。以上也舉例說明的是其中由成像功能元件Cl捕獲的圖像,即對 于在用戶視場方向上的視野通常捕獲的圖像,顯示在區(qū)域AR1中、 并且由成像功能元件C2捕獲的圖像顯示在區(qū)域AR2中的情形??蛇x 擇地,通過成像功能元件Cl的圖像,即對于在用戶視場方向上的視 野通常捕獲的圖像,可以顯示在區(qū)域AR2中,并且通過成像功能元 件C2的圖像,例如遠(yuǎn)攝圖像,可以顯示在區(qū)域AR1中。下面舉例說明的是這樣的例子,其中通過成像功能元件C1的圖
像,即對于在用戶視場方向上的視野通常捕獲的圖像,顯示在區(qū)域AR1中,并且通過任何其它圖像源的圖像,即與成像功能元件C1的 圖像看著不同的圖像,顯示在區(qū)域AR2中。在所有這些例子中,通 過成像功能元件Cl的圖像,即,對于在用戶視場方向上的視野通常 捕獲的圖像,可以顯示在區(qū)域AR2中,并且通過任何其它圖像源的 圖像,即,與成像功能元件Cl的圖像看著不同的圖像,可以顯示在 區(qū)域AR1中。圖12C表示這樣的例子,其中由成像功能元件Cl通常捕獲的圖 像的顯示圖像信號顯示在區(qū)域AR1中,并且同時,由成像功能元件 C2捕獲的圖像按比例擴大,并且生成顯示圖像信號顯示在區(qū)域AR2 中。這樣的圖像顯示通過系統(tǒng)控制器IO發(fā)出使成像功能元件C2的成 像信號處理部分15按比例擴大由成像部分3提供的圖像而實施。也對于這樣的圖像顯示,在觀看正常視野的同時,用戶也可享受 用普通意義的視力得不到的按比例擴大圖像??蛇x擇地,系統(tǒng)控制器10可以發(fā)出使成像功能元件C2按比例 縮小由成像部分3提供的圖像的命令,并且在區(qū)域AR2中顯示生成 按比例縮小的圖像。圖12A表示具有暗照亮環(huán)境的情形。由成像功能元件Cl通常捕 獲的圖像顯示在區(qū)域AR1中。另一方面,當(dāng)環(huán)境像這樣被微暗照亮 時,系統(tǒng)控制器10發(fā)出使成像功能元件C2的成像控制部分11 (成 像部分3、和成像信號處理部分15)增大成像靈敏度的命令;或用于 亮度級、對比度、及清晰度的調(diào)節(jié)的命令。借助于這樣一種命令,生 成顯示圖像信號可增強到更高亮度,并且這樣一種顯示圖像信號的圖 像顯示在區(qū)域AR2中。借助于像這樣顯示的亮度調(diào)節(jié)圖像,區(qū)域AR2 在其中顯示看著與在區(qū)域AR1中顯示的正常捕獲圖像不同的圖像, 從而用戶可看到因此通常得不到的圖像。另一方面,當(dāng)環(huán)境太亮?xí)r,系統(tǒng)控制器10可以發(fā)出使成像功能 元件C2的成像控制部分11 (成像部分3、和成像信號處理部分15 ) 減小成像靈敏度的命令;或用于亮度級、對比度、及清晰度的調(diào)節(jié)的
命令。這樣一種命令防止生成顯示圖像信號的圖像刺眼,并且這樣一種顯示圖像信號的圖像顯示在區(qū)域AR2中。圖13B表示其中用戶在黑暗臥室中的情形,其中他或她的孩子 正在睡覺,并且房間是漆黑的且借助于為在區(qū)域AR1上的顯示由成 像功能元件Cl通常捕獲的圖像是不可見的。當(dāng)系統(tǒng)控制器10發(fā)出使 成像功能元件C2的成像控制部分11 (成像部分3、和成像信號處理 部分15)增加紅外線靈敏度的命令時,區(qū)域AR2在其中相應(yīng)地顯示 其中紅外線靈敏度因而增大的圖像。就是說,借助于生成圖像顯示, 用戶可看到在黑暗房間中孩子睡覺的臉。像這樣,用戶可看到通常得 不到的夜視圖像。圖13C表示典型圖像顯示,其中區(qū)域AR1在其中顯示由成像功 能元件C1通常捕獲的圖像。對于這樣的圖像顯示,當(dāng)系統(tǒng)控制器IO 發(fā)出使成像功能元件C2的成像控制部分11 (成像部分3、和成像信 號處理部分15)增加紫外線靈敏度的命令時,區(qū)域AR2在其中相應(yīng) 地顯示其中紫外線靈敏度因而增大的圖像。像這樣,用戶可看到通常 看不到的、具有紫外線分量的圖像。通過參考圖12A至13C,以上描述的是其中成像功能元件Cl和 C2都布置成覆蓋用來在圖4的構(gòu)造中成像在用戶前面的區(qū)域的典型 情形。圖14A至14C每個表示典型圖像顯示,其中在圖4的構(gòu)造中, 成像功能元件Cl布置成覆蓋用來在用戶前面成像的區(qū)域,即用戶的 視場方向,并且成像功能元件C2布置成覆蓋用來在與用戶的視場方 向不同的方向上成像的區(qū)域。當(dāng)成像功能元件C2例如布置成覆蓋用于成像的在用戶背后的區(qū) 域時,圖像顯示狀態(tài)將如圖15A中所示。區(qū)域AR1在其中顯示對于 在用戶前面的視野由成像功能元件Cl捕獲的圖像,并且區(qū)域AR2在 其中顯示對于在用戶背后的視野由成像功能元件C2捕獲的圖像。當(dāng)成像功能元件C2例如布置成覆蓋用于在用戶上方成像的區(qū)域 時,圖像顯示狀態(tài)將如圖15B中所示。區(qū)域AR1在其中顯示對于在 用戶前面的視野而捕獲的圖像,并且區(qū)域AR2在其中顯示對于在用
戶上方的視野而捕獲的圖像。也在這些情況下,在觀看顯示對于在視場方向上的視野而捕獲的正常圖像的區(qū)域AR1的同時,用戶可觀看顯示在與用戶的視場不同 的方向上的視野的圖像,例如背后圖像和上部圖像,的區(qū)域AR2。圖14C表示在提供成像功能元件中的三個的構(gòu)造中的典型顯示。 盡管未表示構(gòu)造,但三個成像功能元件為了方便起見由Cl、 C2、及 C3指示。大概,為了成像,成像功能元件C1覆蓋在用戶前面的區(qū)域,成 像功能元件C2覆蓋在用戶右后方的區(qū)域,及成像功能元件C3覆蓋 在用戶左后方的區(qū)域。在這些情況下,區(qū)域AR1在其中顯示對于在用戶前面的區(qū)域由 成4象功能元件Cl捕獲的圖像,并且區(qū)域AR2和AR3在其中分別顯 示對于在用戶右后和左后方向上的區(qū)域由成像功能元件C2和C3捕 獲的圖像。像這樣,用戶除在區(qū)域AR1中顯示的區(qū)域前面的正常視野之外 可感知在右后方和左后方的區(qū)域,從而他或她可看到幾乎他或她周圍 的區(qū)域。圖15A至16C每個表示具有包括用作如圖5中所示的圖像源的 通信部分26的構(gòu)造的典型顯示。圖15A至15C每個表示由外部成像設(shè)備70借助于如圖6A至6C 中所示的這樣的通信提供的、并且由通信部分26接收的圖像的典型 顯示。在圖15A中,區(qū)域AR1正在顯示對于用戶的視場由成像功能元 件C1捕獲的圖像。就是說,用戶正在體育場中從坐席區(qū)觀看足球賽。 在這時,系統(tǒng)控制器10使顯示部分2的區(qū)域AR2在其中顯示由成像 設(shè)備70捕獲的且由通信部分26接收的圖像.這里,成像設(shè)備70在 體育場的某一其它地方進行成像。成像設(shè)備70可以布置在教練坐位的附近,或者減小尺寸的成像 設(shè)備70可以由裁判佩戴。來自這樣一種成像設(shè)備70的視頻在顯示部
分2的區(qū)域AR2中接收和顯示,從而用戶能以更大的興趣觀看比賽。 圖15B表示其中在任何常去區(qū)域中布置的或由在旅行中的用戶 的朋友隨身攜帶的成像設(shè)備70捕獲的視頻由通信部分26接收的情 形。系統(tǒng)控制器IO使區(qū)域ARI在其中顯示對于在用戶前面的視野由 成像功能元件C1捕獲的圖像,并且同時,使區(qū)域AR2在其中顯示由 通信部分26接收的視頻的圖像。借助于這樣的圖像顯示,用戶在鄰近的公園或其它地方時,可看 到各種區(qū)域的圖像。圖15C表示這樣的例子,其中由在飛機或衛(wèi)星中布置的成像設(shè) 備70捕獲的在地面上的圖像(鳥瞰圖像)由通信部分26接收,并且 顯示在顯示部分2上。就是說,系統(tǒng)控制器IO使區(qū)域ARI在其中顯 示對于在用戶前面的視野由成像功能元件Cl捕獲的圖像,并且同時, 使區(qū)域AR2在其中顯示由通信部分26接收的圖像。借助于這樣的圖像顯示,用戶可享受通常得不到的視野。 圖16A至16C每個表示由具有如圖6B或6C中所示的這樣的通 信的外部內(nèi)容源裝置71提供的、并且由通信部分26接收的圖像的典 型顯示。圖16A表示這樣的例子,其中當(dāng)由諸如AV設(shè)備和個人計算機 之類的內(nèi)容源裝置71提供的圖像內(nèi)容,即運動圖像內(nèi)容或靜止圖像 內(nèi)容,被接收時,顯示部分2在其上顯示圖像內(nèi)容。系統(tǒng)控制器10 使區(qū)域AR1在其中顯示對于用戶前面的視野由成像功能元件Cl捕獲 的圖像,并且同時,使區(qū)域AR2在其中顯示由通信部分26接收的內(nèi) 容的圖像。圖16B表示這樣的例子,其中圖像數(shù)據(jù)轉(zhuǎn)送到成像顯示設(shè)備l, 并且在成像顯示設(shè)備l中,由通信部分26接收的圖像數(shù)據(jù)顯示在顯 示部分2上。待轉(zhuǎn)送到成像顯示設(shè)備l的圖像數(shù)據(jù)是在諸如內(nèi)容源裝 置71中被訪問的網(wǎng)站的瀏覽器屏幕、或被啟動的應(yīng)用程序屏幕。例 如,系統(tǒng)控制器10向外部內(nèi)容源裝置71請求經(jīng)通信部分26的數(shù)據(jù) 通信,并且使通信部分26接收響應(yīng)請求提供的數(shù)據(jù)。系統(tǒng)控制器IO
使區(qū)域AR1在其中顯示對于用戶前面的視野由成像功能元件Cl捕獲 的圖像,并且同時,使區(qū)域AR2在其中顯示由通信部分26接收的瀏 覽器屏幕或其它。圖16C表示這樣的例子,其中成像顯示設(shè)備1傳輸在諸如個人 計算機之類的外部內(nèi)容源裝置71中可得到的照片圖像的微縮像。 微縮像由在成像顯示設(shè)備1中的通信部分26接收,并且顯示在 顯示部分2上。例如,系統(tǒng)控制器10向外部內(nèi)容源裝置71請求經(jīng)通 信部分26的數(shù)據(jù)通信,并且使通信部分26接收響應(yīng)請求提供的數(shù)據(jù)。 系統(tǒng)控制器IO使區(qū)域ARI在其中顯示對于用戶前面的視野由成像功 能元件C1捕獲的圖像,并且同時,使區(qū)域AR2在其中顯示由通信部 分26接收的數(shù)據(jù)的圖像。關(guān)于圖16A、 16B、及16C的這樣的例子,為了用作由內(nèi)容源裝 置71提供的圖像,來自諸如視頻播放機之類的AV設(shè)備或諸如個人 計算機之類的信息處理器的數(shù)據(jù)為了顯示被接收,從而用戶在他或她 正在佩戴的成像顯示設(shè)備l中可檢查數(shù)據(jù)的圖像或完成各種操作。圖17A至17C每個表示在包括作為如圖7中所示的圖像源的存 儲部分25的構(gòu)造中的典型顯示。圖17A表示這樣的例子,其中在存儲部分25中的記錄介質(zhì)記錄 有圖像內(nèi)容,即運動圖像內(nèi)容和靜止圖像內(nèi)容,并且圖像內(nèi)容被再現(xiàn) 以便顯示在顯示部分2上。系統(tǒng)控制器10發(fā)出使存儲部分25進行再 現(xiàn)的命令。系統(tǒng)控制器10然后使區(qū)域AR1在其中顯示對于用戶前面 的視野由成像功能元件C1捕獲的圖像,并且同時,使區(qū)域AR2在其 中顯示是存儲部分25的再現(xiàn)結(jié)果的內(nèi)容圖像。圖17B表示這樣的例子,其中在存儲部分25中的記錄介質(zhì)記錄 有游戲程序,并且基于游戲程序的圖像顯示在顯示部分2上。系統(tǒng)控 制器10發(fā)出使存儲部分25執(zhí)行游戲程序的命令。系統(tǒng)控制器10然 后使區(qū)域AR1在其中顯示對于用戶前面的視野由成像功能元件Cl捕 獲的圖像,并且同時,使區(qū)域AR2在其中顯示由存儲部分25執(zhí)行的 游戲程序的圖像。 圖17C表示這樣的例子,其中在存儲部分25中的記錄介質(zhì)記錄 有電子圖書內(nèi)容,并且電子圖書內(nèi)容被再現(xiàn)以便顯示在顯示部分2上。 系統(tǒng)控制器10發(fā)出使存儲部分25再現(xiàn)電子圖書內(nèi)容的數(shù)據(jù)的命令。 系統(tǒng)控制器10然后使區(qū)域AR1在其中顯示對于用戶前面的視野由成 像功能元件C1捕獲的圖像,并且同時,使區(qū)域AR2在其中顯示由存 儲部分25再現(xiàn)的電子圖書內(nèi)容的圖像。關(guān)于圖17A、 17B、及17C的這樣的例子,使用成像顯示設(shè)備l, 用戶在觀看在正常視場方向上的圖像的同時,可享受在記錄介質(zhì)上記 錄的圖像的數(shù)據(jù)。這里注意,在圖17A至17C中舉例說明的是由作為圖像源的存 儲部分25提供的圖像,并且在圖16A至16C中舉例說明的是由外部 內(nèi)容源裝置71提供并且由通信部分26接收的圖像??蛇x擇地,在圖 16A至16C中舉例說明的圖像可以當(dāng)作由存儲部分25提供的再現(xiàn)圖 像,或者在圖17A至17C中舉例說明的圖像可以當(dāng)作由外部內(nèi)容源 裝置71提供的并且由通信部分26接收的那些。以上描述的典型各種顯示只不過是例子。在這個實施例中,是第 一圖像源的成像功能元件Cl捕獲在用戶視場方向上的視野的圖像, 并且生成圖像用作顯示圖像信號。任何其它圖像源每個產(chǎn)生是與由成 像功能元件Cl捕獲的圖像不同的圖像的顯示圖像信號。是由圖像源 提供的顯示圖像信號的這些圖像都一次顯示在顯示部分2上。具有這 樣一種操作的顯示變化到巨大程度。在下面,各種各樣地舉例說明的是顯示圖像信號,當(dāng)待在其區(qū)域AR1中顯示的顯示圖像信號是對于在用戶視場方向上的區(qū)域由成像 功能元件Cl通常捕獲的圖像的圖像信號時,該顯示圖像信號是用于 在顯示部分2的區(qū)域AR2中的顯示的圖像。首先考慮的是這樣一種情形,其中在圖4的構(gòu)造中,成像功能元 件C2與成像功能元件Cl相類似地布置成覆蓋在用戶前面用來成像 的區(qū)域。對于這樣一種情形,下面舉例說明的是基于由成像功能元件 C2的成像部分3導(dǎo)出的成像信號的可能顯示圖像信號 -顯示圖像信號,是作為在成像功能元件C2的成像部分3中的變 焦操作的結(jié)果的遠(yuǎn)攝變焦圖像。-顯示圖像信號,是作為在成像功能元件C2的成像部分3中的變 焦操作的結(jié)果的廣角變焦圖像。-顯示圖像信號,是作為在成像功能元件C2的成像部分3中的焦 點控制操作的結(jié)果的遠(yuǎn)距離圖像。-顯示圖像信號,是作為在成像功能元件C2的成像部分3中的焦 點控制操作的結(jié)果的近距離圖像。-顯示圖像信號,是作為在成像功能元件C2的成像部分3中的成 像幀速率變化的結(jié)果的高速捕獲圖像或低速捕獲圖像。-顯示圖像信號,作為在成像功能元件C2的成^^信號處理部分 15中的信號處理完成按比例擴大過程。-顯示圖像信號,作為在成像功能元件C2的成像信號處理部分 15中的信號處理完成按比例縮小過程。-顯示圖像信號,作為借助于在成像功能元件C2的成像部分3 中的成像靈敏度增大而亮度增大的結(jié)果。-顯示圖像信號,作為借助于在成像功能元件C2的成像部分3 中的成像靈敏度減小而亮度減小的結(jié)果。-顯示圖像信號,是作為在成像功能元件C2的成像部分3中的紅 外線成像靈敏度增大的結(jié)果的夜視圖像。-顯示圖像信號,是作為在成像功能元件C2的成像部分3中的紫 外線成像靈敏度增大的結(jié)果的圖像。-顯示圖像信號,是通過截止在成像功能元件C2中的特定波長帶 而在成像部分3中捕獲的圖像。-顯示圖像信號,是作為通過在成像功能元件C2的成像信號處理 部分15中的信號處理而強度增大的結(jié)果的亮度增大圖像。-顯示圖像信號,是作為通過在成像功能元件C2的成像信號處理 部分15中的信號處理而強度減小的結(jié)果的亮度減小圖像,-顯示圖像信號,是通過在成像功能元件C2的成像信號處理部分 15中的顏色信號處理完成顏色或色調(diào)變化的圖像。-顯示圖像信號,是通過在成像功能元件C2的成像信號處理部分 15中的成像信號處理完成對比度、清晰度、或其它的調(diào)節(jié)的圖像。-顯示圖像信號,是例如作為在成像功能元件C2的成像信號處理 部分15中的信號處理,例如鑲嵌、強度轉(zhuǎn)化、軟聚焦、部分高亮顯 示、及全部高亮顯示,而作為圖像效果處理的結(jié)果的圖像。-顯示圖像信號,由成像功能元件C2通過上述操作和信號處理的 組合而導(dǎo)出。當(dāng)成像功能元件C2與成像功能元件Cl相類似地捕獲在用戶前 面的視野的圖像時,通過這樣的操作和處理導(dǎo)出顯示圖像信號使得能 夠一次都顯示成像功能元件Cl的顯示圖像信號的圖像和與其不同的 圖像。顯示圖像信號當(dāng)然不限于以上舉例說明的那些,并且作為成像功 能元件C2的成像部分3的操作和通過成像信號處理部分15的信號處 理的結(jié)果在類型方面變作"與成像功能元件Cl的圖像不同的圖像"??蛇x擇地,各種要求可以任意改變,例如用于變焦處理和按比例 擴大/按比例縮小的比例因數(shù)、用于成像靈敏度改變的級別、及用于強 度信號和顏色信號的處理的處理系數(shù)。另一方面,在圖4的構(gòu)造中,當(dāng)成像功能元件C2布置成捕獲不 在用于成像功能元件Cl的視場方向上(即在用戶前面)的視野的圖 像時,由成像功能元件C2導(dǎo)出的顯示圖像信號將按下面舉例說明。就是說,在這樣一種情況下,由成像功能元件C2通常捕獲的圖 像總是表示與由成像功能元件Cl通常捕獲的圖像的視野不同的視 野,例如表示向后、向上、向下、向右、及向左的視野的圖像。像這 樣,成像功能元件C2的辦獲圖像信號可以按原樣用作顯示圖像信號, 并且顯示圖像信號可以與成像功能元件Cl的顯示圖像信號一起顯示 在顯示部分2上。在這樣一種情況下,如以上典型列出的那樣,作為通過成像功能 元件C2的成像部分3的成像操作、或通過成像信號處理部分15的信
號處理的結(jié)果的圖像信號可以用作顯示圖像信號。以上描述類似地適用于其中提供三個或更多個成像功能元件(即Cl、 C2、 C3、及其它)的情形?,F(xiàn)在考慮的是其中成像功能元件C2、 C3、及其它的任一個設(shè)有用來捕獲在與成像功能元件C1相同的方向 上的視野的圖像的成像功能元件。在這種情況下,生成捕獲圖像信號 可以經(jīng)受通過成像部分3的成像操作或通過成像信號處理部分15的 信號處理,并且與成像功能元件Cl的視野不同的視野的生成圖像可 以用作顯示圖像信號。在另一種情況下,成像功能元件C2、 C3、及其它的任一個設(shè)有 用來捕獲在與成像功能元件Cl的方向不同的方向(即不在用戶前面 的方向)上的視野的圖像的成像部分3。在這種情況下,生成的捕獲 圖像信號可以用作顯示圖像信號,或者如以上典型列出的那樣,完成 通過成像部分3的成像操作或通過成像信號處理部分15的信號處理 的圖像信號可以用作顯示圖像信號。在又一種情況下,成像功能元件C2、 C3、及其它的任一個設(shè)有 用來捕獲在相同方向上的視野的圖像的成像功能元件。在這種情況 下,通常捕獲的生成圖像之一用作顯示圖像信號,并且完成通過成像 部分3的操作或通過成像信號處理部分15的信號處理的剩余圖像信 號用作顯示圖像信號。這使得能夠?qū)С雠c對于相同方向的視野捕獲的 圖像不同的圖像的顯示圖像信號。在這種情況下,當(dāng)然,如以上描述 的那樣,完成通過成像部分3的操作或通過成像信號處理部分15的 信號處理的圖像信號都可以用作顯示圖像信號。當(dāng)成像功能元件C2和C3都捕獲在用戶背后的視野的圖像時, 生成的通常捕獲圖像之一可以用作顯示圖像信號,并且是遠(yuǎn)攝圖像的 另一個可以用作顯示圖像信號。另一方面,是按比例擴大圖像的圖像 之一可以用作顯示圖像信號,并且是紫外線靈敏度增大圖像的另一個 可以用作顯示圖像信號。這也適用于其中成像功能元件C2是在用來成像的方向上可變的 可動成像部分。借助于這樣一種成像功能元件C2,對于不在用戶前
面的視野捕獲的任何圖像、或完成通過成像部分3的操作和通過成像 信號處理部分15的信號處理的任何圖像信號可以用作顯示圖像信號。 像這樣提供的可動成像部分可以實現(xiàn)各種各樣地改變成像方向 的可動控制。例如,當(dāng)任何捕獲圖像信號經(jīng)受圖像分析,并且檢測到 特定目標(biāo)時,成像方向可以按照在捕獲圖像中特定目標(biāo)的運動而變 化。通過這樣的控制,例如用戶可看到在區(qū)域AR2中跟隨特定目標(biāo) 的圖像。這也適用于顯示由外部裝置提供的并且由通信部分26接收的圖 像的情形。就是說,來自外部成像設(shè)備70和內(nèi)容源裝置71的圖像與由成像 功能元件Cl導(dǎo)出的顯示圖像信號的圖像不同。因此,通過在顯示部 分2上按原樣顯示由通信部分26接收的圖像信號作為顯示圖像信號, 各種類型的圖像可適于向.用戶顯示。這也適用于顯示由存儲部分25再現(xiàn)的圖像,該圖像與由成像功 能元件Cl導(dǎo)出的顯示圖像信號的圖像不同。像這樣,通過在顯示部 分2上按原樣顯示是存儲部分25的再現(xiàn)結(jié)果的圖像信號作為顯示圖 像信號,各種類型的圖像可適于向用戶顯示。這里注意,當(dāng)允許顯示圖像處理部分12執(zhí)行圖像信號處理,例 如圖像按比例擴大或縮小、強度或顏色的處理、對比度或清晰度的調(diào) 節(jié)、及圖像效果處理時,由通信部分26接收的圖像信號、或是存儲 部分25的再現(xiàn)結(jié)果的圖像信號可以經(jīng)受這樣的圖像信號處理,由此 產(chǎn)生顯示圖像信號。當(dāng)通信部分26和存儲部分25每個是圖像源時,與由個人計算機 或其它進行的圖像顯示相類似的圖像顯示也是可能的,例如包括高速 再現(xiàn)、低速再現(xiàn)、逐幀前進、顯示頁面變化、及滾動顯示的變速再現(xiàn)。以上描述的是其中由成像功能元件Cl通常捕獲的圖像是顯示圖 像信號的情形??蛇x擇地,完成通過成像部分3的操作和通過在成像 功能元件C1中的成像信號處理部分15的圖像信號可以用作顯示圖像 信號。操作和信號處理包括例如遠(yuǎn)攝/廣角變焦、按比例擴大/按比例
縮小、靈敏度變化、近距離成像/遠(yuǎn)距離成像、強度或顏色的處理、及 圖像效果處理。在任何情況下,任何其它圖像源可以構(gòu)造成產(chǎn)生與來自成像功能元件C1的那些不同的圖像的顯示圖像信號。 5.典型操作觸發(fā)如圖11的流程圖中所示,系統(tǒng)控制器10當(dāng)在步驟F101中確定 對于多個圖像產(chǎn)生顯示開始觸發(fā)時,進行由多個圖像源提供的圖像的 顯示。系統(tǒng)控制器IO當(dāng)在步驟F103中確定產(chǎn)生顯示開始觸發(fā)時,也 進行顯示細(xì)節(jié)變化或顯示構(gòu)造變化。而且,系統(tǒng)控制器10當(dāng)在步驟 F104中確定對于多個圖像產(chǎn)生顯示結(jié)束觸發(fā)時,結(jié)束多個圖像的顯示 操作。像這樣與顯示操作相關(guān)的觸發(fā)可以響應(yīng)用戶的操作而產(chǎn)生??蛇x 擇地,如以上描述的那樣,首先可以檢測用戶狀態(tài)或外界狀態(tài),并且 然后基于任何預(yù)定要求,系統(tǒng)控制器10可以確定產(chǎn)生觸發(fā)。在下面,描述的是其中基于用戶狀態(tài)或外界狀態(tài)進行關(guān)于觸發(fā)產(chǎn)生的確定的例子。當(dāng)用戶狀態(tài)是指用來確定觸發(fā)的產(chǎn)生時,成像顯示設(shè)備1為此目 的設(shè)有像操作觸發(fā)信息產(chǎn)生部分16、視力傳感器、加速度傳感器、回 轉(zhuǎn)傳感器、身體傳感器、及其它。視力傳感器假定成檢測關(guān)于用戶的視力感覺的信息,并且如果成 像部分布置在用來捕獲用戶眼睛部分的圖像的顯示部分2的附近,則 可由成像部分實施。由用于其圖像分析的系統(tǒng)控制器10獲得像這樣 由用于用戶眼睛部分的成像部分捕獲的生成圖像,由此檢測各種類型 的信息,例如視線、焦距、瞳孔反射、眼底圖案、眼瞼眨動、及其它 的檢測。這些檢測結(jié)果用作確定用戶狀態(tài)和他或她的意圖的基礎(chǔ)??蛇x擇地,視力傳感器可以由發(fā)光部分和光接收部分構(gòu)造。發(fā)光 部分布置在用來照明用戶眼睛部分的顯示部分2的附近,并且光接收 部分接收由眼睛部分反射的光。例如,光接收信號可以用來檢測用戶 的晶體透鏡的厚度,從而可對于用戶的眼睛檢測焦距。
通過檢測用戶的視線方向,系統(tǒng)控制器10可確定用戶正在感興 趣地觀察在顯示部分2上顯示的圖像的哪部分。系統(tǒng)控制器IO可把用戶視線方向確認(rèn)為操作輸入。例如,用戶 視線的橫向運動可以當(dāng)作用于成像顯示設(shè)備1的預(yù)定操作輸入。檢測用戶的焦距也使得能夠確定用戶正在感興趣地觀察的視野 是近距離的還是遠(yuǎn)距離的?;跈z測結(jié)果,可以相應(yīng)地施加控制,例 如,變焦、按比例擴大或縮小、及焦點變化。例如,當(dāng)用戶觀看在遠(yuǎn) 距離中的視野時,相應(yīng)地進行遠(yuǎn)攝顯示。檢測用戶的瞳孔反射使得如果檢測結(jié)果告訴狀態(tài)是通透的,則能 夠確定在用戶周圍的亮度,并且當(dāng)檢測結(jié)果告訴狀態(tài)是監(jiān)視器顯示 時,確定由用戶感知的當(dāng)前顯示圖像的刺眼。基于這樣的確定的結(jié)果, 可相應(yīng)地進行強度和成像靈敏度的調(diào)節(jié)。檢測用戶的眼底圖案有助于例如用戶的鑒別。因為眼底圖案對于 每個個人是獨特的,所以眼底圖案可以在專用于用戶的控制施加之前 辨別誰正在佩戴設(shè)備,或者例如只有一些特定用戶才可允許執(zhí)行顯示操作。檢測用戶的眼瞼眨動使得能夠確定由用戶感知的刺眼水平或用 戶眼睛的疲勞。眼瞼眨動也可確認(rèn)為由用戶進行的任何有意操作輸 入,例如,當(dāng)用戶眨眼三次時,它將確定為預(yù)定操作輸入。加速度傳感器和回轉(zhuǎn)傳感器每個按照用戶的運動輸出信號。例 如,加速度傳感器適于檢測在直線方向上的運動,并且回轉(zhuǎn)傳感器適 于檢測轉(zhuǎn)動運動和擺動。當(dāng)加速度傳感器和回轉(zhuǎn)傳感器布置在任何特定位置處時,允許這 些傳感器檢測用戶身體或身體部分的運動。當(dāng)這些加速度和回轉(zhuǎn)傳感器附加在如圖1A和1B中所示的眼鏡 型的成像顯示設(shè)備1的內(nèi)部,即傳感器供檢測用戶頭部的運動之用時, 加速度傳感器的生成檢測信息將是關(guān)于用戶頭部或整個身體的運動, 并且結(jié)果是關(guān)于用戶頭部或整個身體的運動的角速度和擺動。像這樣,可檢測用戶運動他或她的頸部以上部位的行為,例如用 戶是向上還是向下看。當(dāng)用戶正在向下看時,可以確定他或她正在看 近距離中的視野,如在手處的圖書。另一方面,當(dāng)用戶正在向上看時, 可以確定他或她正在看逸距離中的視野。當(dāng)檢測到任何用戶運動頸部以上部位的行為時,系統(tǒng)控制器10可以確認(rèn)它是用戶的有意操作。例如,當(dāng)他或她把他或她的頭搖動兩 次時,它將當(dāng)作預(yù)定操作輸入。某種類型的加速度傳感器和回轉(zhuǎn)傳感器可確定用戶是否保持靜 止(不行走)、行走、跑步、及其它。也有可能檢測用戶的狀態(tài)變化, 即站著的用戶現(xiàn)在正在坐下,或者坐著的用戶現(xiàn)在正在站起。如果加速度傳感器和回轉(zhuǎn)傳感器與放置到頭部的可佩戴單元分 離地提供,并且附加到用戶的臂或腿上,則傳感器只可檢測臂或腿的行為。身體傳感器檢測用戶的身體信息,例如關(guān)于心跳(心跳計數(shù)); 脈博(脈博計數(shù));出汗;腦波,例如a波、p波、e波、及5波;或電 流皮膚響應(yīng);體溫;血壓;呼吸活動,例如,呼吸速率、呼吸深度、 呼吸容量;及其它的信息。使用這樣的信息,例如系統(tǒng)控制器10可 確定用戶狀態(tài),例如,用戶是否在壓力下或激動、情緒鎮(zhèn)靜、或舒適 或不舒適。使用這樣的信息,也有可能檢測用戶現(xiàn)在是否正佩戴著成像顯示 設(shè)備l。例如,當(dāng)用戶不是正在佩戴著成像顯示設(shè)備l時,系統(tǒng)控制 器10可控制地把狀態(tài)放置到僅檢測身體信息的備用中。當(dāng)身體信息 告訴用戶戴上成像顯示設(shè)備1時,系統(tǒng)控制器10可控制地把狀態(tài)放 置到電源通中,并且當(dāng)身體信息告訴用戶脫下成像顯示設(shè)備l時,系 統(tǒng)控制器10可控制地把狀態(tài)放置回備用。由身體傳感器導(dǎo)出的檢測信息可用于用戶的鑒別,即誰正佩戴設(shè) 備的辨別。這里注意,例如,身體傳感器可以布置在眼鏡型的成像顯示設(shè)備 1的可佩戴框架的內(nèi)部。借助于這樣一種布置,可以允許身體傳感器 檢測關(guān)于在側(cè)面上或在后部中的用戶頭部的信息。可選擇地,身體傳 感器可以與成像顯示設(shè)備l的可佩戴框架分離地提供,并且附加到身 體的任何預(yù)定部分上。為了外界狀態(tài)的檢測,在成像顯示設(shè)備l中,為了獲得任何外界信息,操作觸發(fā)信息產(chǎn)生部分16設(shè)有外圍環(huán)境傳感器、成像目標(biāo)傳 感器、GPS (全球定位系統(tǒng))接收部分、日期和時間計數(shù)部分、圖像 分析部分,或者可以使用通信部分26。外圍環(huán)境傳感器由照明傳感器、溫度傳感器、濕度傳感器、大氣 壓力傳感器、及其它來舉例說明。某種類型的照明傳感器可檢測關(guān)于成像顯示設(shè)備1周圍的區(qū)域 的亮度的信息。某種類型的溫度傳感器、濕度傳感器、及大氣壓力傳感器可導(dǎo)出 用作確定溫度、濕度、大氣壓力、或天氣的基礎(chǔ)的信息。借助于這樣的外圍環(huán)境傳感器,允許成像顯示設(shè)備1確定其周圍 區(qū)域的亮度或天氣,如果設(shè)備布置在外面的話。像這樣,把這樣的信 息用作外界信息,系統(tǒng)控制器10可控制地執(zhí)行產(chǎn)生適于其周圍亮度 或天氣條件的顯示圖像信號的操作,例如,基于其周圍的亮度在圖像 中改變強度級,或者基于天氣條件改變圖像的色調(diào)。成像目標(biāo)傳感器檢測關(guān)于成像目標(biāo)的信息。成像目標(biāo)傳感器由距 離傳感器、熱電傳感器、及其它來舉例說明,并且可導(dǎo)出關(guān)于到成像 目標(biāo)的距離的信息或用來找出什么是成像目標(biāo)的信息。通過檢測至成像目標(biāo)的距離,系統(tǒng)控制器IO可按照距離可控制 地執(zhí)行成像操作和顯示操作。而且,當(dāng)成像目標(biāo)檢測為例如是人類時, 系統(tǒng)控制器10按照成像目標(biāo)執(zhí)行產(chǎn)生顯示圖像信號的操作。GPS接收部分21獲得關(guān)于綽度和經(jīng)度的信息,作為當(dāng)前位置。 當(dāng)檢測綷度和經(jīng)度時,GPS接收部分21參考制圖數(shù)據(jù)庫或其它,由 此獲得關(guān)于在當(dāng)前位置處的點(即在點附近)的信息。為了由系統(tǒng)控 制器10參考使用,GPS接收部分21可以裝有較大容量記錄介質(zhì),如 HDD (硬盤驅(qū)動器)或閃存,并且記錄介質(zhì)可以記錄有制圖數(shù)據(jù)庫, 從而可獲得與當(dāng)前位置相關(guān)的信息。 在提供通信部分26的構(gòu)造中,即使成像顯示設(shè)備l在其中不攜 帶制圖數(shù)據(jù)庫,對于網(wǎng)絡(luò)服務(wù)器或其中裝有制圖數(shù)據(jù)庫的裝置經(jīng)通信 部分26也可以進行訪問。借助于這樣一種訪問,為了請求信息按照 當(dāng)前位置可以傳輸關(guān)于絆度和經(jīng)度的信息,從而可以接收關(guān)于請求的 信息。關(guān)于當(dāng)前位置的信息包括在當(dāng)前位置鄰近的區(qū)域名稱、建筑物的 名稱、設(shè)施、商店、車站、及其它。關(guān)于當(dāng)前位置的信息也包括建筑物的類型,例如公園、主題公園、 音樂廳、劇院、電影院、體育設(shè)施、及其它。關(guān)于當(dāng)前位置的信息也包括自然的類型或名稱,例如海岸、海洋、 江河、環(huán)山區(qū)域、山峰、森林、湖泊、平原、及其它。作為關(guān)于更詳細(xì)位置的信息,關(guān)于當(dāng)前位置的信息包括在主題公 園中的特定區(qū)域、在棒球場或足球場中的觀眾區(qū)域、在音樂廳中的坐 席區(qū)域、及其它。借助于獲得的關(guān)于當(dāng)前位置的這樣信息,系統(tǒng)控制器10變得能 夠按照在當(dāng)前位置處和在當(dāng)前位置鄰近的任何地理要求、設(shè)施、及其 它可控制地執(zhí)行產(chǎn)生顯示圖像信號的操作。系統(tǒng)控制器10也變得能 夠?qū)嵭锌刂埔蚤_始或結(jié)束對于特定位置的顯示。例如,日期和時間計數(shù)部分計數(shù)日期和時間,即年、月、日;和時、分、秒。這樣一種日期和時間計數(shù)部分使系統(tǒng)控制器10能夠確認(rèn)當(dāng)前時間、晝或夜、月份、季節(jié)、及其它。像這樣,系統(tǒng)控制器IO能可控制地執(zhí)行按照晝或夜(時間)產(chǎn)生顯示圖像信號的操作、產(chǎn)生 適于當(dāng)前季節(jié)的顯示圖譯信號的操作、及其它。如果借助于用來分析捕獲圖像的圖像分析部分,則由用于成像目 標(biāo)的捕獲圖像可檢測如下各種類型的信息。成像目標(biāo)可由捕獲圖像的類型(例如人類、動物、自然、建筑物、及裝置)定義。當(dāng)成像目標(biāo)定義為是動物時,圖像可以包括例如是對 象的鳥、或是對象的貓。當(dāng)成像目標(biāo)定義為是自然時,圖像可以包括 海洋、山脈、樹木、江河、湖泊、天空、太陽、月亮、及其它。當(dāng)成
像目標(biāo)定義為是建筑物時,圖像可以包括房屋、建筑物、體育場館、及其它。當(dāng)成像目標(biāo)是裝置時,圖像可以包括個人計算機、AV(聲 頻-視頻)設(shè)備、移動電話、PDA、 IC (集成電路)卡、兩維條碼、 及其它。對于像這樣的成像的類型定義,對于可變形狀的每一種預(yù)先可以 進行特性設(shè)置,并且可以進行捕獲圖像在其中是否包括任何形狀的對 象的確定。如果借助于由圖像分析部分進行的圖像分析,則在圖像中借助于 在圖像中在幀之間形成的差別檢測技術(shù)或其它可檢測對象的運動,例 如任何快速運動。如果情況是這樣,則變得有可能檢測捕獲在快速運 動中的任何對象的圖像(例如,捕獲在比賽期間選手的圖像、捕獲行 駛的車輛的圖像)的任何狀態(tài)。而且如果借助于由圖像分析部分進行的圖像分析,則有可能檢測 在用戶周圍的外圍環(huán)境,例如基于當(dāng)天的時間或天氣、及降雨量可確 定亮度。而且如果借助于由圖像分析部分進行的圖像分析,則當(dāng)人類是成 像對象時,有可能由他或她的臉辨別這個人。如已知的那樣,人類的 臉可構(gòu)成為個人特性數(shù)據(jù),用作關(guān)于臉部的相對位置信息。例如,每 個個人具有他或她自己的唯一 Ed/EN (即從雙眼中心到鼻子的間隔 EN與在雙眼之間的間隔Ed)的比值;及Ed/EM (即從雙眼中心到 嘴的間隔EN與在雙眼之間的間隔Ed)的比值。像這樣,比值認(rèn)為是 對于用戶外觀的變化不敏感的信息,例如,即使用戶改變他或她的發(fā) 型或者戴上或摘下眼鏡。比值也認(rèn)為是對于隨年齡變化不敏感的信 息。像這樣,當(dāng)捕獲圖像包括人臉時,圖像分析部分通過分析圖像可 檢測這個人特性。當(dāng)從捕獲圖像檢測到任何個人特性數(shù)據(jù)時,如果裝有HDD或閃 存以便由系統(tǒng)控制器10參考使用,并且如果人類數(shù)據(jù)庫存儲在這樣 一種記錄介質(zhì)中,則可獲得關(guān)于是對象的個人的信息??蛇x擇地,即
使在成像顯示設(shè)備l中沒有提供人類數(shù)據(jù)庫,則對于其中裝有人類數(shù)據(jù)庫的網(wǎng)絡(luò)服務(wù)器或裝置經(jīng)通信部分26也可進行訪問。借助于這樣 一種訪問,為了請求需要的信息可以傳輸關(guān)于個人特性數(shù)據(jù)的信息, 從而可以接收關(guān)于特定人的信息。例如,如果關(guān)于用戶以前遇到過的人們的任何信息,例如姓名和 稱呼,與個人特性數(shù)據(jù)庫一起輸入到人類數(shù)據(jù)庫中,則當(dāng)用戶遇到任 何特定人(捕獲他或她的圖像)時,系統(tǒng)控制器10可進行他或她的 信息的檢索。如果有其中與個人特性數(shù)據(jù)一起攜帶關(guān)于名人信息的人類數(shù)據(jù) 庫,則當(dāng)用戶遇到這些名人中的任何人時,系統(tǒng)控制器10可進行他 或她的信息的檢索?;谙襁@樣由圖像分析分部導(dǎo)出的檢測信息,系統(tǒng)控制器10可 控制地執(zhí)行產(chǎn)生專用于成像目標(biāo)的顯示圖像信號的過程。當(dāng)任何特定 目標(biāo)或個人的圖像被捕獲時,例如可以產(chǎn)生高亮目標(biāo)的顯示圖像信 號。借助于通信部分26,作為外界信息,可獲得各種類型的信息。 例如,如在上文中描述的那樣,通信部分26按照關(guān)于由成像顯示設(shè)備1提供的蟀度和經(jīng)度的信息或個人特性數(shù)據(jù)可獲得由任何外部裝置找到信息。而且,從任何外部裝置,通信部分26可獲得關(guān)于天氣的信息, 例如天氣信息、溫度信息、及濕度信息。而且,從任何外部裝置,通信部分26可獲得關(guān)于設(shè)施的信息, 例如關(guān)于如何使用設(shè)施的信息、關(guān)于是否禁止或允許在設(shè)施中成像、 指導(dǎo)信息、及其它。通信部分26也可通過任何預(yù)定通信協(xié)議,獲得關(guān)于作為網(wǎng)絡(luò)裝 置的外部裝置本身的識別信息,例如用于識別的裝置的類型和ID。通信部分26也可獲得在任何外部裝置中存儲的圖像數(shù)據(jù)、由外 部裝置再現(xiàn)或顯示的圖像數(shù)據(jù)、由外部裝置接收的圖像數(shù)據(jù)、及其它?;诳捎赏ㄐ挪糠?6獲得的這樣的信息,系統(tǒng)控制器10可控制
地執(zhí)行產(chǎn)生顯示圖像信號的過程,息產(chǎn)生部分16,并且基于檢測結(jié)果,開始、結(jié)束、或改變顯示(顯示 細(xì)節(jié)變化和區(qū)域構(gòu)造變化),由此實施適當(dāng)?shù)幕蚋信d趣的顯示操作而 沒有特定用戶操作。用來檢測用戶狀態(tài)和外界狀態(tài)的構(gòu)造變化更大。6.實施例、典型例子、及增強例子的效果如在上文中描述的那樣,根據(jù)實施例,顯示部分2的屏幕區(qū)域通 過顯示圖像信號部分地顯示對于在用戶視場方向上的視野由成像功 能元件C1捕獲的圖像。同時,通過由任何其它圖像源,例如成像功 能元件C2、通信部分26、及存儲部分25,提供的顯示圖像信號進行 顯示。以這樣一種方式,在觀看在方向場中的正常視野的同時,用戶 可看到與由用戶視線知覺通常感知的圖像不同的圖像。例如,在觀看 對于用戶前面的視野由成像功能元件Cl捕獲的圖像的同時,用戶通 過成像功能元件C2可看到遠(yuǎn)攝圖像、按比例擴大圖像、特殊效果圖 像、在背后的視野的圖像、及其它。像這樣,與正常視覺的任何圖像 一起用戶可看到借助于用戶正常意義的視線通常看不到的視野的圖 像,從而可人為地提高用戶的目視能力。成像顯示設(shè)備l的外觀和構(gòu)造不限于圖1、 2、 3、 4、 5、 7、及8 的例子,并且各種其它修改例子也是可能的。由成像功能元件C1或其它導(dǎo)出的圖像信號可以記錄在存儲部分 25中的記錄介質(zhì)上。像這樣由成像功能元件Cl導(dǎo)出的圖像信號可以從通信部分26 轉(zhuǎn)送到任何其它裝置??蛇x擇地,為了成像,構(gòu)造例如可以包括用來在近距離中收集聲 頻的麥克風(fēng)、和用來輸出聲頻的耳機型揚聲器部分。仍然可選擇地,構(gòu)造可以包括用于在圖像中的字符識別的字符識 別部分、和用于聲頻合成處理的聲頻合成部分。當(dāng)捕獲圖像包括字符 時,在聲頻合成部分中通過大聲讀字符可以產(chǎn)生聲頻信號,并且生成
信號可以從揚聲器部分輸出。顯示圖像信號可以是靜止圖像。例如,在成像功能元件C1、 C2、 或其它中,靜止圖像可以在任何預(yù)定觸發(fā)下被捕獲,并且生成的靜止 圖像可以顯示在顯示部分2上。以上舉例說明的是包括眼鏡型或頭戴型可佩戴單元的成像顯示 設(shè)備1。這當(dāng)然不是限制性的,并且本發(fā)明實施例的成像顯示設(shè)備可 以構(gòu)造成包括作為成像功能元件Cl的第一圖像信號產(chǎn)生裝置,該第 一圖像信號產(chǎn)生裝置用來基于由負(fù)責(zé)在用戶視場方向上成像的成像 部分導(dǎo)出的捕獲圖像信號而產(chǎn)生顯示圖像信號。就是說,如果至少捕 獲在用戶視場方向上的圖像,則構(gòu)造將可行。像這樣,裝有用于用戶 佩戴的第一圖像信號產(chǎn)生裝置(成像功能元件Cl)的單元在類型方 面不是限制性的,例如頭戴耳機型、頸帶型、及耳掛型。而且,為了 用戶佩戴,單元可以附加到普通眼鏡、護目鏡、耳機、或使用諸如夾 片之類的附加部件的其它物品上。而且,單元不必放置到用戶的頭部 上。本領(lǐng)域的技術(shù)人員應(yīng)該理解,依據(jù)至此的設(shè)計要求和其它因素可 以想到各種修改、組合、子組合及變更,因為它們在附屬權(quán)利要求書 或其等效物的范圍內(nèi)。.
權(quán)利要求
1.一種成像顯示設(shè)備,包括顯示裝置,用于圖像顯示;第一圖像信號產(chǎn)生裝置,用來在用戶視場方向是對象方向的情況下,基于由成像部分捕獲的捕獲圖像信號而產(chǎn)生顯示圖像信號;第二圖像信號產(chǎn)生裝置,用來產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號;及控制裝置,用來在顯示裝置上同時允許由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像的顯示和由第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像的顯示。
2. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 顯示裝置布置在用戶眼睛的前面用于圖像顯示。
3. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 顯示裝置形成在與其中包括第一圖像信號產(chǎn)生裝置的底盤不同的底盤中。
4. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 第一圖像信號產(chǎn)生裝置包括成像部分;信號處理部分,它對于由成像部分捕獲的捕獲圖像信號進 行信號處理。
5. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 第二圖像信號產(chǎn)生裝置基于由成像部分捕獲的捕獲圖像信號產(chǎn)生要供給到顯示裝 置的顯示圖像信號。
6. 根據(jù)權(quán)利要求5所述的成像顯示設(shè)備,其中 第二圖像信號產(chǎn)生裝置包括成像部分;信號處理部分,它對于由成像部分捕獲的捕獲圖像信號進 行信號處理。
7. 根據(jù)權(quán)利要求5所述的成像顯示設(shè)備,其中 第二圖像信號產(chǎn)生裝置通過由成像部分對于成像透鏡系統(tǒng)實行的操作控制,產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的 圖像不同的圖像的顯示圖像信號。
8. 根據(jù)權(quán)利要求6所述的成像顯示設(shè)備,其中 第二圖像信號產(chǎn)生裝置通過在信號處理部分中的信號處理,產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像 的顯示圖像信號。
9. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 第二圖像信號產(chǎn)生裝置包括從外部裝置接收圖像信號的接收部分,并且 基于由接收部分接收的圖像信號,產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號。
10. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 第二圖像信號產(chǎn)生裝置包括再現(xiàn)來自記錄介質(zhì)的圖像信號的再現(xiàn)部分,并且 基于由再現(xiàn)部分再現(xiàn)的圖像信號,產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號。
11. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 顯示裝置在屏幕區(qū)域中設(shè)置有主屏幕區(qū)域和次屏幕區(qū)域,并且在主屏幕區(qū)域或次屏幕區(qū)域中,通過由第一圖像信號產(chǎn)生裝置提供的顯 示圖像信號進行圖像顯示,并且在剩余屏幕區(qū)域上,通過由第二圖像 信號產(chǎn)生裝置提供的顯示圖像信號進行圖像顯示。
12. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中在顯示裝置中,屏幕區(qū)域分成兩個區(qū)域,并且在兩個區(qū)域之一 中, 通過由第一圖像信號產(chǎn)生裝置提供的顯示圖像信號進行圖像顯示,并且在剩余區(qū)域中,通過由第二圖像信號產(chǎn)生裝置提供的顯示圖像信號 進行圖像顯示。
13. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通過近距離成像或遠(yuǎn)距離成像捕獲的圖像信號。
14. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通過遠(yuǎn)攝成像或廣角成像捕獲的圖像信號。
15. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通過按比例擴大處理或按比例縮小處理捕獲的圖像信號。
16. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是通過借助于成像靈敏度增加或減小捕獲的圖像信號。
17. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是借助于紅外線成像靈敏度增加捕獲的圖像信號。
18. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是借助于紫外線成像靈敏度增加捕獲的圖像信號。
19. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是在是對象方向的用戶視場方向上捕獲的圖像信號。
20. 根據(jù)權(quán)利要求1所述的成像顯示設(shè)備,其中 由第一和第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號之一是在作為對象方向的、與用戶視場方向不同的方向上捕獲的圖像信號。
21. —種成《象顯示方法,包括第一圖像信號產(chǎn)生步驟,在用戶視場方向是對象方向的情況下, 基于由成像部分捕獲的捕獲圖像信號而產(chǎn)生顯示圖像信號; 第二圖像信號產(chǎn)生步驟,產(chǎn)生是與在第一圖像信號產(chǎn)生步驟中產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號;及顯示步驟,同時允許在第一圖像信號產(chǎn)生步驟中產(chǎn)生的顯示圖像信號的圖像的顯示和在第二圖像信號產(chǎn)生步驟中產(chǎn)生的顯示圖像信號的圖像的顯示。
22.—種成像顯示設(shè)備,包括 顯示單元,用于圖像顯示;第一圖像信號產(chǎn)生單元,用來在用戶視場方向是對象方向的情況 下,基于由成像部分捕獲的捕獲圖像信號而產(chǎn)生顯示圖像信號;第二圖像信號產(chǎn)生單元,用來產(chǎn)生與由第一圖像信號產(chǎn)生單元產(chǎn) 生的顯示圖像信號的圖像不同的圖像的顯示圖像信號;及控制單元,用來在顯示單元上同時允許由第 一圖像信號產(chǎn)生單元 產(chǎn)生的顯示圖像信號的圖像的顯示和由第二圖像信號產(chǎn)生單元產(chǎn)生 的顯示圖像信號的圖像的顯示。
全文摘要
本發(fā)明涉及成像顯示設(shè)備和方法,其中具體公開了一種成像顯示設(shè)備,包括顯示裝置,用于圖像顯示;第一圖像信號產(chǎn)生裝置,用來在用戶視場方向是對象方向的情況下,基于由成像部分捕獲的捕獲圖像信號而產(chǎn)生顯示圖像信號;第二圖像信號產(chǎn)生裝置,用來產(chǎn)生與由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像不同的圖像的顯示圖像信號;及控制裝置,用來在顯示裝置上同時允許由第一圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像的顯示和由第二圖像信號產(chǎn)生裝置產(chǎn)生的顯示圖像信號的圖像的顯示。
文檔編號G02B27/02GK101165538SQ20071018024
公開日2008年4月23日 申請日期2007年10月16日 優(yōu)先權(quán)日2006年10月16日
發(fā)明者伊藤大二, 佐古曜一郎, 飛鳥井正道, 鶴田雅明 申請人:索尼株式會社