圖像顯示系統(tǒng)、頭部佩戴型顯示裝置及其控制方法
【技術(shù)領域】
[0001]本發(fā)明涉及頭部佩戴型顯示裝置。
【背景技術(shù)】
[0002]已知有頭部佩戴的顯示裝置即頭部佩戴型顯示裝置(頭戴顯示器(Head MountedDisplay),HMD)。頭部佩戴型顯示裝置例如利用液晶顯示器及光源生成表示圖像的圖像光，利用投射光學系統(tǒng)和/或?qū)Ч獍鍖⑸傻膱D像光導入使用者的眼，從而使得使用者觀看虛像。另外，在利用條形碼等的揀選(picking)系統(tǒng)中，通過由頭部佩戴型顯示裝置形成的虛像使得使用者觀看信息，進行揀選作業(yè)的效率化。
[0003]專利文獻I公開了:佩戴頭部佩戴型顯示裝置的使用者進行取得收納于陳列貨架的商品的揀選作業(yè)時，除了使用者觀看的陳列貨架的貨架編號、還使得與貨架編號對應的商品的圖像，通過頭部佩戴型顯示裝置被使用者觀看的技術(shù)。另外，專利文獻2公開了:在提供商品的關聯(lián)信息的系統(tǒng)中，使用者按一定時間以上觀看記載有多個商品名的目錄的預定的商品名時，使得與所觀看的商品名關聯(lián)的信息作為圖像被使用者觀看的技術(shù)。另外，專利文獻3公開了:由拍攝使用者的視線方向的相機拍攝在物品的收納場所配置的多個代碼時，基于預先存儲的信息，使得使用者觀看基于從多個代碼內(nèi)選擇的一個代碼的圖像的物品的揀選作業(yè)的支援系統(tǒng)。
[0004]【專利文獻I】特開平10-147411號公報
[0005]【專利文獻2】特開2008-15634號公報
[0006]【專利文獻3】特許第5334145號公報

【發(fā)明內(nèi)容】

[0007]但是，專利文獻I所述的技術(shù)中，在陳列貨架配置的貨架編號小、使用者遠離貨架編號時，存在不能識別貨架編號、使用者無法觀看商品的圖像的問題。另外，存在僅僅靠商品的圖像無法進行高效的揀選作業(yè)的問題。另外，專利文獻2所述的技術(shù)中，使用者希望觀看與商品名關聯(lián)的圖像時，必須觀看目錄的商品名一定時間以上，存在圖像觀看花時間的問題。另外，專利文獻3所述的技術(shù)中，為了使用者觀看基于代碼的圖像，必須事前進行信息的登記，仍有提高便利性的余地。另外，上述問題不限于揀選系統(tǒng)的領域，例如，在向目的場所的道路指引等的其他領域中也存在相同的問題。
[0008]本發(fā)明為了解決上述問題的至少一部分而提出，可以實現(xiàn)為以下的形態(tài)。
[0009](I)根據(jù)本發(fā)明的一個形態(tài)，提供頭部佩戴型顯示裝置。該頭部佩戴型顯示裝置具備:圖像顯示部，在佩戴于使用者的頭部的狀態(tài)下，基于圖像數(shù)據(jù)，使得使用者觀看到圖像光作為虛像，并且使得使用者觀看到外景；拍攝上述外景的拍攝部；和控制部，在所拍攝的拍攝圖像包含特定的標記的圖像即標記圖像的情況下，用上述圖像顯示部使得使用者觀看與上述標記圖像的種類和上述標記圖像的形狀的組合對應的特定的上述虛像。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于使得使用者觀看:相應于拍攝的標記圖像的形狀而特定的、與使用者和拍攝的特定的標記的位置關系對應的特定的虛像，因此，使用者可以相應于拍攝的特定的標記的種類和/或位置關系，觀看最佳的虛像，可以高效進行基于觀看的虛像的各種作業(yè)。
[0010](2)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述特定的虛像對應于:上述標記圖像的種類和作為上述標記圖像的形狀的上述標記圖像的大小的組合。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，即使拍攝相同的特定的標記，也可以相應于所特定的距離，使得使用者觀看多個特定的虛像，即使一個特定的標記，也可以向使用者提供適于與使用者的位置關系的更多的信息。
[0011](3)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述控制部將從上述圖像顯示部到上述特定的虛像成像的位置為止的距離設定成:與基于上述標記圖像的種類和上述標記圖像的大小的組合而特定的從上述圖像顯示部到上述特定的標記為止的距離相同。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于可以在使用者容易觀看虛像的位置使特定的虛像成像，因此可以迅速使得使用者識別特定的虛像。
[0012](4)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述特定的虛像對應于:多個上述拍攝圖像的每個所包含的一個上述標記圖像被拍攝的順序、上述標記圖像的種類和上述標記圖像的形狀的組合。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于使得使用者僅僅觀看多個標記圖像內(nèi)的與按照被拍攝的順序的特定的標記對應的特定的虛像，因此，不會使得使用者觀看與順序不同的各種作業(yè)關聯(lián)的虛像，可以使得使用者進行高效的作業(yè)。
[0013](5)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述控制部用上述圖像顯示部使得使用者觀看與上述拍攝圖像中的預定的區(qū)域?qū)膮^(qū)域虛像，用上述圖像顯示部使得使用者觀看:上述預定的區(qū)域所包含的上述標記圖像的上述組合所對應的上述特定的虛像。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，在僅僅在拍攝圖像包含特定的標記時，不檢測為使得使用者觀看特定的虛像的標記圖像，因此可以減輕頭部佩戴型顯示裝置的處理的負擔。另外，使用者無意的標記圖像的檢測被抑制，因此可以使得使用者觀看與精度高的各種作業(yè)對應的特定的虛像。
[0014](6)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述控制部在上述拍攝圖像包含多個上述標記圖像的情況下，用上述圖像顯示部使得使用者觀看多個上述標記圖像內(nèi)的大小為最大的上述標記圖像的上述組合所對應的上述特定的虛像。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于自動地檢測多個標記圖像內(nèi)最大的標記圖像，因此可以自動地檢測離使用者最近的特定的標記，可以提高使用者的便利性。
[0015](7)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述控制部在上述拍攝圖像包含多個上述標記圖像的情況下，用上述圖像顯示部使得使用者觀看:基于對上述特定的標記設定的優(yōu)先度而選擇的一個上述標記圖像的上述組合所對應的上述特定的虛像。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于自動地使得使用者觀看與拍攝范圍所包含的多個標記圖像中的預先存儲的標記圖像對應的特定的虛像，因此，可以降低使用者觀看錯誤的各種作業(yè)的特定的虛像的情況，使得使用者進行高效的作業(yè)。
[0016](8)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述特定的虛像對應于:上述標記圖像包含于上述拍攝圖像的時間、上述標記圖像的種類和上述標記圖像的形狀的組合。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，在僅僅在拍攝圖像包含特定的標記時，不檢測為使得使用者觀看特定的虛像的標記圖像，因此可以減輕頭部佩戴型顯示裝置的處理的負擔。另外，使用者無意的標記圖像的檢測被抑制，因此可以使得使用者觀看與精度高的各種作業(yè)對應的特定的虛像。
[0017](9)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述特定的標記包括形狀和色的組合而構(gòu)成。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于作成了采用多色的特定的標記，因此通過更小的特定的標記可以向使用者提供更多的信息。
[0018](10)上述形態(tài)的頭部佩戴型顯示裝置中也可以為，上述特定的標記是正方形外框的內(nèi)部由分色為白色和黑色的多個區(qū)域構(gòu)成的2維標記。根據(jù)該形態(tài)的頭部佩戴型顯示裝置，由于作成的特定的標記不復雜，因此，通過拍攝的標記圖像使得對應的圖像進行顯示的控制，可以簡便進行。另外，特定的標記僅僅包括黑色和白色而構(gòu)成，因此可進行誤檢測少的控制。
[0019]上述本發(fā)明的各形態(tài)具有的多個構(gòu)成要素不是全部是必須的，為了解決上述問題的一部分或全部，或者為了實現(xiàn)本說明書所述的效果的部分或全部，對于上述多個構(gòu)成要素的部分構(gòu)成要素，可以適當進行其的變更、刪除、與新的其他構(gòu)成要素的更換、限定內(nèi)容的部分刪除。另外，為了解決上述問題的部分或全部，或者為了實現(xiàn)本說明書所述的效果的部分或全部，也可以將上述本發(fā)明的一形態(tài)所包含的技術(shù)特征的部分或全部與上述本發(fā)明的其他形態(tài)所包含的技術(shù)特征的部分或全部組合，而形成為本發(fā)明的獨立的一個形態(tài)。
[0020]例如，本發(fā)明的一個形態(tài)可以實現(xiàn)為具備圖像顯示部、拍攝部和控制部這3個要素內(nèi)的一個或二個以上的裝置。即，該裝置可以具有或者不具有圖像顯示部。另外，裝置可以具有或者不具有拍攝部。另外，裝置可以具有或者不具有控制部。圖像顯示部例如可以在佩戴于使用者的頭部的狀態(tài)下，基于圖像數(shù)據(jù)，使得使用者觀看到圖像光作為虛像，并且使得使用者觀看到外景。拍攝部例如可以拍攝上述外景?？刂撇坷缈梢栽谂臄z的拍攝圖像包含特定的標記的圖像即標記圖像的情況下，用上述圖像顯示部使得使用者觀看:與上述標記圖像的種類和上述標記圖像的形狀的組合相對應的特定的上述虛像。這樣的裝置例如可以實現(xiàn)為頭部佩戴型顯示裝置，但是也可以實現(xiàn)為頭部佩戴型顯示裝置以外的其他裝置。根據(jù)這樣的形態(tài)，可以解決裝置操作性的提高及簡化、裝置的一體化和/或使用裝置的使用者的便利性的提高等的各種問題的至少一個。前述頭部佩戴型顯示裝置的各形態(tài)的技術(shù)特征的部分或全部都可以適用于該裝置。
[0021]本發(fā)明也能以頭部佩戴型顯示裝置以外的各種形態(tài)實現(xiàn)。例如，也能以頭部佩戴型顯示裝置的控制方法、圖像顯示系統(tǒng)及頭部佩戴型顯示系統(tǒng)、用于實現(xiàn)圖像顯示系統(tǒng)及頭部佩戴型顯示系統(tǒng)的計算機程序、記錄有該計算機程序的記錄介質(zhì)、包含該計算機程序的在載波內(nèi)具體化的數(shù)據(jù)信號等的形態(tài)實現(xiàn)。
【附圖說明】
[0022]圖1是表示頭部佩戴型顯示裝置的外觀構(gòu)成的說明圖。
[0023]圖2是表示頭部佩戴型顯示裝置的構(gòu)成的功能性框圖。
[0024]圖3是表示圖像光生成部出射圖像光的情形的說明圖。
[0025]圖4是表示指示圖像顯示處理的流程的說明圖。
[0026]圖5是表示標記(marker)的一例的說明圖。
[0027]圖6是表示物流中心中使用者通行的通路的概略圖。
[0028]圖7是表示出發(fā)地點處檢測到標記時使用者的視野的說明圖。
[0029]圖8是表示出發(fā)地點處顯示指示圖像時使用者的視野的說明圖。
[0030]圖9是表示中繼地點處顯示指示圖像時使用者的視野的說明圖。
[0031]圖10是表示處于貨架的正面的使用者的視野的說明圖。
[0032]圖11是表示變形例中的標記的一例的說明圖。
[0033]圖12是表示變形例中的標記的一例的說明圖。
[0034]圖13是表示變形例中的標記的一例的說明圖。
[0035]圖14是表示變形例中的頭部佩戴型顯示裝置的外觀構(gòu)成的說明圖。
[0036]【符號的說明】
[0037]10…控制部 1L...確定鍵 12…點亮部 13…顯示切換鍵 14…跟蹤板 15…輝度切換鍵 16...方向鍵 17…菜單鍵 18...電源開關 20…圖像顯示部 21...右保持部 22…右顯示驅(qū)動部 23…左保持部 24…左顯示驅(qū)動部 26…右光學像顯示部28…左光學像顯不部30…耳機插頭32…右耳機34…左耳機40…連接部42…右線纜 44…左線纜 46…連接部件 48…本體線纜 51、52…發(fā)送部 53、54…接收部61…相機(拍攝部)100…頭部佩戴型顯示裝置120…存儲部130…電源135...操作部 140…CPU 150…操作系統(tǒng) 160…圖像處理部 165…標記判定部(控制部)170…聲音處理部180…接口 190…顯示控