專(zhuān)利名稱：信息顯示系統(tǒng)、信息顯示裝置、信息提供裝置以及存儲(chǔ)介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及信息顯示系統(tǒng)、信息顯示裝置、信息提供裝置以及存儲(chǔ)介質(zhì)，尤其是涉及適于利用了 AR技術(shù)的信息顯示的信息顯示系統(tǒng)、信息顯示裝置、信息提供裝置以及存儲(chǔ)介質(zhì)。
背景技術(shù)：
如所謂智能電話(smart phone)等那樣，具備拍攝功能的高性能的便攜式通信終端已得到了普及，在這樣的終端裝置中，已實(shí)現(xiàn)利用了 AR (Augmented Reality :增強(qiáng)現(xiàn)實(shí)) 技術(shù)的服務(wù)(以下稱為“AR服務(wù)”)。在AR服務(wù)中，附加信息實(shí)時(shí)地被疊加在終端所拍攝的實(shí)拍圖像上，所以，例如，如日本國(guó)特表2008-510254號(hào)公報(bào)中所述，能夠容易地獲得正在拍攝的場(chǎng)所的各種信息。在實(shí)拍圖像上疊加信息的情況下，如果是圖像內(nèi)存在有多個(gè)被攝體這樣的情形， 則需要進(jìn)行為了正確地使各被攝體與需疊加信息相對(duì)應(yīng)的位置對(duì)準(zhǔn)。作為位置對(duì)準(zhǔn)的方法，例如，日本國(guó)特開(kāi)2009-230255號(hào)公報(bào)中公開(kāi)了 在拍攝得到的實(shí)拍圖像上進(jìn)行圖像識(shí)別，并通過(guò)與網(wǎng)絡(luò)上的數(shù)據(jù)庫(kù)中所蓄積的各種實(shí)拍圖像進(jìn)行對(duì)照，由此來(lái)確定被攝體。在該方法的情況下，隨著AR服務(wù)的充實(shí)而在數(shù)據(jù)庫(kù)中蓄積多樣的對(duì)照?qǐng)D像。例如，在將某一店鋪的信息疊加于實(shí)拍圖像上的情況下，不僅對(duì)店鋪的外觀圖像疊加信息，而且對(duì)在店鋪內(nèi)部所拍攝的商品圖像等也疊加信息。在這樣的情況下，即使是與同一店鋪有關(guān)的實(shí)拍圖像，也存在從店外所拍攝的店鋪外觀圖像以及在店內(nèi)對(duì)物品等進(jìn)行了拍攝的圖像。即，由于至被攝體的距離、視角各不相同，因而將拍攝到圖像內(nèi)的被攝體縮尺為不同的圖像。在這樣的狀況下進(jìn)行圖像對(duì)照時(shí)，若不考慮所拍攝的實(shí)拍圖像中的被攝體縮尺， 則會(huì)造成在進(jìn)行對(duì)照時(shí)耗費(fèi)時(shí)間以及出現(xiàn)誤識(shí)別的可能性。

發(fā)明內(nèi)容
本發(fā)明是鑒于上述實(shí)際狀況而做出的，目的在于提供一種能謀求提高AR服務(wù)中的便利性的信息顯示系統(tǒng)、信息顯示裝置、信息提供裝置以及存儲(chǔ)介質(zhì)。為了達(dá)到上述目的，本發(fā)明的第I方面所涉及的信息顯示系統(tǒng)具備具有拍攝功能的信息顯示裝置；以及信息提供裝置，其中，所述信息顯示裝置具備關(guān)鍵信息獲取單元，其獲取與通過(guò)所述拍攝功能所拍攝到的拍攝圖像的被攝體對(duì)應(yīng)的關(guān)鍵信息；以及關(guān)鍵信息發(fā)送單元，其將所述關(guān)鍵信息發(fā)送給所述信息提供裝置，所述信息提供裝置具備對(duì)照?qǐng)D像存儲(chǔ)單元，其存儲(chǔ)包含對(duì)照被攝體在內(nèi)的對(duì)照?qǐng)D像、和與所述對(duì)照?qǐng)D像分別對(duì)應(yīng)的所述對(duì)照被攝體的縮尺信息及疊加信息；以及信息提供單元，其基于由所述關(guān)鍵信息發(fā)送單元所發(fā)送的關(guān)鍵信息，選擇至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像，并將所選擇的對(duì)照?qǐng)D像、和與該選擇的至少I(mǎi)個(gè)對(duì)照?qǐng)D像建立對(duì)應(yīng)的所述縮尺信息及所述疊加信息提供給所述信息顯示裝置，并且，所述信息顯示裝置還具備引導(dǎo)顯示單元，其顯示引導(dǎo)信息，該引導(dǎo)信息是基于與所選擇的至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像對(duì)應(yīng)的所述縮尺信息、和所述拍攝圖像中被攝體的縮尺信息的引導(dǎo)信息；對(duì)照單元，其根據(jù)所述引導(dǎo)顯示單元顯示的引導(dǎo)信息，來(lái)對(duì)照所述拍攝圖像的被攝體與所選擇的至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像；以及疊加顯示單元，其基于所述對(duì)照單元的對(duì)照結(jié)果，在所述拍攝圖像上疊加顯示與所選擇的至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像對(duì)應(yīng)的所述疊加信
肩、O為了達(dá)到上述目的，本發(fā)明的第2方面所涉及的信息顯示裝置具備拍攝單元；與外部裝置進(jìn)行通信的通信單元；以及顯示單元，其中，所述通信單元具備數(shù)據(jù)獲取單元，該數(shù)據(jù)獲取單元從所述外部裝置獲取包含對(duì)照被攝體在內(nèi)的對(duì)照?qǐng)D像、和與所述對(duì)照?qǐng)D像分別對(duì)應(yīng)的所述對(duì)照被攝體的縮尺信息及疊加信息，所述顯示單元具備引導(dǎo)顯示單元，其顯示引導(dǎo)信息，該引導(dǎo)信息是基于所述數(shù)據(jù)獲取單元所獲取的所述縮尺信息、和所述拍攝單元所拍攝到的拍攝圖像中的被攝體的縮尺信息的引導(dǎo)信息；對(duì)照單元，其根據(jù)所述引導(dǎo)顯示單元顯示的引導(dǎo)信息，來(lái)對(duì)照所述拍攝圖像的被攝體與所述對(duì)照?qǐng)D像；以及疊加顯示單元，其基于所述對(duì)照單元的對(duì)照結(jié)果，在所述拍攝圖像上疊加顯示所述疊加信息。為了達(dá)到上述目的，本發(fā)明的第3方面所涉及的信息提供裝置具備通信單元，其與具備拍攝功能的信息顯示裝置進(jìn)行通信；以及信息存儲(chǔ)單元，其存儲(chǔ)用于提供給所述信息顯示裝置的信息，其中，所述信息存儲(chǔ)單元具備數(shù)據(jù)存儲(chǔ)單元，該數(shù)據(jù)存儲(chǔ)單元存儲(chǔ)包含對(duì)照被攝體在內(nèi)的對(duì)照?qǐng)D像、和與所述對(duì)照?qǐng)D像分別對(duì)應(yīng)的所述對(duì)照被攝體的縮尺信息及疊加信息，所述通信單元基于與所述拍攝圖像的被攝體對(duì)應(yīng)的關(guān)鍵信息，將所述數(shù)據(jù)存儲(chǔ)單元中所存儲(chǔ)的數(shù)據(jù)提供給所述信息顯示裝置。根據(jù)本發(fā)明，能夠提高在利用AR技術(shù)服務(wù)時(shí)的便利性。通過(guò)結(jié)合附圖閱讀下面的具體實(shí)施方式
，本發(fā)明的上述目的以及進(jìn)一步的目的和新特征將變得更加清楚。應(yīng)該清楚地知道附圖僅僅是為了例示，而不應(yīng)該被理解為對(duì)本發(fā)明進(jìn)行限定。


圖I是本發(fā)明的實(shí)施方式所涉及的信息顯示系統(tǒng)的示意圖。圖2是表示圖I所示的信息顯示裝置的外觀構(gòu)成的示意圖，圖2(a)表示主面?zhèn)鹊耐庥^構(gòu)成，圖2(b)表示背面?zhèn)鹊耐庥^構(gòu)成。圖3是表示圖I所示的信息顯示裝置的構(gòu)成的框圖。圖4是表示通過(guò)圖3所示的控制部所實(shí)現(xiàn)的功能的功能框圖。圖5是表示圖I所示的信息提供裝置的構(gòu)成的框圖。圖6是表示通過(guò)圖5所示的控制部所實(shí)現(xiàn)的功能的功能框圖。圖7是表不圖5所不的存儲(chǔ)部中所存儲(chǔ)的“對(duì)照?qǐng)D像存儲(chǔ)表”的不例的圖。圖8是用于說(shuō)明本發(fā)明的實(shí)施方式I所涉及的“AR顯示處理⑴”的流程圖。圖9是用于說(shuō)明本發(fā)明的實(shí)施方式I所涉及的“AR信息提供處理⑴”的流程圖。圖10是用于說(shuō)明本發(fā)明的實(shí)施方式I所涉及的動(dòng)作的圖，圖10(a)表示假設(shè)場(chǎng)景的示例，圖IO (b)表示所利用的對(duì)照?qǐng)D像的示例。圖11是表示圖8所示的“AR顯示處理(I) ”所涉及的畫(huà)面顯示例的圖，圖11(a) 表示分布顯示的示例，圖11(b)表示分布顯示中顯示了引導(dǎo)的示例。
圖12是表示圖8所示的“AR顯示處理(I) ”所涉及的畫(huà)面顯示例的圖，圖12(a) 表示引導(dǎo)移動(dòng)時(shí)的顯示例，圖12(b)表示顯示了疊加信息的示例。圖13是表示引導(dǎo)顯示的其他示例的圖，圖13(a)表示催促接近被攝體的引導(dǎo)顯示的示例，圖13(b)表示催促離開(kāi)被攝體的引導(dǎo)顯示的示例，圖13(c)是示出必要視角的引導(dǎo)顯示的示例。圖14是用于說(shuō)明本發(fā)明的實(shí)施方式2所涉及的“AR顯示處理(2)”的流程圖。圖15是表示本發(fā)明的實(shí)施方式2所涉及的“對(duì)照?qǐng)D像存儲(chǔ)表”的示例的圖。圖16是用于說(shuō)明圖14所示的“AR顯示處理(2) ”中所執(zhí)行的“關(guān)鍵信息管理處理”的流程圖。圖17是用于說(shuō)明圖14所示的“AR顯示處理(2) ”中所執(zhí)行的“AR數(shù)據(jù)管理處理” 的流程圖。圖18是用于說(shuō)明圖14所示的“AR顯示處理⑵”中所利用的表的圖，圖18(a)表示“關(guān)鍵信息管理表”的示例，圖18(b)表示“AR數(shù)據(jù)管理表”的示例。圖19是用于說(shuō)明本發(fā)明的實(shí)施方式3所涉及的“AR顯示處理(3)”的流程圖。圖20是用于說(shuō)明圖19所示的“AR顯示處理(3) ”中的對(duì)照?qǐng)D像和3D建模數(shù)據(jù)的圖，圖20 (a)是示意地表示針對(duì)對(duì)象物的視線方向，圖20 (b)表示對(duì)照?qǐng)D像的示例，圖20 (c) 表示所生成的3D建模數(shù)據(jù)的示例，圖20(d)表示使視線變更后的3D建模數(shù)據(jù)的示例。
具體實(shí)施例方式以下，參照附圖，對(duì)本發(fā)明所涉及的實(shí)施方式進(jìn)行說(shuō)明。(實(shí)施方式I)參照?qǐng)D1，對(duì)本發(fā)明的實(shí)施方式所涉及的信息顯示系統(tǒng)I進(jìn)行說(shuō)明。圖I是表示本實(shí)施方式所涉及的信息顯示系統(tǒng)I的構(gòu)成的框圖。如圖所示，本實(shí)施方式所涉及的信息顯示系統(tǒng)I由通過(guò)通信網(wǎng)絡(luò)NW連接的信息顯示裝置100、信息提供裝置200等構(gòu)成。本實(shí)施方式所涉及的通信網(wǎng)絡(luò)NW諸如是包含因特網(wǎng)等的IP網(wǎng)、移動(dòng)體通信用的蜂窩網(wǎng)等在內(nèi)的WAN(Wide Area Network :廣域網(wǎng))。本實(shí)施方式所涉及的信息顯示裝置100是至少具備通信功能、拍攝功能、顯示功能的便攜式型終端裝置，常說(shuō)的智能電話是作為信息顯示裝置100的適當(dāng)形態(tài)。本實(shí)施方式中，將信息顯示裝置100設(shè)為圖I所示那樣的智能電話。本實(shí)施方式中，通過(guò)包含有這樣的信息顯示裝置100的信息顯示系統(tǒng)1，來(lái)實(shí)現(xiàn)適用了 AR (Augmented Reality :增強(qiáng)現(xiàn)實(shí)) 技術(shù)的服務(wù)(以下稱為“AR服務(wù)”)。即，在通過(guò)信息顯示裝置100的拍攝功能所拍攝到的實(shí)拍圖像上，實(shí)時(shí)地疊加與該圖像內(nèi)的被攝體相關(guān)的信息并進(jìn)行顯示。參照?qǐng)D2以及圖3，對(duì)信息顯示裝置100的構(gòu)成進(jìn)行說(shuō)明。圖2是表示信息顯示裝置100的外觀構(gòu)成的示意圖，圖2(a)表示信息顯示裝置100的主面?zhèn)?，圖2(b)表示信息顯示裝置100的背面?zhèn)?。另外，圖3是表示信息顯示裝置100的構(gòu)成的框圖。如上述各圖所示，本實(shí)施方式所涉及的信息顯示裝置100由控制部110、通信部 120、關(guān)鍵信息獲取部130、拍攝部140、輸入輸出部150、存儲(chǔ)部160等構(gòu)成?？刂撇?10例如由CPU(Central Processing Unit :中央運(yùn)算處理裝置)或RAM (Random Access Memory)等構(gòu)成?？刂撇?10對(duì)信息顯不裝置100的各部進(jìn)行控制,并通過(guò)執(zhí)行程序來(lái)進(jìn)行后述的各處理。通信部120是用于經(jīng)由通信網(wǎng)絡(luò)NW進(jìn)行通信的構(gòu)成。通信部120由諸如CDMA2000 方式等的蜂窩通信模塊或IEEE 802. 16e (所謂的移動(dòng)通信WiMAX)用的通信模塊等可直接訪問(wèn)WAN的通信模塊和/或諸如用于與可訪問(wèn)WAN的外部通信裝置(例如，移動(dòng)通信路由器等)或公共無(wú)線LAN的訪問(wèn)點(diǎn)等進(jìn)行通信的IEEE 802. 11系列(無(wú)線LAN)用的通信模塊等構(gòu)成。關(guān)鍵信息獲取部130是用于獲取在接受AR服務(wù)時(shí)所需的關(guān)鍵信息這樣的構(gòu)成。關(guān)鍵信息獲取部130由諸如GPS(Global Positioning System :全球定位系統(tǒng))模塊、RFID(Radio Frequency IDentification) > IrDA(Infrared Data Association)、 Bluetooth(注冊(cè)商標(biāo))等所謂的近距離無(wú)線通信模塊、可見(jiàn)光通信模塊等構(gòu)成。關(guān)鍵信息獲取部130獲取由外部所提供的關(guān)鍵彳目息。在此的“關(guān)鍵信息”，例如除表示信息顯示裝置100的當(dāng)前位置的位置信息(緯度 經(jīng)度信息)之外，還包括針對(duì)AR服務(wù)中所疊加的信息已被登錄于信息提供裝置200中的店鋪等的各種設(shè)施等而賦予的ID信息等，通過(guò)將信息顯示裝置100獲取的關(guān)鍵信息發(fā)送給信息提供裝置200，由此來(lái)選擇位置對(duì)準(zhǔn)所需的對(duì)照?qǐng)D像或AR服務(wù)中所提供的信息。由此，利用GPS模塊等來(lái)作為用于獲取信息顯示裝置100的當(dāng)前位置信息的構(gòu)成。 另外，利用近距離無(wú)線通信模塊或可見(jiàn)光通信模塊等來(lái)作為用于獲取在各種設(shè)施等可獲取的ID信息的構(gòu)成。這些構(gòu)成例如如圖2(b)所示那樣，在信息顯示裝置100的外面上或內(nèi)部等適當(dāng)?shù)貥?gòu)成。另外，信息顯示裝置100也可以不全部具備這些構(gòu)成，但是，本實(shí)施方式中，信息顯示裝置100至少具備用于獲取位置信息的構(gòu)成(GPS模塊等)。本實(shí)施方式中，在關(guān)鍵信息獲取部130中至少包括用于獲取當(dāng)前位置的構(gòu)成(GPS 模塊等)，也可以任意地包括用于獲取ID信息的構(gòu)成。另外，關(guān)鍵信息獲取部130也可以通過(guò)GPS以外的方法來(lái)獲取當(dāng)前位置信息，例如，關(guān)鍵信息獲取部130也可以通過(guò)蜂窩通信所訪問(wèn)的基站或通過(guò)無(wú)線LAN所訪問(wèn)的訪問(wèn)點(diǎn)來(lái)獲取位置信息。在該情況下，關(guān)鍵信息獲取部130中包含有用于進(jìn)行這些通信的通信部120。拍攝部140是用于實(shí)現(xiàn)信息顯示裝置100的拍攝功能的構(gòu)成，例如由利用了固體拍攝元件的數(shù)字相機(jī)模塊等構(gòu)成。本實(shí)施方式中，是在通過(guò)拍攝部140得到的作為實(shí)時(shí)瀏覽圖像的動(dòng)態(tài)圖像(實(shí)拍圖像)上疊加由AR服務(wù)所提供的信息。另外，在諸如以QR碼(注冊(cè)商標(biāo))那樣的2維碼等視覺(jué)性的客體來(lái)提供上述關(guān)鍵信息的情況下，則成為通過(guò)拍攝部140的拍攝動(dòng)作來(lái)獲取關(guān)鍵信息的情形。在該情形下，關(guān)鍵信息獲取部130中將含有拍攝部140。另外，拍攝部140優(yōu)選為如圖2(b)所示那樣的雙眼式立體相機(jī)。即，拍攝部140是具有在水平方向以視差相當(dāng)?shù)拈g隔而并列的2個(gè)透鏡的拍攝裝置。通過(guò)這樣的立體相機(jī)， 能夠進(jìn)行基于3角測(cè)量原理的至被攝體為止的測(cè)距或3D建模數(shù)據(jù)的生成。輸入輸出部150至少包括用于顯示輸出由拍攝部140所拍攝的拍攝圖像或由AR 服務(wù)所提供的信息等的顯示裝置、以及受理由信息顯示裝置100的用戶所進(jìn)行的輸入操作的輸入裝置，本實(shí)施方式中，由顯示功能與輸入功能被一體化實(shí)現(xiàn)的觸摸面板(觸屏)構(gòu)成為輸入輸出部150。另外，輸入輸出部150還包含智能電話的通話功能等的音頻輸入輸出中所使用的揚(yáng)聲器、麥克風(fēng)等。存儲(chǔ)部160例如由閃存等半導(dǎo)體存儲(chǔ)裝置等構(gòu)成，存儲(chǔ)有控制部110執(zhí)行的程序、各種處理中所利用的數(shù)據(jù)、通過(guò)各種處理所生成的數(shù)據(jù)、以及通過(guò)通信部120或關(guān)鍵信息獲取部130的動(dòng)作而獲取的數(shù)據(jù)等。參照?qǐng)D4，對(duì)通過(guò)控制部110執(zhí)行存儲(chǔ)部160中所存儲(chǔ)的程序而實(shí)現(xiàn)的功能進(jìn)行說(shuō)明。圖4表示控制部110所實(shí)現(xiàn)的功能的功能框圖。本實(shí)施方式中，如圖所示，通過(guò)控制部110實(shí)現(xiàn)AR處理部111、拍攝處理部112、對(duì)照處理部113等的功能。AR處理部111根據(jù)基于用戶操作的來(lái)自輸入輸出部150的輸入信號(hào)等，執(zhí)行與存儲(chǔ)部160中所存儲(chǔ)的AR服務(wù)相關(guān)的應(yīng)用程序(以下稱為“AR應(yīng)用程序”)來(lái)控制其動(dòng)作。 AR處理部111進(jìn)行對(duì)于AR服務(wù)所涉及的顯示動(dòng)作(以下稱為“AR顯示”)所需的圖像處理，并向輸入輸出部150進(jìn)行顯示輸出。在該情況下，通過(guò)進(jìn)行利用了存儲(chǔ)部160中所存儲(chǔ)的圖像數(shù)據(jù)等的圖像處理，來(lái)進(jìn)行AR顯示。拍攝處理部112通過(guò)控制拍攝部140，來(lái)控制信息顯示裝置100的拍攝功能所涉及的動(dòng)作。本實(shí)施方式中，拍攝處理部112控制由AR處理部111執(zhí)行的AR應(yīng)用程序中所需的拍攝動(dòng)作。對(duì)照處理部113通過(guò)控制通信部120或關(guān)鍵信息獲取部130，從信息提供裝置200 或各種外部裝置中獲取信息，由此，進(jìn)行AR顯示中的位置對(duì)準(zhǔn)中所需的對(duì)照動(dòng)作。在此，按照AR應(yīng)用程序的執(zhí)行，來(lái)控制關(guān)鍵信息獲取部130以獲取關(guān)鍵信息，并將所獲取的關(guān)鍵信息存儲(chǔ)于存儲(chǔ)部160，同時(shí)還控制通信部120，以使得將所獲取的關(guān)鍵信息發(fā)送給信息提供裝置200等，并從信息提供裝置200中獲取AR應(yīng)用程序的執(zhí)行中所需的對(duì)照?qǐng)D像或疊加信息。接下來(lái)，對(duì)照處理部113將所獲取的對(duì)照?qǐng)D像或疊加信息存儲(chǔ)于存儲(chǔ)部160中，進(jìn)行拍攝處理部112所獲取的拍攝圖像與對(duì)照?qǐng)D像之間的對(duì)照。本實(shí)施方式中，由控制部110邏輯性地實(shí)現(xiàn)這些的功能，但是，這些功能中的一部分或者全部也可以通過(guò)諸如ASIC(Application Specific Integrated Circuit :確定用途用集成電路)等的硬件來(lái)實(shí)現(xiàn)。上述信息顯示裝置100的各構(gòu)成是實(shí)現(xiàn)本發(fā)明所需的構(gòu)成，也可以適當(dāng)具備作為智能電話而發(fā)揮功能時(shí)所需的其他構(gòu)成。接著，對(duì)信息提供裝置200進(jìn)行說(shuō)明。信息提供裝置200例如是ASP (Application Service Provider)服務(wù)器等那樣的信息處理裝置，本實(shí)施方式中，其對(duì)經(jīng)由通信網(wǎng)絡(luò)NW 而連接的信息顯示裝置100提供AR服務(wù)。參照?qǐng)D5，對(duì)這樣的信息提供裝置200的構(gòu)成進(jìn)行說(shuō)明。圖5是表示信息提供裝置200的構(gòu)成的框圖。如圖所示，信息提供裝置200由控制部210、通信部220、輸入輸出部230、存儲(chǔ)部 240等構(gòu)成?？刂撇?10例如由CPU或RAM等構(gòu)成?？刂撇?10控制信息提供裝置200的各部， 并且通過(guò)執(zhí)行程序來(lái)進(jìn)行后述各處理。通信部220是用于進(jìn)行經(jīng)由通信網(wǎng)絡(luò)NW的通信的構(gòu)成。通信部220例如由 NIC (Network Interface Card)或路由器、調(diào)制解調(diào)器等的通信用設(shè)備來(lái)構(gòu)成,進(jìn)行采用了合適的通信協(xié)議的數(shù)據(jù)收發(fā)。
輸入輸出部230例如由鍵盤(pán)或鼠標(biāo)等這樣的進(jìn)行與信息提供裝置200的操作員的操作相對(duì)應(yīng)的輸入的輸入裝置、以及顯示裝置等那樣的進(jìn)行處理結(jié)果的輸出的輸出裝置構(gòu)成。存儲(chǔ)部240例如由硬盤(pán)裝置等的存儲(chǔ)裝置構(gòu)成。存儲(chǔ)部240存儲(chǔ)有由控制部210 所執(zhí)行的程序。并且，存儲(chǔ)部240存儲(chǔ)通過(guò)執(zhí)行程序而進(jìn)行的各處理時(shí)所需的數(shù)據(jù)以及通過(guò)處理所生成的數(shù)據(jù)等。參照?qǐng)D6，對(duì)通過(guò)控制部210執(zhí)行存儲(chǔ)部240中所存儲(chǔ)的程序而實(shí)現(xiàn)的功能進(jìn)行說(shuō)明。圖6是表示控制部210所實(shí)現(xiàn)的功能的功能框圖。本實(shí)施方式中，如圖所示，由控制部210來(lái)實(shí)現(xiàn)通信處理部211、信息登錄部212、 信息檢索部213等的功能。通信處理部211控制通信部220，經(jīng)由通信網(wǎng)絡(luò)NW進(jìn)行與信息顯示裝置100之間的通信。本實(shí)施方式中，通信處理部211除接收信息顯示裝置100發(fā)送來(lái)的關(guān)鍵信息外，還將通過(guò)后述的信息檢索部213所檢索得到的信息發(fā)送給信息顯示裝置100。信息登錄部212進(jìn)行將AR服務(wù)提供中所需的信息登錄于存儲(chǔ)部240中的處理。圖 7表示存儲(chǔ)部240中所登錄的信息的示例。本實(shí)施方式中，所圖示的“對(duì)照?qǐng)D像存儲(chǔ)表”在存儲(chǔ)部240中被生成，且存儲(chǔ)AR服務(wù)提供中所需的各種信息。在該對(duì)照?qǐng)D像存儲(chǔ)表中，將為了對(duì)照由利用AR服務(wù)的信息顯示裝置100所拍攝得到的實(shí)拍圖像中的被攝體而準(zhǔn)備的多個(gè)對(duì)照?qǐng)D像，與成為各對(duì)照?qǐng)D像的索引的信息(以下稱為“索引信息”)或與由對(duì)照?qǐng)D像所確定的被攝體建立對(duì)應(yīng)地在拍攝圖像上疊加并顯示的信息(以下，稱為“疊加信息”)等建立對(duì)應(yīng)地存儲(chǔ)。在此，本實(shí)施方式中的“對(duì)照?qǐng)D像”是指，將與通過(guò)AR服務(wù)所疊加的信息相關(guān)聯(lián)的物體作為被攝體而拍攝的圖像，例如，將店鋪等建筑物的外觀成為被攝體的圖像或商品等那樣的物品等成為被攝體的圖像，登錄為對(duì)照?qǐng)D像。與這樣的對(duì)照?qǐng)D像建立對(duì)應(yīng)的索引信息，例如有表示該被攝體所存在的場(chǎng)所的位置信息(緯度 經(jīng)度信息)等。例如通過(guò)將具有GPS功能的拍攝裝置所拍攝的拍攝圖像設(shè)為對(duì)照?qǐng)D像，來(lái)作為Exif (Exchangeable Image File Format)的附加信息等進(jìn)行獲取。另外，這些信息是在向存儲(chǔ)部240的登錄時(shí)，通過(guò)信息提供裝置200的操作員來(lái)操作輸入輸出部230而輸入的。除這樣的索引信息之外，如圖7所示那樣的“縮尺信息”與“單位縮尺”也被記錄在對(duì)照?qǐng)D像存儲(chǔ)表中?？s尺信息是該對(duì)照?qǐng)D像所涉及的拍攝數(shù)據(jù)中用以確定被攝體縮尺的信息，在此， 作為縮尺信息，記錄有該圖像的圖像尺寸(像素?cái)?shù))、拍攝元件的尺寸(傳感器尺寸)、至被攝體的距離、透鏡的焦點(diǎn)距離等。這些的信息除可從對(duì)照?qǐng)D像的Exif數(shù)據(jù)等附加信息中獲取外，也可通過(guò)操作員操作所進(jìn)行的輸入等來(lái)進(jìn)行記錄。另外，縮尺信息中也包含表示視角的信息。設(shè)為基于上述縮尺信息來(lái)計(jì)算并記錄視角。在該情況下，例如，通過(guò)運(yùn)算式I來(lái)計(jì)算出視角[度]。(式I)SXtarT1 {傳感器尺寸[mm]/(2X 焦點(diǎn)距離[mm])}在此，拍攝元件的尺寸為縱或者橫的任意一尺寸，焦點(diǎn)距離例如為換算成靜態(tài)相機(jī)中的35毫米版的透鏡焦點(diǎn)距離后得到的值。單位縮尺是基于上述縮尺信息而計(jì)算出的、表示被攝體縮尺的信息，本實(shí)施方式中，例如，將I像素(pixel)相當(dāng)?shù)膶?shí)際尺寸的大小作為單位縮尺來(lái)進(jìn)行記錄。通過(guò)在對(duì)照?qǐng)D像的登錄時(shí)由信息登錄部212來(lái)進(jìn)行這樣的單位縮尺的計(jì)算。或者，也可以由操作員輸入預(yù)先計(jì)算出的值。單位縮尺的計(jì)算例如以下述那樣的順序來(lái)進(jìn)行。首先，基于至被攝體的距離、拍攝元件的尺寸、透鏡的焦點(diǎn)距離，來(lái)運(yùn)算式2，計(jì)算出對(duì)照?qǐng)D像內(nèi)的被攝體的尺寸。(式2)(至被攝體的距離[mm]X傳感器尺寸[mm]) /焦點(diǎn)距離[mm]在此，拍攝元件的尺寸為縱或者橫的任意一尺寸，焦點(diǎn)距離例如是換算為靜態(tài)相機(jī)中的35毫米版的透鏡焦點(diǎn)距離后得到的值。通過(guò)上述運(yùn)算，來(lái)確定在所代入的拍攝元件尺寸的方向(縱或者橫)上被攝體的實(shí)際尺寸[_]。通過(guò)將如此計(jì)算出的被攝體尺寸除以運(yùn)算中利用的拍攝尺寸的方向(縱或者橫) 上的圖像尺寸(像素?cái)?shù))，計(jì)算出I像素相當(dāng)?shù)膶?shí)際尺寸。信息檢索部213基于通信處理部211所接收的來(lái)自信息顯示裝置100的關(guān)鍵信息，從對(duì)照?qǐng)D像存儲(chǔ)表中，檢索相應(yīng)的記錄條目(record)并獲取。在此，獲取表示信息顯示裝置100的當(dāng)前位置的位置信息等作為關(guān)鍵信息，對(duì)所獲取的關(guān)鍵信息成為索引信息的記錄條目進(jìn)行確定。通過(guò)通信處理部211，在所確定的記錄條目中所記錄的信息中，至少將對(duì)照?qǐng)D像的圖像數(shù)據(jù)、疊加信息、縮尺信息、單位縮尺等(以下稱為“AR數(shù)據(jù)”)發(fā)送給信息顯示裝置100。本實(shí)施方式中，通過(guò)控制部210邏輯性實(shí)現(xiàn)上述各功能，但是這些功能的一部分或者全部例如也可以通過(guò)ASIC等的硬件來(lái)實(shí)現(xiàn)。以下，對(duì)以上已說(shuō)明了構(gòu)成的信息顯示裝置100以及信息提供裝置200的動(dòng)作例進(jìn)行說(shuō)明。首先，參照?qǐng)D8所示的流程圖，對(duì)信息顯示裝置100的動(dòng)作進(jìn)行說(shuō)明。圖8是用于說(shuō)明本實(shí)施方式所涉及的信息顯示裝置100中所執(zhí)行的“AR顯示處理(I)”的流程圖。通過(guò)AR處理部111開(kāi)始AR應(yīng)用程序時(shí)，AR處理部111將該旨意通知給拍攝處理部112以及對(duì)照處理部113。接收到通知的拍攝處理部112控制拍攝部140，開(kāi)始拍攝動(dòng)作 (步驟 S1101)。拍攝動(dòng)作開(kāi)始后，對(duì)照處理部113通過(guò)控制關(guān)鍵信息獲取部130，來(lái)進(jìn)行關(guān)鍵信息的獲取動(dòng)作。在此，至少獲取基于GPS模塊等的位置信息，在成功獲取到位置信息的情況下，也嘗試獲取其他的關(guān)鍵信息。另外，在未能獲取位置信息的情況下，則不能接受AR服務(wù)，所以，對(duì)照處理部113直至能獲取為止進(jìn)行待機(jī)或者進(jìn)行結(jié)束本處理等的錯(cuò)誤處理。接下來(lái)，在獲取至少包含位置信息的關(guān)鍵信息后，對(duì)照處理部113將所獲取的關(guān)鍵信息記錄于存儲(chǔ)部160中(步驟SI 102)。在此，所記錄的關(guān)鍵信息將在本處理的結(jié)束時(shí)予以刪除。在此，對(duì)照處理部113對(duì)所記錄的關(guān)鍵信息中是否有變動(dòng)進(jìn)行判別(步驟S1103)。 在處理剛開(kāi)始后獲取到關(guān)鍵信息的情況下，由于沒(méi)有前次的記錄，對(duì)照處理部113判別為 “有變動(dòng)”(步驟SI 103 :是)。
在該情況下，對(duì)照處理部113通過(guò)控制通信部120，將所獲取的關(guān)鍵信息經(jīng)由通信網(wǎng)絡(luò)NW而發(fā)送給信息提供裝置200 (步驟SI 104)。信息提供裝置200接收到如此從信息顯示裝置100發(fā)送來(lái)的關(guān)鍵信息時(shí)，在信息提供裝置200中執(zhí)行用于將AR數(shù)據(jù)發(fā)送給信息顯示裝置100的“AR信息提供處理(I) ”。 參照?qǐng)D9所示的流程圖，對(duì)本實(shí)施方式所涉及的信息提供裝置200執(zhí)行的“AR信息提供處理(I)”進(jìn)行說(shuō)明。通信處理部211接收到信息顯示裝置100發(fā)送來(lái)的關(guān)鍵信息時(shí)，信息檢索部 213基于接收到的關(guān)鍵信息來(lái)獲取與對(duì)照?qǐng)D像存儲(chǔ)表中的索引信息中相應(yīng)的信息(步驟 S1201)。在此，基于關(guān)鍵信息來(lái)獲取表示信息顯示裝置100的拍攝場(chǎng)所的位置信息。信息檢索部213將所獲取的索引信息(位置信息)作為檢索對(duì)象，從存儲(chǔ)部240的對(duì)照?qǐng)D像存儲(chǔ)表中進(jìn)行檢索，檢索其中記錄有與拍攝場(chǎng)所對(duì)應(yīng)的位置信息的記錄條目(步驟S1202)，并判別在對(duì)照?qǐng)D像存儲(chǔ)表內(nèi)是否存在記錄有與拍攝場(chǎng)所對(duì)應(yīng)的位置信息的記錄條目(步驟S1203)。另外，基于位置信息進(jìn)行檢索時(shí)，信息檢索部213不僅對(duì)記錄著表示拍攝場(chǎng)所的位置信息的記錄條目進(jìn)行檢索，也對(duì)記錄著表示拍攝場(chǎng)所附近(從拍攝場(chǎng)離開(kāi)規(guī)定的距離的區(qū)域)的位置信息的記錄條目進(jìn)行檢索。在對(duì)照?qǐng)D像存儲(chǔ)表內(nèi)存在記錄著與信息顯示裝置100進(jìn)行拍攝的拍攝場(chǎng)所對(duì)應(yīng)的位置信息的記錄條目的情況下(步驟S1203 :是)，信息檢索部213從該記錄條目中獲取 AR數(shù)據(jù)(步驟S1204)，將該AR數(shù)據(jù)交送給通信處理部211。通信處理部211控制通信部220，將信息檢索部213獲取的AR數(shù)據(jù)經(jīng)由通信網(wǎng)絡(luò) NW發(fā)送給信息顯示裝置100 (步驟S1205)，之后結(jié)束處理。另一方面，在對(duì)照?qǐng)D像存儲(chǔ)表內(nèi)沒(méi)有記錄著與拍攝場(chǎng)所對(duì)應(yīng)的位置信息這樣的記錄條目的情況下(步驟S1203 :否)，信息提供裝置200不將AR數(shù)據(jù)發(fā)送給信息顯示裝置 100而結(jié)束處理。在該情況下，信息提供裝置200也可以將表示在當(dāng)前位置不能提供AR服務(wù)之意的通知信息等發(fā)送給信息顯示裝置100。以上那樣的、與信息顯示裝置100之間的收發(fā)動(dòng)作，例如可通過(guò)利用已知的事務(wù) (transaction)技術(shù)等來(lái)實(shí)現(xiàn)，該事務(wù)技術(shù)利用了 CGI (Common Gateway Interface)技術(shù)等。返回至圖8的流程圖，對(duì)AR數(shù)據(jù)被返送至信息顯示裝置100后信息顯示裝置100 的動(dòng)作進(jìn)行說(shuō)明。從信息提供裝置200發(fā)送AR數(shù)據(jù)后，信息顯示裝置100的通信部120經(jīng)由通信網(wǎng)絡(luò)NW接收該AR數(shù)據(jù)。進(jìn)行了這樣的接收后(步驟S1105 :是)，對(duì)照處理部113將接收到的AR數(shù)據(jù)存儲(chǔ)于存儲(chǔ)部160中，并將該旨意通知給AR處理部111。AR處理部111通過(guò)控制輸入輸出部150，使拍攝部140當(dāng)前正在拍攝的實(shí)時(shí)瀏覽圖像進(jìn)行顯示輸出，并基于接收到的AR數(shù)據(jù)的單位縮尺，來(lái)生成表示所接收的對(duì)照?qǐng)D像的分布的圖像，并使所生成的圖像顯示輸出在輸入輸出部150上(步驟S1106)。在此，參照基于所可假想場(chǎng)景的示例的附圖，對(duì)處理內(nèi)容進(jìn)行說(shuō)明。本實(shí)施方式中，如圖10(a)所示那樣，在有店鋪A 店鋪E的街道，利用AR服務(wù)。在此，關(guān)于店鋪A，在信息提供裝置200中登錄有對(duì)照?qǐng)D像等，所以，店鋪A是可提供AR服務(wù)的店鋪，但關(guān)于其他的店鋪B E，由于在信息提供裝置200中未登錄信息，所以，店鋪B E是不能提供AR服務(wù)的店鋪。接下來(lái)，關(guān)于店鋪A，假設(shè)圖10(b)所示那樣的對(duì)照?qǐng)D像已登錄在信息提供裝置 200中。如圖所示，在此假設(shè)除對(duì)店鋪A的外觀進(jìn)行拍攝得到的對(duì)照?qǐng)D像AA外，還將對(duì)店鋪A內(nèi)正銷(xiāo)售的商品進(jìn)行拍攝得到的對(duì)照?qǐng)D像AB AZ登錄在信息提供裝置200中。這些對(duì)照?qǐng)D像的圖像尺寸全部設(shè)為相同。接下來(lái)，對(duì)照?qǐng)D像是按照僅作為對(duì)象的被攝體被收納于圖像尺寸內(nèi)的方式所拍攝得到的。這樣，在準(zhǔn)備有與多個(gè)被攝體相關(guān)的多個(gè)對(duì)照?qǐng)D像的情況下，由于被攝體的大小并非相同，所以各圖像的被攝體縮尺也不同。也就是說(shuō)，相對(duì)于對(duì)照?qǐng)D像AA是以整個(gè)視角對(duì)建造物的外觀進(jìn)行拍攝得到的圖像，而對(duì)照?qǐng)D像AZ是以整個(gè)視角對(duì)作為商品的筆進(jìn)行拍攝得到的圖像，所以，I像素相當(dāng)?shù)膶?shí)際尺寸大不相同。在該情況下，如果在實(shí)拍圖像的整個(gè)視角對(duì)店鋪A的外觀進(jìn)行拍攝，則能夠進(jìn)行利用了對(duì)照?qǐng)D像AA的對(duì)照，但是，在此即使拍入商品的筆，也會(huì)由于圖像內(nèi)的筆的縮尺過(guò)小，而不能進(jìn)行與對(duì)照?qǐng)D像AZ之間的對(duì)照。即，如果不與作為對(duì)象的被攝體相對(duì)應(yīng)地以恰當(dāng)?shù)囊暯莵?lái)進(jìn)行拍攝，則不能恰當(dāng)?shù)孬@得由AR服務(wù)所提供的信息。為了消除這樣的不妥當(dāng)，本實(shí)施方式中，通過(guò)利用在信息提供裝置200的對(duì)照?qǐng)D像存儲(chǔ)表中與對(duì)照?qǐng)D像一并登錄的單位縮尺，由此，能夠引導(dǎo)用戶以適當(dāng)?shù)囊暯莵?lái)進(jìn)行拍攝。由此，本實(shí)施方式在步驟SI 106中，進(jìn)行基于從信息提供裝置200接收到的對(duì)照?qǐng)D像的單位縮尺的分布顯示。圖11(a)表示該情況下的顯示例。如圖所示，在輸入輸出部150 中設(shè)定“拍攝圖像顯示區(qū)域”與“引導(dǎo)顯示區(qū)域”，在拍攝圖像顯示區(qū)域中顯示由拍攝部140 拍攝到的實(shí)時(shí)瀏覽圖像。并且，在引導(dǎo)顯示區(qū)域中進(jìn)行如圖11(a)所示那樣的分布顯示。如圖所示，在該分布顯示中，例如，顯示上下方向的雙箭頭，并在該雙箭頭的右側(cè)呈坐標(biāo)圖狀地顯示基于單位縮尺的對(duì)照?qǐng)D像的分布。在圖11(a)的示例中示出了 分布的位置越處于雙箭頭的上方，則從信息顯示裝置100(相機(jī))至與該分布對(duì)應(yīng)的對(duì)照?qǐng)D像的被攝體為止的距離就越遠(yuǎn)，分布的位置越處于雙箭頭的下方，從信息顯示裝置100 (相機(jī))至與該分布對(duì)應(yīng)的對(duì)照?qǐng)D像的被攝體為止的距離就越近。S卩，由于單位縮尺是I像素相當(dāng)?shù)膶?shí)際尺寸，所以，關(guān)于針對(duì)對(duì)照?qǐng)D像AA(圖 10(b))那樣的建造物的外觀進(jìn)行拍攝得到的圖像，其單位縮尺的值相對(duì)變大，關(guān)于針對(duì)對(duì)照?qǐng)D像AZ那樣的筆進(jìn)行拍攝得到的圖像，其單位縮尺的值則相對(duì)變小。由此，單位縮尺的值越大，成為越離開(kāi)被攝體而進(jìn)行了拍攝，單位縮尺的值越小，成為越接近被攝體而進(jìn)行了拍攝。由此，在圖11(a)所示的分布顯示中，單位縮尺的值越大，則在表示對(duì)照?qǐng)D像的被攝體處于更遠(yuǎn)的情況的雙箭頭的上側(cè)，顯示分布，而單位縮尺的值越小，則在表示對(duì)照?qǐng)D像的被攝體處于更近的情況的雙箭頭的下側(cè)，顯示分布。接下來(lái)，分布顯示的橫方向示出該單位縮尺的圖像數(shù)。在圖11(a)的示例中，在雙箭頭的右上側(cè)的分布是與對(duì)店鋪的外觀進(jìn)行拍攝得到的對(duì)照?qǐng)D像AA(圖10(a))對(duì)應(yīng)，在雙箭頭的右下側(cè)的多個(gè)分布是與對(duì)商品進(jìn)行拍攝得到的多個(gè)對(duì)照?qǐng)D像AB AZ (圖10 (b))對(duì)應(yīng)。在此，返回至圖8的流程圖，接著進(jìn)行處理的說(shuō)明。如上所述，步驟S1106中進(jìn)行分布顯示時(shí)，AR處理部111計(jì)算出通過(guò)拍攝部140當(dāng)前正在拍攝的圖像的單位縮尺(步驟S1107)。在此，利用拍攝部140的性能信息(傳感器尺寸等)、此時(shí)的拍攝設(shè)定(圖像尺寸、 透鏡焦點(diǎn)距離等)、以及通過(guò)測(cè)距動(dòng)作所獲得的至被攝體為止的距離等，以與上述信息提供裝置200的信息登錄部212相同的方法來(lái)計(jì)算出單位縮尺。在此，如果拍攝部140是立體相機(jī)，則能夠進(jìn)行利用了 3角測(cè)量原理的測(cè)距，所以，能夠更正確地求取至被攝體為止的距離。在計(jì)算出拍攝圖像的單位縮尺后，AR處理部111使如圖11(b)所示那樣的引導(dǎo)在引導(dǎo)顯示區(qū)域中顯示(步驟S1108)。該引導(dǎo)已反映了所計(jì)算出的拍攝圖像的單位縮尺，例如在分布顯示中的雙箭頭的左側(cè)顯示引導(dǎo)。在此，圖11(b)的拍攝圖像顯示區(qū)域中正在顯示的實(shí)時(shí)瀏覽圖像具有下述視角， 即具有不僅將能提供AR服務(wù)的店鋪A拍入還將不能提供AR服務(wù)的店鋪B E也拍入的較寬的視角。在這樣的情況下，店鋪A即使包含在視角內(nèi)，由于圖像整體中的店鋪A的尺寸小，所以實(shí)時(shí)瀏覽圖像的縮尺與對(duì)照?qǐng)D像AA(圖10(b))的縮尺不同，從而不能恰當(dāng)?shù)剡M(jìn)行對(duì)照。在該情況下，如圖11(b)所示那樣，已反映了拍攝圖像的單位縮尺的引導(dǎo)顯示為處于比示出對(duì)照?qǐng)D像AA的分布更上側(cè)位置。在圖11(b)的示例中，在引導(dǎo)的位置不存在對(duì)照?qǐng)D像分布，所以，用戶能夠認(rèn)識(shí)到如不接近被攝體或通過(guò)變焦而設(shè)置為望遠(yuǎn)側(cè)的視角， 則不能實(shí)施用于進(jìn)行AR顯示的對(duì)照。如此，在當(dāng)前的拍攝圖像中不能進(jìn)行利用了從信息提供裝置200所獲取的對(duì)照?qǐng)D像的對(duì)照的情況下(步驟S1109 :否)，返回至步驟S1107，AR處理部111再次對(duì)拍攝圖像的單位縮尺進(jìn)行計(jì)算。即，用戶若通過(guò)引導(dǎo)顯示而認(rèn)識(shí)到不可對(duì)照，則通過(guò)接近被攝體或?qū)⒆兘乖O(shè)置為望遠(yuǎn)側(cè)，來(lái)如圖12(a)所示那樣地縮窄視角，從而能計(jì)算出該拍攝圖像的單位縮尺(步驟SI 107)。在該情況下，雖與所計(jì)算出的單位縮尺對(duì)應(yīng)地進(jìn)行引導(dǎo)顯示(步驟S1108)，但如圖12(a)所示，按照向下側(cè)移動(dòng)的方式來(lái)顯示引導(dǎo)。如圖所示，引導(dǎo)移動(dòng)至與對(duì)照?qǐng)D像AA的分布相當(dāng)?shù)奈恢脮r(shí)，成為能夠以當(dāng)前的視角來(lái)進(jìn)行與對(duì)照?qǐng)D像AA之間的對(duì)照(步驟S1109 是)。在該情況下，對(duì)照處理部113通過(guò)進(jìn)行AR顯示中的已知的圖像處理，來(lái)進(jìn)行與引導(dǎo)對(duì)應(yīng)的單位縮尺的對(duì)照?qǐng)D像(在該情況下，對(duì)照?qǐng)D像AA)與拍攝圖像之間的對(duì)照(步驟 S1110)，識(shí)別拍攝圖像內(nèi)的店鋪A的位置。進(jìn)行這樣對(duì)照后，如圖12(b)所示，通過(guò)AR處理部111例如將拍攝圖像進(jìn)行全畫(huà)面顯示，并且將與對(duì)照?qǐng)D像AA建立對(duì)應(yīng)的從信息提供裝置 200提供的疊加信息疊加顯示在與拍攝圖像內(nèi)的店鋪A對(duì)應(yīng)的位置(步驟SI 111)。接下來(lái)，例如，若沒(méi)有發(fā)生AR應(yīng)用程序的結(jié)束指示或信息顯示裝置100的電源斷開(kāi)等所謂的規(guī)定的結(jié)束事件(步驟S1112 :否)，則反復(fù)進(jìn)行步驟S1102以后的處理。在此， 在步驟S1102中雖進(jìn)行關(guān)鍵信息的獲取動(dòng)作，但只要信息顯示裝置100沒(méi)有大幅地移動(dòng)等， 則相對(duì)于前次獲取的關(guān)鍵信息不會(huì)發(fā)生變動(dòng)(步驟S1103:否)。在這樣的情況下，處理進(jìn)入至步驟S1107，成為進(jìn)行基于當(dāng)前單位縮尺的引導(dǎo)顯示(與視角變化相應(yīng)的引導(dǎo)位置的更新)。另一方面，在新獲取的關(guān)鍵信息有變動(dòng)的情況下(步驟S1103 :是)，重新將該關(guān)鍵信息發(fā)送給信息提供裝置200 (步驟S1104)，并利用基于該關(guān)鍵信息而提供的AR數(shù)據(jù)來(lái)進(jìn)行以后的處理(步驟S1105 )。另外，在信息提供裝置200不存在與信息顯示裝置100發(fā)送來(lái)的關(guān)鍵信息相應(yīng)的對(duì)照?qǐng)D像的情況下，如上所述，從信息提供裝置200不進(jìn)行AR數(shù)據(jù)的發(fā)送，或者發(fā)送不能提供AR服務(wù)之意的通知信息。在這樣的情況下(步驟S1105:否)，處理進(jìn)入步驟S1112，進(jìn)行與有無(wú)結(jié)束事件的發(fā)生相應(yīng)的動(dòng)作。即，如果結(jié)束事件未發(fā)生(步驟S1112 :否)，則再次從關(guān)鍵信息的獲取動(dòng)作起，反復(fù)進(jìn)行處理(步驟S1102 )。在此，在結(jié)束事件發(fā)生的情況下(步驟S1112 :是)，刪除存儲(chǔ)部160中所記錄的關(guān)鍵信息后結(jié)束處理。如以上說(shuō)明那樣，根據(jù)本實(shí)施方式，在終端裝置進(jìn)行AR顯示時(shí)，顯示基于與該拍攝場(chǎng)所相關(guān)聯(lián)地準(zhǔn)備的對(duì)照?qǐng)D像的被攝體縮尺的分布，并且在該分布顯示上對(duì)拍攝圖像中的被攝體縮尺進(jìn)行引導(dǎo)顯示，所以，能夠易于設(shè)定適于進(jìn)行利用了所提供的對(duì)照?qǐng)D像的對(duì)照的視角或拍攝位置，能夠提高利用AR顯示時(shí)的便利性。另外，本實(shí)施方式中，例示了如圖11(a)、(b)以及圖12(a)、(b)所示那樣的引導(dǎo)顯示，但引導(dǎo)顯示的方法或方式是任意的。由此，本發(fā)明并不局限于這些實(shí)施方式。例如，在由于遠(yuǎn)離被攝體而拍攝圖像內(nèi)的被攝體像為較小的情況下，信息顯示裝置100催促接近被攝體或進(jìn)行基于變焦放大(zoom in)的視角變更，如圖13(a)所示，也可將朝上的箭頭圖像作為引導(dǎo)來(lái)進(jìn)行顯示。相反，由于被攝體過(guò)度接近而使被攝體像未能收納于視角內(nèi)的情況下，信息顯示裝置100催促遠(yuǎn)離被攝體或者進(jìn)行基于變焦縮小(zoom out)的視角變更，如圖13(b)所示， 也可以將朝下的箭頭圖像作為引導(dǎo)來(lái)進(jìn)行顯示?；蛘?，也可以是如圖13(c)所示，信息顯示裝置100將表示在對(duì)照時(shí)所需視角的矩形框作為引導(dǎo)來(lái)進(jìn)行顯示，由此來(lái)催促視角變更，以使得被攝體像占滿在整個(gè)該矩形框。這些引導(dǎo)顯示，例如在拍攝圖像與對(duì)照?qǐng)D像的單位縮尺相近的情況下，有利于使其接近更恰當(dāng)?shù)囊暯?，通過(guò)更直感的引導(dǎo)顯示，能夠催促高效的視角變更。由此，也可以是 先進(jìn)行圖11(a)、(b)中所例示那樣的引導(dǎo)顯示，在某種程度近似于單位縮尺的階段，切換為圖13(a) (C)所示那樣的引導(dǎo)顯示。或者，也可以是在對(duì)照?qǐng)D像的數(shù)量少的情況下等，從最初起就進(jìn)行圖13所示那樣的引導(dǎo)顯示。本實(shí)施方式中，通過(guò)立體相機(jī)所進(jìn)行的測(cè)距來(lái)獲取在計(jì)算單位縮尺時(shí)所需的至被攝體為止的距離，由此獲得更正確的距離信息，但是，用于獲取至被攝體為止的距離的方法是任意的。例如，為了獲取至被攝體為止的距離，也可以利用透鏡的對(duì)焦距離。在該情況下， 信息顯示裝置100中所具備的拍攝部140可以不是例示那樣的立體相機(jī)，也可由一般單眼式的相機(jī)模塊來(lái)構(gòu)成拍攝部140。(實(shí)施方式2)在上述實(shí)施方式I中，信息顯示裝置100通過(guò)GPS等獲取位置信息等的關(guān)鍵信息后，基于該關(guān)鍵信息，信息提供裝置200對(duì)AR數(shù)據(jù)進(jìn)行檢索，并將該AR數(shù)據(jù)提供給信息顯示裝置100。但是，在AR服務(wù)的提供者擴(kuò)大時(shí)，由于當(dāng)前位置附近的AR服務(wù)的提供者增多， 將會(huì)導(dǎo)致下述問(wèn)題發(fā)生，即，除對(duì)信息提供裝置200的問(wèn)詢次數(shù)變多之外，I次所提供的AR 數(shù)據(jù)的量也變多，通信量負(fù)荷或信息顯示裝置100內(nèi)的存儲(chǔ)器使用量增大，進(jìn)而導(dǎo)致性能降低。
14
另外，如上所述，由于信息顯示裝置100也可以獲得多個(gè)種類(lèi)的關(guān)鍵信息，根據(jù)情況，則會(huì)發(fā)生必需交替地針對(duì)與多個(gè)關(guān)鍵信息對(duì)應(yīng)的大量的對(duì)照?qǐng)D像進(jìn)行對(duì)照，同樣成為信息顯示裝置100的性能降低的主要因素。另外，即使在利用相同種類(lèi)的關(guān)鍵信息的情況下，例如，在利用GPS的位置信息的情況下，用戶在到達(dá)目的地場(chǎng)所之前，也有可能進(jìn)行沿路徑返回的情況。此時(shí)，信息處理裝置100按照位置信息的變動(dòng)來(lái)訪問(wèn)信息提供裝置200時(shí)，信息顯示裝置100的性能降低，對(duì)于用戶的便利性來(lái)說(shuō)，并非是優(yōu)選。在該情況下，雖然只要在信息顯示裝置100內(nèi)蓄積盡可能多的AR數(shù)據(jù)，則能夠降低對(duì)信息提供裝置200的訪問(wèn)次數(shù)，但是，若在進(jìn)行對(duì)照的信息顯示裝置100內(nèi)蓄積較多的 AR數(shù)據(jù)時(shí)，則在對(duì)照處理時(shí)會(huì)耗費(fèi)時(shí)間，所以不能避免性能降低。本實(shí)施方式中，通過(guò)獲取的關(guān)鍵信息以及AR數(shù)據(jù)的管理，以謀求對(duì)信息提供裝置 200的問(wèn)詢次數(shù)的減少和信息顯示裝置100中的存儲(chǔ)器使用的效率化。由此，參照?qǐng)D14的流程圖，對(duì)信息顯示裝置100中所執(zhí)行的“AR顯示處理(2) ”進(jìn)行說(shuō)明。該處理是取代實(shí)施方式I的“AR顯示處理(I)”而執(zhí)行的處理。在此，上述實(shí)施方式I中，必需將通過(guò)GPS等獲取的位置信息作為關(guān)鍵信息，但是， 本實(shí)施方式中，即便是在未獲取位置信息而獲取了其他種類(lèi)的關(guān)鍵信息的情況下，信息顯示裝置100也進(jìn)行對(duì)信息提供裝置200的問(wèn)詢。如上所述，也存在有從店鋪等的設(shè)施等發(fā)射關(guān)鍵信息的情形。例如，在店鋪的店頭等設(shè)置近距離無(wú)線通信或可見(jiàn)光通信的發(fā)射裝置，若發(fā)射該店鋪的AR數(shù)據(jù)所涉及的關(guān)鍵信息，則在接近該店鋪時(shí)能夠獲取關(guān)鍵信息。該情況下所發(fā)射的關(guān)鍵信息，例如除可以是與通過(guò)GPS獲取的位置信息相當(dāng)?shù)奈恢眯畔⒌戎?，還在該設(shè)施已在信息提供裝置200中登錄了 AR數(shù)據(jù)等的情況下，也可以將表示該設(shè)施的識(shí)別信息作為關(guān)鍵信息而進(jìn)行發(fā)射。在這樣的情況下，在信息提供裝置200的對(duì)照?qǐng)D像存儲(chǔ)表中附加了圖15所示那樣的“組ID”作為索引信息。通過(guò)將多個(gè)AR數(shù)據(jù)與I個(gè)組ID建立對(duì)應(yīng)，能夠提高信息提供裝置200中的檢索效率。另外，本實(shí)施方式中，如圖15所示，針對(duì)各AR數(shù)據(jù)賦予唯一的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)。在該情況下，本實(shí)施方式的信息提供裝置200在從信息顯示裝置100發(fā)送來(lái)關(guān)鍵信息時(shí)，將與該關(guān)鍵信息對(duì)應(yīng)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)返送給信息顯示裝置100， 在從信息顯示裝置100發(fā)送來(lái)識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)時(shí)，將與該識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)對(duì)應(yīng)的AR數(shù)據(jù)返送給信息顯示裝置100。另外，關(guān)于信息顯示裝置100獲取的關(guān)鍵信息，例如包含由對(duì)店鋪內(nèi)銷(xiāo)售的商品等附加的價(jià)標(biāo)等所隨附的RFID芯片發(fā)射來(lái)的信息或者顯示的2維碼所表現(xiàn)的信息，這些的關(guān)鍵信息成為與該商品的AR數(shù)據(jù)建立對(duì)應(yīng)的識(shí)別信息。本實(shí)施方式中，設(shè)這樣的識(shí)別信息與上述AR數(shù)據(jù)識(shí)別信息相同。針對(duì)在如以上那樣的設(shè)想下所執(zhí)行的“AR顯示處理(2)”的動(dòng)作進(jìn)行說(shuō)明。另外， 與實(shí)施方式I相同地假設(shè)將用戶進(jìn)行的AR應(yīng)用程序的執(zhí)行指示作為契機(jī)而開(kāi)始處理。開(kāi)始處理后，拍攝處理部112控制拍攝部140而開(kāi)始拍攝動(dòng)作(步驟S2101)，并且通過(guò)對(duì)照處理部113控制關(guān)鍵信息獲取部130來(lái)進(jìn)行關(guān)鍵信息的獲取動(dòng)作(步驟S2102)。 所獲取的關(guān)鍵信息例如將被臨時(shí)性保持在RAM等的存儲(chǔ)區(qū)域中。
與實(shí)施方式I的示例相同地將獲取的關(guān)鍵信息記錄于存儲(chǔ)部160，但本實(shí)施方式中，圖18(a)所示那樣的“關(guān)鍵信息管理表”在存儲(chǔ)部160中生成，所獲取的關(guān)鍵信息與附加信息被存儲(chǔ)于該關(guān)鍵信息管理表中。如圖18(a)所示，該關(guān)鍵信息管理表由以記錄條目No.(編號(hào))作為關(guān)鍵字(key) 的記錄條目來(lái)構(gòu)成。在此，構(gòu)成表的記錄條目數(shù)例如是由存儲(chǔ)部160的容量中分配給AR應(yīng)用程序的容量或信息顯示裝置100的處理能力等所規(guī)定的。即，按照所記錄的關(guān)鍵信息的數(shù)據(jù)量成為不降低AR應(yīng)用程序的執(zhí)行所涉及性能的程度的方式，來(lái)規(guī)定記錄條目數(shù)。本實(shí)施方式中，例如，設(shè)為由η個(gè)記錄條目來(lái)構(gòu)成表。另外，設(shè)步驟S2102中所獲取的關(guān)鍵信息的數(shù)量為N(個(gè))。如上所述，通過(guò)多種方法來(lái)獲取關(guān)鍵信息，所以，在相同場(chǎng)所進(jìn)行關(guān)鍵信息獲取動(dòng)作的情況下，例如有通過(guò)GPS來(lái)獲取位置信息、并且通過(guò)近距離無(wú)線通信來(lái)獲取組ID等這樣的同時(shí)獲取多個(gè)關(guān)鍵信息的情況，所以，關(guān)鍵信息的數(shù)量N為N彡I。如圖18(a)所示，在這樣的關(guān)鍵信息管理表中記錄有所獲取的關(guān)鍵信息(例如， 位置信息、組ID、識(shí)別信息等)，表示該關(guān)鍵信息的獲取方法的種類(lèi)的信息(例如，GPS、可見(jiàn)光通信、RFID、IrDA、Bluetooth(注冊(cè)商標(biāo))、2維碼等之外)、利用日期時(shí)間、針對(duì)該關(guān)鍵信息而由信息提供裝置200發(fā)送的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)、表示從刪除對(duì)象中應(yīng)除外的記錄條目的標(biāo)志(“除外標(biāo)志”)等。在此，“利用日期時(shí)間”中記錄所獲取的關(guān)鍵信息被記錄時(shí)的日期時(shí)間。另外，已記錄在關(guān)鍵信息管理表中的關(guān)鍵信息被再次獲取時(shí)，利用日期時(shí)間將被更新為此時(shí)的日期時(shí)間。執(zhí)行“關(guān)鍵信息管理處理”作為用以在這樣的關(guān)鍵信息管理表中存儲(chǔ)關(guān)鍵信息的處理(步驟S2200)。參照?qǐng)D16所示的流程圖，對(duì)該“關(guān)鍵信息管理處理”進(jìn)行說(shuō)明。開(kāi)始處理后，對(duì)照處理部113對(duì)存儲(chǔ)部160的關(guān)鍵信息管理表進(jìn)行訪問(wèn)，在關(guān)鍵信息管理表中存儲(chǔ)有與RAM中所保持的關(guān)鍵信息相同的關(guān)鍵信息的情況下，將涉及該關(guān)鍵信息的“利用日期時(shí)間”更新為當(dāng)前日期時(shí)間(步驟S2201)。在此，關(guān)于RAM中所保持的、本次獲取的關(guān)鍵信息當(dāng)中的已完成記錄于這樣的關(guān)鍵信息管理表中的關(guān)鍵信息，在更新利用日期時(shí)間后，從RAM中刪除。將已完成記錄的關(guān)鍵信息從RAM中刪除后，RAM中余留的關(guān)鍵信息成為未記錄在關(guān)鍵信息管理表中的關(guān)鍵信息。在本次獲取的關(guān)鍵信息中，全部關(guān)鍵信息均已記錄在關(guān)鍵信息管理表中的情況下(步驟S2202 :否)，僅進(jìn)行利用日期時(shí)間的更新后，結(jié)束處理，返回至“AR顯示處理⑵”(圖14)的流程。另一方面，在本次獲取的關(guān)鍵信息中存在有未被記錄在關(guān)鍵信息管理表中的關(guān)鍵信息的情況下(步驟S2202 :是)，對(duì)照處理部113判別是否能將這樣的未記錄的關(guān)鍵信息追加到關(guān)鍵信息管理表中(步驟S2203)。如上所述，本實(shí)施方式所涉及的關(guān)鍵信息管理表是基于存儲(chǔ)部160的容量等而將記錄條目數(shù)限制為η個(gè)為止。在這樣的η個(gè)記錄條目中，只要有I以上的空白記錄條目，對(duì)照處理部113則判別為可追加關(guān)鍵信息(步驟S2203 :是)。在該情況下，關(guān)于RAM中余留的關(guān)鍵信息中I個(gè)關(guān)鍵信息，對(duì)照處理部113將該關(guān)鍵信息與表示獲取方法的信息、以及作為獲取日期時(shí)間的表示當(dāng)前日期時(shí)間的信息記錄在 I個(gè)空白記錄條目中(步驟S2209)。在該情況下，對(duì)照處理部113刪除RAM上的該關(guān)鍵信
本次獲取的I個(gè)關(guān)鍵信息記錄于關(guān)鍵信息管理表中后，對(duì)照處理部113通過(guò)控制通信部120，將該關(guān)鍵信息經(jīng)由通信網(wǎng)絡(luò)NW發(fā)送給信息提供裝置200，并將經(jīng)由通信網(wǎng)絡(luò)NW 從信息提供裝置200獲取對(duì)應(yīng)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)(步驟S2210)。在該情況下，信息提供裝置200中，通信部220接收到從信息顯示裝置100發(fā)送來(lái)的關(guān)鍵信息后，信息檢索部213對(duì)存儲(chǔ)部240進(jìn)行訪問(wèn)，從圖15所示的對(duì)照?qǐng)D像存儲(chǔ)表中檢索與接收到的關(guān)鍵信息建立對(duì)應(yīng)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，通信部220將該識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)發(fā)送給信息顯示裝置100。這樣，信息提供裝置200發(fā)送識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，信息顯示裝置100的通信部120接收識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)。對(duì)照處理部113將所接收的識(shí)別信息(AR 數(shù)據(jù)識(shí)別信息)記錄在通過(guò)步驟S2209在關(guān)鍵信息管理表中所記錄的關(guān)鍵信息的記錄條目中(步驟S2211)。對(duì)I個(gè)記錄條目的關(guān)鍵信息的記錄完成后，對(duì)照處理部113通過(guò)判別是否仍有在 RAM上余留的本次獲取的關(guān)鍵信息，來(lái)判別未記錄在關(guān)鍵信息管理表中的關(guān)鍵信息是否全部已被記錄(步驟S2212)。若本次獲取的關(guān)鍵信息中還有在RAM中余留的關(guān)鍵信息(步驟S2212 :否)，則處理返回至步驟S2203。在此，η個(gè)記錄條目中全部已記錄有信息的情況下，對(duì)照處理部113 判別為不能追加關(guān)鍵信息(步驟S2203 :否)，通過(guò)刪除任意一個(gè)記錄條目的內(nèi)容來(lái)準(zhǔn)備空白記錄條目。在該情況下，對(duì)照處理部113掃描關(guān)鍵信息管理表中所記錄的利用日期時(shí)間，確定出記錄著最早利用日期時(shí)間的記錄條目(步驟S2204)。接下來(lái)，對(duì)照處理部113判別該記錄條目中所記錄的關(guān)鍵信息是否為位置信息以外的信息(組ID或識(shí)別信息等)(步驟 S2205)。在是記錄有除位置信息以外的關(guān)鍵信息的記錄條目的情況下(步驟S2205 :是)， 對(duì)照處理部113刪除該記錄條目的內(nèi)容(步驟S2208)。由此，能夠準(zhǔn)備I個(gè)空白記錄條目， 所以，通過(guò)步驟S2209以后的處理，在該空白記錄條目中記錄相應(yīng)的信息。另一方面，記錄著最早利用日期時(shí)間的記錄條目的關(guān)鍵信息為位置信息的情況下 (步驟S2205 :否)，對(duì)照處理部113基于該位置信息和當(dāng)前位置，來(lái)判別該記錄條目中所記錄的位置信息是否為與當(dāng)前位置接近的位置(步驟S2206)。在此，本次獲取的關(guān)鍵信息中只要包含位置信息，對(duì)照處理部113則將該位置信息所示的位置用作當(dāng)前位置。如未包含位置信息，對(duì)照處理部113則通過(guò)控制關(guān)鍵信息獲取部130，進(jìn)行當(dāng)前位置信息的獲取。接下來(lái)，對(duì)照處理部113基于表示各位置的緯度·經(jīng)度，來(lái)運(yùn)算2點(diǎn)間的距離，對(duì)所計(jì)算出的距離與規(guī)定的閾值進(jìn)行比較，由此來(lái)判別該位置信息所示的位置是否接近當(dāng)前位置。該情況下的閾值是任意的。關(guān)于閾值，可以由信息顯示裝置100的制造者來(lái)設(shè)定，也可以由使用者任意地設(shè)定。通過(guò)這樣的動(dòng)作，若利用日期時(shí)間為最早的記錄條目中所被記錄的位置信息是表示接近當(dāng)前位置的位置信息時(shí)(步驟S2206 :是)，對(duì)照處理部113將該記錄條目從刪除對(duì)象中除外(步驟S2207)，返回至步驟S2204。在該情況下，例如，在該記錄條目中置位用于表示該記錄條目是應(yīng)從刪除對(duì)象中除外的記錄條目的標(biāo)志(除外標(biāo)志)。
另一方面，如果是記錄著表示遠(yuǎn)離當(dāng)前位置的位置的位置信息的記錄條目(步驟 S2206 :否)，處理進(jìn)入步驟S2208，對(duì)照處理部113刪除該記錄條目的內(nèi)容。接下來(lái)，通過(guò)進(jìn)行步驟S2209以后的處理，在該記錄條目中記錄各種信息。這樣，在本次獲取的關(guān)鍵信息的全部均被記錄于關(guān)鍵信息管理表中時(shí)(步驟 S2212 :是)，對(duì)照處理部113結(jié)束本處理，返回至“AR顯示處理(2) ” (圖14)的流程。在此，本實(shí)施方式中，從信息提供裝置200中獲取的AR數(shù)據(jù)將被記錄到如圖18 (b) 所示那樣的在存儲(chǔ)部160中生成的“AR數(shù)據(jù)管理表”中。如圖所示，在“AR數(shù)據(jù)管理表”中生成以記錄條目No.作為關(guān)鍵字的記錄條目，在各記錄條目中記錄與關(guān)鍵信息對(duì)應(yīng)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，并且記錄與該識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)對(duì)應(yīng)的AR數(shù)據(jù)(即，對(duì)照?qǐng)D像、疊加信息、縮尺信息、單位縮尺信息等)、和表示該AR數(shù)據(jù)的利用日期時(shí)間的信息等。在此，“利用日期時(shí)間”中記錄從信息提供裝置200中獲取該AR數(shù)據(jù)時(shí)的日期時(shí)間。另外，關(guān)于構(gòu)成AR數(shù)據(jù)管理表的記錄條目數(shù)，設(shè)為是由AR應(yīng)用程序所分配的存儲(chǔ)部160的容量或信息顯示裝置100的處理能力等所規(guī)定的。即，按照所記錄的信息量不會(huì)使AR應(yīng)用程序的執(zhí)行性能降低的方式來(lái)規(guī)定記錄條目數(shù)。本實(shí)施方式中，設(shè)為由m個(gè)記錄條目來(lái)構(gòu)成表。上述“關(guān)鍵信息管理處理”(步驟S2200)執(zhí)行后，在“AR顯示處理(2) ”中執(zhí)行用于在這樣的AR數(shù)據(jù)管理表中記錄AR數(shù)據(jù)的“AR數(shù)據(jù)管理處理”(步驟S2300)。參照?qǐng)D17 所示的流程圖，對(duì)該AR數(shù)據(jù)管理處理進(jìn)行說(shuō)明。開(kāi)始處理后，對(duì)照處理部113先訪問(wèn)存儲(chǔ)部160的關(guān)鍵信息管理表(圖18(a))，確定以與本次的關(guān)鍵信息獲取動(dòng)作對(duì)應(yīng)的日期時(shí)間作為利用日期時(shí)間而記錄的記錄條目，并確定該記錄條目中所記錄的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)。即，對(duì)照處理部113對(duì)于與本次獲取的關(guān)鍵信息建立對(duì)應(yīng)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)進(jìn)行確定。在該情況下，對(duì)照處理部113從關(guān)鍵信息管理表中獲得所確定的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)(步驟S2301)，并臨時(shí)性保持于RAM中。接著，對(duì)照處理部113訪問(wèn)存儲(chǔ)部160的AR數(shù)據(jù)管理表(圖18(b))，對(duì)已記錄有步驟S2301中所獲取的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)的記錄條目進(jìn)行確定，將該記錄條目的“利用日期時(shí)間”更新為當(dāng)前日期時(shí)間(步驟S2302)。即，與本次獲取的關(guān)鍵信息建立對(duì)應(yīng)的AR數(shù)據(jù)，是已在AR數(shù)據(jù)管理表中完成了記錄的情況下，作為此時(shí)從信息提供裝置200 所獲取的AR數(shù)據(jù)，來(lái)更新“利用日期時(shí)間”。關(guān)于這樣的表示在AR數(shù)據(jù)管理表中已完成記錄的AR數(shù)據(jù)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，在更新“利用日期時(shí)間”后，從RAM中刪除該識(shí)別信息。在進(jìn)行了這樣的刪除后， 若RAM中還余留有識(shí)別信息，則由RAM中余留的該識(shí)別信息所示的AR數(shù)據(jù)，將成為未記錄在AR數(shù)據(jù)管理表中的數(shù)據(jù)。另外，若在RAM中未余留識(shí)別信息，則與本次獲取的關(guān)鍵信息對(duì)應(yīng)的AR數(shù)據(jù)全部已在AR數(shù)據(jù)管理表中完成記錄。在該情況下(步驟S2303:否)，對(duì)照處理部113僅更新與本次獲取的關(guān)鍵信息對(duì)應(yīng)的AR數(shù)據(jù)有關(guān)的“利用日期時(shí)間”后，結(jié)束處理，處理返回至“AR 顯示處理⑵”(圖14)的流程。另一方面，在存在有AR數(shù)據(jù)管理表中未記錄的AR數(shù)據(jù)的情況下(步驟S2303 是)，對(duì)照處理部113判別是否能夠追加到AR數(shù)據(jù)管理表中(步驟S2304)。如上所述，本實(shí)施方式所涉及的AR數(shù)據(jù)管理表是基于存儲(chǔ)部160的容量等而將記錄條目數(shù)限制為m個(gè)為止。在這樣的m個(gè)記錄條目中，只要有I個(gè)以上的空白記錄條目，對(duì)照處理部113則判別為可追加AR數(shù)據(jù)(步驟S2304 :是)。在該情況下，對(duì)照處理部113選擇RAM中所保持的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息) 中的I個(gè)。接下來(lái)，對(duì)照處理部113控制通信部120，將所選擇的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)經(jīng)由通信網(wǎng)絡(luò)NW發(fā)送給信息提供裝置200，從信息提供裝置200中獲取與該識(shí)別信息 (AR數(shù)據(jù)識(shí)別信息)建立對(duì)應(yīng)的AR數(shù)據(jù)(步驟S2310)。此時(shí)，在信息提供裝置200中，通信部220接收到信息顯示裝置100發(fā)送來(lái)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，信息檢索部213訪問(wèn)存儲(chǔ)部240，在圖15所示的對(duì)照?qǐng)D像存儲(chǔ)表中，對(duì)與接收到的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)建立對(duì)應(yīng)的AR數(shù)據(jù)進(jìn)行檢索，通信部220 將AR數(shù)據(jù)發(fā)送給信息顯示裝置100。這樣，信息提供裝置200發(fā)送AR數(shù)據(jù)后，信息顯示裝置100的通信部120接收該 AR數(shù)據(jù)。對(duì)照處理部113將所接收的AR數(shù)據(jù)記錄于I個(gè)空白記錄條目中(步驟S2311)。 對(duì)照處理部113另外還將表示此時(shí)的當(dāng)前日期時(shí)間的信息作為該AR數(shù)據(jù)的利用日期時(shí)間而進(jìn)行記錄。此時(shí)，對(duì)照處理部113將RAM中所保持的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)中與已記錄于AR數(shù)據(jù)管理表中的AR數(shù)據(jù)相關(guān)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)從RAM中刪除。對(duì)照處理部113通過(guò)判別在RAM上是否余留有識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，來(lái)判別未記錄于AR數(shù)據(jù)管理表中的AR數(shù)據(jù)的全部是否已被記錄于AR數(shù)據(jù)管理表中(步驟 S2312)。在RAM上余留有識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)的情況下(步驟S2312 :否)，處理返回至步驟S2304，對(duì)于這些識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)，進(jìn)行AR數(shù)據(jù)的獲取和記錄。在此，在AR數(shù)據(jù)管理表的m個(gè)記錄條目全部記錄有信息的情況下，對(duì)照處理部113判別為不能追加AR數(shù)據(jù)(步驟S2304 :否)，通過(guò)刪除任意一個(gè)記錄條目的內(nèi)容來(lái)準(zhǔn)備空白記錄條目。在該情況下，對(duì)照處理部113對(duì)AR數(shù)據(jù)管理表中所記錄的利用日期時(shí)間進(jìn)行掃描，對(duì)記錄著最早利用日期時(shí)間的記錄條目進(jìn)行確定(步驟S2305)。接下來(lái)，對(duì)照處理部 113對(duì)該記錄條目中所記錄的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)進(jìn)行確定。接著，對(duì)照處理部113訪問(wèn)關(guān)鍵信息管理表，判別是否有記錄著所確定的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)的記錄條目。即，對(duì)照處理部113判別與利用日期時(shí)間最早的AR數(shù)據(jù)對(duì)應(yīng)的關(guān)鍵信息是否余留在當(dāng)前的關(guān)鍵信息管理表中(步驟S2306)。在關(guān)鍵信息管理表中未余留對(duì)應(yīng)的關(guān)鍵信息的情況下(步驟S2306 :否)，對(duì)照處理部113從AR數(shù)據(jù)管理表中刪除步驟S2305中所確定的記錄條目的內(nèi)容(步驟S2307)。 由此，能夠準(zhǔn)備I個(gè)空白記錄條目，所以，通過(guò)步驟S2310以后的處理，在該記錄條目中記錄相應(yīng)的信息。另一方面，在與利用日期時(shí)間最早的AR數(shù)據(jù)對(duì)應(yīng)的關(guān)鍵信息仍余留在當(dāng)前的關(guān)鍵信息管理表中的情況下(步驟S2306 :是)，對(duì)照處理部113通過(guò)判別在該關(guān)鍵信息的記錄條目中是否置位“除外標(biāo)志”，來(lái)判別該關(guān)鍵信息是否是在“關(guān)鍵信息管理處理”(圖16) 的步驟S2207中已從刪除對(duì)象中除外的信息(步驟S2308)。
在此，在與步驟S2305所確定的AR數(shù)據(jù)對(duì)應(yīng)的關(guān)鍵信息是在關(guān)鍵信息管理表已從刪除對(duì)象中除外的情況下(步驟S2308 :是)，對(duì)于在步驟S2305確定的記錄條目，對(duì)照處理部113也將其從刪除對(duì)象中除外(步驟S2309)，處理返回至步驟S2305。在該情況下，例如也可以在記錄條目中置位表示作為除外對(duì)象的標(biāo)志，并將該記錄條目的利用日期時(shí)間更新為當(dāng)前的日期時(shí)間，由此，步驟S2305中所確定的記錄條目將被除外。通過(guò)上述“關(guān)鍵信息管理處理”(圖16)，則在關(guān)鍵信息管理表中，按照余留相對(duì)而言是最近所獲取的關(guān)鍵信息或者利用日期時(shí)間早但位置表示是與當(dāng)前位置接近的關(guān)鍵信息的方式來(lái)進(jìn)行管理。由此，與步驟S2305中所確定的AR數(shù)據(jù)對(duì)應(yīng)的關(guān)鍵信息，只要在關(guān)鍵信息管理表中余留，并且從刪除對(duì)象中除外，則即使AR數(shù)據(jù)的利用日期時(shí)間早，該AR數(shù)據(jù)在使用了本次獲取的關(guān)鍵信息的AR顯示中或者在使用了不久將來(lái)可獲取的關(guān)鍵信息的 AR顯示中被利用的可能性也高。由此，通過(guò)將這樣的AR數(shù)據(jù)從AR數(shù)據(jù)管理表中的刪除對(duì)象中除外，而使其在AR管理表中余留下來(lái)。在這樣的除外處理后，處理返回至步驟S2305，檢索能夠成為刪除對(duì)象的記錄條目，并刪除其內(nèi)容(步驟S2305 步驟S2307)。接下來(lái)，在如此準(zhǔn)備的空白記錄條目中記錄新獲取的AR數(shù)據(jù)(步驟S2310 步驟S2311)。另一方面，即使是在關(guān)鍵信息管理表中仍余留的對(duì)應(yīng)的關(guān)鍵信息，只要不是從刪除對(duì)象中除外的關(guān)鍵信息(步驟S2308 :否)，則在關(guān)鍵信息管理表中余留的關(guān)鍵信息中，相對(duì)而言，該關(guān)鍵信息的利用日期時(shí)間早，該關(guān)鍵信息表示的位置與當(dāng)前位置不近、且關(guān)于對(duì)應(yīng)的AR數(shù)據(jù)其利用日期時(shí)間為最早。由此，對(duì)照處理部113將步驟S2305中所確定的記錄條目中所記錄的AR數(shù)據(jù)，視為本次或者不久將來(lái)被利用的可能性低，所以，對(duì)照處理部113 刪除該記錄條目的內(nèi)容來(lái)準(zhǔn)備空白記錄條目(步驟S2307)。直至成為對(duì)象的全部AR數(shù)據(jù)被記錄完成為止，反復(fù)進(jìn)行以上那樣的動(dòng)作(步驟 S2312 :否)，全部AR數(shù)據(jù)被記錄后(步驟S2312 :是)，對(duì)照處理部113結(jié)束本處理，返回至 “AR顯示處理⑵”(圖14)的流程。在“AR顯示處理(2)”中，AR處理部111進(jìn)行利用了與步驟S2102中所獲取的關(guān)鍵信息對(duì)應(yīng)的AR數(shù)據(jù)的AR顯示。在此，通過(guò)進(jìn)行與實(shí)施方式I中說(shuō)明的“AR顯示處理
(I)”(圖8)的步驟S1106 步驟Sllll相同的動(dòng)作，進(jìn)行利用已獲取AR數(shù)據(jù)的AR顯示 (步驟 S2103)。接下來(lái)，若不發(fā)生規(guī)定的結(jié)束事件(步驟S2104 :否)，則通過(guò)反復(fù)執(zhí)行步驟S2102 以后的處理，AR處理部111進(jìn)行AR顯示。接下來(lái)，在結(jié)束事件的發(fā)生時(shí)(步驟S2104:是)， 結(jié)束本處理。如上所述，根據(jù)本實(shí)施方式，能夠根據(jù)信息顯示裝置100中可利用的存儲(chǔ)器資源或處理能力等，以使得AR顯示可高效率執(zhí)行的方式來(lái)恰當(dāng)?shù)毓芾硇畔@示裝置100所保持的關(guān)鍵信息或AR數(shù)據(jù)，并且有效地減少用于從信息提供裝置200向信息顯示裝置100提供的AR數(shù)據(jù)的數(shù)據(jù)傳輸，所以，能夠減輕通信量負(fù)荷，并且能夠防止信息顯示裝置100的性能降低，能夠?qū)崿F(xiàn)AR服務(wù)利用中的便利性的提高。S卩,信息顯示裝置100獲取關(guān)鍵信息時(shí),僅從信息提供裝置200中獲取與該關(guān)鍵信息對(duì)應(yīng)的識(shí)別信息，所以，不傳輸對(duì)照?qǐng)D像等那樣的相對(duì)數(shù)據(jù)量大的AR數(shù)據(jù)。接下來(lái)，基于所獲取的識(shí)別信息，僅在信息顯示裝置100所保持的AR數(shù)據(jù)中未含有相應(yīng)的AR數(shù)據(jù)的情況下，信息顯示裝置100才從信息提供裝置200中接收AR數(shù)據(jù)的提供。由此，相比于在每次獲取關(guān)鍵信息時(shí)均從信息提供裝置200中獲取AR數(shù)據(jù)的情況，能夠大幅度地削減通信網(wǎng)絡(luò)NW上的數(shù)據(jù)傳輸量。另外，在信息顯示裝置100內(nèi)按照優(yōu)先地余留相對(duì)而言最近所獲取的關(guān)鍵信息和表示與當(dāng)前位置接近的位置信息的關(guān)鍵信息的方式來(lái)進(jìn)行保持，并按照不刪除與這些的關(guān)鍵信息對(duì)應(yīng)的AR數(shù)據(jù)的方式來(lái)進(jìn)行管理，所以，在信息顯示裝置100內(nèi)，優(yōu)先地保持當(dāng)前或者不遠(yuǎn)將來(lái)被利用的可能性高的AR數(shù)據(jù)，能夠更進(jìn)一步地減少為了獲取AR數(shù)據(jù)而與信息提供裝置200之間進(jìn)行的事務(wù)次數(shù)。另外，本實(shí)施方式中，與此時(shí)所獲取的關(guān)鍵信息對(duì)應(yīng)的AR數(shù)據(jù)是在AR數(shù)據(jù)管理表中已完成了記錄的情況下，更新與該AR數(shù)據(jù)相關(guān)的“利用日期時(shí)間”(“AR數(shù)據(jù)管理處理”(圖17)的步驟S2302)，但是，也可以在AR數(shù)據(jù)管理表中所記錄的AR數(shù)據(jù)被利用于AR 顯示時(shí)，更新“利用日期時(shí)間”。由此，能夠使實(shí)際在AR顯示中所利用的AR數(shù)據(jù)優(yōu)先地保持于信息顯示裝置100中。另外，從關(guān)鍵信息管理表中刪除關(guān)鍵信息時(shí)(“關(guān)鍵信息管理處理”(圖16)的步驟S2208)，也可以從AR數(shù)據(jù)管理表中刪除與該關(guān)鍵信息建立對(duì)應(yīng)的AR數(shù)據(jù)，從AR數(shù)據(jù)管理表中刪除AR數(shù)據(jù)時(shí)(“AR數(shù)據(jù)管理處理”(圖17)的步驟S2307)，也可以從關(guān)鍵信息管理表中刪除與該AR數(shù)據(jù)的識(shí)別信息(AR數(shù)據(jù)識(shí)別信息)建立對(duì)應(yīng)的關(guān)鍵信息。由此，關(guān)鍵信息以及AR數(shù)據(jù)中的任意一個(gè)被視為刪除對(duì)象時(shí)，也一并刪除相互對(duì)應(yīng)的AR數(shù)據(jù)或者關(guān)鍵信息，所以，在關(guān)鍵信息管理表以及AR數(shù)據(jù)管理表的任意一者中，都能夠提高預(yù)先準(zhǔn)備空白記錄條目的可能性。(實(shí)施方式3)上述實(shí)施方式2中，作為從店鋪等的設(shè)施等發(fā)射的關(guān)鍵信息，例示了組ID，通過(guò)與獲取該組ID相同的方法，不僅可以獲取關(guān)鍵信息，也可以由設(shè)施獲取AR數(shù)據(jù)(對(duì)照?qǐng)D像)。 在該情況下，例如，即使在通過(guò)GPS不能獲取位置信息的情況下，不僅能夠獲取AR服務(wù)的利用中所需的AR數(shù)據(jù)，還可在不訪問(wèn)信息提供裝置200等的情況下獲取AR數(shù)據(jù)，所以，能夠減少通信網(wǎng)絡(luò)NW中的通信量負(fù)荷。在該實(shí)施方式中，設(shè)置于店鋪等設(shè)施等的近距離無(wú)線通信裝置或可見(jiàn)光通信裝置作為信息提供裝置200而發(fā)揮功能，這與上述各實(shí)施方式中例示的信息提供裝置200不同， 這些裝置只要僅保持與設(shè)置場(chǎng)所相關(guān)的信息并發(fā)射即可，所以，能夠小規(guī)模且簡(jiǎn)易地實(shí)現(xiàn)， 而且能夠?qū)μ峁嫶蟮腁R數(shù)據(jù)進(jìn)行分流。作為如此提供的對(duì)照?qǐng)D像，在上述各實(shí)施方式中，采用了照片圖像等的所謂2D圖像。在該情況下，若從與拍攝對(duì)照?qǐng)D像的相機(jī)的視線方向不相一致的視線方向進(jìn)行拍攝，則存在不能很好地進(jìn)行對(duì)照的情況。尤其關(guān)于店鋪等的內(nèi)部中的各多數(shù)商品而進(jìn)行AR顯示的情況下，在店鋪內(nèi)部狹窄或者接近對(duì)象物時(shí)，并不局限于能夠以與對(duì)照?qǐng)D像的視線方向相同的視線方向進(jìn)行拍攝。另外，由于對(duì)照動(dòng)作是利用背景來(lái)進(jìn)行的，用戶不能認(rèn)識(shí)到利用哪樣的對(duì)照?qǐng)D像，所以，通常不能主動(dòng)地進(jìn)行與對(duì)照?qǐng)D像的視線方向相匹配的拍攝。在此，在以立體相機(jī)來(lái)構(gòu)成拍攝部140的信息顯示裝置100的情況下，信息顯示裝置100能夠基于拍攝圖像來(lái)生成3D建模數(shù)據(jù)。由此，信息顯示裝置100通過(guò)將這樣的3D 建模數(shù)據(jù)與對(duì)照?qǐng)D像進(jìn)行對(duì)照，能夠?qū)崿F(xiàn)消除上述那樣的問(wèn)題。本實(shí)施方式中，以下對(duì)該情況下的動(dòng)作例進(jìn)行說(shuō)明。參照?qǐng)D19所示的流程圖，對(duì)信息顯示裝置100利用3D建模數(shù)據(jù)進(jìn)行對(duì)照的情況下的“AR顯示處理(3)”進(jìn)行說(shuō)明。另外，本實(shí)施方式中設(shè)為通過(guò)設(shè)置于店鋪等的設(shè)施等的近距離無(wú)線通信裝置或可見(jiàn)光通信裝置來(lái)將AR數(shù)據(jù)提供給信息顯示裝置100。開(kāi)始處理時(shí)，通過(guò)拍攝處理部112來(lái)控制作為立體相機(jī)的拍攝部140，開(kāi)始拍攝動(dòng)作(步驟S3101)。在本實(shí)施方式中設(shè)為在存儲(chǔ)部160中包含諸如VRAM (Video RAM)等那樣的、為了進(jìn)行圖像處理而展開(kāi)圖像數(shù)據(jù)的存儲(chǔ)裝置。在該情況下，對(duì)照處理部113針對(duì)存儲(chǔ)部160中被展開(kāi)的圖像數(shù)據(jù)，利用3D建模的已知技術(shù)，基于拍攝圖像來(lái)提取被攝體，并進(jìn)行縱深估計(jì)，由此，生成所提取的被攝體的3D建模數(shù)據(jù)(步驟S3102)。在生成3D建模數(shù)據(jù)后，對(duì)照處理部113利用圖像處理中的已知技術(shù)，對(duì)于通過(guò)拍攝圖像生成3D建模數(shù)據(jù)后的被攝體，例如，通過(guò)SIFT (Scale Invariant Feature Transform)或SURF (Speeded Up Robust Features)等,來(lái)進(jìn)行特征點(diǎn)的提取或特征量的計(jì)算(步驟S3103)。另外，對(duì)照處理部113通過(guò)控制關(guān)鍵信息獲取部130等，獲取從設(shè)置于店鋪等的設(shè)施等的近距離無(wú)線通信裝置或可見(jiàn)光通信裝置中發(fā)射來(lái)的AR數(shù)據(jù)，并將AR數(shù)據(jù)記錄于存儲(chǔ)部160中(步驟S3104)。在AR數(shù)據(jù)的記錄時(shí)，對(duì)照處理部113將其記錄于實(shí)施方式2中所例示那樣的AR數(shù)據(jù)管理表等。在獲取的AR數(shù)據(jù)中所含的對(duì)照?qǐng)D像包含有多個(gè)的情況下，對(duì)照處理部113依次進(jìn)行所生成的3D建模數(shù)據(jù)與這些對(duì)照?qǐng)D像之間的對(duì)照，由此，在將作為處理對(duì)象的對(duì)照?qǐng)D像的索引編號(hào)i設(shè)定為初始值“O”后(步驟S3105)，通過(guò)對(duì)i的值進(jìn)行加I (步驟S3106)，來(lái)指定第I個(gè)對(duì)照?qǐng)D像。對(duì)于存儲(chǔ)部160中所存儲(chǔ)的該對(duì)照?qǐng)D像(第i個(gè)的對(duì)照?qǐng)D像)，對(duì)照處理部113通過(guò)進(jìn)行與步驟S3103中的處理相同的處理，由SIFT或SURF等來(lái)進(jìn)行特征點(diǎn)的提取或特征量的計(jì)算(步驟S3107)。在此，在當(dāng)前正在拍攝的被攝體為圖20(a)所示那樣的立體物的情況下，所準(zhǔn)備的對(duì)照?qǐng)D像設(shè)為從圖20(a)中的“對(duì)照?qǐng)D像的視線”所示的方向所拍攝的如圖20(b)所示那樣的照片圖像(2D圖像)。在此，在將信息顯示裝置100所進(jìn)行的當(dāng)前的拍攝方向設(shè)為圖 20(a)中的“當(dāng)前的相機(jī)視線”所示的方向時(shí)，在步驟S3102中所生成的3D建模數(shù)據(jù)成為圖 20(c)所示那樣的情形。在該情況下，對(duì)照?qǐng)D像的視線與當(dāng)前的拍攝中的視線不同，所以，在所生成的3D 建模數(shù)據(jù)中，不能進(jìn)行利用對(duì)照?qǐng)D像的對(duì)照。由此，對(duì)照處理部113比較拍攝圖像的特征點(diǎn) 特征量與對(duì)照?qǐng)D像的特征點(diǎn)·特征量，按照成為對(duì)照?qǐng)D像的視線的方式變更3D建模數(shù)據(jù)的視線方向(步驟S3108)。如圖20(d)所示，如此地進(jìn)行了視線變更后的3D建模數(shù)據(jù)與對(duì)照?qǐng)D像相似，因而能夠進(jìn)行利用對(duì)照?qǐng)D像的對(duì)照。另外，在當(dāng)前進(jìn)行比較的對(duì)照?qǐng)D像不是生成了 3D建模數(shù)據(jù)的被攝體的情況下，即便變更3D建模數(shù)據(jù)的視線也不會(huì)對(duì)照成功(步驟S3109 :否)。在該情況下，處理返回至步驟S3106，對(duì)照處理部113通過(guò)將作為對(duì)象的對(duì)照?qǐng)D像的索引編號(hào)i加1，針對(duì)下一對(duì)照?qǐng)D像進(jìn)行上述處理。接下來(lái)，在對(duì)照成功的情況下(步驟S3109 :是)，AR處理部111通過(guò)進(jìn)行與實(shí)施方式I中例示的“AR顯示處理(I) ”(圖8)的步驟SI 106 步驟Sllll相同的處理，來(lái)進(jìn)行 AR顯示(步驟S3110)。另外，若上述各實(shí)施方式中例示那樣的規(guī)定的結(jié)束事件未發(fā)生(步驟S3111 :否)， 則處理返回至步驟S3104，對(duì)照處理部113反復(fù)進(jìn)行以后的處理。發(fā)生結(jié)束事件時(shí)(步驟 S3111 :是)，對(duì)照處理部113結(jié)束本處理。根據(jù)以上所述的本實(shí)施方式，基于從拍攝圖像與對(duì)照?qǐng)D像中提取的特征點(diǎn)或特征量，來(lái)變更基于拍攝圖像而生成的3D建模數(shù)據(jù)的視線方向，由此，即便在由不同于對(duì)照?qǐng)D像的視線方向的方向進(jìn)行拍攝的情況下，也能夠進(jìn)行恰當(dāng)?shù)膶?duì)照，與拍攝圖像的拍攝方向無(wú)關(guān)地能夠正確地進(jìn)行AR顯示。即，即便由于AR服務(wù)的擴(kuò)大而使AR服務(wù)的對(duì)象增加的情況下，也能夠進(jìn)行正確的AR顯示，能夠提高用戶的便利性。另外，本實(shí)施方式中，從設(shè)置于店鋪等的設(shè)施等的近距離無(wú)線通信裝置或可見(jiàn)光通信裝置中獲取作為照片圖像的對(duì)照?qǐng)D像，但是，這樣所提供的對(duì)照?qǐng)D像本身也可為3D建模數(shù)據(jù)。在實(shí)施方式I或?qū)嵤┓绞?中所例示的信息提供裝置200提供對(duì)照?qǐng)D像的情況下， 也可以同樣地設(shè)為3D建模數(shù)據(jù)。如果是3D建模數(shù)據(jù)彼此間的對(duì)照，則不進(jìn)行圖像處理就能夠進(jìn)行基于數(shù)值運(yùn)算的更正確的對(duì)照動(dòng)作。如以上說(shuō)明的那樣，根據(jù)本發(fā)明所涉及的上述各實(shí)施方式，在利用AR服務(wù)的情況下，即使服務(wù)對(duì)象的數(shù)據(jù)量是龐大的情況下，也能夠提高用戶的便利性。上述實(shí)施方式是一個(gè)示例，本發(fā)明的適用范圍并不局限于此。即，可進(jìn)行各種應(yīng)用，所有實(shí)施的方式均包含在本發(fā)明的范圍內(nèi)。例如，上述各實(shí)施方式中所示的規(guī)格或格式等是一個(gè)示例，只要能獲得相同效果， 所能采用的規(guī)格或格式是任意的。另外，在上述各實(shí)施方式中，作為信息顯示裝置100，以智能電話進(jìn)行了例示，但是，信息顯示裝置100只要至少具有拍攝功能且能獲取關(guān)鍵信息和/或AR數(shù)據(jù)的構(gòu)成即可，并不局限于智能電話，能夠?qū)⑷我獾难b置用作信息顯示裝置100。在這樣的作為信息顯示裝置100而可采用的任意裝置中，即使是不具有上述控制部110所實(shí)現(xiàn)的功能的裝置，若通過(guò)適用程序，能夠?qū)崿F(xiàn)圖4所示那樣的功能構(gòu)成，則能夠?qū)⒁延醒b置作為本發(fā)明所涉及的信息顯示裝置而使其發(fā)揮功能。同樣地，若通過(guò)在通用服務(wù)器裝置等中適用程序，能夠?qū)崿F(xiàn)圖6所示那樣的功能構(gòu)成，則可將已有的信息處理裝置等作為本發(fā)明所涉及的信息提供裝置而使其發(fā)揮功能。為了作為信息顯示裝置或信息提供裝置而發(fā)揮功能，在任意裝置中適用程序的方法，可以根據(jù)需要而適當(dāng)?shù)卮_定。例如，通過(guò)存儲(chǔ)于⑶-ROM或存儲(chǔ)卡等的存儲(chǔ)介質(zhì)中，能夠適用程序，而且例如也可經(jīng)由因特網(wǎng)等的通信介質(zhì)來(lái)適用。在不脫離其精神或者主要特征的范圍內(nèi)，還能夠以其他各種形式實(shí)施。因此，上述的實(shí)施方式從各方面來(lái)說(shuō)，只是簡(jiǎn)單的例示，本發(fā)明的范圍由權(quán)利要求的范圍所示，不受說(shuō)明書(shū)正文限制。進(jìn)而，屬于權(quán)利要求的范圍內(nèi)的變形或變更都在本發(fā)明的范圍內(nèi)。
權(quán)利要求
1.一種信息顯不系統(tǒng),具備具有拍攝功能的信息顯示裝置；以及信息提供裝置，所述信息顯示裝置具備關(guān)鍵信息獲取單元，其獲取與通過(guò)所述拍攝功能所拍攝到的拍攝圖像的被攝體對(duì)應(yīng)的關(guān)鍵 目息；以及關(guān)鍵信息發(fā)送單元，其將所述關(guān)鍵信息發(fā)送給所述信息提供裝置，所述信息提供裝置具備對(duì)照?qǐng)D像存儲(chǔ)單元，其存儲(chǔ)包含對(duì)照被攝體在內(nèi)的對(duì)照?qǐng)D像、和與所述對(duì)照?qǐng)D像分別對(duì)應(yīng)的所述對(duì)照被攝體的縮尺信息及疊加信息；以及信息提供單元，其基于由所述關(guān)鍵信息發(fā)送單元所發(fā)送的關(guān)鍵信息，選擇至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像，并將所選擇的對(duì)照?qǐng)D像、和與該選擇的至少I(mǎi)個(gè)對(duì)照?qǐng)D像建立對(duì)應(yīng)的所述縮尺信息及所述疊加信息提供給所述信息顯示裝置，所述信息顯示裝置還具備引導(dǎo)顯示單元，其顯示引導(dǎo)信息，該引導(dǎo)信息是基于與所選擇的至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像對(duì)應(yīng)的所述縮尺信息、和所述拍攝圖像中被攝體的縮尺信息的引導(dǎo)信息；對(duì)照單元，其根據(jù)所述引導(dǎo)顯示單元顯示的引導(dǎo)信息，來(lái)對(duì)照所述拍攝圖像的被攝體與所選擇的至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像；以及疊加顯示單元，其基于所述對(duì)照單元的對(duì)照結(jié)果，在所述拍攝圖像上疊加顯示與所選擇的至少I(mǎi)個(gè)所述對(duì)照?qǐng)D像對(duì)應(yīng)的所述疊加信息。
2.一種信息顯示裝置，具備拍攝單兀；與外部裝置進(jìn)行通信的通信單元；以及顯示單元，所述通信單元具備數(shù)據(jù)獲取單元，該數(shù)據(jù)獲取單元從所述外部裝置獲取包含對(duì)照被攝體在內(nèi)的對(duì)照?qǐng)D像、和與所述對(duì)照?qǐng)D像分別對(duì)應(yīng)的所述對(duì)照被攝體的縮尺信息及疊加信息，所述顯示單元具備引導(dǎo)顯示單元，其顯示引導(dǎo)信息，該引導(dǎo)信息是基于所述數(shù)據(jù)獲取單元所獲取的所述縮尺信息、和所述拍攝單元所拍攝到的拍攝圖像中的被攝體的縮尺信息的引導(dǎo)信息；對(duì)照單元，其根據(jù)所述引導(dǎo)顯示單元顯示的引導(dǎo)信息，來(lái)對(duì)照所述拍攝圖像的被攝體與所述對(duì)照?qǐng)D像；以及疊加顯示單元，其基于所述對(duì)照單元的對(duì)照結(jié)果，在所述拍攝圖像上疊加顯示所述疊加信息。
3.根據(jù)權(quán)利要求2所述的信息顯示裝置，其特征在于所述引導(dǎo)顯示單元還具備用于顯示所述對(duì)照?qǐng)D像的分布的分布顯示單元，所述對(duì)照?qǐng)D像的分布基于所述數(shù)據(jù)獲取單元所獲取的所述縮尺信息，所述引導(dǎo)信息與由所述分布顯示單元所顯示的所述分布相對(duì)應(yīng)。
4.根據(jù)權(quán)利要求3所述的信息顯示裝置，其特征在于所述引導(dǎo)顯示單元基于所述拍攝單元所拍攝的所述拍攝圖像的視角變化，來(lái)變更所顯示的所述引導(dǎo)信息。
5.根據(jù)權(quán)利要求3所述的信息顯示裝置，其特征在于所述信息顯示裝置還具備縮尺計(jì)算單元，該縮尺計(jì)算單元計(jì)算所述拍攝圖像中I像素相當(dāng)?shù)膶?shí)際尺寸，所述分布顯示單元顯示所述對(duì)照?qǐng)D像的分布，所述對(duì)照?qǐng)D像的分布基于正示出所述縮尺信息的所述對(duì)照?qǐng)D像中I像素相當(dāng)?shù)膶?shí)際尺寸，所述引導(dǎo)顯示單元顯示與由所述縮尺計(jì)算單元所計(jì)算出的所述實(shí)際尺寸相應(yīng)的所述引導(dǎo)信息。
6.根據(jù)權(quán)利要求5所述的信息顯示裝置，其特征在于所述拍攝單元是立體相機(jī)，所述縮尺計(jì)算單元基于通過(guò)該立體相機(jī)求取的至被攝體為止的距離，進(jìn)行所述實(shí)際尺寸的計(jì)算。
7.一種信息提供裝置，具備通信單元，其與具備拍攝功能的信息顯示裝置進(jìn)行通信；以及信息存儲(chǔ)單元，其存儲(chǔ)用于提供給所述信息顯示裝置的信息，所述信息存儲(chǔ)單元具備數(shù)據(jù)存儲(chǔ)單元，該數(shù)據(jù)存儲(chǔ)單元存儲(chǔ)包含對(duì)照被攝體在內(nèi)的對(duì)照?qǐng)D像、和與所述對(duì)照?qǐng)D像分別對(duì)應(yīng)的所述對(duì)照被攝體的縮尺信息及疊加信息，所述通信單元基于與所述拍攝圖像的被攝體對(duì)應(yīng)的關(guān)鍵信息，將所述數(shù)據(jù)存儲(chǔ)單元中所存儲(chǔ)的數(shù)據(jù)提供給所述信息顯示裝置。
8.根據(jù)權(quán)利要求7所述的信息提供裝置，其特征在于所述信息提供裝置還具備縮尺計(jì)算單元，該縮尺計(jì)算單元計(jì)算所述對(duì)照?qǐng)D像中I像素相當(dāng)?shù)膶?shí)際尺寸，所述數(shù)據(jù)存儲(chǔ)單元將所述縮尺計(jì)算單元計(jì)算出的所述實(shí)際尺寸存儲(chǔ)為所述縮尺信息。
全文摘要
一種提高利用了AR(增強(qiáng)現(xiàn)實(shí))的服務(wù)的便利性的信息顯示系統(tǒng)、信息顯示裝置、信息提供裝置以及存儲(chǔ)介質(zhì)。進(jìn)行AR的信息顯示的信息顯示裝置從信息提供裝置獲取用于對(duì)照在拍攝圖像中的被攝體的對(duì)照?qǐng)D像和用于表示該對(duì)照?qǐng)D像中被攝體的縮尺的縮尺信息。并且，在信息顯示裝置的輸入輸出部(150)，顯示拍攝圖像，并且顯示基于被攝體縮尺的對(duì)照?qǐng)D像的分布，在該分布顯示上進(jìn)行與拍攝圖像中的被攝體縮尺相應(yīng)的引導(dǎo)顯示。該引導(dǎo)顯示與視角的變化對(duì)應(yīng)地在分布顯示上進(jìn)行移動(dòng)。由此，能夠易于設(shè)置可恰當(dāng)?shù)剡M(jìn)行利用所獲取的對(duì)照?qǐng)D像的對(duì)照的視角，并提高便利性。
文檔編號(hào)G06Q10/00GK102592178SQ20111039690
公開(kāi)日2012年7月18日 申請(qǐng)日期2011年12月2日 優(yōu)先權(quán)日2010年12月7日
發(fā)明者中島光康, 吉濱由紀(jì), 山谷崇史, 櫻井敬一 申請(qǐng)人:卡西歐計(jì)算機(jī)株式會(huì)社