專利名稱：圖像數(shù)據(jù)生成輔助裝置和圖像數(shù)據(jù)生成輔助方法
技術(shù)領(lǐng)域：
本發(fā)明涉及在進(jìn)行顯示圖像的放大縮小的圖像處理技術(shù)中使用的圖像數(shù)據(jù)的生成輔助裝置及生成輔助方法。
背景技術(shù)：
已提出有不僅是執(zhí)行游戲程序，還能再現(xiàn)動(dòng)圖像的家庭用娛樂系統(tǒng)。在該家庭用娛樂系統(tǒng)中，GPU生成使用了多邊形的三維圖像(例如參照專利文獻(xiàn)I)。另一方面，還提出有使用基于高精細(xì)的照片等數(shù)字圖像而生成的多個(gè)分辨率的平鋪圖像，來進(jìn)行顯示圖像的放大/縮小處理、上下左右方向的移動(dòng)處理的技術(shù)。在該圖像處 理技術(shù)中，將原圖像尺寸多階段地縮小而生成不同分辨率的圖像，將各階層的圖像分割成一個(gè)或多個(gè)平鋪圖像(tile image)，用階層構(gòu)造來表現(xiàn)原圖像。通常，分辨率最低的圖像由一個(gè)平鋪圖像構(gòu)成，分辨率最高的原圖像由最多數(shù)量的平鋪圖像構(gòu)成。圖像處理裝置在顯示圖像的放大處理或縮小處理時(shí)，將所使用的平鋪圖像切換成不同階層的平鋪圖像，由此來迅速地進(jìn)行放大顯示或縮小顯示。在先技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)I :美國(guó)專利第6563999號(hào)公報(bào)

發(fā)明內(nèi)容
發(fā)明要解決的課題近年來在便攜式終端等中也能夠放大顯示畫面的尺寸，不受信息處理裝置的種類限制地顯示高精細(xì)圖像了。因此，體現(xiàn)于視覺的各種各樣的內(nèi)容更加貼近身邊。同時(shí)，想要生成有魅力的內(nèi)容的要求也變得更加強(qiáng)烈。然而，在例如使用具有上述階層構(gòu)造的圖像數(shù)據(jù)來生成圖像顯示內(nèi)容時(shí)，存在如下問題，即，越想實(shí)現(xiàn)特效性的表現(xiàn)，素材圖像的取得及內(nèi)容數(shù)據(jù)的生成就越變得復(fù)雜化，越需要專門的知識(shí)和方法。本發(fā)明是鑒于這樣的課題而完成的，其目的在于提供一種能容易地生成可實(shí)現(xiàn)各種各樣的表現(xiàn)形式的圖像的數(shù)據(jù)的技術(shù)。用于解決課題的手段本發(fā)明的一個(gè)方案涉及一種圖像數(shù)據(jù)生成輔助裝置。該圖像數(shù)據(jù)生成輔助裝置是對(duì)顯示裝置所使用的圖像數(shù)據(jù)的生成進(jìn)行輔助的裝置，所述顯示裝置是在放大、縮小顯示圖像時(shí)，按預(yù)定的縮尺率將用于顯示的圖像的數(shù)據(jù)在以不同變倍倍率拍攝的多個(gè)圖像的數(shù)據(jù)間進(jìn)行切換的顯示裝置，本圖像數(shù)據(jù)生成輔助裝置的特征在于，包括輸入信息取得部，從用戶處接收指定對(duì)象物的圖像的所希望的變倍倍率的輸入；拍攝部，以輸入信息取得部所接收到的用戶指定的變倍倍率為起點(diǎn)，按用于顯示的多個(gè)變倍倍率對(duì)包含對(duì)象物的多個(gè)圖像進(jìn)行拍攝；元數(shù)據(jù)生成部，取得使拍攝部所拍攝的多個(gè)圖像建立關(guān)聯(lián)，并決定顯示時(shí)的切換順序及切換時(shí)機(jī)的各圖像的變倍倍率作為元數(shù)據(jù)，附加于圖像的數(shù)據(jù)地存儲(chǔ)在存儲(chǔ)裝置中。本發(fā)明的另一方案涉及一種圖像數(shù)據(jù)生成輔助方法。該圖像數(shù)據(jù)生成輔助方法是對(duì)顯示裝置所使用的圖像數(shù)據(jù)的生成進(jìn)行輔助的方法，所述顯示裝置是在放大、縮小顯示圖像時(shí)，按預(yù)定的縮尺率將用于顯示的圖像的數(shù)據(jù)在以不同變倍倍率拍攝的多個(gè)圖像的數(shù)據(jù)間進(jìn)行切換的顯示裝置，本圖像數(shù)據(jù)生成輔助方法的特征在于，包括以下步驟從用戶處接收指定對(duì)象物的圖像的所希望的變倍倍率的輸入；以用戶指定的變倍倍率為起點(diǎn)，用拍攝裝置按用于顯示的多個(gè)變倍倍率對(duì)包含上述對(duì)象物的多個(gè)圖像進(jìn)行拍攝；取得使所拍攝的多個(gè)圖像建立關(guān)聯(lián)，并決定顯示時(shí)的切換順序及切換時(shí)機(jī)的各圖像的變倍倍率作為元數(shù)據(jù)；生成階層數(shù)據(jù)作為圖像數(shù)據(jù)而存儲(chǔ)到存儲(chǔ)裝置中，所述階層數(shù)據(jù)是如下這樣的數(shù)據(jù)，即，在將多個(gè)圖像按變倍倍率順序階層化后，對(duì)各圖像進(jìn)行解析，抽取出攝于圖像中的同一物的特征點(diǎn)，進(jìn)行對(duì)位以使得在放縮各階層的圖像而統(tǒng)一了尺寸時(shí)該特征點(diǎn)的位置相一 致。當(dāng)然，將以上構(gòu)成要素的任意組合、本發(fā)明的表現(xiàn)形式在方法、裝置、系統(tǒng)、計(jì)算機(jī)程序、記錄有計(jì)算機(jī)程序的記錄介質(zhì)等間變換后的實(shí)施方式，作為本發(fā)明的方案也是有效的。發(fā)明的效果通過本發(fā)明，在生成能進(jìn)行各種各樣的表現(xiàn)的圖像數(shù)據(jù)時(shí)，能將用戶的負(fù)擔(dān)降到
最小限。


圖I是表示本發(fā)明實(shí)施方式的圖像處理系統(tǒng)的使用環(huán)境的圖。圖2是表示能適用于圖I的圖像處理系統(tǒng)的輸入裝置的外觀構(gòu)成的圖。圖3是表示在本實(shí)施方式中使用的圖像數(shù)據(jù)的階層構(gòu)造例子的圖。圖4是表示顯示本實(shí)施方式所生成的圖像數(shù)據(jù)的圖像處理裝置的構(gòu)成的圖。圖5是示意性地表示在本實(shí)施方式中成為生成對(duì)象的多個(gè)階層數(shù)據(jù)的關(guān)系的圖。圖6是例示本實(shí)施方式的進(jìn)行圖像數(shù)據(jù)生成輔助的拍攝裝置的使用形態(tài)的圖。圖7是詳細(xì)表示本實(shí)施方式中的拍攝裝置的構(gòu)成的圖。圖8是用于說明本實(shí)施例中的圖像數(shù)據(jù)生成輔助方法的基本方案的圖。圖9是表示在本實(shí)施方式中對(duì)用于生成階層數(shù)據(jù)的圖像拍攝進(jìn)行輔助的處理步驟的例子的流程圖。圖10是表示在本實(shí)施方式中生成階層數(shù)據(jù)的處理步驟的流程圖。圖11是用于說明在本實(shí)施方式中對(duì)用于生成階層數(shù)據(jù)的圖像拍攝進(jìn)行輔助的處理的其它例子的圖。圖12是表示在本實(shí)施方式中輔助圖像拍攝的處理的步驟的流程圖。圖13是表示在圖12的S34中顯示于顯示器的畫面的構(gòu)成例的圖。圖14是表示在本實(shí)施方式中以用戶選擇對(duì)象圖像的形式顯示于顯示器的畫面的構(gòu)成例的圖。圖15是表示在圖14中說明的輔助圖像拍攝的處理的步驟的流程圖。
具體實(shí)施例方式本實(shí)施方式所生成的圖像數(shù)據(jù)具有將多個(gè)分辨率的圖像、或者將以多個(gè)變倍倍率拍攝的圖像的數(shù)據(jù)階層化而成的階層構(gòu)造。因此，首先說明顯示具有階層構(gòu)造的圖像數(shù)據(jù)的機(jī)構(gòu)。圖I表示顯示本發(fā)明實(shí)施方式所生成的圖像數(shù)據(jù)的圖像處理系統(tǒng)的構(gòu)成例。圖像處理系統(tǒng)I包括實(shí)施圖像顯示的處理的圖像處理裝置10、和輸出圖像處理裝置10的處理結(jié)果的顯示裝置12。顯示裝置12可以是具有輸出圖像的顯示器和輸出聲音的揚(yáng)聲器的電視。顯示裝置12可以用有線纜線連接于圖像處理裝置10，也可以通過無線LAN (LocalArea Network)等無線連接。在圖像處理系統(tǒng)I中，圖像處理裝置10可以介由纜線14連接于因特網(wǎng)等外部網(wǎng)絡(luò)，下載取得包含被階層化了的壓縮圖像的數(shù)據(jù)的內(nèi)容的軟件等。當(dāng)然，圖像處理裝置10也可以通過無線通信連接于外部網(wǎng)絡(luò)。圖像處理裝置10可以是游戲裝置或個(gè)人計(jì)算機(jī)等，可以通過從各種記錄介質(zhì)載入軟件來實(shí)現(xiàn)后述的功能。當(dāng)然圖像處理裝置10也可以具有進(jìn)行后述的圖像顯示以外的處理、例如聲音處理、游戲的執(zhí)行、向網(wǎng)絡(luò)的連接等功能。用戶一邊看著顯示裝置12上所顯示的圖像，一邊對(duì)輸入裝置進(jìn)行要求顯示區(qū)域的放大/縮小、向上下左右方向的移動(dòng)的輸入時(shí)，輸入裝置根據(jù)此將顯示區(qū)域的移動(dòng)及放大縮小的要求信號(hào)發(fā)送給圖像處理裝置10。圖像處理裝置10根據(jù)該信號(hào)使顯示裝置12的畫面內(nèi)的圖像變化。圖2表示輸入裝置20的外觀構(gòu)成例。輸入裝置20上作為用戶可操作的操作手段，具有十字鍵21、模擬搖桿27a、27b、以及4種操作按鈕26。4種操作按鈕26由〇按鈕22、X按鈕23、□按鈕24及A按鈕25構(gòu)成。在圖像處理系統(tǒng)I中，輸入裝置20的操作手段被分配有用于輸入顯示區(qū)域的放大/縮小要求、以及向上下左右方向的移動(dòng)要求的功能。例如顯示區(qū)域的放大/縮小要求的輸入功能被分配給右側(cè)的模擬搖桿27b。用戶通過向身前拉模擬搖桿27b，能夠輸入顯示區(qū)域的縮小要求，而通過從身前往外推，能輸入顯示區(qū)域的放大要求。另外，顯示區(qū)域的移動(dòng)的輸入功能被分配給十字鍵21。用戶通過按下十字鍵21，能夠輸入向十字鍵21所被按下的方向的移動(dòng)要求。當(dāng)然，顯示區(qū)域移動(dòng)要求的輸入功能也可以被分配給其它操作手段，例如移動(dòng)要求的輸入功能也可以分配給模擬搖桿 27a。輸入裝置20具有將所被輸入的顯示區(qū)域移動(dòng)要求信號(hào)傳送給圖像處理裝置10的功能，在本實(shí)施方式中被構(gòu)成為能與圖像處理裝置10之間進(jìn)行無線通信。輸入裝置20和圖像處理裝置10可以使用Bluetooth (藍(lán)牙)(注冊(cè)商標(biāo))協(xié)議或IEEE802. 11協(xié)議等建立無線連接。當(dāng)然，輸入裝置20也可以介由纜線與圖像處理裝置10連接，來將顯示區(qū)域移動(dòng)要求信號(hào)傳送給圖像處理裝置10。圖3表示在本實(shí)施方式中使用的圖像數(shù)據(jù)的階層構(gòu)造例。圖像數(shù)據(jù)具有沿深度(Z軸)方向由第0階層30、第I階層32、第2階層34及第3階層36構(gòu)成的階層構(gòu)造。在該圖中僅示出4階層，但階層數(shù)并不限于此。以下將具有這樣的階層構(gòu)造的圖像數(shù)據(jù)稱為“階層數(shù)據(jù)”。
圖3所示的階層數(shù)據(jù)具有四叉樹的階層構(gòu)造，各階層由一個(gè)以上的平鋪圖像38構(gòu)成。所有平鋪圖像38都被形成為具有相同像素?cái)?shù)的同一尺寸，例如具有256X256像素。各階層的圖像數(shù)據(jù)以不同的分辨率來表現(xiàn)一個(gè)圖像，分辨率按第3階層36、第2階層34、第I階層32、第O階層30的順序逐漸變小。例如第N階層的分辨率(N為0以上的整數(shù))可以在左右(X軸)方向和上下(Y軸)方向都為第(N+1)階層的分辨率的1/2。此外，在圖3中，在各階層中都描繪出全部平鋪圖像，但例如第3階層36等的高分辨率圖像可以僅對(duì)部分區(qū)域準(zhǔn)備平鋪圖像。在要放大未準(zhǔn)備平鋪圖像的區(qū)域時(shí)，將上面階層的對(duì)應(yīng)區(qū)域的圖像放大來顯示、或者不能放大。在像這樣僅對(duì)一部分區(qū)域準(zhǔn)備平鋪圖像的情況下，通過例如第2階層34的右下方的一個(gè)平鋪圖像與第3階層36的右下方的2X2個(gè)平鋪圖像相對(duì)應(yīng)這樣對(duì)位，來使得上下階層的對(duì)應(yīng)區(qū)域的圖像相對(duì)應(yīng)，也能無縫地實(shí)現(xiàn)顯示時(shí)的階層的切換。在圖像處理裝置10中，階層數(shù)據(jù)以按預(yù)定的壓縮格式壓縮了的狀態(tài)被保存在存儲(chǔ)裝置中，在圖像顯示內(nèi)容的啟動(dòng)等時(shí)被從存儲(chǔ)裝置讀出并解碼。圖像處理裝置10可以具有與多種壓縮格式對(duì)應(yīng)的解碼功能，能夠解碼例如S3TC格式、JPEG格式、JPEG2000格式的壓縮數(shù)據(jù)。在階層數(shù)據(jù)中，壓縮處理可以按平鋪圖像單位來進(jìn)行，也可以按同一階層或多個(gè) 階層所包含的多個(gè)平鋪圖像單位來進(jìn)行。階層數(shù)據(jù)的階層構(gòu)造如圖3所示那樣，左右方向被設(shè)定為X軸，上下方向被設(shè)定為Y軸，深度方向被設(shè)定為Z軸，構(gòu)建虛擬的3維空間。圖像處理裝置10從輸入裝置20所供給的顯示區(qū)域移動(dòng)要求信號(hào)中導(dǎo)出顯示區(qū)域的移動(dòng)量后，使用該移動(dòng)量導(dǎo)出虛擬空間中的幀的4角的坐標(biāo)(幀坐標(biāo))。虛擬空間中的幀坐標(biāo)被用于顯示圖像的生成處理。當(dāng)然，圖像處理裝置10也可以導(dǎo)出確定階層的信息和該階層中的紋理坐標(biāo)(UV坐標(biāo))來取代虛擬空間中的幀坐標(biāo)。階層數(shù)據(jù)所包含的各階層的圖像數(shù)據(jù)相對(duì)于虛擬空間的Z軸離散地存在。因此，在按沒有圖像數(shù)據(jù)的階層間的縮尺率來顯示圖像時(shí)，使用Z軸方向上處于附近的圖像數(shù)據(jù)。例如，當(dāng)顯示圖像的縮尺率處于第2階層34附近時(shí)，使用該第2階層的圖像數(shù)據(jù)來生成顯示圖像。為實(shí)現(xiàn)此，在各階層之間、例如中間設(shè)定源圖像的切換邊界。當(dāng)顯示圖像的縮尺率越過該切換邊界時(shí)，就切換用于顯示圖像的生成的圖像數(shù)據(jù)，放大或縮小該圖像來顯示。圖4表示了圖像處理裝置10的構(gòu)成。圖像處理裝置10具有無線接口 40、開關(guān)42、顯示處理部44、硬盤驅(qū)動(dòng)器50、記錄介質(zhì)安裝部52、盤驅(qū)動(dòng)器54、主存儲(chǔ)器60、緩沖存儲(chǔ)器70及控制部100。顯示處理部44具有對(duì)要顯示于顯示裝置12的顯示器上的數(shù)據(jù)進(jìn)行緩沖的幀存儲(chǔ)器。開關(guān)42是以太網(wǎng)開關(guān)(“以太網(wǎng)”是注冊(cè)商標(biāo))，是通過有線或無線與外部的設(shè)備連接來收發(fā)數(shù)據(jù)的器件。開關(guān)42也可以介由纜線14連接于外部網(wǎng)絡(luò)，接收包含被階層化了的壓縮圖像數(shù)據(jù)的內(nèi)容文件。此外，開關(guān)42連接于無線接口 40，無線接口 40以預(yù)定的無線通信協(xié)議與輸入裝置20連接。在用戶用輸入裝置20輸入的顯示區(qū)域移動(dòng)要求信號(hào)經(jīng)由無線接口 40、開關(guān)42被提供給控制部100。硬盤驅(qū)動(dòng)器50作為存儲(chǔ)數(shù)據(jù)的存儲(chǔ)裝置來發(fā)揮功能。介由開關(guān)42接收到的各種數(shù)據(jù)被存儲(chǔ)在硬盤驅(qū)動(dòng)器50中。記錄介質(zhì)安裝部52被安裝存儲(chǔ)卡等可插拔記錄介質(zhì)后，從可插拔記錄介質(zhì)讀取數(shù)據(jù)。盤驅(qū)動(dòng)器54被安裝只讀的ROM盤后，驅(qū)動(dòng)并識(shí)別ROM盤，讀取數(shù)據(jù)。ROM盤可以是光盤或光磁盤等。內(nèi)容文件可以被存儲(chǔ)在這些記錄介質(zhì)中?？刂撇?00具備多核CPU，在一個(gè)CPU中具有一個(gè)通用的處理器核和多個(gè)單處理器核。通用處理器核被稱作PPU (PowerPC Processor Unit)，其余處理器核被稱作SPU(Synergistic Processor Unit)。控制部100具有連接于主存儲(chǔ)器60和緩沖存儲(chǔ)器70的存儲(chǔ)器控制器。PI3U具有寄存器，并具備主處理器作為運(yùn)算執(zhí)行主體，將要執(zhí)行的應(yīng)用中的作為基本處理單位的任務(wù)高效地分配給各SPU。當(dāng)然，PPU自身也可以執(zhí)行任務(wù)。SPU具有寄存器，并具有作為運(yùn)算執(zhí)行主體的副處理器和作為本地存儲(chǔ)區(qū)域的本地存儲(chǔ)器。本地存儲(chǔ)器可以被用作緩沖存儲(chǔ)器70。主存儲(chǔ)器60和緩沖存儲(chǔ)器70是存儲(chǔ)裝置，以RAM (隨機(jī)存取存儲(chǔ)器)構(gòu)成。SPU具有專用的DMA (Direct Memory Access)控制器作為控制單元,能高速進(jìn)行主存儲(chǔ)器60 與緩沖存儲(chǔ)器70之間的數(shù)據(jù)傳輸，并能在顯示處理部44中的幀存儲(chǔ)器與緩沖存儲(chǔ)器70之間實(shí)現(xiàn)高速的數(shù)據(jù)傳輸。本實(shí)施方式的控制部100通過使多個(gè)SPU并行工作來實(shí)現(xiàn)高速的圖像處理功能。顯示處理部44連接于顯示裝置12，輸出與用戶的要求相應(yīng)的處理結(jié)果。圖像處理裝置10為平滑地移動(dòng)顯示圖像，預(yù)先將壓縮圖像數(shù)據(jù)的至少一部分從硬盤驅(qū)動(dòng)器50載入到主存儲(chǔ)器60。并且，基于來自用戶的顯示區(qū)域移動(dòng)要求而預(yù)測(cè)將來要顯示的區(qū)域，將載入到主存儲(chǔ)器60的壓縮圖像數(shù)據(jù)的再一部分解碼而存儲(chǔ)到緩沖存儲(chǔ)器70中。由此，能夠在以后的必要時(shí)機(jī)瞬時(shí)切換顯示圖像的生成所使用的圖像?？梢詼?zhǔn)備多個(gè)階層數(shù)據(jù)作為顯示對(duì)象，使得顯示圖像在階層數(shù)據(jù)間往來。圖5示意性地表示了在這樣的方式中成為顯示對(duì)象的多個(gè)階層數(shù)據(jù)的關(guān)系。圖中兩個(gè)三角形表示了不同的階層數(shù)據(jù)150和152。各個(gè)階層數(shù)據(jù)150、152實(shí)際上如圖3所示那樣具有相對(duì)于Z軸離散地存在分辨率不同的多個(gè)圖像數(shù)據(jù)的結(jié)構(gòu)。用戶通過輸入裝置20要求顯示區(qū)域的放大/縮小時(shí)，顯示區(qū)域就沿圖的Z軸方向移動(dòng)。另一方面，若進(jìn)行使顯示區(qū)域向上下左右移動(dòng)的要求，則移動(dòng)圖的水平面。在這樣的虛擬空間中，構(gòu)建兩個(gè)階層數(shù)據(jù)150和152如圖那樣重疊的圖像數(shù)據(jù)。在使用圖像數(shù)據(jù)正顯示階層數(shù)據(jù)150的圖像時(shí)，若用戶在某區(qū)域繼續(xù)要求放大，則顯示區(qū)域如箭頭a那樣移動(dòng)，進(jìn)入階層數(shù)據(jù)152的區(qū)域。通過該操作，將用于生成顯示圖像的數(shù)據(jù)從階層數(shù)據(jù)150切換到階層數(shù)據(jù)152。該處理在之前所述的圖像顯示的處理步驟中可以通過改變載入到主存儲(chǔ)器60的對(duì)象的階層數(shù)據(jù)來實(shí)現(xiàn)。為構(gòu)建圖5那樣的由多個(gè)階層數(shù)據(jù)構(gòu)成的圖像數(shù)據(jù)，預(yù)先設(shè)定好切換階層數(shù)據(jù)150和階層數(shù)據(jù)152時(shí)的圖像的分辨率及位置。該設(shè)定在圖5中用線154表示，由此能決定階層數(shù)據(jù)的重疊程度。在該圖的例子中，在Z軸為zl分辨率、線154所表示的位置，進(jìn)行從階層數(shù)據(jù)150向階層數(shù)據(jù)152的切換。以下將這樣的階層數(shù)據(jù)間的切換稱作“鏈接”。當(dāng)然，進(jìn)行切換的階層數(shù)據(jù)的圖像可以是分辨率不同的同一圖像，也可以是完全不同的圖像。此外，也可以取代向階層數(shù)據(jù)152的顯示圖像切換，而是進(jìn)行動(dòng)圖像再現(xiàn)、聲音再現(xiàn)、顯示的加工、顯示區(qū)域的移動(dòng)這樣的處理。在該情況下也如線154那樣對(duì)階層數(shù)據(jù)150預(yù)先設(shè)定鏈接區(qū)域，當(dāng)視點(diǎn)到達(dá)該區(qū)域時(shí)開始預(yù)先與之建立了對(duì)應(yīng)的處理。通過這樣處理，能實(shí)現(xiàn)在用戶一邊看著階層數(shù)據(jù)150的圖像一邊使顯示區(qū)域移動(dòng)，顯示區(qū)域到達(dá)鏈接區(qū)域時(shí)，與該區(qū)域建立了對(duì)應(yīng)的圖像或信息顯示出來、或者進(jìn)行動(dòng)圖像再現(xiàn)這樣的形態(tài)。例如能夠?qū)崿F(xiàn)如下顯示上的效果當(dāng)從人的整體像的圖像起逐漸按臉部、眼睛這樣放大顯示區(qū)域時(shí)，逐漸變成瞳孔的圖像，若進(jìn)一步放大，則顯示移換到映于瞳孔中的另一世界，或處于該世界中的物體動(dòng)了起來。當(dāng)然，也可以對(duì)一個(gè)階層數(shù)據(jù)設(shè)定向多個(gè)階層數(shù)據(jù)的鏈接，還可以對(duì)鏈接目標(biāo)階層數(shù)據(jù)再設(shè)定鏈向其它階層數(shù)據(jù)的鏈接。在顯示這樣的階層數(shù)據(jù)的圖像時(shí)，Z軸、即分辨率方向的可變范圍越大，越產(chǎn)生數(shù)據(jù)結(jié)構(gòu)的優(yōu)點(diǎn)。另外，如上述那樣不論有無鏈接都用多個(gè)階層來表現(xiàn)包含同一對(duì)象物的圖像的情況下，通過使上下階層的對(duì)應(yīng)區(qū)域中的對(duì)象物的位置相一致，能不因階層導(dǎo)致對(duì)象物錯(cuò)開地、無縫地切換顯示，能實(shí)現(xiàn)上述那樣的各種特效。但在使構(gòu)成階層數(shù)據(jù)的圖像為對(duì)包含相同對(duì)象物的像以不同變倍倍率進(jìn)行拍攝而得到的照片或動(dòng)圖像等時(shí)，非常有可能在拍攝期間出現(xiàn)天氣或拍攝條件的變化、被拍攝物的移動(dòng)等，色調(diào)或構(gòu)圖發(fā)生變化。并且，需要花費(fèi)較多的工夫來進(jìn)行使像這樣分別拍攝的圖像中的同一對(duì)象物在階層間及同一階層內(nèi)對(duì)位 的作業(yè)。因此，在本實(shí)施方式中，在拍攝照片或動(dòng)圖像等來生成階層數(shù)據(jù)的方案中，進(jìn)行用于減輕生成者的負(fù)擔(dān)的輔助工作。在以后的說明中，有時(shí)將被設(shè)定有鏈接的多個(gè)階層數(shù)據(jù)統(tǒng)稱作“階層數(shù)據(jù)”。圖6例示了本實(shí)施方式的進(jìn)行圖像數(shù)據(jù)生成輔助的拍攝裝置的使用方式。拍攝裝置200在外觀上具有與一般的數(shù)字照相機(jī)、數(shù)字?jǐn)z像機(jī)等一樣的構(gòu)成，包含對(duì)被拍攝物202進(jìn)行拍攝的功能。因此，在被拍攝物202 —側(cè)包含一般的照相機(jī)所具有的鏡頭及變倍倍率變更功能等機(jī)構(gòu)(未圖示)。拍攝裝置200除鏡頭所捕捉的像的顯示外，還包含為發(fā)揮后述的功能而向用戶提示必要信息的顯示器204、以及用戶一邊看著顯示器204 —邊為進(jìn)行指示輸入而操作的指示輸入部206。顯示器204由一般的照相機(jī)所具有的液晶屏等構(gòu)成。關(guān)于顯示的畫面例子，在后面敘述。指示輸入部206包括通過用戶按下而執(zhí)行拍攝的快門按鈕206a、變更變倍倍率的變倍按鈕206b、進(jìn)行顯示器204上所顯示的模式或框的選擇的方向指示按鈕206d、以及進(jìn)行決定選擇的輸入的決定按鈕206c。指示輸入部206也可以用與一般的照相機(jī)所具有的部件相同的構(gòu)造來實(shí)現(xiàn)。拍攝裝置200也可以被構(gòu)成為能切換通常模式和圖像生成輔助模式這兩種模式，所謂通常模式，是同一般的照相機(jī)一樣，通過用戶按下快門來拍攝照片或拍攝動(dòng)圖像的模式，所謂圖像生成輔助模式，是對(duì)階層數(shù)據(jù)的生成進(jìn)行輔助的模式?；蛘?，也可以使進(jìn)行圖像生成輔助的裝置連接于一般的照相機(jī)，由此來實(shí)現(xiàn)生成輔助功能。關(guān)于通常模式，同一般的照相機(jī)是一樣的，故接下來說明圖像生成輔助模式時(shí)的構(gòu)成。圖7更加詳細(xì)地表示了拍攝裝置200的構(gòu)成。拍攝裝置200除上述的指示輸入部206和顯示器204外，還包括取得用戶的指示輸入內(nèi)容的輸入信息取得部208、為進(jìn)行圖像數(shù)據(jù)的生成輔助而控制拍攝裝置的朝向和變倍倍率的拍攝控制部210、進(jìn)行實(shí)際拍攝的拍攝部212、取得階層數(shù)據(jù)的生成所需要的元數(shù)據(jù)的元數(shù)據(jù)生成部214、控制顯示于顯示器204的圖像的顯示圖像控制部216、以及存儲(chǔ)圖像數(shù)據(jù)和元數(shù)據(jù)的存儲(chǔ)部218。拍攝裝置200還包括根據(jù)所拍攝的圖像而生成階層數(shù)據(jù)的階層數(shù)據(jù)生成部220，存儲(chǔ)部218還存儲(chǔ)所生成的階層數(shù)據(jù)。輸入信息取得部208將用戶對(duì)指示輸入部206進(jìn)行的操作進(jìn)行解釋并變換成輔助所需要的信息后，提供給拍攝控制部210。這里所謂需要的信息，除從顯示于顯示器204的選項(xiàng)選出的選擇結(jié)果外，還包括用戶拍攝圖像時(shí)的變倍倍率等拍攝條件。拍攝控制部210基于與用戶的輸入相應(yīng)的輔助所需要的信息確定拍攝條件，并在控制拍攝裝置使之成為該條件的基礎(chǔ)上，指示拍攝部212進(jìn)行拍攝?？刂茖?duì)象是拍攝裝置200的鏡頭的方向和變倍倍率。因此，拍攝控制部210具有一般的云臺(tái)照相機(jī)所裝備的鏡頭的方向控制機(jī)構(gòu)。并且，將控制變倍倍率的信號(hào)發(fā)送給拍攝部212。此外，拍攝控制部210根據(jù)后述的輔助方法的不同，還可以具有基于GPS (Global Positioning System :全球定位系統(tǒng))的位置信息取得機(jī)構(gòu)、基于陀螺儀傳感器(gyro sensor)的方向取得機(jī)構(gòu)。在該情況下，在用戶保持并移動(dòng)拍攝裝置200或改變鏡頭的方向而成為所確定的拍攝條件時(shí)，將之通知給用戶，由此，用戶能夠自己按下快門。拍攝部212按照來自拍攝控制部210的指示拍攝圖像。所拍攝的照片、動(dòng)圖像等的圖像數(shù)據(jù)存儲(chǔ)到存儲(chǔ)部218中。元數(shù)據(jù)生成部214在拍攝部212每次拍攝圖像時(shí)、或者構(gòu)成一個(gè)階層數(shù)據(jù)的一系列圖像被拍攝完后等，生成所拍攝的圖像的變倍倍率、鏡頭的方向、圖像彼此的相關(guān)聯(lián)信息等要附加于圖像數(shù)據(jù)的元數(shù)據(jù)，存儲(chǔ)到存儲(chǔ)部218中。 顯示圖像控制部216將鏡頭捕捉的像實(shí)時(shí)地圖像化而輸出到顯示器204。此外，生成通常模式和圖像生成輔助模式的選擇畫面、圖像生成輔助模式中的各種輔助方法的選擇畫面、在后面詳細(xì)敘述的對(duì)象圖像的選擇畫面等的圖像數(shù)據(jù)，輸出到顯示器204。根據(jù)輔助方法，還對(duì)拍攝到的圖像進(jìn)行解析，檢測(cè)對(duì)象。階層數(shù)據(jù)生成部220讀出存儲(chǔ)部218中所存儲(chǔ)的圖像數(shù)據(jù)和元數(shù)據(jù)，基于元數(shù)據(jù)生成階層數(shù)據(jù)。生成的階層數(shù)據(jù)如上所述可以是將以不同的變倍倍率拍攝的圖像作為其它階層的情況、作為被設(shè)定有鏈接的其它階層數(shù)據(jù)的情況、粘貼以相同變倍倍率拍攝的圖像后作為一個(gè)階層的情況、或者其組合的任一種。具體例子在后面敘述。所生成的階層數(shù)據(jù)適當(dāng)壓縮后存儲(chǔ)到存儲(chǔ)部218中。通過將該階層數(shù)據(jù)寫入記錄介質(zhì)等，并將該記錄介質(zhì)安裝到圖4的記錄介質(zhì)安裝部52中，所拍攝的圖像就能夠顯示了。當(dāng)然，階層數(shù)據(jù)生成部220也可以作為與其它功能相獨(dú)立的其它裝置來實(shí)現(xiàn)。此外，圖像的拍攝和階層數(shù)據(jù)的生成的處理可以時(shí)間上連續(xù)進(jìn)行，也可以在其它機(jī)會(huì)來實(shí)施。圖8是用于說明本實(shí)施例的圖像數(shù)據(jù)生成輔助方法的基本方案的圖。在生成包含被拍攝物202的圖像的階層數(shù)據(jù)時(shí)，拍攝裝置200例如取得變倍倍率最小的第I圖像230、變倍倍率最大的第3圖像234、其中間變倍倍率的第2圖像232作為拍攝圖像。實(shí)際顯示時(shí)，可以將第I圖像230作為初始圖像、將第3圖像234作為想要以最高分辨率顯示的圖像、將第2圖像作為其轉(zhuǎn)變期的圖像。為實(shí)現(xiàn)這樣的圖像顯示，拍攝時(shí)取得以第I圖像230為基準(zhǔn)圖像時(shí)的其它圖像、即第2圖像232、第3圖像234的相對(duì)變倍倍率及相對(duì)位置。并且，還進(jìn)行表示將第I圖像230、第2圖像232、第3圖像234作為一個(gè)階層數(shù)據(jù)的素材來使用的關(guān)聯(lián)建立。這些信息作為元數(shù)據(jù)，同進(jìn)行了關(guān)聯(lián)的圖像數(shù)據(jù)一起存儲(chǔ)到存儲(chǔ)部218中。當(dāng)然，圖8所示的圖像的個(gè)數(shù)僅是例示，根據(jù)第I圖像230與第3圖像234間的變倍倍率差、能進(jìn)行無縫顯示的變倍倍率的間隔等來決定必要的變倍倍率。當(dāng)然，第I圖像230、第2圖像232、第3圖像234的拍攝順序并不特別限定。如后述那樣，可以根據(jù)要實(shí)施的輔助方法、被拍攝物的性質(zhì)或者用戶的設(shè)定而先拍攝第3圖像，再拉遠(yuǎn)(zoom out)拍攝第2圖像、第3圖像,也可以反過來。也可以在拍攝第I圖像230后，再推近(zoom in)拍攝弟3圖像234,然后再拉遠(yuǎn)拍攝弟2圖像232等。
在將第I圖像230、第2圖像232、第3圖像234作為沒有鏈接設(shè)定的一個(gè)階層數(shù)據(jù)的其它階層的圖像來使用時(shí)，與各階層的分辨率相對(duì)應(yīng)地以預(yù)定間隔的變倍倍率進(jìn)行拍攝，或者將拍攝到的圖像適當(dāng) 放大縮小來取得預(yù)定間隔的分辨率的圖像。例如在圖3所示的階層數(shù)據(jù)的情況下，由各階層的圖像具有上面階層的圖像的縱橫2倍倍率的4階層而構(gòu)成。因此，在生成這樣的階層數(shù)據(jù)的情況下，使變倍倍率四階段地變化來進(jìn)行拍攝。此時(shí)，既可以是用戶拍攝作為基準(zhǔn)圖像的最小倍率的圖像或最大倍率的圖像的一者，基于此通過拍攝控制部210的控制，按預(yù)定的變化量使變倍倍率變化來拍攝各階層的圖像，也可以是用戶拍攝最小倍率的圖像和最大倍率的圖像后，通過拍攝控制部210的控制，以對(duì)其之間進(jìn)行插補(bǔ)的變倍倍率拍攝剩余階層的圖像。在這樣生成一個(gè)階層數(shù)據(jù)時(shí)，也可以以一個(gè)變倍倍率拍攝多個(gè)照片。如果變倍倍率是基準(zhǔn)圖像的縱橫N倍，則如全景照片那樣控制云臺(tái)而連續(xù)拍攝縱橫N個(gè)、共計(jì)N2個(gè)圖像。然后，通過將所拍攝的圖像連接起來，能夠作為構(gòu)成一個(gè)階層的圖像?；蛘咭部梢匀缟鲜瞿菢觾H拍攝想以高分辨率顯示的區(qū)域，生成在基準(zhǔn)圖像中的與該區(qū)域?qū)?yīng)的位置配置了拍攝圖像的階層。此外，也可以將拍攝的圖像的某一者作為被設(shè)定了鏈接的其它階層數(shù)據(jù)。例如針對(duì)第I圖像230和第2圖像232所構(gòu)成的第I階層數(shù)據(jù)、以及第2圖像232和第3圖像234所構(gòu)成的第2階層數(shù)據(jù)，在作為共通圖像的第2圖像232中設(shè)定鏈接。在這樣的情況下，能夠在各個(gè)階層數(shù)據(jù)中設(shè)定倍率的節(jié)距幅度，故可以根據(jù)想要顯示的圖像來決定拍攝的變倍倍率。但適當(dāng)拍攝插補(bǔ)的圖像，使得在上下階層變倍倍率不過分分離。像這樣生成設(shè)定有鏈接的多個(gè)階層數(shù)據(jù)的方案是特別設(shè)想到將設(shè)定有鏈接的區(qū)域放大來顯示的情況，故可以不以全部變倍倍率對(duì)基準(zhǔn)圖像中所拍攝的全部區(qū)域進(jìn)行拍攝，選擇性地提高變倍倍率拍攝一部分區(qū)域即可。這樣，能夠生成如下這樣的圖像數(shù)據(jù)，即，在如上述那樣顯示拍攝有作為被拍攝物202的人物整體的第I圖像230的狀態(tài)下提高臉部附近的放大率時(shí)，放大了臉部的第2圖像232被顯示，若進(jìn)一步提高放大率，則放大了瞳孔的第3圖像234被顯示。階層數(shù)據(jù)生成部220基于元數(shù)據(jù)中的圖像彼此的關(guān)聯(lián)建立的信息及變倍倍率，將拍攝圖像分配給階層數(shù)據(jù)的各階層。進(jìn)而，基于元數(shù)據(jù)中的各圖像相對(duì)于基準(zhǔn)圖像的相對(duì)位置、以及通過對(duì)各圖像進(jìn)行圖像解析而取得的被拍攝物202等對(duì)象物或其一部位的特征點(diǎn)的位置，進(jìn)行階層彼此的對(duì)位。對(duì)位越準(zhǔn)確，就越能無縫地實(shí)現(xiàn)顯示時(shí)的階層的切換。各圖像相對(duì)于基準(zhǔn)圖像的相對(duì)位置可以基于云臺(tái)控制的鏡頭的方向信息和變倍倍率，通過與基于連拍圖像合成全景圖像的技術(shù)同樣的幾何運(yùn)算而算出來?；蛘撸部梢曰谟猛勇輧x傳感器取得的鏡頭的方向和變倍倍率計(jì)算出來。在該情況下，即使用戶手動(dòng)地改變鏡頭的方向，也能應(yīng)對(duì)?；蛘撸部梢匀〉没贕PS的位置信息，使得能夠應(yīng)對(duì)用戶手動(dòng)移動(dòng)拍攝裝置并改變圖像的倍率的情況。在任何一種情況下，生成階層數(shù)據(jù)時(shí)都通過特征點(diǎn)進(jìn)行最終的對(duì)位，故在元數(shù)據(jù)階段只要能確定大概的相對(duì)位置即可。接下來說明上述結(jié)構(gòu)的動(dòng)作。圖9是表示對(duì)用于生成階層數(shù)據(jù)的圖像拍攝進(jìn)行輔助的處理步驟的例子的流程圖。該例子表示了從用戶所拍攝的初始圖像一邊階段性地拉遠(yuǎn)一邊拍攝多個(gè)圖像的方法。在圖8的例子中，是用戶拍攝高倍率的第3圖像234后，通過拍攝控制部210和拍攝部212拍攝第2圖像232及第I圖像230的情況。
通過開始先拍攝變倍倍率高的圖像，然后再拉遠(yuǎn)拍攝圖像，不調(diào)整鏡頭方向、僅改變變倍倍率，能夠拍攝瞳孔等想以高倍率顯示的對(duì)象物(以后稱作“對(duì)象”)必然收入在視野中的圖像。此外，變倍倍率越小，些許的移動(dòng)就越不給圖像帶來大的變化。這在對(duì)象為蟲子或動(dòng)物等違反拍攝者意圖地運(yùn)動(dòng)的物體時(shí)特別重要。在這樣的對(duì)象的情況下，只要能如本實(shí)施方式這樣一邊改變變倍倍率一邊連拍而在短期間內(nèi)完成拍攝，拍攝過程中飛走不知去向這樣的可能性就會(huì)降低。

首先，用戶從拍攝裝置200的顯示器204上所顯示的模式選擇畫面所表示的模式列表中選擇圖像生成輔助模式，進(jìn)而輸入選擇實(shí)施該輔助方法的模式(S10)。然后，用戶以所希望的變倍倍率拍攝對(duì)象，作為對(duì)象圖像(S12)。接著，拍攝控制部210如上述那樣以該對(duì)象圖像為起點(diǎn)決定應(yīng)拍攝的圖像的變倍倍率，并指示以所決定的變倍倍率進(jìn)行拍攝，由此，拍攝部212拍攝圖像(S14、S16)。此時(shí)的拍攝裝置200的鏡頭的方向可以同S12的拍攝時(shí)的方向相同。反復(fù)進(jìn)行變倍倍率的變更和拍攝的處理，直到成為所決定的變倍倍率中最小的變倍倍率(S18的“否”、S14、S16)，拍攝完最小變倍倍率的圖像后(S18的“是”)，元數(shù)據(jù)生成部214生成元數(shù)據(jù)，與所拍攝的圖像的數(shù)據(jù)相對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)部218中(S20)。除上述之外，元數(shù)據(jù)生成部214還可以取得圖像的手抖動(dòng)信息、通過臉部檢測(cè)技術(shù)檢測(cè)出的臉部的各部位的位置信息等作為元數(shù)據(jù)。在以相同變倍倍率拍攝多個(gè)圖像并粘貼而作為一個(gè)階層的情況下，以該變倍倍率拍攝的張數(shù)也作為元數(shù)據(jù)。圖10是表示階層數(shù)據(jù)生成部220使用所拍攝的圖像的數(shù)據(jù)和元數(shù)據(jù)生成階層數(shù)據(jù)的處理步驟的流程圖。首先，階層數(shù)據(jù)生成部220從存儲(chǔ)部218讀出圖像數(shù)據(jù)和元數(shù)據(jù)(S22)。關(guān)于要讀出的圖像數(shù)據(jù)，以通過元數(shù)據(jù)建立了關(guān)聯(lián)的圖像數(shù)據(jù)為對(duì)象。然后，按變倍倍率的順序分配階層數(shù)據(jù)的階層(S24 )。此時(shí)，可以根據(jù)用戶的指示等分配設(shè)定有鏈接的多個(gè)階層數(shù)據(jù)的階層。在該情況下，因從用戶處接收在哪個(gè)圖像的哪個(gè)區(qū)域設(shè)定鏈接，還生成設(shè)定鏈接的文件。另外，在對(duì)一個(gè)階層使用粘貼了多個(gè)圖像的數(shù)據(jù)的情況下，基于元數(shù)據(jù)確定該多個(gè)圖像，并對(duì)其分配
一個(gè)階層。接下來，在具有上下關(guān)系的兩個(gè)階層的圖像間、或基準(zhǔn)圖像與其它階層的圖像間，基于元數(shù)據(jù)中的相對(duì)位置信息確定大致的對(duì)應(yīng)位置后，通過圖像解析進(jìn)行對(duì)位(S26)。例如將某階層的圖像放大到其下面階層的圖像的變倍倍率，比較相同對(duì)象物的特征點(diǎn)的位置。然后平行移動(dòng)下面階層的圖像使得位置相一致，來決定該階層的最終的圖像。反復(fù)在所有階層中進(jìn)行該處理。通過這樣處理，能夠在圖3所示那樣的虛擬空間內(nèi)準(zhǔn)確地得到階層間的平鋪圖像的對(duì)應(yīng)關(guān)系。在拍攝構(gòu)成一個(gè)階層的多個(gè)圖像的情況下，也根據(jù)鏡頭的方向等信息進(jìn)行相同變倍倍率的圖像的對(duì)位，并進(jìn)行粘貼來生成一個(gè)圖像。本實(shí)施方式所拍攝的圖像基本上具有在任一變倍倍率下都拍攝有相同對(duì)象這樣的性質(zhì)。利用該性質(zhì)，著眼于該對(duì)象比較其特征點(diǎn)的位置，由此能在階層間、階層內(nèi)精度良好地對(duì)位。這樣生成的階層數(shù)據(jù)存儲(chǔ)到存儲(chǔ)部218 中(S28)。圖11是說明對(duì)用于生成階層數(shù)據(jù)的圖像拍攝進(jìn)行輔助的處理的其它例子的圖。在該方法中，首先拍攝全景圖像等變倍倍率小、最廣角的圖像作為初始圖像240。然后，用戶從該初始圖像240中選擇對(duì)象,通過將其拉近(zoom up)來自己拍攝對(duì)象圖像。在圖11的例子中，表示了初始圖像240中的房子的圖像242、樹的圖像244被作為對(duì)象圖像而拍攝的情況。用戶可以再?gòu)哪菢优臄z的對(duì)象圖像中進(jìn)一步選擇對(duì)象而拉近拍攝。在圖11的例子中，表示了樹的圖像244中的樹根處的花的圖像246被作為對(duì)象圖像而拍攝的情況。用這樣的方式拍攝的圖像可以認(rèn)為構(gòu)成以初始圖像240為根節(jié)點(diǎn)、圖像彼此按包含關(guān)系相結(jié)合的樹結(jié)構(gòu)。在圖11的例子中，成為從初始圖像240中直接選擇而拍攝的房子的圖像242、樹的圖像244連接于初始圖像240的根節(jié)點(diǎn)，花的圖像246連接于樹的圖像244的樹結(jié)構(gòu)。以下將在這樣的樹結(jié)構(gòu)中相連接的上面節(jié)點(diǎn)的圖像稱為母圖像，將其所包含的下面節(jié)點(diǎn)的圖像稱為子圖像。在本方法中，元數(shù)據(jù)生成部214生成圖像數(shù)據(jù)的樹結(jié)構(gòu)作為元數(shù)據(jù)。通過拍攝并生成這樣的樹結(jié)構(gòu)，階層數(shù)據(jù)生成部220能夠?qū)σ粋€(gè)階層數(shù)據(jù)設(shè)定鏈向多個(gè)階層數(shù)據(jù)的鏈接。例如，在顯示初始圖像240的過程中在房子附近圖像被放大了的情況下，切換為使用圖像242的數(shù)據(jù)的顯示，由此能夠進(jìn)一步放大。同樣，能實(shí)現(xiàn)這樣的方案當(dāng)在樹附近圖像被 放大了的情況下，切換為使用圖像244的數(shù)據(jù)的顯示，若進(jìn)一步樹根被放大，則切換為使用圖像246的數(shù)據(jù)的顯示，由此來顯示在初始圖像240中看不清的花的詳細(xì)構(gòu)造。用戶拍攝房子的圖像242等對(duì)象圖像后，拍攝裝置200針對(duì)變倍倍率拍攝對(duì)初始圖像240和對(duì)象圖像進(jìn)行插補(bǔ)的插補(bǔ)圖像。拍攝步驟同在圖9中說明的一樣，從對(duì)象圖像起拉遠(yuǎn)，反復(fù)進(jìn)行拍攝直到成為初始圖像240的變倍倍率。當(dāng)初始圖像中拍攝有人、動(dòng)物、交通工具等移動(dòng)的物體時(shí)，可以再次拍攝與初始圖像240相同構(gòu)圖的圖像，將之作為階層數(shù)據(jù)來使用。這是因?yàn)橛脩襞臄z對(duì)象圖像后，拍攝裝置200邊拉遠(yuǎn)邊自動(dòng)連拍的所需時(shí)間較短，能夠減少與最初拍攝的初始圖像240相比、一系列圖像中的構(gòu)圖內(nèi)的變化。圖12是表示對(duì)圖11中說明的圖像拍攝進(jìn)行輔助的處理的步驟的流程圖。首先，用戶從顯示于拍攝裝置200的顯示器204上的模式選擇畫面所顯示的模式列表中選擇圖像生成輔助模式，進(jìn)而進(jìn)行輸入，選擇實(shí)施該輔助方法的模式(S30)。這樣，拍攝控制部210按照模式選擇時(shí)等用戶指定的視場(chǎng)角的信息拍攝全景圖像等初始圖像(S32)。例如用戶指定全景圖像的左上和右下的視場(chǎng)角，拍攝控制部210計(jì)算所指定的視場(chǎng)角成為左上、右下這樣的全景圖像整體的視場(chǎng)角，控制云臺(tái)，一邊移動(dòng)照相機(jī)的方向一邊使拍攝部212拍攝構(gòu)成全景圖像的多個(gè)圖像。連接這樣拍攝的圖像而生成全景圖像。若是以無需連接多個(gè)圖像的I張圖像作為初始圖像，則也可以是用戶進(jìn)行S32的處理。接下來，顯示圖像控制部216將S32中所拍攝的初始圖像作為母圖像顯示在顯示器204上，并將以矩形等表示鏡頭所捕捉的當(dāng)前的視場(chǎng)角對(duì)應(yīng)于初始圖像的何處的圖像顯示在顯示器204上(S34)。用戶一邊看著該顯示一邊改變拍攝裝置200的方向及變倍倍率，拍攝所希望的對(duì)象圖像(S36)。然后，拍攝控制部210同在圖9中說明的一樣決定應(yīng)作為插補(bǔ)圖像而拍攝的圖像的變倍倍率，向拍攝部212指示以所決定的變倍率進(jìn)行拍攝，由此，拍攝部212拍攝插補(bǔ)圖像(S38、S40)。若用戶為拍攝其它對(duì)象圖像或從對(duì)象圖像進(jìn)一步選擇出的對(duì)象的圖像而進(jìn)行了指示繼續(xù)拍攝的輸入(S42的“是”)，則反復(fù)進(jìn)行S34、S36、S38及S40的處理。此時(shí)，若在對(duì)象圖像內(nèi)進(jìn)一步拍攝對(duì)象圖像，則在S34中將顯示切換至成為母圖像的對(duì)象圖像。當(dāng)拍攝完全部對(duì)象圖像及其中間的插補(bǔ)圖像時(shí)(S42的“否”)，元數(shù)據(jù)生成部214確定所拍攝到的多個(gè)圖像的母子關(guān)系，生成圖像數(shù)據(jù)的樹結(jié)構(gòu)的信息(S44)。圖像的母子關(guān)系可以通過如下方式來確定，S卩，若在S34所顯示的母圖像中用矩形顯示的區(qū)域在S36中被拍攝，則將之作為子圖像。此時(shí)，母圖像與子圖像的相對(duì)位置也自動(dòng)判明。另外，若在S40中拍攝了插補(bǔ)圖像，則在樹結(jié)構(gòu)中插入對(duì)應(yīng)的節(jié)點(diǎn)。當(dāng)然，也可以取得各圖像被拍攝的時(shí)刻，針對(duì)預(yù)定時(shí)間內(nèi)所拍攝的圖像，基于變倍倍率、鏡頭的方向而生成樹結(jié)構(gòu)的信息。然后，元數(shù)據(jù)生成部214生成包含樹結(jié)構(gòu)的信息及相對(duì)位置的信息的元數(shù)據(jù)，使之與所拍攝的圖像的數(shù)據(jù)相對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)部218中(S46)。圖13表示了在圖12的S34中顯示于顯示器204上的畫面的構(gòu)成例。對(duì)象選擇畫面250包括顯示當(dāng)前鏡頭所捕捉的像的電子取景器區(qū)域252、和顯示初始圖像等母圖像的母圖像顯示區(qū)域254。母圖像顯示區(qū)域254可以如圖示那樣與電子取景器區(qū)域252的一部分相重疊地配置，也可以配置在獨(dú)立的區(qū)域。電子取景器區(qū)域252由一般的數(shù)字照相機(jī)等所具備的電子取景器構(gòu)成。母圖像顯示區(qū)域254顯示作為當(dāng)前想要拍攝的對(duì)象圖像的母圖像的已拍攝的圖像。在拍攝初始圖像后立刻顯示初始圖像作為母圖像。然后，在母圖像顯示區(qū)域254中，用矩形等表示當(dāng)前視場(chǎng)角區(qū)域框256，該當(dāng)前視場(chǎng)角區(qū)域框256表示當(dāng)前鏡頭所捕捉的視場(chǎng)角對(duì)應(yīng)于母圖像的哪個(gè)區(qū)域。當(dāng)前視場(chǎng)角區(qū)域框256所圍區(qū)域的圖像與顯示于電子取景器區(qū)域252的圖像一致。進(jìn)而，母圖像顯示區(qū)域254中還用矩形等表示已拍攝區(qū)域框258，該已拍攝區(qū)域框258表示已經(jīng)作為對(duì)象圖像而拍攝了的區(qū)域。使當(dāng)前視場(chǎng)角區(qū)域框256和已拍攝區(qū)域框258的線形或顏色不同，以使得能區(qū)別彼此。在該圖中用實(shí)線表示前者，用虛線表示后者。當(dāng)然，也可以在母圖像顯示區(qū)域254中總是顯示初始圖像，使得從對(duì)象圖像進(jìn)一步拍攝對(duì)象圖像時(shí)也能明白在初始圖像中處于哪個(gè)位置。在該情況下，成為當(dāng)前視場(chǎng)角區(qū)域框256處于已拍攝區(qū)域框258內(nèi)部這樣的形態(tài)。通過使這樣的畫面顯示在顯示器204中，用戶能夠從初始圖像中自由選擇對(duì)象，并且元數(shù)據(jù)生成部214能明確地得到母圖像與子圖像的相對(duì)位置?？梢杂门c圖10中所說明的相同的處理步驟來實(shí)現(xiàn)使用了這樣拍攝的圖像的數(shù)據(jù)和元數(shù)據(jù)的階層數(shù)據(jù)的生成。但如圖11所示，允許針對(duì)一個(gè)母圖像存在多個(gè)子圖像的樹結(jié)構(gòu)，故需要基于作為元數(shù)據(jù)而取得的樹結(jié)構(gòu)的信息，對(duì)一個(gè)階層的多個(gè)區(qū)域粘貼圖像，或?qū)σ粋€(gè)階層數(shù)據(jù)設(shè)定鏈向多個(gè)階層數(shù)據(jù)的鏈接。此時(shí)，即使有多個(gè)子圖像，通過相對(duì)于母圖像分別實(shí)施對(duì)位，也能使顯示從圖11的作為初始圖像240的整體風(fēng)景至作為對(duì)象圖像的花的特寫無縫地變化。圖11至圖13所說明的方法是最先拍攝全景照片等廣角的初始圖像，然后用戶自己選擇對(duì)象而拍攝對(duì)象圖像。另一方面，也可以是拍攝裝置200拍攝初始圖像后，通過圖像解析檢測(cè)可能成為對(duì)象的物體，使得用戶能夠從中進(jìn)行選擇。圖14表示了在這樣的方案中顯示于顯示器204的畫面的構(gòu)成例。對(duì)象圖像選擇畫面260包含顯示初始圖像等母圖像的母圖像顯示區(qū)域262。在母圖像顯示區(qū)域262中，顯示圖像控制部216用對(duì)象圖像候選框264、266等表 示對(duì)母圖像進(jìn)行圖像解析后檢測(cè)到人的臉部或物體等可能成為對(duì)象的目標(biāo)物的區(qū)域。關(guān)于此處實(shí)施的圖像解析，可以適用臉部檢測(cè)、前景抽取、頻率解析、彩色直方圖、特征點(diǎn)抽取、圖形匹配等一般的圖像解析技術(shù)。也可以通過預(yù)先讓用戶指定想作為對(duì)象的目標(biāo)物的屬性，來決定圖像解析方法。然后，用戶進(jìn)行從對(duì)象圖像候選框264、266等進(jìn)行選擇的輸入后，拍攝控制部210和拍攝部212為得到所選擇的圖像而改變?cè)婆_(tái)及變倍倍率地拍攝對(duì)象圖像。當(dāng)然，也可以取代圖14的對(duì)象圖像選擇 畫面260，而是僅將對(duì)象圖像的候選作為縮略圖排列顯示。圖15是表示對(duì)圖14所說明的圖像拍攝進(jìn)行輔助的處理的步驟的流程圖。首先，用戶從顯示于拍攝裝置200的顯示器204上的模式選擇畫面所顯示的模式列表中選擇圖像生成輔助模式，進(jìn)而進(jìn)行輸入，選擇實(shí)施該輔助方法的模式(S50)。然后，拍攝控制部210按照模式選擇時(shí)等用戶指定的視場(chǎng)角的信息，拍攝全景圖像等初始圖像(S52)。這些處理同圖12的S30、S32是一樣的。接下來，顯示圖像控制部216對(duì)所拍攝的初始圖像進(jìn)行圖像解析，將拍攝有可能成為對(duì)象的目標(biāo)物的區(qū)域用對(duì)象圖像候選框圍起來，將這樣處理后的初始圖像顯示在顯示器204上(S54)。用戶進(jìn)行輸入，從所顯示的對(duì)象圖像候選框中選擇所希望的對(duì)象的圖像候選框(S56)。然后，拍攝控制部210和拍攝部212為得到與所選擇的框?qū)?yīng)的視場(chǎng)角而根據(jù)需要移動(dòng)云臺(tái)及提高變倍倍率，拍攝對(duì)象圖像(S58、S60)。當(dāng)然，也可以是用戶自己實(shí)施S58、S60的處理。此時(shí)，用戶操控拍攝裝置200使鏡頭的方向、變倍倍率對(duì)準(zhǔn)到對(duì)象附近。然后，可以是拍攝部212在拍攝控制部210進(jìn)行微調(diào)整后實(shí)施拍攝，也可以是在用戶改變變倍倍率等的過程中，當(dāng)鏡頭所捕捉的視場(chǎng)角成為與所選擇的框?qū)?yīng)的位置時(shí)，用聲音或顯示等將該意思通知用戶，由用戶來進(jìn)行拍攝。接下來，拍攝控制部210同圖9中所說明的一樣，決定應(yīng)作為插補(bǔ)圖像而拍攝的圖像的變倍倍率，并指示以所決定的變倍倍率進(jìn)行拍攝，由此，拍攝部212拍攝插補(bǔ)圖像(S62、S64)。用戶進(jìn)行了拍攝其它對(duì)象圖像的指示輸入后(S66的“是”)，反復(fù)進(jìn)行S54至S64的處理。當(dāng)對(duì)象圖像中存在想要進(jìn)一步提升倍率而拍攝的對(duì)象時(shí)，可以通過用戶進(jìn)行該意思的指示輸入，而將在S54中顯示的圖像置換為成為母圖像的該對(duì)象圖像。當(dāng)拍攝完所有對(duì)象圖像及其插補(bǔ)圖像后(S66的“否”)，同圖12的S44—樣，元數(shù)據(jù)生成部214確定所拍攝的多個(gè)圖像的母子關(guān)系，生成圖像數(shù)據(jù)的樹結(jié)構(gòu)的信息(S68)。然后，使之與相對(duì)位置信息等其它元數(shù)據(jù)一起，與所拍攝的圖像的數(shù)據(jù)相對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)部 218 中(S70)。在該方法中，是顯示成為候選的對(duì)象圖像，用戶從中進(jìn)行選擇的，但也可以預(yù)先準(zhǔn)備有想要顯示的圖像的組合候選，用戶在S50的拍攝模式設(shè)定時(shí)進(jìn)行選擇。例如，預(yù)先準(zhǔn)備人物的整體像一臉部一瞳孔的組合、風(fēng)景一人一臉部的組合等通用的組合存儲(chǔ)到存儲(chǔ)部218中。然后，在用戶于拍攝模式設(shè)定時(shí)選擇其中一個(gè)組合后，將作為被拍攝物的人物或風(fēng)景配置在拍攝裝置200的鏡頭前。然后，拍攝控制部210和拍攝部212在圖15的S52中按所選擇的組合拍攝最廣角的圖像。然后，取代S54、S56的處理，顯示圖像控制部216對(duì)所拍攝的圖像進(jìn)行解析，抽取出符合所選擇的組合的對(duì)象，決定對(duì)象圖像的視場(chǎng)角。以后的處理同圖15—樣。這樣，能使用戶的工作降低到最小限度地取得適于用戶所想要的顯示形態(tài)的圖像的數(shù)據(jù)。在選擇組合時(shí)，為能夠感受到能進(jìn)行什么樣的顯示，也可以在顯示器204上顯示樣本圖像。通過以上所述的本實(shí)施方式，對(duì)適于階層數(shù)據(jù)的顯示技術(shù)的圖像的拍攝及階層數(shù)據(jù)的生成進(jìn)行輔助，所述階層數(shù)據(jù)為能以較廣分辨率顯示一個(gè)圖像或向其它圖像無縫地切換顯示的數(shù)據(jù)。具體來說，一邊改變變倍倍率，一邊連續(xù)地拍攝包含成為對(duì)象的被拍攝物的圖像。由此，能取得光的增減或物體的移動(dòng)等變化較少的一系列圖像的數(shù)據(jù)，即使在顯示時(shí)因圖像被施以放大、縮小而切換了顯示所使用的圖像的數(shù)據(jù)，也能不意識(shí)到該切換地實(shí)現(xiàn)無縫的變化。另外，通過在拍攝的同時(shí)取得各圖像的相對(duì)位置信息、變倍倍率作為元數(shù)據(jù)，能使用戶負(fù)擔(dān)較少地實(shí)施階層數(shù)據(jù)的階層的分配、鏈接的設(shè)定。除這些數(shù)據(jù)外，通過將用GPS、陀螺儀傳感器等得到的拍攝裝置的位置、方向也作 為元數(shù)據(jù)，即使用戶拿著拍攝裝置移動(dòng)，也能進(jìn)行圖像彼此的大致對(duì)位。之后，只要通過特征點(diǎn)抽取而進(jìn)行準(zhǔn)確的對(duì)位，就能抑制顯示時(shí)因圖像數(shù)據(jù)的切換而使得對(duì)象物的位置有些許錯(cuò)開這樣的不理想狀況的發(fā)生。另外，即使用同一拍攝裝置進(jìn)行較多的拍攝，通過以母子關(guān)系為元數(shù)據(jù)或拍攝時(shí)刻相接近，能容易地抽取要生成一個(gè)階層數(shù)據(jù)的一系列圖像。以上基于實(shí)施方式說明了本發(fā)明。上述實(shí)施方式僅是例示，本領(lǐng)域技術(shù)人員當(dāng)理解其各構(gòu)成要素、各處理過程的組合可以有各種各樣的變形，并且這樣的變形例也包含在本發(fā)明的范圍內(nèi)。例如在本實(shí)施方式中所示的圖是以作為靜止圖像的照片為例子的，但拍攝裝置所拍攝的圖像也可以是動(dòng)圖像，或者動(dòng)圖像與靜止圖像混合存在。例如可以是廣角的圖像為照片，將變倍倍率提高到最大時(shí)的對(duì)象圖像為動(dòng)圖像。在該情況下，生成在廣角的圖像中的被拍攝動(dòng)圖像的區(qū)域設(shè)定了再現(xiàn)該動(dòng)圖像的鏈接的數(shù)據(jù)。這樣，能容易地生成實(shí)現(xiàn)例如“從風(fēng)景照片向道路放大顯示時(shí)，作為風(fēng)景照片的一部分的電車就動(dòng)起來”這樣的靜止圖像與動(dòng)圖像混合存在的特效性表現(xiàn)的圖像數(shù)據(jù)。另外，在本實(shí)施方式中是將在短時(shí)間內(nèi)連拍而取得的圖像作為一個(gè)階層數(shù)據(jù)的，相反，也可以是拍攝間隔較長(zhǎng)。例如按各季節(jié)來拍攝相同風(fēng)景，在顯示時(shí)根據(jù)顯示區(qū)域移動(dòng)要求等而切換顯示的季節(jié)。在該情況下，拍攝時(shí)取得用GPS和陀螺儀傳感器所取得的拍攝裝置的位置及方向來作為元數(shù)據(jù)。然后，通過調(diào)用前一季節(jié)所拍攝的圖像的數(shù)據(jù)和該元數(shù)據(jù)，以與該圖像相同的視場(chǎng)角進(jìn)行拍攝。然后通過將圖像彼此建立關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)部中，能夠與在本實(shí)施方式中說明的一樣生成階層數(shù)據(jù)。標(biāo)號(hào)說明I圖像處理系統(tǒng)、10圖像處理裝置、12顯示裝置、20輸入裝置、30第0階層、32第I階層、34第2階層、36第3階層、38平鋪圖像、44顯示處理部、50硬盤驅(qū)動(dòng)器、60主存儲(chǔ)器、70緩沖存儲(chǔ)器、100控制部、200拍攝裝置、204顯示器、206指示輸入部、208輸入信息取得部、210拍攝控制部、212拍攝部、214元數(shù)據(jù)生成部、216顯示圖像控制部、218存儲(chǔ)部、220階層數(shù)據(jù)生成部。工業(yè)可利用性如上所述，本發(fā)明能適用于攝影機(jī)、圖像處理裝置等信息處理裝置。
權(quán)利要求
1.一種對(duì)顯示裝置所使用的圖像數(shù)據(jù)的生成進(jìn)行輔助的圖像數(shù)據(jù)生成輔助裝置，所述顯示裝置是在放大、縮小顯示圖像時(shí)，按預(yù)定的縮尺率將用于顯示的圖像的數(shù)據(jù)在以不同變倍倍率拍攝的多個(gè)圖像的數(shù)據(jù)間進(jìn)行切換的顯示裝置，本圖像數(shù)據(jù)生成輔助裝置的特征在于，包括 輸入信息取得部，從用戶處接收指定對(duì)象物的圖像的所希望的變倍倍率的輸入； 拍攝部，以上述輸入信息取得部所接收到的用戶指定的變倍倍率為起點(diǎn)，按用于顯示的多個(gè)變倍倍率對(duì)包含上述對(duì)象物的多個(gè)圖像進(jìn)行拍攝； 元數(shù)據(jù)生成部，取得使上述拍攝部所拍攝的多個(gè)圖像建立關(guān)聯(lián)，并決定顯示時(shí)的切換順序及切換時(shí)機(jī)的各圖像的變倍倍率作為元數(shù)據(jù)，附加于圖像的數(shù)據(jù)地存儲(chǔ)在存儲(chǔ)裝置中。
2.如權(quán)利要求I所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括階層數(shù)據(jù)生成部，生成階層數(shù)據(jù)作為上述圖像數(shù)據(jù)，所述階層數(shù)據(jù)是如下這樣的數(shù)據(jù)，即，在將上述多個(gè)圖像按變倍倍率順序階層化后，對(duì)各圖像進(jìn)行解析，抽取出攝于圖像中的同一物的特征點(diǎn)，進(jìn)行對(duì)位以使得在放縮各階層的圖像而統(tǒng)ー了尺寸時(shí)該特征點(diǎn)的位置相一致。
3.如權(quán)利要求2所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括拍攝控制部，控制上述拍攝部所具有的鏡頭的方向； 上述元數(shù)據(jù)生成部至少還基于上述拍攝部拍攝的各圖像的拍攝時(shí)的變倍倍率及鏡頭的方向，取得各圖像相對(duì)于變倍倍率最小的基準(zhǔn)圖像的相對(duì)位置信息作為元數(shù)據(jù)； 上述階層數(shù)據(jù)生成部基于該相對(duì)位置信息進(jìn)行第I階段的對(duì)位，并根據(jù)上述特征點(diǎn)的位置而進(jìn)行第2階段的對(duì)位。
4.如權(quán)利要求2所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括確定上述圖像數(shù)據(jù)生成輔助裝置的方向的陀螺儀傳感器； 上述元數(shù)據(jù)生成部至少基于上述拍攝部拍攝的各圖像的拍攝時(shí)的變倍倍率及由上述陀螺儀傳感器測(cè)出的上述圖像數(shù)據(jù)生成輔助裝置的方向，取得各圖像相對(duì)于變倍倍率最小的基準(zhǔn)圖像的相對(duì)位置信息作為元數(shù)據(jù)； 上述階層數(shù)據(jù)生成部基于該相對(duì)位置信息進(jìn)行第I階段的對(duì)位，并根據(jù)上述特征點(diǎn)的位置而進(jìn)行第2階段的對(duì)位。
5.如權(quán)利要求2所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括確定上述圖像數(shù)據(jù)生成輔助裝置的位置的GPS (Global Positioning System)的電波接收部； 上述元數(shù)據(jù)生成部至少基于上述拍攝部拍攝的各圖像的拍攝時(shí)的變倍倍率及由上述電波接收部測(cè)出的上述圖像數(shù)據(jù)生成輔助裝置的位置，取得各圖像相對(duì)于變倍倍率最小的基準(zhǔn)圖像的相對(duì)位置信息作為元數(shù)據(jù)； 上述階層數(shù)據(jù)生成部基于該相對(duì)位置信息進(jìn)行第I階段的對(duì)位，并根據(jù)上述特征點(diǎn)的位置進(jìn)行第2階段的對(duì)位。
6.如權(quán)利要求I至5的任ー項(xiàng)所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 上述輸入信息取得部從用戶處接收指定變倍倍率最小的圖像的視場(chǎng)角的輸入； 上述拍攝部按上述輸入信息取得部接收的用戶所指定的視場(chǎng)角來拍攝初始圖像；上述輸入信息取得部接收對(duì)用戶在上述初始圖像中選為對(duì)象的區(qū)域的對(duì)象圖像進(jìn)行拍攝時(shí)的變倍倍率，作為指定上述變倍倍率的輸入。
7.如權(quán)利要求6所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括顯示器，為使用戶從上述初始圖像中選擇對(duì)象，顯示使鏡頭所捕捉的視場(chǎng)角的框表示在上述初始圖像上的圖像。
8.如權(quán)利要求I至5的任ー項(xiàng)所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 上述輸入信息取得部從用戶處接收指定變倍倍率最小的圖像的視場(chǎng)角的輸入； 上述拍攝部按上述輸入信息取得部接收的用戶指定的視場(chǎng)角來拍攝初始圖像； 上述輸入信息取得部接收用戶從上述初始圖像被解析后所抽取出的對(duì)象圖像的候選中選擇的輸入，作為指定上述變倍倍率的輸入。
9.如權(quán)利要求8所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括顯示器，為使用戶進(jìn)行從上述對(duì)象圖像的候選中進(jìn)行選擇的輸入，顯示使表示對(duì)象圖像候選的輪廓的框表示在上述初始圖像上的圖像。
10.如權(quán)利要求8所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 還包括顯示器，為使用戶進(jìn)行從上述對(duì)象圖像的候選中進(jìn)行選擇的輸入，顯示使對(duì)象圖像候選縮略顯示了的圖像。
11.如權(quán)利要求6至10的任ー項(xiàng)所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 上述拍攝部拍攝對(duì)上述初始圖像與上述對(duì)象圖像的變倍倍率之間的變倍倍率進(jìn)行插補(bǔ)的插補(bǔ)圖像。
12.如權(quán)利要求6至11的任ー項(xiàng)所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 上述輸入信息取得部接受在上述初始圖像中對(duì)多個(gè)對(duì)象的變倍倍率指定； 上述元數(shù)據(jù)生成部取得使上述拍攝部拍攝的多個(gè)圖像建立關(guān)聯(lián)的、以上述初始圖像為根節(jié)點(diǎn)的圖像數(shù)據(jù)的樹結(jié)構(gòu)的信息作為元數(shù)據(jù)。
13.如權(quán)利要求I至12的任ー項(xiàng)所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 上述拍攝部拍攝包含該對(duì)象的動(dòng)圖像作為上述多個(gè)圖像中的任一者。
14.如權(quán)利要求I至5的任ー項(xiàng)所述的圖像數(shù)據(jù)生成輔助裝置，其特征在干， 上述輸入信息取得部基于用戶從預(yù)先準(zhǔn)備的對(duì)象的組合中選擇的輸入、和用戶配置在鏡頭前的被拍攝物，來取得拍攝所選擇的組合中的對(duì)象所需要的變倍倍率，將之作為用戶指定的上述變倍倍率。
15.一種對(duì)顯示裝置所使用的圖像數(shù)據(jù)的生成進(jìn)行輔助的圖像數(shù)據(jù)生成輔助方法，所述顯示裝置是在放大、縮小顯示圖像時(shí)，按預(yù)定的縮尺率將用于顯示的圖像的數(shù)據(jù)在以不同變倍倍率拍攝的多個(gè)圖像的數(shù)據(jù)間進(jìn)行切換的顯示裝置，本圖像數(shù)據(jù)生成輔助方法的特征在于，包括以下步驟 從用戶處接收指定對(duì)象物的圖像的所希望的變倍倍率的輸入； 以用戶指定的變倍倍率為起點(diǎn)，用拍攝裝置按用于顯示的多個(gè)變倍倍率對(duì)包含上述對(duì)象物的多個(gè)圖像進(jìn)行拍攝； 取得使所拍攝的多個(gè)圖像建立關(guān)聯(lián)，并決定顯示時(shí)的切換順序及切換時(shí)機(jī)的各圖像的變倍倍率作為元數(shù)據(jù)；以及 生成階層數(shù)據(jù)作為上述圖像數(shù)據(jù)而存儲(chǔ)到存儲(chǔ)裝置中，所述階層數(shù)據(jù)是如下這樣的數(shù)據(jù)，即，在將上述多個(gè)圖像按變倍倍率順序階層化后，對(duì)各圖像進(jìn)行解析，抽取出攝于圖像中的同一物的特征點(diǎn)，進(jìn)行對(duì)位以使得在放縮各階層的圖像而統(tǒng)ー了尺寸時(shí)該特征點(diǎn)的位置相一致。
16.一種使計(jì)算機(jī)實(shí)現(xiàn)顯示裝置所使用的圖像數(shù)據(jù)的生成的輔助的計(jì)算機(jī)程序，所述顯示裝置是在放大、縮小顯示圖像時(shí)，按預(yù)定的縮尺率將用于顯示的圖像的數(shù)據(jù)在以不同變倍倍率拍攝的多個(gè)圖像的數(shù)據(jù)間進(jìn)行切換的顯示裝置，本計(jì)算機(jī)程序的特征在于，使計(jì)算機(jī)實(shí)現(xiàn)以下功能 從用戶處接收指定對(duì)象物的圖像的所希望的變倍倍率的輸入； 以用戶指定的變倍倍率為起點(diǎn)，用拍攝裝置按用于顯示的多個(gè)變倍倍率對(duì)包含上述對(duì)象物的多個(gè)圖像進(jìn)行拍攝； 取得使所拍攝的多個(gè)圖像建立關(guān)聯(lián)，并決定顯示時(shí)的切換順序及切換時(shí)機(jī)的各圖像的變倍倍率作為元數(shù)據(jù)；以及 生成階層數(shù)據(jù)作為上述圖像數(shù)據(jù)而存儲(chǔ)到存儲(chǔ)裝置中，所述階層數(shù)據(jù)是如下這樣的數(shù)據(jù)，即，在將上述多個(gè)圖像按變倍倍率順序階層化后，對(duì)各圖像進(jìn)行解析，抽取出攝于圖像中的同一物的特征點(diǎn)，進(jìn)行對(duì)位以使得在放縮各階層的圖像而統(tǒng)ー了尺寸時(shí)該特征點(diǎn)的位置相一致。
17.—種記錄有計(jì)算機(jī)程序的記錄介質(zhì)，該計(jì)算機(jī)程序使計(jì)算機(jī)實(shí)現(xiàn)顯示裝置所使用的圖像數(shù)據(jù)的生成的輔助，所述顯示裝置是在放大、縮小顯示圖像時(shí)，按預(yù)定的縮尺率將用于顯示的圖像的數(shù)據(jù)在以不同變倍倍率拍攝的多個(gè)圖像的數(shù)據(jù)間進(jìn)行切換的顯示裝置，本記錄介質(zhì)所記錄的計(jì)算機(jī)程序的特征在于，使計(jì)算機(jī)實(shí)現(xiàn)以下功能 從用戶處接收指定對(duì)象物的圖像的所希望的變倍倍率的輸入； 以用戶指定的變倍倍率為起點(diǎn)，用拍攝裝置按用于顯示的多個(gè)變倍倍率對(duì)包含上述對(duì)象物的多個(gè)圖像進(jìn)行拍攝； 取得使所拍攝的多個(gè)圖像建立關(guān)聯(lián)，并決定顯示時(shí)的切換順序及切換時(shí)機(jī)的各圖像的變倍倍率作為元數(shù)據(jù)；以及 生成階層數(shù)據(jù)作為上述圖像數(shù)據(jù)而存儲(chǔ)到存儲(chǔ)裝置中，所述階層數(shù)據(jù)是如下這樣的數(shù)據(jù)，即，在將上述多個(gè)圖像按變倍倍率順序階層化后，對(duì)各圖像進(jìn)行解析，抽取出攝于圖像中的同一物的特征點(diǎn)，進(jìn)行對(duì)位以使得在放縮各階層的圖像而統(tǒng)ー了尺寸時(shí)該特征點(diǎn)的位置相一致。
全文摘要
用戶進(jìn)行選擇拍攝模式的輸入(S10)。然后，用戶按所希望的變倍倍率拍攝對(duì)象作為對(duì)象圖像(S12)。拍攝裝置以該對(duì)象圖像為起點(diǎn)決定應(yīng)拍攝的圖像的變倍倍率，一邊向所決定的變倍倍率拉遠(yuǎn)一邊拍攝圖像(S14、S16)。反復(fù)進(jìn)行變倍倍率的變更及拍攝的處理，直到成為所決定的變倍倍率中最小的變倍倍率(S18的“否”、S14、S16)，當(dāng)拍攝完最小變倍倍率的圖像時(shí)(S18的“是”)，生成包含各圖像的變倍倍率、圖像的相對(duì)位置信息的元數(shù)據(jù)，與所拍攝的圖像的數(shù)據(jù)相對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)部中(S20)。
文檔編號(hào)H04N21/433GK102668585SQ20108005312
公開日2012年9月12日 申請(qǐng)日期2010年7月27日 優(yōu)先權(quán)日2009年11月24日
發(fā)明者勢(shì)川博之, 大場(chǎng)章男, 山岸建, 稻田徹悟 申請(qǐng)人:索尼計(jì)算機(jī)娛樂公司