專利名稱：圖像處理裝置和圖像處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理裝置和圖像處理方法，更具體而言涉及被配置為創(chuàng)建并集的圖像(image of union)作為每個場景的代表圖像的圖像處理裝置和圖像處理方法。
背景技術(shù)：
過去，無法被完全容納在成像設(shè)備(相機)的一個畫面中的被攝物是通過使用搖攝(pan)或俯仰(tilt)技術(shù)以分割在兩個或更多個幀中的形式來拍攝的。圖36示出了通過使用搖攝技術(shù)利用成像設(shè)備(相機)來拍攝在水平方向上延伸的被攝物的示例。另外，已經(jīng)有這樣的做法，即對拍攝或創(chuàng)建的圖像信號進行處理以為每個場景選擇預(yù)定的畫面(例如第一個畫面)，從而提供所選畫面的圖像作為代表圖像。在此情況下， 例如，觀看者或編輯者無法掌握如上所述通過使用搖攝技術(shù)利用成像設(shè)備(相機)拍攝的、 未被全部容納在成像設(shè)備(相機)的一個畫面中的被攝物的整個圖像。此外，已知一種技術(shù)，其中，例如，通過如上所述利用搖攝技術(shù)拍攝被攝物而獲得的圖像信號被處理以創(chuàng)建并集(集合之和)的圖像，在這種并集的圖像中兩個或更多個畫面(幀)的圖像被相互鏈接在一起(參考日本專利申請早期公布No. Hei 07498137和日本專利申請早期公布No. Hei06-326965)。

發(fā)明內(nèi)容
考慮上述并集的圖像(并集圖像)被創(chuàng)建作為每個場景的代表圖像(縮略圖)。 如上所述創(chuàng)建的代表圖像使得例如觀看者或編輯者可以掌握例如如上所述通過使用搖攝技術(shù)利用成像設(shè)備(相機)拍攝的、未被全部容納在成像設(shè)備(相機)的一個畫面中的被攝物的整個圖像。然而，例如，此代表圖像不提供諸如以何種速度搖攝被攝物之類的信息。這造成了一個問題，即圖像的觀看者或編輯者不能夠不僅概覽到在某個場景中“示出了什么”而且概覽到“以何種表現(xiàn)方式示出了什么”。因此，本發(fā)明處理了與現(xiàn)有技術(shù)方法和裝置相關(guān)聯(lián)的上述和其他問題，并且通過提供這樣一種圖像處理裝置和圖像處理方法來解決所處理的問題這種圖像處理裝置和圖像處理方法被配置為使得在場景代表圖像由并集的圖像構(gòu)成的情況下不僅可以了解場景內(nèi)的整個圖像，而且可以了解該場景內(nèi)的每個圖像的運動。在實現(xiàn)本發(fā)明時，根據(jù)其一個實施例，提供了一種圖像處理裝置。該圖像處理裝置具有代表圖像創(chuàng)建塊，該代表圖像創(chuàng)建塊被配置為創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及符號描繪塊，該符號描繪塊被配置為基于預(yù)定場景中的每個畫面的全畫面運動，在由代表圖像創(chuàng)建塊創(chuàng)建的代表圖像的邊緣上描繪指示全畫面運動的符號。在此圖像處理裝置中，符號描繪塊根據(jù)要在輸出設(shè)備上顯示的代表圖像的顯示大小來描繪指示全畫面運動的符號。在上述實施例中，代表圖像創(chuàng)建塊創(chuàng)建通過相互鏈接構(gòu)成預(yù)定場景的畫面的圖像而獲得的并集圖像作為代表圖像。然后，基于預(yù)定場景中的每個畫面的全畫面運動，符號描繪塊在由代表圖像創(chuàng)建塊創(chuàng)建的代表圖像的邊緣上描繪指示全畫面運動的符號。在此情況下，指示全畫面運動的符號是根據(jù)要在輸出設(shè)備上顯示的代表圖像的顯示大小來描繪的。如上所述，在上述實施例中，指示全畫面運動的符號被描繪在由并集圖像構(gòu)成的場景代表圖像的邊緣上。因此，此新穎配置使得用戶不僅可以了解每個場景中的整個圖像， 還可以了解一個場景中的每個畫面的運動。此外，根據(jù)輸出設(shè)備中代表圖像的顯示大小來描繪指示全畫面運動的符號。因此，如果輸出設(shè)備中代表圖像的顯示大小相對較小，則可以確保每個符號的可見性。例如，上述實施例還具有全畫面運動計算塊，該全畫面運動計算塊被配置為處理預(yù)定場景的圖像信號以計算預(yù)定場景中的每個畫面的全畫面運動。例如，符號描繪塊基于由全畫面運動計算塊計算出的預(yù)定場景中的每個畫面的全畫面運動，在由代表圖像創(chuàng)建塊創(chuàng)建的代表圖像的邊緣上描繪指示全畫面運動的符號。例如，上述實施例還具有累積數(shù)計算塊，該累積數(shù)計算塊被配置為基于預(yù)定場景中的每個畫面的全畫面運動來計算每個畫面的累積數(shù)。在此配置中，如果發(fā)現(xiàn)在預(yù)定畫面中存在積累，則累積數(shù)計算塊將該預(yù)定畫面的累積數(shù)設(shè)定到0并且將累積計數(shù)器遞增1，而如果沒有發(fā)現(xiàn)存在積累，則累積數(shù)計算塊將前一畫面的累積數(shù)設(shè)定成累積計數(shù)器的值，將該預(yù)定畫面的累積數(shù)設(shè)定到1并將累積計數(shù)器的值設(shè)定到1，并且將最末畫面的累積數(shù)設(shè)定成累積計數(shù)器的值。例如，基于由累積數(shù)計算塊計算出的每個畫面的累積數(shù)，符號描繪塊在由代表圖像創(chuàng)建塊創(chuàng)建的代表圖像的邊緣上描繪指示全畫面運動的符號。在上述實施例中，例如，如果預(yù)定畫面的累積數(shù)至少是1，則符號描繪塊在代表圖像的邊緣上與該預(yù)定畫面相對應(yīng)的位置處描繪符號。在上述實施例中，例如，如果預(yù)定畫面的累積數(shù)至少是1并且不大于N (N是至少為 1的整數(shù))，則符號描繪塊在代表圖像的邊緣上與該預(yù)定畫面相對應(yīng)的位置處描繪普通符號作為符號；如果預(yù)定畫面的累積數(shù)大于N，則符號描繪塊在代表圖像的邊緣上與該預(yù)定畫面相對應(yīng)的位置處描繪累積符號作為符號。在上述實施例中，例如，符號描繪塊描繪在與全畫面運動的方向正交的方向上延伸的線段形狀的符號作為符號，并且把在預(yù)定畫面的累積數(shù)不大于N的情況下要描繪的普通符號的長度設(shè)定到與該預(yù)定畫面的全畫面運動的大小相對應(yīng)的長度。例如，符號描繪塊把在預(yù)定畫面的累積數(shù)至少為1并且不大于N的情況下要描繪的普通符號的長度h設(shè)定到 H*Mv/Mvmax，其中H是輸出設(shè)備中的邊緣的顯示區(qū)域中的與全畫面運動的方向正交的方向的長度，Mvmax是全畫面運動之中的最大運動，并且Mv是每個畫面的全畫面運動。在此情況下，在每個畫面中要描繪的普通符號的長度對應(yīng)于該畫面的全畫面運動，從而增加了這個描繪的普通符號所指示的信息的量。在上述實施例中，例如，符號描繪塊判定要描繪的符號彼此之間的鄰近度，并且根據(jù)此判定的結(jié)果，改變在預(yù)定畫面的累積數(shù)至少為1并且不大于N的情況下要描繪的普通符號的描繪方式。在此情況下，例如，符號描繪塊按照關(guān)系W*Vmin(S+T)來計算顯示區(qū)域上彼此最接近的符號之間的距離d，其中S是全畫面運動的方向上一個畫面的長度，T是全畫面運動的總值，Vmin是當(dāng)在全畫面運動中未發(fā)現(xiàn)積累時的最小運動，并且W是輸出設(shè)備中代表圖像的顯示區(qū)域的全畫面運動的方向上的長度，從而基于如此獲得的距離d來判定符號之間的鄰近度。從而，根據(jù)符號鄰近度判定的結(jié)果來改變在預(yù)定畫面的累積數(shù)不大于N 的情況下要描繪的符號的描繪方式，使得在輸出設(shè)備的代表圖像的顯示大小相對較小的情況下用戶可以根據(jù)描繪的符號很容易地了解全畫面運動。在上述實施例中，例如，符號描繪塊對每預(yù)定數(shù)目的畫面描繪普通符號，使得在全畫面運動的方向上要描繪的符號之間的距離在輸出設(shè)備中的顯示區(qū)域中超過預(yù)定值。在此情況下，普通符號在描繪之前被疏化，從而，如果輸出設(shè)備中代表圖像的顯示大小相對較小，則描繪的普通符號不會太過擁擠而導(dǎo)致用戶難以了解全畫面運動。在上述實施例中，例如，符號描繪塊描繪在與全畫面運動的方向正交的方向上延伸的線段形狀的符號作為符號，把在預(yù)定畫面的累積數(shù)至少為1并且不大于N的情況下要描繪的普通符號的長度h設(shè)定到H*Mv/Mvmax，其中H是輸出設(shè)備中的邊緣的顯示區(qū)域中的與全畫面運動的方向正交的方向的長度，Mvmax是全畫面運動之中的最大運動，并且Mv是每個畫面的全畫面運動，并且以深色描繪對于每預(yù)定數(shù)目的畫面要描繪的普通符號，而以淺色描繪在其他畫面中要描繪的普通符號。在上述情況下，例如，因為以深色描繪的普通符號被疏化，所以如果輸出設(shè)備中代表圖像的顯示大小相對較小，則描繪的普通符號不會太過擁擠而使得用戶難以了解全畫面運動。另外，在此情況下，每個畫面中描繪的普通符號的長度對應(yīng)于該畫面的全畫面運動， 從而增加了該普通符號指示的信息量。在上述實施例中，例如，如果在全畫面運動的方向上要描繪的符號之間的距離在輸出設(shè)備的顯示畫面區(qū)域上小于預(yù)定值，則符號描繪塊根據(jù)每個畫面與前一畫面之間的全畫面運動差異與加速時段相應(yīng)地描繪加速符號，與勻速時段相應(yīng)地描繪勻速符號，并且與減速時段相應(yīng)地描繪減速符號。在上述情況下，對于指示全畫面運動的符號，描繪縮減的符號(加速符號、勻速符號和減速符號)。如果輸出設(shè)備中代表圖像的顯示大小相對較小，則可以減少要描繪的符號的數(shù)目，從而防止描繪的符號太過擁擠而使得用戶難以了解全畫面運動。此外，此新穎配置使得用戶可以容易地了解每個全畫面運動的加速時段、勻速時段和減速時段。在上述實施例中，例如，勻速數(shù)計算塊基于預(yù)定場景中每個畫面與前一畫面之間的全畫面運動差異來計算每個畫面的勻速數(shù)。如果在預(yù)定畫面上發(fā)現(xiàn)存在積累，則勻速數(shù)計算塊將該預(yù)定畫面的勻速數(shù)設(shè)定到0并且將勻速計數(shù)器遞增1 ；如果發(fā)現(xiàn)不存在積累，則勻速數(shù)計算塊將前一畫面的勻速數(shù)設(shè)定成勻速計數(shù)器的值，將預(yù)定畫面的勻速數(shù)設(shè)定到1， 并且將勻速計數(shù)器的值設(shè)定到1 ；并且，如果預(yù)定畫面的勻速數(shù)至少為1并且不大于M(M是至少為1的整數(shù))，則符號描繪塊在代表圖像的邊緣上與該預(yù)定畫面相對應(yīng)的位置處描繪加速符號和減速符號之一，而如果預(yù)定畫面的勻速數(shù)超過M,則符號描繪塊在代表圖像的邊緣上與該預(yù)定畫面相對應(yīng)的位置處描繪勻速符號。例如，勻速數(shù)計算塊通過判定預(yù)定畫面的全畫面運動差異是否在閾值范圍內(nèi)來判定是否存在積累。另外，例如，累積數(shù)計算塊通過判定用于積累每個畫面的全畫面運動差異的累積手段的累積數(shù)是否在閾值范圍內(nèi)來判定是否存在積累。應(yīng)當(dāng)注意，如果沒有發(fā)現(xiàn)積累則累積手段被重置到0。根據(jù)本發(fā)明的實施例，在由并集圖像構(gòu)成的場景代表圖像的邊緣上描繪指示全畫面運動的符號，從而用戶不僅能夠掌握場景中的整個圖像，還能夠掌握該場景中的每個畫面的運動。另外，根據(jù)本發(fā)明的實施例，根據(jù)代表圖像在輸出設(shè)備中的顯示大小來描繪指示全畫面運動的符號，從而，即使輸出設(shè)備中代表圖像的顯示大小相對較小，也可以提供良好的符號可見性。


從以下參考附圖對實施例的描述中將清楚本發(fā)明的其他特征和優(yōu)點，附圖中圖1是圖示出作為本發(fā)明第一實施例實現(xiàn)的圖像處理裝置的示例性配置的框圖；圖2是指示出累積數(shù)計算塊中的處理過程的一個示例的流程圖；圖3是指示出當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目等于40時，每個幀的全畫面運動Mv和通過累積數(shù)計算處理獲得的每個幀(每個畫面)的累積數(shù)和總值的示例的表格；圖4是指示出在符號描繪塊中要執(zhí)行的示例性處理過程的流程圖；圖5是圖示出當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目等于40時每個符號和累積數(shù)的描繪示例的示圖；圖6A和6B是圖示出當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目等于40時每個符號和累積數(shù)的另一描繪示例的示圖；圖7是指示出在依據(jù)積累偏差A(yù)mv是否在閾值內(nèi)判定積累的存在時累積數(shù)計算塊中要執(zhí)行的示例性處理過程的流程圖；圖8是指示出當(dāng)指示累積順序的符號(累積ID)被添加到累積符號時在符號描繪塊中要執(zhí)行的示例性處理過程的流程圖；圖9是圖示出當(dāng)全畫面運動的方向從正方向改變成反方向時描繪每個符號、累積數(shù)和累積ID的示例的示圖；圖IOA和IOB示出了當(dāng)全畫面運動的方向從正方向改變成反方向時描繪符號、累積數(shù)和累積ID的其他示例；圖11是圖示出一種示例性描繪的示圖，在該描繪中，全畫面運動被向量分解到水平方向和垂直方向中，并且在每個向量方向上描繪符號；圖12A、12B和12C是圖示出指示全畫面運動的符號的除線段以外的示例的示圖；圖13是指示出符號描繪塊要執(zhí)行的示例性處理過程的流程圖；圖14A和14B是圖示出符號描繪處理所描繪的示例性描繪的示圖；圖15是圖示出符號描繪處理所描繪的示例性描繪的示圖；圖16是圖示出作為本發(fā)明第二實施例實現(xiàn)的圖像處理裝置的示例性配置的框圖；圖17A和17B是指示出用于計算顯示區(qū)域中最鄰近處的符號的距離d的畫面的全畫面運動方向上的長度S、全畫面運動的總值T和輸出設(shè)備中的代表圖像的顯示區(qū)域的全畫面運動方向上的長度W的示圖；圖18是指示出符號描繪塊要執(zhí)行的示例性處理過程的流程圖；圖19是指示出符號描繪塊要執(zhí)行的另一示例性處理過程的流程圖；圖20是圖示出符號描繪處理所描繪的示例性描繪的示圖；圖21是指示出符號描繪塊要執(zhí)行的另一示例性處理過程的流程圖22是符號描繪處理所描繪的示例性描繪；圖23是指示出符號描繪塊要執(zhí)行的另一示例性處理過程的流程圖；圖M是圖示出符號描繪處理所描繪的示例性描繪的示圖；圖25是圖示出作為本發(fā)明第三實施例實現(xiàn)的圖像處理裝置的示例性配置的框圖；圖沈是指示出勻速數(shù)計算塊要執(zhí)行的示例性處理過程的流程圖；圖27是圖示出當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目為40時每個幀的全畫面運動 Mv、利用每個幀的這個全畫面運動Mv獲得的累積數(shù)、總值、運動差異、勻速數(shù)的一個示例的示圖；圖觀是指示出符號描繪塊要執(zhí)行的示例性處理過程的流程圖；圖四是指示出符號描繪塊要執(zhí)行的另一示例性處理過程的流程圖；圖30是圖示出符號描繪處理所描繪的示例性描繪的示圖；圖31是圖示出加速、勻速和減速的縮減的符號的變形例的示圖；圖32A、32B、32C、32D、32E和32F是圖示出通過使用縮減的符號來描繪的示例性描繪的示圖；圖33A、3!3B和33C是圖示出通過使用縮減的符號來描繪的其他示例性描繪的示圖；圖34是圖示出作為本發(fā)明第四實施例實現(xiàn)的圖像處理裝置的框圖；圖35是指示出符號描繪處理要執(zhí)行的示例性處理過程的流程圖；并且圖36是圖示出通過使用搖攝技術(shù)利用成像設(shè)備(相機)拍攝在水平方向上延伸的被攝物的示例的示圖。
具體實施例方式將參考附圖利用本發(fā)明的實施例來更詳細描述本發(fā)明。將按以下順序進行描述。1.第一實施例2.第二實施例3.第三實施例4.第四實施例1.第一實施例圖像處理裝置的示例性配置現(xiàn)在，參考圖1，其中示出了作為本發(fā)明第一實施例實現(xiàn)的圖像處理裝置100的示例性配置。此圖像處理裝置100具有圖像輸入塊101、代表圖像創(chuàng)建塊102、全畫面運動計算塊103、累積數(shù)計算塊104、符號描繪塊105以及輸出設(shè)備接口(I/F)106。圖像輸入塊101把要處理的圖像信號輸入到圖像處理裝置100中。通過利用成像設(shè)備(例如相機)拍攝被攝物而獲得的這個要處理的圖像信號是直接從該成像設(shè)備提供來的或者是從預(yù)定的記錄介質(zhì)讀取而提供來的。此外，此圖像輸入塊101通過處理輸入的圖像信號來檢測場景改變點、按場景分割輸入的信號，并且將經(jīng)分割的圖像信號順次提供給代表圖像創(chuàng)建塊102和全畫面運動計算塊103。代表圖像創(chuàng)建塊102、全畫面運動計算塊103、累積數(shù)計算塊104和符號描繪塊105順次執(zhí)行每個場景的處理。下面描述以被處理的場景作為預(yù)定場景來描述這些塊中的每一個。代表圖像創(chuàng)建塊102處理預(yù)定場景的圖像信號，創(chuàng)建通過鏈接構(gòu)成此預(yù)定場景的各個畫面(幀)的圖像而獲得的并集圖像，并且提供此并集圖像作為該預(yù)定場景的代表圖像。創(chuàng)建此并集圖像的技術(shù)是公知的，因此在這里不做詳細描述。例如，在日本專利申請早期公布No. Hei 7498137和日本專利申請早期公布No. Hei 6-326965中公開了此并集圖像創(chuàng)建技術(shù)。例如，代表圖像創(chuàng)建塊102創(chuàng)建構(gòu)成預(yù)定場景的每個畫面的全畫面運動(運動向量)，并且基于計算出的每個畫面的全畫面運動來鏈接圖像，從而創(chuàng)建并集圖像。全畫面運動計算塊103處理預(yù)定場景的圖像信號以計算此預(yù)定場景內(nèi)的每個畫面的全畫面運動(運動向量)。執(zhí)行全畫面運動的這個計算的技術(shù)是公知的，因此在這里不做詳細描述。例如，在日本專利申請早期公布No. 2001-086387、日本專利申請早期公布 No. 2007-104516和日本專利申請早期公布No. 2004-88474中公開了此計算技術(shù)。例如，全畫面運動計算塊103通過與上述在代表圖像創(chuàng)建塊102中執(zhí)行的計算全畫面運動(運動向量)的處理類似的處理來計算構(gòu)成預(yù)定場景的每個畫面的全畫面運動(運動向量)。累積數(shù)計算塊104基于由全畫面運動計算塊103計算出的預(yù)定場景中的每個畫面的全畫面運動來計算每個畫面的累積數(shù)。累積數(shù)計算處理圖2所示的流程圖指示出累積數(shù)計算塊104中要執(zhí)行的示例性處理過程。在步驟 STl中，累積數(shù)計算塊104開始處理并且轉(zhuǎn)到步驟ST2的處理。在此ST2中，累積數(shù)計算塊 104將累積計數(shù)器C的值設(shè)定到0并且將總值(累積運動量)T也設(shè)定到0。接下來，在步驟ST3中，累積數(shù)計算塊104將處理幀(處理畫面)設(shè)定為第一幀(第一畫面)。接下來，在步驟ST4中，累積數(shù)計算塊104判定處理幀是否是最末幀(最末畫面)。 如果發(fā)現(xiàn)處理幀不是最末幀，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST5的處理。在步驟ST5中，累積數(shù)計算塊104將當(dāng)前幀的全畫面運動Mv加到總值T以獲得當(dāng)前幀中的總值T，并將所獲得的總值T記錄為當(dāng)前幀的總值。接下來，累積數(shù)計算塊104在步驟ST6中判定是否存在積累。這里，累積數(shù)計算塊 104基于當(dāng)前幀的全畫面運動Mv是否為0來判定積累的存在。更具體而言，如果Mv是0， 則累積數(shù)計算塊104判定存在積累；如果Mv高于0，則累積數(shù)計算塊104判定不存在積累。如果發(fā)現(xiàn)積累，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST7的處理。在步驟ST7中，累積數(shù)計算塊104將累積計數(shù)器C的值遞增1，同時當(dāng)前幀的累積數(shù)為0。另一方面，如果未發(fā)現(xiàn)積累，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST8的處理。在步驟ST8中，累積數(shù)計算塊104把上一個幀(一個畫面)的累積數(shù)設(shè)定成累積計數(shù)器C的值并且將當(dāng)前幀的累積數(shù)設(shè)定到1。然后，在步驟ST9中，累積數(shù)計算塊104把累積計數(shù)器C的值設(shè)定到1。在步驟ST7的處理和步驟ST9的處理之后，累積數(shù)計算塊104轉(zhuǎn)到步驟STlO的處理。在步驟STlO中，累積數(shù)計算塊104把處理幀設(shè)定成下一幀，然后返回到步驟ST4的處理。如果在步驟ST4中處理幀是最末幀，則累積數(shù)計算塊104轉(zhuǎn)到步驟STll的處理。 在步驟STll中，累積數(shù)計算塊104把當(dāng)前幀(=最末幀)的累積數(shù)設(shè)定成累積計數(shù)器C的值。此外，在步驟STll中，累積數(shù)計算塊104將當(dāng)前幀的全畫面運動Mv加到總值T并且將此總值T的值記錄為當(dāng)前幀(=最末幀)的總值。然后，累積數(shù)計算塊104在步驟ST12中終止處理。參考圖3，其中示出了指示出當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目為40時，每個幀的全畫面運動Mv和通過圖2的流程圖中所示的處理獲得的每個幀(每個畫面)的累積數(shù)和總數(shù)的示例性圖表。在此示例中，在幀1至幀10中，全畫面運動Mv是0，從而判定存在連續(xù)積累。對于幀11，全畫面運動Mv是50，從而判定不存在積累。因此，幀1至幀9中的累積數(shù)是0，而幀10的累積數(shù)是10。另外，在此示例中，在幀11至幀25中，全畫面運動Mv不是0，從而判定不存在連續(xù)積累。因此，在幀11至幀25中，積累數(shù)是1。另外，在此示例中，在幀沈至幀39中，全畫面運動Mv是0，從而判定存在連續(xù)積累。因此，幀沈至幀39中的累積數(shù)是0，并且作為最末幀的幀40的累積數(shù)是15?；谟衫鄯e數(shù)計算塊104計算出的每個畫面的累積數(shù)，符號描繪塊105在由代表圖像創(chuàng)建塊102創(chuàng)建的代表圖像(并集圖像)的邊緣上描繪指示全畫面運動的符號。此外， 符號描繪塊105把在邊緣上描繪有指示全畫面運動的符號的代表圖像的圖像信號(圖像數(shù)據(jù))提供給輸出設(shè)備接口 I/F 106。符號描繪處理圖4所示的流程圖指示出在符號描繪塊105中要執(zhí)行的示例性處理。在步驟ST21 中，符號描繪塊105開始處理，然后轉(zhuǎn)到步驟ST22的處理。在步驟ST22中，符號描繪塊105 取得全畫面運動方向。例如，全畫面運動方向包括水平方向、垂直方向和傾斜方向。在此情況下，符號描繪塊105基于由全畫面運動計算塊103計算出的每個畫面的全畫面運動(運動向量)來取得全畫面運動方向。接下來，在步驟ST23中，符號描繪塊105確定符號描繪軸。在此情況下，符號描繪塊105確定符號描繪軸以使該符號描繪軸對應(yīng)于在步驟ST22中獲得的全畫面運動方向。例如，如果全畫面運動方向是水平的，則符號描繪軸被確定在水平方向上。接下來，符號描繪塊105在步驟STM中將處理幀(處理畫面)設(shè)定成第一幀(第一畫面)。在步驟ST25中，符號描繪塊105判定處理幀是否是最末幀(最末畫面)。如果發(fā)現(xiàn)處理幀不是最末幀，則符號描繪塊105轉(zhuǎn)到步驟SD6的處理。在步驟SD6中符號描繪塊105判定累積數(shù)是0、1還是2或更大。如果累積數(shù)是0，則符號描繪塊105在步驟ST27將處理幀設(shè)定成下一幀，然后返回到步驟ST25的處理。如果累積數(shù)是1，則符號描繪塊105轉(zhuǎn)到步驟SD8的處理。在步驟 ST28中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置描繪普通符號作為符號。接下來，在步驟SD8的處理之后，符號描繪塊105在步驟ST27中將處理幀設(shè)定成下一幀，并返回到步驟ST25的處理。如果累積數(shù)是2或更大，則符號描繪塊105轉(zhuǎn)到步驟SD9的處理。在步驟SD9 中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪累積符號作為符號。此累積符號例如可在形狀、大小、圖案或顏色方面與上述普通符號區(qū)分開來。在步驟SD9中，符號描繪塊105還在與累積符號的描繪位置相對應(yīng)的位置處描繪累積數(shù)。然后，在步驟SD9的處理之后，符號描繪塊105在步驟ST27中將處理幀設(shè)定成下一幀，并返回到步驟ST25的處理。如果在步驟ST25中發(fā)現(xiàn)處理幀是最末幀，則符號描繪塊105轉(zhuǎn)到步驟ST30的處理。在步驟ST30中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(最末幀)相對應(yīng)的位置處描繪末尾符號作為符號。此末尾符號可在形狀、大小、圖案或顏色等等方面與上述普通符號和累積符號區(qū)分開來。另外，在步驟ST30中，符號描繪塊105在與末尾符號的描繪位置相對應(yīng)的位置處描繪累積數(shù)。然后，在步驟ST30的處理之后，符號描繪塊105在步驟ST31中結(jié)束處理。參考圖5，其中示出了在構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目為40的情況下，當(dāng)幀 (畫面)的累積數(shù)和總數(shù)在圖3中示出時，符號和累積數(shù)的示例性描繪。應(yīng)當(dāng)注意，在此描繪示例中，每個符號是由線段指示的。在此示例中，在幀1至幀9中累積數(shù)是0，從而不執(zhí)行符號描繪。在幀10，累積數(shù)是10，從而在與此幀相對應(yīng)的位置(此幀的右上角)處描繪累積符號，并且在與累積符號相對應(yīng)的位置處描繪累積數(shù)“10”。幀11至幀25中的累積數(shù)是1，從而在與這些幀相對應(yīng)的位置處描繪普通符號。在幀沈至幀39中累積數(shù)是0，從而不執(zhí)行符號描繪。對于最末幀40，描繪末尾符號并且在與末尾符號相對應(yīng)的位置處描繪累積數(shù)“ 15”。應(yīng)當(dāng)注意，圖5示出了全畫面運動方向為水平的情況下的示例性描繪；如果全畫面運動方向不是水平，則也以相同的方式執(zhí)行描繪。例如，圖6A示出了在全畫面運動方向為垂直的情況下的示例性描繪，圖6B示出了在全畫面運動方向為傾斜的情況下的示例性描繪。輸出設(shè)備接口 I/F 106把從符號描繪塊105提供來的圖像數(shù)據(jù)，即在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)的圖像信號(圖像數(shù)據(jù))，提供給輸出設(shè)備，例如圖像顯示裝置或記錄設(shè)備。例如，利用圖像顯示裝置，顯示在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)。利用記錄裝置，每個場景的符號描繪的代表圖像的圖像信號以與在圖像輸入塊101中輸入的圖像信號的每個場景相關(guān)的方式被記錄到記錄介質(zhì)。圖像處理裝置的示例性操作下面描述圖1所示的圖像處理裝置100的示例性操作。在圖像輸入塊101中輸入要處理的圖像信號。這個要處理的圖像信號例如是通過利用成像設(shè)備(相機)拍攝被攝物而獲得的并且是直接從成像設(shè)備或者從預(yù)定的記錄介質(zhì)提供來的。在圖像輸入塊101中，處理輸入的圖像信號以檢測場景改變點，并且按每個場景分割輸入的圖像信號。然后，在圖像輸入塊101中，將每個場景的圖像信號順次提供給代表圖像創(chuàng)建塊102和全畫面運動計算塊103。在代表圖像創(chuàng)建塊102、全畫面運動計算塊103、累積數(shù)計算塊104和符號描繪塊 105中，每個場景被順次設(shè)定成要處理的場景(預(yù)定場景)并被處理。更具體而言，在代表圖像創(chuàng)建塊102中，處理預(yù)定場景的圖像信號，創(chuàng)建通過鏈接構(gòu)成此預(yù)定場景的各個畫面 (幀)的圖像而獲得的并集圖像，并且將所創(chuàng)建的并集圖像設(shè)定成該預(yù)定場景的代表圖像。在全畫面運動計算塊103中，處理預(yù)定場景的圖像信號并且計算此預(yù)定場景中的每個畫面的全畫面運動(運動向量)。這樣計算出的預(yù)定場景中的每個畫面的全畫面運動被提供給累積數(shù)計算塊104。在累積數(shù)計算塊104中，基于預(yù)定場景中的每個畫面的全畫面運動來計算預(yù)定場景中的每個畫面的累積數(shù)和總值(參考圖2)。在累積數(shù)計算塊104中計算出的預(yù)定場景中的每個畫面的累積數(shù)和總值被提供給符號描繪塊105。在代表圖像創(chuàng)建塊102中創(chuàng)建的代表圖像(并集圖像)的圖像信號(圖像數(shù)據(jù))也被提供給符號描繪塊105。在此符號描繪塊105中，基于預(yù)定場景中的每個畫面的累積數(shù)在代表圖像(并集圖像)的邊緣上描繪指示全畫面運動的符號(參考圖4)。在此情況下，在累積數(shù)為1的畫面中，在代表圖像(并集圖像)的與該畫面相對應(yīng)的位置處描繪普通符號作為符號。在累積數(shù)為2或更大的畫面中，在代表圖像(并集圖像) 的與該畫面相對應(yīng)的位置處描繪累積符號作為符號。另外，在末尾畫面中，在與該畫面相對應(yīng)的位置處描繪末尾符號作為符號，并且還相應(yīng)地描繪累積數(shù)。在符號描繪塊105中，對于每個場景獲得了在邊緣上描繪有指示總畫面運動的符號的代表圖像(并集圖像)的圖像信號(圖像數(shù)據(jù))。所獲得的圖像信號(圖像數(shù)據(jù))被提供給輸出設(shè)備接口 I/F 106。在輸出設(shè)備接口 I/F 106中，從符號描繪塊105提供來的圖像信號，即在邊緣上描繪有指示全畫面運動的符號的代表圖像的圖像信號(圖像數(shù)據(jù))，被提供給輸出設(shè)備，例如圖像顯示裝置或記錄裝置。結(jié)果，在例如圖像顯示裝置中，顯示了在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)。在例如記錄裝置中，每個場景的描繪有符號的代表圖像的圖像信號以與在圖像輸入塊101中輸入的圖像信號的每個場景相關(guān)的方式被記錄到記錄介質(zhì)。如上所述，在圖1所示的圖像處理裝置100中，預(yù)定場景的圖像信號被代表圖像創(chuàng)建塊102處理并且互連了構(gòu)成此預(yù)定場景的各個畫面的圖像的并集圖像被創(chuàng)建作為代表圖像。此外，預(yù)定場景的圖像信號被全畫面運動計算塊103處理并且此預(yù)定場景中的每個畫面的全畫面運動被計算。另外，基于計算出的預(yù)定場景中的每個畫面的全畫面運動，預(yù)定場景中的每個畫面的累積數(shù)被累積數(shù)計算塊104計算。然后，指示全畫面運動的符號(普通符號、累積符號和末尾符號)被符號描繪塊 105基于計算出的預(yù)定場景中的每個畫面的累積數(shù)描繪在由代表圖像創(chuàng)建塊102創(chuàng)建的代表圖像(并集圖像)的邊緣上。因此，上述配置使得不僅可以了解場景中的整個圖像，而且還可以了解場景中的每個畫面。即，上述配置使得用戶不僅可以看到在場景中“顯示了什么”，而且還可以概覽到“如何顯示了什么”?，F(xiàn)有技術(shù)的縮略圖方案僅提供了使得可以了解顯示了什么的表現(xiàn)能力。應(yīng)當(dāng)注意，在被制作得特別擁擠的圖像的情況下，指示出“特定的對象是以何種圖像表現(xiàn)方式來顯示的”的時間性情境對于想要使用對象圖像作為工作素材的觀眾和用戶來說也是重要的信息。例如，取通過搖攝同一橫長式場景而獲得的兩個圖像。在沒有一幀的積累、連續(xù)拍攝的圖像和通過在開頭和結(jié)尾處將相機停止四秒而拍攝的圖像之間，這些圖像的應(yīng)用將是很不同的。如上所述，在每個場景的代表圖像(并集圖像)的邊緣上描繪指示全畫面運動的符號(普通符號、累積符號和末尾符號)。這有助于用戶很容易地訪問到用戶想要看到或用作素材的圖像。結(jié)果，上述配置使得不僅可以瀏覽圖像并且將圖像用作創(chuàng)作時的代表圖像， 而且還可以將圖像用作作為圖像搜索的結(jié)果的代表圖像。此外，在構(gòu)造兩個或更多個圖像之間的關(guān)系時，上述配置使得可以基于有關(guān)“如何表現(xiàn)圖像”的內(nèi)容的新元數(shù)據(jù)來賦予關(guān)系。這也為圖像搜索算法做出了貢獻。從而，向用戶
13可視地呈現(xiàn)出關(guān)于兩個或更多個圖像之間的關(guān)系的新指標(biāo)對于搜索目標(biāo)圖像的搜索應(yīng)用也是有利的。應(yīng)當(dāng)注意，在圖1所示的圖像處理裝置100中，符號描繪塊105在累積數(shù)為1的畫面中描繪普通符號并且在累積數(shù)為2或更大的畫面中描繪累積符號(參考圖4)。然而，概括來說，普通符號可被描繪在累積數(shù)為1至N(N是等于或大于1的整數(shù))的畫面中，并且累積符號可被描繪在累積數(shù)大于N的畫面中。在此情況下，用戶可以通過用戶操作塊(未示出)來根據(jù)需要設(shè)定N的值。另外，在圖1所示的圖像處理裝置100中，符號描繪塊105被配置為基于預(yù)定場景中的每個畫面的累積數(shù)來描繪指示全畫面運動的符號(普通符號、累積符號和末尾符號)， 其中累積數(shù)是由累積數(shù)計算塊104計算出的。然而，如下配置也是可能的即，例如，普通符號被描繪在與每個畫面相對應(yīng)的位置處，以便指示出場景中的每個畫面的運動。在此情況下，符號描繪塊105可以通過直接使用由全畫面運動計算塊103計算出的預(yù)定場景中的每個畫面的全畫面運動來執(zhí)行符號描繪。另外，在圖1所示的圖像處理裝置100中，符號描繪塊105與累積符號和末尾符號的每個描繪位置相對應(yīng)地描繪累積數(shù)。然而，并非總是必須這樣描繪累積數(shù)。累積數(shù)計算的另一示例在以上描述中，累積數(shù)計算塊104被配置為基于由全畫面運動計算塊103計算出的預(yù)定場景中的每個畫面的全畫面運動來計算每個畫面的累積數(shù)。然而，如果以元數(shù)據(jù)的形式準(zhǔn)備了關(guān)于每個畫面的全畫面運動，則累積數(shù)計算塊104可以使用此信息來計算每個畫面的累積數(shù)。在此情況下，例如，關(guān)于每個畫面的全畫面運動的信息被從圖像輸入塊101 提供到累積數(shù)計算塊104，從而無需全畫面運動計算塊103。在上述實施例中，累積數(shù)計算塊104通過判定當(dāng)前幀的全畫面運動Mv是否為0來判定積累的存在。然而，圖像可能是在未使用三腳架的情況下拍攝的，或者是利用低質(zhì)量的三角腳拍攝的，或者曾被降頻轉(zhuǎn)換或升頻轉(zhuǎn)換。在此情況下，從拍攝者的意圖或者觀眾的感覺來看，可能認(rèn)為“積累是存在的”。然而，對于全畫面運動可能計算出略微不同于0的值， 從而最終判定沒有積累。為了克服此問題，可以通過定義全畫面運動Mv的總值為積累偏差A(yù)mv并且判定此積累偏差A(yù)mv是否在閾值內(nèi)來判定積累的存在。此配置使得可以判定從觀眾的感覺來看可能認(rèn)為積累的畫面確實是積累的。圖7所示的流程圖指示出在此情況下累積數(shù)計算塊104 的示例性處理過程。在步驟ST41中，累積數(shù)計算塊104開始處理，然后轉(zhuǎn)到步驟ST42的處理。在步驟 ST42中，累積數(shù)計算塊104將累積計數(shù)器C的值設(shè)定到0，將全畫面運動Mv的總值(累積運動量)T設(shè)定到0，并且將積累偏差A(yù)mv設(shè)定到0。然后，在步驟ST43中，累積數(shù)計算塊104 將處理幀(處理畫面)設(shè)定成第一幀(第一畫面)。接下來，在步驟ST44中，累積數(shù)計算塊104判定處理幀是否是最末幀(最末畫面)。如果發(fā)現(xiàn)處理幀不是最末幀，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST45的處理。在步驟 ST45中，累積數(shù)計算塊104將當(dāng)前幀的全畫面運動Mv加到總值T以獲得當(dāng)前幀中的總值 T，并將所獲得的總值T記錄為當(dāng)前幀的總值。另外，在步驟ST45中，累積數(shù)計算塊104把全畫面運動Mv加到積累偏差A(yù)mv，以更新積累偏差A(yù)mv。
接下來，在步驟ST46中，累積數(shù)計算塊104判定是否存在積累。這里，累積數(shù)計算塊104通過判定積累偏差A(yù)mv是否在閾值內(nèi)來判定是否存在積累。S卩，如果發(fā)現(xiàn)Amv在閾值內(nèi)，則累積數(shù)計算塊104判定存在積累；如果發(fā)現(xiàn)Amv超過閾值，則累積數(shù)計算塊104判定不存在積累。如果發(fā)現(xiàn)積累，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST47的處理。在步驟ST47中，累積數(shù)計算塊104將累積計數(shù)器C的值遞增1，同時當(dāng)前幀的累積數(shù)為0。另外，在步驟ST47中， 累積數(shù)計算塊104記錄積累偏差A(yù)mv的最大和最小值。這個記錄的信息提供了指示出當(dāng)沒有發(fā)現(xiàn)積累時積累偏差A(yù)mv是多少的信息(元數(shù)據(jù))。例如，基于此信息，可以適應(yīng)性地改變閾值。另一方面，如果未發(fā)現(xiàn)積累，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST48的處理。在步驟 ST48中，累積數(shù)計算塊104把上一個幀(一個畫面)的累積數(shù)設(shè)定成累積計數(shù)器C的值并且將當(dāng)前幀的累積數(shù)設(shè)定到1。然后，在步驟ST49中，累積數(shù)計算塊104把累積計數(shù)器C的值設(shè)定到1，并且將積累偏差A(yù)mv重置到0。在步驟ST47的處理和步驟ST49的處理之后，累積數(shù)計算塊104轉(zhuǎn)到步驟ST50的處理。在步驟ST50中，累積數(shù)計算塊104把處理幀設(shè)定成下一幀，然后返回到步驟ST44的處理。如果在步驟ST44中處理幀是最末幀，則累積數(shù)計算塊104轉(zhuǎn)到步驟ST51的處理。 在步驟ST51中，累積數(shù)計算塊104把當(dāng)前幀(=最末幀)的累積數(shù)設(shè)定成累積計數(shù)器C的值。此外，在步驟ST51中，累積數(shù)計算塊104將當(dāng)前幀的全畫面運動Mv加到總值T以獲得當(dāng)前幀中的總值T，并且記錄所獲得的總值T。然后，累積數(shù)計算塊104在步驟ST52中結(jié)束處理。應(yīng)當(dāng)注意，在上述配置中，是通過判定作為全畫面運動Mv的總值的積累偏差A(yù)mv 是否在閾值內(nèi)來判定積累的存在的。另外，還可以通過判定每個畫面(每個幀)的全畫面運動Mv是否在閾值內(nèi)來判定該畫面中是否存在積累。在此情況下，如果發(fā)現(xiàn)積累，也記錄全畫面運動Mv的最大和最小值。這個記錄的信息提供了指示出在沒有發(fā)現(xiàn)積累的情況下全畫面運動Mv的程度的全畫面運動Mv的行為信息(元數(shù)據(jù))。例如，可以基于此信息來適應(yīng)性地改變閾值。符號描繪處理的另一示例在以上描述中，使用了全畫面運動在一個方向上的示例。然而，有可能全畫面運動是在兩個或更多個方向上發(fā)生的。例如，有可能每個畫面先在正方向上移動，然后在反方向上移動，就好像先向右搖攝然后又返回向左搖攝的情況那樣。在這種情況下，與全畫面運動方向為正方向(第一方向)的每個畫面相對應(yīng)的符號描繪位置和與反方向(第二方向)的每個畫面相對應(yīng)的符號描繪位置例如在與正方向和反方向正交的方向上被偏移。結(jié)果，指示出這些方向上的全畫面運動的符號不會相互重疊，從而增強了符號的可見性。此外，在此情況下，因為如果只有末尾符號則可能難以理解圖像的運動，所以向累積符號添加指示出積累的順序的符號(累積ID)。圖8所示的流程圖指示出在上述情況下符號描繪塊105要執(zhí)行的示例性處理過程。在步驟ST61中，符號描繪塊105開始處理，然后轉(zhuǎn)到步驟ST62的處理。在步驟ST62 中，符號描繪塊105取得全畫面運動方向。例如，運動方向是水平、垂直或傾斜。在此情況下，例如，符號描繪塊105基于由全畫面運動計算塊103計算出的每個畫面的全畫面運動 (運動向量)來取得全畫面運動方向。接下來，在步驟ST63中，符號描繪塊105確定符號描繪軸。在此情況下，符號描繪塊105確定符號描繪軸以使該符號描繪軸對應(yīng)于在步驟ST62中獲得的全畫面運動方向。例如，如果全畫面運動方向是水平的，則符號描繪軸被確定在水平方向上。然后，在步驟ST64 中，符號描繪塊105將處理幀(處理畫面)設(shè)定成第一幀(第一畫面)，并且在步驟ST65中將累積ID設(shè)定成1。接下來，符號描繪塊105在步驟ST66中判定處理幀是否是最末幀(最末畫面)。 如果發(fā)現(xiàn)處理幀不是最末幀，則符號描繪塊105在步驟ST67中判定全畫面運動方向是否已從正方向改變到反方向。如果沒有發(fā)現(xiàn)方向改變，則符號描繪塊105轉(zhuǎn)到步驟ST68的處理。 另一方面，如果發(fā)現(xiàn)方向改變，則符號描繪塊105在步驟ST69中使描繪位置向與上述正方向和反方向正交的方向偏移，然后轉(zhuǎn)到步驟ST68的處理。在步驟ST68中，符號描繪塊105判定累積數(shù)是0、1還是2或更大。如果發(fā)現(xiàn)累積數(shù)是0，則符號描繪塊105在步驟ST70將處理幀設(shè)定成下一幀，然后返回到步驟ST66的處理。如果累積數(shù)是1，則符號描繪塊105轉(zhuǎn)到步驟ST71的處理。在步驟ST71中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪普通符號作為符號。接下來，在步驟ST71的處理之后，符號描繪塊105在步驟ST70中將處理幀設(shè)定成下一幀，然后返回到步驟ST66的處理。另外，如果發(fā)現(xiàn)累積數(shù)等于或高于2，則符號描繪塊105轉(zhuǎn)到步驟ST72的處理。在步驟ST72中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪累積符號作為符號。此累積符號例如可在形狀、大小、圖案或顏色方面與上述普通符號區(qū)分開來。而且，在步驟ST72中，符號描繪塊105在與描繪累積符號的位置相對應(yīng)的位置處描繪累積數(shù)。另外，符號描繪塊105在與描繪此累積符號的位置相對應(yīng)的位置處描繪累積 ID作為指示積累的順序的符號，同時將累積ID遞增1。在步驟ST72的處理之后，符號描繪塊105在步驟ST70中將處理幀設(shè)定成下一幀，然后返回到步驟ST66的處理。如果在步驟ST66中發(fā)現(xiàn)處理幀是最末幀，則符號描繪塊105轉(zhuǎn)到步驟ST73的處理。在步驟ST73中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(最末幀)相對應(yīng)的位置處描繪末尾符號作為符號。此末尾符號可在形狀、大小、圖案或顏色方面與上述普通符號和累積符號區(qū)分開來。另外，在步驟ST73中，符號描繪塊105在與描繪末尾符號的位置相對應(yīng)的位置處描繪累積數(shù)。此外，符號描繪塊105在與描繪此末尾符號的位置相對應(yīng)的位置處描繪累積 ID作為指示積累的順序的符號。然后，在步驟ST73的處理之后，符號描繪塊105在步驟 ST74中結(jié)束處理。參考圖9，其中示出了每個符號、累積數(shù)和累積ID的示例性描繪。應(yīng)當(dāng)注意，在此描繪示例中，每個符號是由線段表現(xiàn)的。在此示例中，每個累積ID是由帶圓的數(shù)字表現(xiàn)的。 累積ID被描繪為帶圈的1的描繪位置是第一累積位置?？梢灾獣栽诖宋恢锰幏e累了 10個畫面(幀)。累積ID被描繪為帶圈的2的描繪位置是第二累積位置。可以看出在此位置處積累了 15個畫面(幀)。
然后，全畫面運動方向從正向改變成反向。因此，符號描繪位置被偏移。在此示例中，全畫面運動方向改變到反方向后的符號描繪位置在相反一側(cè)。帶圈的3被描繪為累積 ID的末尾符號描繪位置是最末畫面(最末幀)的位置?？梢钥闯鲈诖宋恢梅e累了 15個畫面(幀)。參考圖10A，其中示出了每個符號、累積數(shù)和累積ID的另一示例性描繪。此示例性描繪與圖9所示的示例性描繪基本相同。在此示例中，全畫面運動方向從反方向改變后的符號描繪位置是在同一側(cè)垂直偏移的位置。圖IOB示出了每個符號、累積數(shù)和累積ID的另一示例性描繪。此示例性描繪與圖9所示的示例性描繪基本相同。在此示例中，全畫面運動方向改變到反方向后的符號描繪位置也是在同一側(cè)垂直偏移的位置。然而，與圖IOA所示的示例性描繪的不同在于正方向的符號描繪位置和反方向的符號描繪位置被交換了。應(yīng)當(dāng)注意，在圖9和圖10所示的示例性描繪中，每個累積ID由帶圈的數(shù)字指示。 然而，除了使用帶圈的數(shù)字以外，使用自明的字符，例如A、B、C...或者等同的日本字符，或明確指示出運動方向的符號，例如顛倒的三角，也是可行的。在上述示例中，符號描繪軸在一個方向上。然而，一開始就將全畫面運動進行向量分解到水平方向和垂直方向上，以在每個向量方向上描繪符號，也是可行的。圖11示出了此方法執(zhí)行的示例性描繪。在此示例性描繪中，全畫面運動方向是從左上方向到右下方向的傾斜直線。此方法也可應(yīng)用到在改變水平方向與垂直方向之間的運動速度比時方向半途改變的情況。另外，在上述示例中，如圖5、6A、6B、9至11所示，指示全畫面運動的符號是線段。 然而，除了線段指示以外，使用數(shù)字、如圖12A所示的符號、如圖12B所示的圖形形狀、如圖 12C所示的灰度層次、或者顏色，也是可行的。符號描繪處理的另一示例在上述示例中，符號描繪塊105描繪的每個普通符號是由相同長度的線段來指示的。這里，考慮了使每個普通符號的長度為與每個畫面的全畫面運動相對應(yīng)的長度。在此情況下，在預(yù)定的畫面上描繪的普通符號的長度h為H*Mv/Mvmax，其中H是輸出設(shè)備的邊緣上的顯示區(qū)域的與全畫面運動的方向(全畫面運動方向)正交的方向上的長度，Mvmax是全畫面運動中的最大運動，并且Mv是每個畫面的全畫面運動。圖13所示的流程圖指示出在上述情況下符號描繪塊105要執(zhí)行的示例性過程。在圖13中，與圖4所示的步驟類似的步驟被用相同的編號來表示，并且對其的詳細描述將被跳過。在圖13所示的流程圖中，取代圖4所示的流程圖中的步驟SD8，插入了步驟SD8A。在步驟SD8A中，如果累積數(shù)是1，則符號描繪塊105轉(zhuǎn)到步驟SD8A的處理。在步驟SD8A中，符號描繪塊105在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪普通符號作為符號。在此情況下，符號描繪塊105如上所述把要描繪的普通符號的長度h設(shè)定成H*Mv/Mvmax，從而使得長度h等于與當(dāng)前幀的全畫面運動Mv的大小相對應(yīng)的長度。在步驟SD8A的處理之后，符號描繪塊105在步驟ST27中將處理幀設(shè)定成下一幀，然后返回到步驟ST25的處理。應(yīng)當(dāng)注意，雖然跳過了詳細描述，但圖13所示的流程圖中的其他步驟與圖4所示的流程圖中的相應(yīng)步驟是大體相同的。圖14A示出了圖13所示的流程圖中的符號描繪處理所進行的示例性描繪。在此描繪示例中，構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目是40個，并且每個幀(每個畫面)的累積數(shù)和總值如圖3所示。在此描繪示例中，與圖5所示的上述描繪示例不同，每個普通符號的長度是與全畫面運動的大小相對應(yīng)的長度。圖14B示出了圖14A所示的符號部分的擴展視圖。如上所述，每個普通符號的長度是H*Mv/Mvmax，從而描繪在全畫面運動中的最大運動 Mvmax的畫面上的每個普通符號的長度h是H。圖15也示出了圖13所示的最末幀中的符號描繪處理所進行的示例性描繪。在此描繪示例中，構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目是400個。在此情況下，要描繪的普通符號如圖所示很擁擠的(或者說處于填滿狀態(tài))。然而，因為每個普通符號的長度是與全畫面運動的大小相對應(yīng)的長度，所以通過包絡(luò)線可以了解每個畫面的全畫面運動的大致趨勢，雖然可能看不到畫面的精細運動。如上所述，執(zhí)行圖13所示的流程圖中描述的符號描繪處理使得在每個畫面中描繪的每個普通符號的長度對應(yīng)于該畫面的全畫面運動，從而增加了該普通符號所指示的信息量。另一示例性符號描繪處理在上述示例中，在符號描繪塊105中，在所有累積數(shù)為1(概括來說是累積數(shù)為1 至N(N為等于或大于1的整數(shù)))的畫面中描繪普通符號。然而，這可能使得描繪出的普通符號太擁擠，從而導(dǎo)致普通符號的重疊顯示。為了避免此問題，考慮了這樣一種方法其中， 判定所描繪的符號之間的鄰近度，并且根據(jù)此判定的結(jié)果來改變描繪普通符號的方式。2.第二實施例圖像處理裝置的示例性配置參考圖16，其中示出了作為本發(fā)明第二實施例實現(xiàn)的圖像處理裝置100B的示例性配置。圖像處理裝置100B具有圖像輸入塊101、代表圖像創(chuàng)建塊102、全畫面運動計算塊 103、累積數(shù)計算塊104、符號描繪塊105B、輸出設(shè)備接口 I/F 106以及疏化數(shù)計算塊108。 參考圖16，與先前在圖1中描述的組件類似的組件被用相同的標(biāo)號來表示，并且對其的詳細描述被跳過。例如，計算顯示區(qū)域中彼此最接近的符號之間的距離d，以基于所獲得的距離d來判定符號之間的鄰近度。距離d是按照以下式(1)，通過使用畫面的全畫面運動方向上的長度S、全畫面運動的總值T、當(dāng)在全畫面運動中沒有積累時的最小運動Vmin以及輸出設(shè)備中的代表圖像的顯示區(qū)域的全畫面運動方向上的長度W，來計算的。圖17示出了長度S、總值 T和長度W之間的對應(yīng)關(guān)系。d = W*Vmin/(S+T) . . . (1)在符號描繪塊105B中，考慮對于預(yù)定數(shù)目的畫面描繪普通符號，使得顯示區(qū)域中彼此最接近的符號之間的距離d超過預(yù)定值。在此情況下，普通符號在被描繪之前被疏化。 圖18所示的流程圖示出了在此情況下被配置為獲得疏化數(shù)η的疏化數(shù)計算塊108要執(zhí)行的處理過程的一個示例。在步驟ST41中，疏化數(shù)計算塊108開始處理，然后轉(zhuǎn)到步驟ST42的處理。在步驟 ST42中，疏化數(shù)計算塊108獲得全畫面運動方向。例如，運動方向可以是水平的、垂直的或傾斜的。在此情況下，例如，疏化數(shù)計算塊108基于由全畫面運動計算塊103計算出的每個畫面的全畫面運動(運動向量)來獲得全畫面運動方向。
接下來，在步驟ST43中，疏化數(shù)計算塊108確定符號描繪軸。在此情況下，符號描繪塊105B確定符號描繪軸以使得符號描繪軸對應(yīng)于在步驟ST42中獲得的全畫面運動方向。例如，如果全畫面運動方向是水平的，則符號描繪軸被確定在水平方向上。接下來，疏化數(shù)計算塊108獲得顯示框的大小W，即上述的輸出設(shè)備中的代表圖像的顯示區(qū)域中的全畫面運動方向上的長度W。關(guān)于此長度W的信息是由用戶操作給出的或者通過輸出設(shè)備接口 I/F 106從輸出設(shè)備自動獲得的。接下來，在步驟ST45中，疏化數(shù)計算塊108將幀合計數(shù)η設(shè)定到1。然后，在步驟 ST46中，符號描繪塊105Β針對合計數(shù)后的幀的最小運動Vmin，通過上述式(1)來計算距離 d。然后，在步驟ST47中，疏化數(shù)計算塊108判定這個計算出的距離d是否是使得可以辨別描繪符號的值(例如2)。如果距離d小于描繪符號的大小，則用戶可以難以識別出描繪的符號。如果距離d是使得可以辨別描繪符號的值，則疏化數(shù)計算塊108轉(zhuǎn)到步驟ST48中符號描繪塊105B的處理。另一方面，如果距離d是使得不可以辨別描繪符號的值，則疏化數(shù)計算塊108轉(zhuǎn)到步驟ST49的處理。在步驟ST49中，疏化數(shù)計算塊108將幀合計數(shù)η遞增1。然后，在步驟ST50中，疏化數(shù)計算塊108對于每η幀合計全畫面運動，然后返回到步驟ST46的處理。圖19所示的流程圖示出了圖18所示的流程圖的步驟ST48的符號描繪處理。在步驟ST51中，符號描繪塊105Β開始處理，然后轉(zhuǎn)到步驟ST52的處理。在步驟ST52中，符號描繪塊105Β將處理幀(處理畫面)設(shè)定成第一幀(第一畫面)。即，符號描繪塊105Β將處理的幀號碼k設(shè)定成0。同時，符號描繪塊105B顯示疏化數(shù)η。接下來，在步驟ST53中，符號描繪塊105Β判定處理幀是否是最末幀(最末畫面)。 如果發(fā)現(xiàn)處理幀不是最末幀，則符號描繪塊105Β轉(zhuǎn)到步驟STM的處理。在步驟STM中， 符號描繪塊105Β判定累積數(shù)是0、1還是2或更大。如果發(fā)現(xiàn)累積數(shù)是0，則符號描繪塊105Β不描繪符號，在步驟ST55中將處理幀設(shè)定成下一幀，然后返回到步驟ST53的處理。如果發(fā)現(xiàn)累積數(shù)是1，則符號描繪塊105Β轉(zhuǎn)到步驟ST56的處理。在步驟ST56中，符號描繪塊105Β判定當(dāng)前幀號碼k是否是η的倍數(shù)。如果發(fā)現(xiàn)當(dāng)前幀號碼k是η的倍數(shù)，則符號描繪塊105Β轉(zhuǎn)到步驟ST57的處理。在步驟ST57中，符號描繪塊105Β在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪普通符號作為符號。接下來，在步驟ST57的處理之后，符號描繪塊105Β在步驟ST55中將處理幀設(shè)定成下一幀，然后返回到步驟ST53的處理。另一方面，如果發(fā)現(xiàn)當(dāng)前幀號碼k不是η的倍數(shù)，則符號描繪塊105Β在步驟ST55中將處理幀設(shè)定成下一幀，并且返回到步驟ST53的處理。結(jié)果，每η幀執(zhí)行一次普通符號的描繪，從而疏化了符號。如果在步驟STM中發(fā)現(xiàn)累積數(shù)是2或更大，則符號描繪塊105Β轉(zhuǎn)到步驟ST58的處理。在步驟ST58中，符號描繪塊105Β在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面) 相對應(yīng)的位置處描繪累積符號作為符號。此累積符號可在形狀、大小、圖案或顏色方面與上述普通符號區(qū)分開來。此外，在步驟ST58中，符號描繪塊105Β還在與描繪累積符號的位置相對應(yīng)的位置處描繪累積數(shù)。然后，在步驟ST58的處理之后，符號描繪塊105Β在步驟ST53中將處理幀設(shè)定成下一幀，然后返回到步驟ST53的處理。
如果在步驟ST53中發(fā)現(xiàn)處理幀是最末幀，則符號描繪塊105B轉(zhuǎn)到步驟ST59的處理。在步驟ST59中，符號描繪塊105B在代表圖像(并集圖像)的與當(dāng)前幀(最末幀)相對應(yīng)的位置處描繪末尾符號作為符號。此末尾符號可在形狀、大小、圖案或顏色方面與上述普通符號和累積符號區(qū)分開來。此外，在步驟ST59中，符號描繪塊105B還在與描繪末尾符號的位置處描繪累積數(shù)。然后，在步驟ST59的處理之后，符號描繪塊105B在步驟ST60中結(jié)束處理。參考圖20，其中示出了圖18和圖19所示的流程圖中的符號描繪處理所進行的示例性描繪。在此描繪示例中，構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目是400，并且η = 10。從而， 執(zhí)行圖18和圖19的流程圖中所示的符號描繪處理在描繪之前疏化普通符號。因此，如果輸出設(shè)備上代表圖像的顯示大小相對較小，則所描繪的普通符號不會太擁擠，以防止對全畫面運動的了解變得困難。應(yīng)當(dāng)注意，在圖18所示的流程圖中描述的處理中，從1起改變η，直到距離d變成在該距離下可以相互辨別描繪的符號的值為止，從而獲得與疏化比率相關(guān)的η的最終值。 然而，獲得η的值的方法并不限于上述方法。例如，簡單地，η的值可以是與d的倒數(shù)Ι/d接近的整數(shù)。例如，取代從1起改變n，可以通過從接近d的倒數(shù)Ι/d的整數(shù)值起增大或減小 η來獲得η的最終值。另一示例性符號描繪處理在圖19所示的流程圖中描述的處理中，符號描繪塊105描繪的普通符號是由相同長度的線段來表現(xiàn)的。然而，將普通符號的這個長度設(shè)定成與每個畫面的全畫面運動相對應(yīng)的長度，也是可行的。在此情況下，在預(yù)定畫面上描繪的普通符號的長度h為H*Mv/ Mvmax，其中H是輸出設(shè)備的邊緣上的顯示區(qū)域的與全畫面運動的方向正交的方向上的長度，Mvmax是全畫面運動中的最大運動，并且Mv是每個畫面的全畫面運動。圖21所示的流程圖指示出在此情況下符號描繪塊105B要執(zhí)行的示例性處理過程。參考圖21，與先前參考圖19描述的步驟相對應(yīng)的步驟被用相同的標(biāo)號來表示，并且對其的詳細描述被跳過。在圖21所示的流程圖中，取代圖19所示的流程圖中的步驟ST57，插入了步驟ST57A。如果在步驟ST56中發(fā)現(xiàn)幀號碼k是η的倍數(shù)，則符號描繪塊105Β轉(zhuǎn)到步驟ST57A 的處理。在步驟ST57A中，符號描繪塊105Β在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪普通符號作為符號。在此情況下，符號描繪塊105Β如上所述把要描繪的普通符號的長度h設(shè)定成H*Mv/Mvmax，以使得此長度對應(yīng)于當(dāng)前幀的全畫面運動的大小Mv0在步驟ST57A的處理之后，符號描繪塊105B在步驟ST55中將處理幀設(shè)定成下一幀，然后返回到步驟ST53的處理。應(yīng)當(dāng)注意，雖然跳過了細節(jié)，但圖21所示的流程圖中的其他步驟與圖19所示的流程圖中的步驟是基本相同的。參考圖22，其中示出了根據(jù)圖21所示的流程圖的符號描繪處理所進行的示例性描繪。在此描繪示例中，構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目是400個，并且η = 10。從而， 執(zhí)行圖21的流程圖中所示的符號描繪處理在描繪之前疏化普通符號。因此，如果輸出設(shè)備上代表圖像的顯示大小相對較小，則所描繪的普通符號不會太擁擠，以防止對全畫面運動的了解變得困難。此外，執(zhí)行圖21所示的流程圖所規(guī)定的符號描繪處理使得每次幀號碼k是η的倍數(shù)時描繪的普通符號的長度對應(yīng)于該畫面的全畫面運動，從而增加了此普通符號所指示的信息量。另一示例性符號描繪處理在圖19所示的流程圖所描述的上述處理中，在幀號碼k為η的倍數(shù)的畫面中描繪普通符號；然而，在其他畫面中，則不描繪普通符號。然而，考慮在幀號碼k為η的倍數(shù)的畫面中，可以用深色調(diào)來描繪每個普通符號，而在其他畫面中，則可以用淺色調(diào)來描繪每個普通符號。圖23所示的流程圖指示出在上述情況下符號描繪塊105Β要執(zhí)行的示例性處理過程。參考圖23，與先前參考圖21描述的步驟相對應(yīng)的步驟被用相同的標(biāo)號來表示，并且對其的詳細描述被跳過。在圖23所示的流程圖中，取代圖21所示的流程圖的步驟ST57A，插入了步驟ST57B。此外，添加步驟ST61作為在幀號碼k不是η的倍數(shù)時要執(zhí)行的處理步驟。如果在步驟ST56中發(fā)現(xiàn)幀號碼k是η的倍數(shù)，則符號描繪塊105Β轉(zhuǎn)到步驟ST57B 的處理。在步驟ST57B中，符號描繪塊105Β在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪深色調(diào)普通符號作為符號。在此情況下，符號描繪塊105Β如上所述把要描繪的普通符號的長度h設(shè)定成H*Mv/Mvmax，從而使得此長度對應(yīng)于當(dāng)前幀的全畫面運動的大小Mv。在步驟ST57B的處理之后，符號描繪塊105Β在步驟ST55中將處理幀設(shè)定成下一幀，然后返回到步驟ST53的處理。如果在步驟ST56中發(fā)現(xiàn)幀號碼k不是η的倍數(shù)，則符號描繪塊105Β轉(zhuǎn)到步驟ST61 的處理。在步驟ST61中，符號描繪塊105Β在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置處描繪淺色調(diào)的普通符號作為符號。在此情況下，符號描繪塊105Β如上所述把要描繪的普通符號的長度h設(shè)定成H*Mv/Mvmax，從而使得此長度對應(yīng)于當(dāng)前幀的全畫面運動的大小Mv。在步驟ST61的處理之后，符號描繪塊105B在步驟ST55中將處理幀設(shè)定成下一幀，然后返回到步驟ST53的處理。應(yīng)當(dāng)注意，雖然跳過了細節(jié)，但圖23所示的流程圖中的其他步驟與圖21所示的流程圖中的步驟是基本相同的。參考圖24，其中示出了根據(jù)圖23所示的流程圖的符號描繪處理所執(zhí)行的示例性描繪。在此描繪示例中，構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目是400個，并且η = 10。從而， 在根據(jù)圖23所示的流程圖的符號描繪處理中，以深色調(diào)描繪的普通符號被疏化。因此，如果輸出設(shè)備上代表圖像的顯示大小相對較小，則所描繪的普通符號不會太擁擠，以防止對全畫面運動的了解變得困難。此外，在此情況下，在每個畫面中描繪的每個普通符號的長度對應(yīng)于該畫面的全畫面運動，從而增加了此普通符號所指示的信息量。3.第三實施例圖像處理裝置的示例性配置參考圖25，其中示出了作為本發(fā)明第三實施例實現(xiàn)的圖像處理裝置100Α的示例性配置。圖像處理裝置100Α具有圖像輸入塊101、代表圖像創(chuàng)建塊102、全畫面運動計算塊 103、累積數(shù)計算塊104、符號描繪塊105Α、輸出設(shè)備接口(I/F) 106以及勻速數(shù)計算塊107。 參考圖25，與先前參考圖1描述的組件類似的組件被用相同的標(biāo)號來表示，并且對其的詳細描述被適當(dāng)跳過。圖像輸入塊101把要處理的圖像信號輸入到圖像處理裝置100Α中。這個要處理的圖像信號例如是通過利用成像設(shè)備(相機)拍攝被攝物而獲得并直接從該成像設(shè)備(相機)提供來的，或者是從預(yù)定的記錄介質(zhì)提供來的。在圖像輸入塊101中，處理輸入的圖像信號以檢測場景改變點，并且按每個場景分割經(jīng)處理的圖像信號。然后，每個場景的圖像信號被順次提供到代表圖像創(chuàng)建塊102和全畫面運動計算塊103。代表圖像創(chuàng)建塊102、全畫面運動計算塊103、累積數(shù)計算塊104、勻速數(shù)計算塊 107和符號描繪塊105A順次執(zhí)行每個場景的處理。下面以要被處理的場景作為預(yù)定場景來描述每個上述塊要執(zhí)行的處理。代表圖像創(chuàng)建塊102處理預(yù)定場景的圖像信號，創(chuàng)建通過鏈接構(gòu)成該預(yù)定場景的畫面(幀)的圖像而獲得的并集圖像，并且將所獲得的并集圖像設(shè)定成該預(yù)定場景的代表圖像。全畫面運動計算塊103處理預(yù)定場景的圖像信號以計算此預(yù)定場景中的每個畫面的全畫面運動(運動向量)。累積數(shù)計算塊104基于由全畫面運動計算塊103計算出的預(yù)定場景中的每個畫面的全畫面運動來計算每個畫面的累積數(shù)(參考圖 2和圖7)。勻速數(shù)計算塊107基于由全畫面運動計算塊103計算出的預(yù)定場景中的每個畫面的全畫面運動來計算每個畫面的勻速數(shù)。勻速數(shù)計算處理圖沈所示的流程圖指示出勻速數(shù)計算塊107要執(zhí)行的示例性處理過程。在步驟 ST71中，勻速數(shù)計算塊107開始處理，然后轉(zhuǎn)到步驟ST72的處理。在步驟ST72中，勻速數(shù)計算塊107把勻速計數(shù)器C的值設(shè)定到0，并且把運動差異小計AD的值設(shè)定到0。然后，在步驟ST73中，勻速數(shù)計算塊107把處理幀(處理畫面)設(shè)定成第一幀(第一畫面)。接下來，在步驟ST74中，勻速數(shù)計算塊107判定處理幀是否是最末幀(最末畫面)。如果發(fā)現(xiàn)處理幀不是最末幀，則勻速數(shù)計算塊107轉(zhuǎn)到步驟ST75的處理。在步驟 ST75中，勻速數(shù)計算塊107從當(dāng)前幀的全畫面運動中減去先前幀的全畫面運動，以計算當(dāng)前幀的全畫面運動差異小計AD。另外，勻速數(shù)計算塊107將全畫面運動差異D加到運動差異小計AD，以獲得當(dāng)前幀中的運動差異小計AD。接下來，在步驟ST76中，勻速數(shù)計算塊107判定是否存在勻速。這里，勻速數(shù)計算塊107通過判定運動差異小計AD是否在閾值范圍內(nèi)來判定是否存在勻速。即，勻速數(shù)計算塊107在AD在閾值范圍內(nèi)的情況下判定存在勻速，而在AD在閾值范圍以外的情況下則判定不存在勻速。如果發(fā)現(xiàn)勻速，則勻速數(shù)計算塊107轉(zhuǎn)到步驟ST77的處理。在步驟ST77中，勻速數(shù)計算塊107將當(dāng)前幀的勻速數(shù)設(shè)定到0并且將勻速計數(shù)器C的值遞增1。此外，在步驟 ST77中，勻速數(shù)計算塊107記錄運動差異小計AD的最大和最小值。此記錄信息提供了指示出在存在勻速的情況下運動差異小計AD的程度的信息(元數(shù)據(jù))。例如，基于此信息，可以適應(yīng)性地改變閾值。如果在步驟ST76中沒有發(fā)現(xiàn)勻速，則勻速數(shù)計算塊107轉(zhuǎn)到步驟ST78的處理。 在步驟ST78中，勻速數(shù)計算塊107將前一幀(前一畫面)的勻速數(shù)設(shè)定成勻速計數(shù)器C的值并將當(dāng)前幀的勻速數(shù)設(shè)定到1，并且記錄當(dāng)前幀的全畫面運動差異D。然后，在步驟ST79 中，勻速數(shù)計算塊107把勻速計數(shù)器C的值設(shè)定到1，并且將運動差異小計AD重置到0。在步驟ST77的處理和步驟ST79的處理之后，勻速數(shù)計算塊107轉(zhuǎn)到步驟ST80的處理。在步驟ST80中，勻速數(shù)計算塊107把處理幀設(shè)定成下一幀，然后返回到步驟ST74的處理。
如果在步驟ST74中發(fā)現(xiàn)處理幀是最末幀，則勻速數(shù)計算塊107轉(zhuǎn)到步驟ST81的處理。在步驟ST81中，勻速數(shù)計算塊107把當(dāng)前幀(=最末幀)的勻速數(shù)設(shè)定成勻速計數(shù)器C的值。同時，在步驟ST81中，勻速數(shù)計算塊107計算當(dāng)前幀的全畫面運動差異D，并且記錄計算出的全畫面運動差異D。然后，勻速數(shù)計算塊107在步驟ST82中結(jié)束處理。參考圖17，其中示出了當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目是40時，每個幀的全畫面運動Mv，和通過每個幀的這個全畫面運動Mv獲得的累積數(shù)、總值、運動差異和勻速數(shù)的一個示例。累積數(shù)和總值是通過根據(jù)圖2和圖7所示的流程圖執(zhí)行的累積數(shù)計算處理獲得的累積數(shù)和總值。運動差異和勻速數(shù)是通過根據(jù)圖25所示的上述流程圖執(zhí)行的勻速計算處理獲得的運動差異和勻速數(shù)。在此示例中，從幀1到幀10，運動差異D是0，因此判定存在連續(xù)的勻速。在幀11，全畫面運動Mv是50，并且運動差異D是50，因此判定不存在勻速。因此，從幀1到幀9的勻速數(shù)被判定為0，而在幀10的勻速數(shù)被判定為10。另外，在此示例中，從幀11到幀17的運動差異D是0，因此判定存在連續(xù)的勻速。 在幀18，運動差異D是50，因此判定不存在勻速。因此，從幀11到幀16的勻速數(shù)是0，而在幀17的勻速數(shù)是7。另外，在此示例中，從幀18到幀20的運動差異D是50，因此判定不存在連續(xù)的勻速。因此，從幀18到幀20的勻速數(shù)是1。此外，在此示例中，幀21和幀22的運動差異D是0，因此判定存在連續(xù)的勻速。在幀23，運動差異D是-50，因此判定不存在勻速。因此，幀21的勻速數(shù)是0，而幀22的勻速數(shù)是2。另外，在此示例中，從幀23到幀25的運動差異D是-50，因此判定不存在連續(xù)的勻速。因此，從幀23到幀25的勻速數(shù)是1。另外，在此示例中，從幀沈到幀39的運動差異D 是0，因此判定存在連續(xù)的勻速。因此，從幀27到幀39的勻速數(shù)是0，而幀40的勻速數(shù)是 15。應(yīng)當(dāng)注意，在根據(jù)圖沈所示的流程圖的勻速數(shù)計算處理中，在步驟ST76中對勻速的判定是通過判定運動差異小計AD是否在閾值內(nèi)來執(zhí)行的。然而，通過判定預(yù)定幀中的運動差異D是否在閾值內(nèi)來執(zhí)行對該幀中勻速的存在性的判定，也是可行的。符號描繪塊105Α在由代表圖像創(chuàng)建塊102創(chuàng)建的代表圖像(并集圖像)的邊緣上描繪指示全畫面運動的符號。在此情況下，符號描繪塊105Α基于由累積數(shù)計算塊104計算出的每個畫面的累積數(shù)以及由勻速數(shù)計算塊107計算出的每個畫面的運動差異D和勻速數(shù)來執(zhí)行描繪處理。同時，符號描繪塊105Α把在邊緣上描繪有指示全畫面運動的符號的代表圖像的圖像信號(圖像數(shù)據(jù))提供給輸出設(shè)備接口(I/F)106。符號描繪處理圖28所示的流程圖指示出符號描繪塊105Α要執(zhí)行的示例性處理過程。在步驟 ST91中，符號描繪塊105Α開始處理，然后轉(zhuǎn)到步驟ST92的處理。在步驟ST92中，符號描繪塊105Α獲得全畫面運動方向。例如，運動方向是水平、垂直或傾斜。在此情況下，例如， 符號描繪塊105Α基于由全畫面運動計算塊103計算出的每個畫面的全畫面運動(運動向量)來獲得全畫面運動方向。接下來，在步驟ST93中，符號描繪塊105Α確定符號描繪軸。在此情況下，符號描繪塊105Α確定符號描繪軸以使該符號描繪軸對應(yīng)于在步驟ST92中獲得的全畫面運動方向。 例如，如果全畫面運動方向是水平的，則符號描繪軸被確定在水平方向上。然后，符號描繪塊105Α獲得顯示框的大小W，即上述的輸出設(shè)備中的代表圖像的顯示區(qū)域的全畫面運動方向上的長度W。關(guān)于此長度W的信息是由用戶給出的，或者是通過輸出設(shè)備接口(I/F)106 從輸出設(shè)備自動給出的。接下來，在步驟ST95中，符號描繪塊105A對于幀的最小運動Vmin，按照上述的式 (1)來計算距離d。然后，在步驟ST96中，符號描繪塊105A判定計算出的距離d是否是能夠辨別描繪符號的值(例如2)。如果距離d小于描繪符號的大小，則用戶可能難以識別出所描繪的符號。如果發(fā)現(xiàn)距離d是使得可以辨別描繪符號的值，則符號描繪塊105A轉(zhuǎn)到步驟ST97 的符號描繪處理。對在步驟ST97中要執(zhí)行的符號描繪處理的詳細描述被跳過。此符號描繪處理與圖4、圖8和圖13中所示的流程圖所指示的處理大體相同。如果在步驟ST96中發(fā)現(xiàn)距離d不是使得可以辨別描繪符號的值，則符號描繪塊 105A轉(zhuǎn)到步驟ST98的縮減符號描繪的處理。圖四所示的流程圖指示根據(jù)圖觀所示流程圖要執(zhí)行的步驟ST98的縮減符號描繪處理。在步驟STlOl中，符號描繪塊105A開始處理，然后轉(zhuǎn)到步驟ST102的處理。在步驟ST102中，符號描繪塊105A將處理幀(處理畫面)設(shè)定成第一幀(第一畫面)。接下來，在步驟ST103中，符號描繪塊105A判定處理幀是否是最末幀(最末畫面)。如果發(fā)現(xiàn)處理幀不是最末幀，則符號描繪塊105A轉(zhuǎn)到步驟ST104的處理。在步驟 ST104中，符號描繪塊105A判定累積數(shù)是0、1還是2或更大。如果發(fā)現(xiàn)累積數(shù)是0，則符號描繪塊105A在步驟ST105將處理幀設(shè)定成下一幀， 不執(zhí)行符號描繪，然后返回到步驟ST103的處理。如果發(fā)現(xiàn)累積數(shù)是1，則符號描繪塊105A 轉(zhuǎn)到步驟ST106的處理。在步驟ST106中，符號描繪塊105A判定當(dāng)前幀的勻速數(shù)是0、1還是2或更大。如果發(fā)現(xiàn)勻速數(shù)是0，則符號描繪塊105A在步驟ST105將處理幀設(shè)定成下一幀，不執(zhí)行符號描繪，然后返回到步驟ST103的處理。如果發(fā)現(xiàn)勻速數(shù)是1，則符號描繪塊105A轉(zhuǎn)到步驟ST107的處理。在步驟ST107中，符號描繪塊105A判定運動差異是正的還是負的。如果運動差異是正的，則符號描繪塊105A轉(zhuǎn)到步驟ST108的處理。在步驟ST108 中，符號描繪塊105A在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置描繪指示出畫面運動在加速的加速符號作為符號。另一方面，如果發(fā)現(xiàn)運動差異是負的，則符號描繪塊105A轉(zhuǎn)到步驟ST109的處理。在步驟ST109中，符號描繪塊105A在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置描繪指示出畫面運動在減速的減速符號作為符號。然后，在步驟ST108或步驟ST109的處理之后，符號描繪塊105A在步驟ST105中將處理幀設(shè)定成下一幀，然后返回到步驟ST103的處理。如果在步驟ST106中發(fā)現(xiàn)勻速數(shù)是2或更大，則符號描繪塊105A在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面)相對應(yīng)的位置描繪指示出畫面運動是勻速的勻速符號作為符號。然后，在步驟STllO的處理之后，符號描繪塊105A在步驟ST105中將處理幀設(shè)定成下一幀，然后返回到步驟ST103的處理。如果在步驟ST104中累積數(shù)是2或更大，則符號描繪塊105A轉(zhuǎn)到步驟STlll的處理。在步驟STlll中，符號描繪塊105A在代表圖像(并集圖像)的與當(dāng)前幀(當(dāng)前畫面) 相對應(yīng)的位置處描繪累積符號作為符號。此累積符號可在形狀、大小、圖案或顏色方面與上述普通符號區(qū)分開來。此外，在步驟STlll中，符號描繪塊105A在與描繪累積符號的位置相對應(yīng)的位置處描繪累積數(shù)。然后，在步驟STlll的處理之后，符號描繪塊105A將處理幀設(shè)定成下一幀，并返回到步驟ST103的處理。如果在步驟ST103中發(fā)現(xiàn)處理幀是最末幀，則符號描繪塊105A轉(zhuǎn)到步驟ST112的處理。在步驟ST112中，符號描繪塊105A在代表圖像(并集圖像)的與當(dāng)前幀(最末幀) 相對應(yīng)的位置處描繪末尾符號作為符號。此末尾符號可在形狀、大小、圖案或顏色方面與上述普通符號和累積符號區(qū)分開來。同時，在步驟ST112中，符號描繪塊105A還在與描繪末尾符號的位置相對應(yīng)的位置處描繪累積數(shù)。然后，在步驟ST112的處理之后，符號描繪塊105A 在步驟STl 13中結(jié)束處理。參考圖30，其中示出了當(dāng)構(gòu)成預(yù)定場景的幀(畫面)的數(shù)目為40時，在每個幀(畫面)的累積數(shù)、運動差異和勻速數(shù)如圖27所示的情況下，每個符號和累積數(shù)的示例性描繪。 應(yīng)當(dāng)注意，在圖30所示的示例性描繪中，顯示了勻速、加速和減速的幀持續(xù)數(shù)，但不是必需執(zhí)行此顯示。輸出設(shè)備接口 106把從符號描繪塊105A提供來的圖像數(shù)據(jù)，即在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)的圖像信號(圖像數(shù)據(jù))，提供給輸出設(shè)備， 例如圖像顯示裝置或記錄設(shè)備。在圖像顯示裝置中，例如，顯示在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)。在記錄裝置中，例如，每個場景的描繪有符號的代表圖像的圖像信號以與在圖像輸入塊101中輸入的圖像信號的每個場景相關(guān)的方式被記錄到記錄介質(zhì)。圖像處理裝置的示例性操作下面描述圖25所示的圖像處理裝置100A的示例性操作。通過圖像輸入塊101輸入要處理的圖像信號。這個要處理的圖像信號例如是通過利用成像設(shè)備(相機)拍攝被攝物而獲得的并且是直接從成像設(shè)備或者從預(yù)定的記錄介質(zhì)提供來的。在圖像輸入塊101中，處理輸入的圖像信號以檢測場景改變點，并且按每個場景分割經(jīng)處理的圖像信號。然后在圖像輸入塊101中，將每個場景的圖像信號順次提供給代表圖像創(chuàng)建塊102和全畫面運動計算塊103。在代表圖像創(chuàng)建塊102、全畫面運動計算塊103、累積數(shù)計算塊104、勻速數(shù)計算塊 107和符號描繪塊105A中，每個場景被順次設(shè)定成要處理的場景(預(yù)定場景)并被處理。 即，在代表圖像創(chuàng)建塊102中，處理預(yù)定場景的圖像信號，創(chuàng)建通過鏈接構(gòu)成此預(yù)定場景的畫面(幀)的圖像而獲得的并集圖像，并且將所創(chuàng)建的并集圖像設(shè)定為該預(yù)定場景的代表圖像。在全畫面運動計算塊103中，處理預(yù)定場景的圖像信號，以計算此預(yù)定場景中的每個畫面的全畫面運動(運動向量)。預(yù)定場景中的每個畫面的全畫面運動被提供給累積數(shù)計算塊104。在累積數(shù)計算塊104中，基于預(yù)定場景中的每個畫面的全畫面運動來計算預(yù)定場景中的每個畫面的累積數(shù)和總值(參考圖2和圖7)。另外，在勻速數(shù)計算塊107中，基于預(yù)定場景中的每個畫面的全畫面運動來計算預(yù)定場景中的每個畫面的勻速數(shù)和運動差異(參考圖26)。在累積數(shù)計算塊104中計算出的預(yù)定場景中的每個畫面的累積數(shù)和總值被提供給符號描繪塊105A。在勻速數(shù)計算塊107中計算出的預(yù)定場景中的每個畫面的勻速數(shù)和運動差異被提供給符號描繪塊105A。另外，在代表圖像創(chuàng)建塊102中創(chuàng)建的代表圖像(并集圖像)的圖像信號(圖像數(shù)據(jù))也被提供到符號描繪塊105A。在此符號描繪塊105A中，基于預(yù)定場景中的每個畫面的累積數(shù)、勻速和運動差異，在代表圖像(并集圖像)的邊緣上描繪指示全畫面運動的符號(參考圖觀和圖29)。在此情況下，計算顯示區(qū)域上彼此最接近的符號之間的距離d。然后，如果此距離 d的值使得可以辨別描繪的符號，則在代表圖像(并集圖像)的與累積數(shù)為1的畫面相對應(yīng)的位置處描述普通符號作為符號(參考圖4、圖8和圖13)。另外，如果距離d的值使得不可以辨別描繪的符號，則在代表圖像(并集圖像)的與累積數(shù)為1且勻速數(shù)為1或更大的畫面相對應(yīng)的位置處描繪加速符號、勻速符號和減速符號作為縮減的符號(參考圖四)。在累積數(shù)為2或更大的畫面中，在代表圖像(并集圖像)的與該畫面相對應(yīng)的位置處描繪累積符號作為符號。同時，相應(yīng)地描繪累積數(shù)。另外，在末尾畫面中，在與該畫面相對應(yīng)的位置處描繪末尾符號作為符號，并同時相應(yīng)地描繪累積數(shù)。在符號描繪塊105A中，對于每個場景獲得了在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)的圖像信號(圖像數(shù)據(jù))，并且所獲得的圖像信號(圖像數(shù)據(jù))被提供給輸出設(shè)備接口(I/F)106。然后，輸出設(shè)備接口 106把從符號描繪塊105A提供來的圖像信號，即在邊緣上描繪有指示全畫面運動的符號的代表圖像的圖像信號(圖像數(shù)據(jù))，提供給輸出設(shè)備，例如圖像顯示裝置或記錄裝置。結(jié)果，在例如圖像顯示裝置中，顯示了在邊緣上描繪有指示全畫面運動的符號的代表圖像(并集圖像)。在例如記錄裝置中，每個場景的描繪有符號的代表圖像的圖像信號以與在圖像輸入塊101中輸入的圖像信號的每個場景相關(guān)的方式被記錄到記錄介質(zhì)。如上所述，在圖25所示的圖像處理裝置100A中，代表圖像創(chuàng)建塊102處理預(yù)定場景的圖像信號以創(chuàng)建相互鏈接了構(gòu)成此預(yù)定場景的畫面的圖像的并集圖像作為代表圖像。 另外，全畫面運動計算塊103處理預(yù)定場景的圖像信號，以計算此預(yù)定場景中的每個畫面的全畫面運動。另外，累積數(shù)計算塊104基于計算出的預(yù)定場景中的每個畫面的全畫面運動來計算預(yù)定場景中的每個畫面的累積數(shù)和運動總值。此外，勻速數(shù)計算塊107基于計算出的預(yù)定場景中的每個畫面的全畫面運動來計算預(yù)定場景中的每個畫面的勻速數(shù)和運動差異。接下來，符號描繪塊105A基于計算出的預(yù)定場景中的每個畫面的累積數(shù)、運動差異和勻速數(shù)在由代表圖像創(chuàng)建塊102創(chuàng)建的代表圖像(并集圖像)的邊緣上描繪指示全畫面運動的符號。因此，上述新穎配置使得不僅可以了解場景中的整個圖像，而且還可以了解場景中的每個畫面的運動。即，上述配置使得用戶不僅可以看到在場景中“顯示了什么”，而且還可以概覽到“如何顯示了什么”。在圖25所示的圖像處理裝置100A中，如果顯示區(qū)域上彼此最接近的符號之間的距離d使得不可以辨別描繪的符號(普通符號)，則加速、勻速和減速的符號作為縮減的符號被描繪。因此，如果輸出設(shè)備中代表圖像的顯示大小相對較小，則可以減少要描繪的符號的數(shù)目，從而防止可能導(dǎo)致用戶難以了解全畫面運動的符號擁擠。同時，上述配置使得用戶可以容易地了解全畫面運動的加速時段、勻速時段和減速時段。應(yīng)當(dāng)注意，圖30的示例性描繪中所示的加速、勻速和減速的縮減符號只是例示性的，因此不限于此。例如，如圖31所示，加速、勻速和減速的縮減符號可包括圖形、符號、箭頭粗細、箭頭方向、箭頭顏色、語言符號(日語的[加I等I減]，英文字母的[accleqlbr])，
26以及箭頭的不同顏色重疊。雖然沒有示出，但取決于輸出設(shè)備的形式，基于閃爍或運動的圖標(biāo)的顯示技術(shù)是可應(yīng)用的。圖32A至32F示出了基于各種縮減符號的描繪示例。在這些示例中，每個箭頭的方向相對于基準(zhǔn)線可以是向上或向下的。如上所述，通過使用與用于描繪具有與畫面運動的大小相對應(yīng)的長度的普通符號的算法相同的算法，沿著包絡(luò)線的箭頭(參考圖32D)可用于表現(xiàn)畫面的運動的大致分布。此外可以通過使用多邊形以及長方形的顏色和灰度層次來顯示符號。在圖25所示的圖像處理裝置100A中執(zhí)行的上述縮減符號描繪處理中，在成像設(shè)備(相機)勻速運動時，符號的數(shù)目顯著減少。然而，在此情況下，有可能加速符號和減速符號被以擁擠的方式顯示。通過用以下技術(shù)中的任何一種適當(dāng)?shù)卦O(shè)計符號形狀或者進一步減少加速符號和減速符號的數(shù)目，可以確保擁擠的符號的可見性。在一種技術(shù)中，預(yù)先檢測在勻速數(shù)連續(xù)為1，并且僅在連續(xù)的1中的最后一個的定時描繪加速符號或減速符號。在另一技術(shù)中，計算相對于運動差異之前的幀的差異。計算出的差異被稱為運動加速差異。基于此運動加速差異，以與圖沈的流程圖中所示的處理相同的方式計算加速勻速數(shù)。計算出的加速勻速數(shù)可以按與上述勻速數(shù)相同的方式(參考圖 29)被用于描繪加速符號和減速符號。在圖25所示的圖像處理裝置100A中，符號描繪塊105A在勻速數(shù)為1的畫面上描繪加速符號或減速符號，而在勻速數(shù)為2或更大的畫面上描繪勻速符號(參考圖四)。然而，概括來說，加速符號或減速符號可被描繪在勻速數(shù)為1到M(M為1或更大的整數(shù))的畫面上，而勻速符號可被描繪在勻速數(shù)大于M的畫面上。在此情況下，用戶可以通過用戶操作塊(未示出)根據(jù)需要設(shè)定M的值。4.第四實施例在圖25所示的圖像處理裝置100A中執(zhí)行的符號描繪處理中，如果顯示區(qū)域上彼此最接近的符號之間的距離d不具有使得可以辨別描繪的符號的值，則執(zhí)行縮減符號描繪的處理(參考圖觀中所示的步驟ST98)。然而，如果此距離d不具有使得可以辨別描繪的符號的值，則用戶可以可選擇地執(zhí)行用于執(zhí)行縮減符號描繪或疏化符號描繪的處理。圖像處理裝置的示例性配置參考圖34，其中示出了作為本發(fā)明第四實施例實現(xiàn)的圖像處理裝置100C的示例性配置。圖像處理裝置100C具有圖像輸入塊101、代表圖像創(chuàng)建塊102、全畫面運動計算塊 103、累積數(shù)計算塊104、符號描繪塊105C、輸出設(shè)備接口(I/F) 106、勻速數(shù)計算塊107以及疏化數(shù)計算塊108。參考圖34，與先前參考圖1、圖16和圖25描述的組件類似的組件被用相同的標(biāo)號來表示，并且對其的詳細描述被適當(dāng)跳過。圖35所示的流程圖指示出在上述情況下符號描繪塊105C要執(zhí)行的示例性處理過程。參考圖35，與先前參考圖觀描述的步驟類似的步驟被用相同的標(biāo)號表示，并且對其的詳細描述被跳過。在在步驟ST94中獲得顯示框的大小W之后，符號描繪塊105C在步驟 ST121中將幀的合計數(shù)η設(shè)定到1，然后轉(zhuǎn)到步驟ST95的處理。接下來，在步驟ST95中，符號描繪塊105C按照上述式(1)，對于最小運動Vmin，計算距離d。然后，在步驟ST96中，符號描繪塊105C判定計算出的距離d是否具有使得可以辨別描繪的符號的值(例如2)。如果距離d小于描繪的符號的大小，則其可能降低描繪的符號對于用戶的可見性。如果在步驟ST96中發(fā)現(xiàn)距離d不具有使得可以辨別描繪的符號的值，則符號描繪塊105C在步驟ST122中判定用戶設(shè)定是縮減符號描繪還是疏化描繪。如果發(fā)現(xiàn)用戶設(shè)定是縮減符號描繪，則符號描繪塊105C轉(zhuǎn)到步驟ST98的縮減符號描繪的處理。另一方面，如果發(fā)現(xiàn)用戶設(shè)定是疏化描繪，則符號描繪塊105C轉(zhuǎn)到步驟ST123的處理。在步驟ST123中，符號描繪塊105C將幀合計數(shù)η遞增1。接下來，符號描繪塊105C 在步驟ST124中合計每η幀中的全畫面運動，然后返回到步驟ST95的處理。如果在步驟ST96中發(fā)現(xiàn)距離d具有使得可以辨別描繪的符號的值，則符號描繪塊105C轉(zhuǎn)到步驟ST125的處理。步驟ST125的這個處理對應(yīng)于圖18所示的流程圖的步驟 ST48的處理(參考圖19)。本發(fā)明的實施例可應(yīng)用到被配置為從每個場景的圖像信號創(chuàng)建每個場景的代表圖像(縮略圖)的圖像處理裝置。本申請包含與2010年3月19日向日本專利局提交的日本優(yōu)先權(quán)專利申請JP 2010-063661和2010年3月19日向日本專利局提交的日本優(yōu)先權(quán)專利申請JP 2010-063662中公開的主題相關(guān)的主題，特此通過引用將這些申請的全部內(nèi)容并入。本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)理解，取決于設(shè)計要求和其他因素，可以進行各種修改、組合、子組合和變更，只要它們處于所附權(quán)利要求或其等同物的范圍之內(nèi)即可。
權(quán)利要求
1.一種圖像處理裝置，包括代表圖像創(chuàng)建塊，該代表圖像創(chuàng)建塊被配置為創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及符號描繪塊，該符號描繪塊被配置為基于所述預(yù)定場景中的每個畫面的全畫面運動， 在由所述代表圖像創(chuàng)建塊創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號，其中所述符號描繪塊根據(jù)要在輸出設(shè)備上顯示的所述代表圖像的顯示大小來描繪指示全畫面運動的符號。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置，還包括累積數(shù)計算塊，該累積數(shù)計算塊被配置為基于所述預(yù)定場景中的每個畫面的全畫面運動來計算每個畫面的累積數(shù)，其中，如果發(fā)現(xiàn)在預(yù)定畫面中存在積累，則所述累積數(shù)計算塊將所述預(yù)定畫面的累積數(shù)設(shè)定到0并且將累積計數(shù)器遞增1，而如果沒有發(fā)現(xiàn)存在積累，則所述累積數(shù)計算塊將前一畫面的累積數(shù)設(shè)定到所述累積計數(shù)器的值，將所述預(yù)定畫面的累積數(shù)設(shè)定到1并將所述累積計數(shù)器的值設(shè)定到1，并且將最末畫面的累積數(shù)設(shè)定到所述累積計數(shù)器的值，并且基于由所述累積數(shù)計算塊計算出的每個畫面的累積數(shù)，所述符號描繪塊在由所述代表圖像創(chuàng)建塊創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號。
3.根據(jù)權(quán)利要求2所述的圖像處理裝置，其中，如果預(yù)定畫面的累積數(shù)至少是1，則所述符號描繪塊在所述代表圖像的邊緣上與所述預(yù)定畫面相對應(yīng)的位置處描繪所述符號。
4.根據(jù)權(quán)利要求3所述的圖像處理裝置，其中，如果所述預(yù)定畫面的累積數(shù)至少是1并且不大于N，其中N是至少為1的整數(shù)，則所述符號描繪塊在所述代表圖像的邊緣上與所述預(yù)定畫面相對應(yīng)的位置處描繪普通符號作為所述符號；如果所述預(yù)定畫面的累積數(shù)大于N，則所述符號描繪塊在所述代表圖像的邊緣上與所述預(yù)定畫面相對應(yīng)的位置處描繪累積符號作為所述符號。
5.根據(jù)權(quán)利要求4所述的圖像處理裝置，其中所述符號描繪塊描繪在與所述全畫面運動的方向正交的方向上延伸的線段形狀的符號作為所述符號，并且把在所述預(yù)定畫面的累積數(shù)不大于N的情況下要描繪的所述普通符號的長度設(shè)定到與所述預(yù)定畫面的全畫面運動的大小相對應(yīng)的長度。
6.根據(jù)權(quán)利要求5所述的圖像處理裝置，其中，所述符號描繪塊把在所述預(yù)定畫面的累積數(shù)至少為1并且不大于N的情況下要描繪的所述普通符號的長度h設(shè)定到H*Mv/Mvmax，其中H是所述輸出設(shè)備中的所述邊緣的顯示區(qū)域中的與所述全畫面運動的方向正交的方向的長度，Mvmax是所述全畫面運動之中的最大運動，并且Mv是每個畫面的全畫面運動。
7.根據(jù)權(quán)利要求4所述的圖像處理裝置，其中所述符號描繪塊判定要描繪的所述符號之間的鄰近度，并且根據(jù)此判定的結(jié)果，改變在所述預(yù)定畫面的累積數(shù)至少為1并且不大于N的情況下要描繪的所述普通符號的描繪方式。
8.根據(jù)權(quán)利要求7所述的圖像處理裝置，其中所述符號描繪塊對每預(yù)定數(shù)目的畫面描繪所述普通符號，使得在所述全畫面運動的方向上要描繪的所述符號之間的距離在所述輸出設(shè)備中的顯示區(qū)域中超過預(yù)定值。
9.根據(jù)權(quán)利要求8所述的圖像處理裝置，其中所述符號描繪塊描繪在與所述全畫面運動的方向正交的方向上延伸的線段形狀的符號作為所述符號，把在所述預(yù)定畫面的累積數(shù)至少為1并且不大于N的情況下要描繪的所述普通符號的長度h設(shè)定到H*Mv/Mvmax，其中H是所述輸出設(shè)備中的所述邊緣的顯示區(qū)域中的與所述全畫面運動的方向正交的方向的長度，Mvmax是所述全畫面運動之中的最大運動，并且Mv是每個畫面的全畫面運動，并且以深色描繪對于每所述預(yù)定數(shù)目的畫面要描繪的所述普通符號，并且以淺色描繪在其他畫面中要描繪的所述普通符號。
10.根據(jù)權(quán)利要求7所述的圖像處理裝置，其中，如果在所述全畫面運動的方向上要描繪的所述符號之間的距離在所述輸出設(shè)備的顯示畫面上小于預(yù)定值，則所述符號描繪塊根據(jù)每個畫面與前一畫面之間的全畫面運動差異與加速時段相應(yīng)地描繪加速符號，與勻速時段相應(yīng)地描繪勻速符號，并且與減速時段相應(yīng)地描繪減速符號。
11.根據(jù)權(quán)利要求10所述的圖像處理裝置，還包括勻速數(shù)計算塊，該勻速數(shù)計算塊被配置為基于所述預(yù)定場景中每個畫面與前一畫面之間的所述全畫面運動差異來計算每個畫面的勻速數(shù)，其中，如果在預(yù)定畫面上發(fā)現(xiàn)存在積累，則所述勻速數(shù)計算塊將所述預(yù)定畫面的勻速數(shù)設(shè)定到0并且將勻速計數(shù)器遞增1 ；如果發(fā)現(xiàn)不存在積累，則所述勻速數(shù)計算塊將前一畫面的勻速數(shù)設(shè)定到所述勻速計數(shù)器的值，將所述預(yù)定畫面的勻速數(shù)設(shè)定到1，并且將所述勻速計數(shù)器的值設(shè)定到1 ；并且，如果所述預(yù)定畫面的勻速數(shù)至少為1并且不大于M，其中M是至少為1的整數(shù)，則所述符號描繪塊在所述代表圖像的邊緣上與所述預(yù)定畫面相對應(yīng)的位置處描繪所述加速符號和所述減速符號之一，而如果所述預(yù)定畫面的勻速數(shù)超過所述M,則所述符號描繪塊在所述代表圖像的邊緣上與所述預(yù)定畫面相對應(yīng)的位置處描繪所述勻速符號。
12.根據(jù)權(quán)利要求11所述的圖像處理裝置，其中所述勻速數(shù)計算塊具有用于積累每個畫面的所述全畫面運動差異的累積手段，并且通過判定所述累積手段的累積值是否在閾值范圍內(nèi)來判定所述預(yù)定畫面是否具有勻速運動，并且如果發(fā)現(xiàn)所述預(yù)定畫面不具有勻速運動，則將所述累積手段的累積值重置到 O0
13.根據(jù)權(quán)利要求11所述的圖像處理裝置，其中所述勻速數(shù)計算塊通過判定所述預(yù)定畫面的所述全畫面運動差異是否在閾值范圍內(nèi)來判定所述預(yù)定畫面是否具有勻速運動。
14.根據(jù)權(quán)利要求7所述的圖像處理裝置，其中所述符號描繪塊按照關(guān)系W*Vmin/(S+T)來計算所述顯示區(qū)域上彼此最接近的符號之間的距離d，其中S是所述全畫面運動的方向上一個畫面的長度，T是所述全畫面運動的總值，Vmin是當(dāng)在所述全畫面運動中未發(fā)現(xiàn)積累時的最小運動，并且W是所述輸出設(shè)備中所述代表圖像的顯示區(qū)域的所述全畫面運動的方向上的長度，從而基于如此獲得的所述距離 d來判定所述符號彼此之間的鄰近度。
15.根據(jù)權(quán)利要求1所述的圖像處理裝置，還包括全畫面運動計算塊，該全畫面運動計算塊被配置為處理所述預(yù)定場景的圖像信號以計算所述預(yù)定場景中的每個畫面的全畫面運動，其中所述符號描繪塊基于由所述全畫面運動計算塊計算出的所述預(yù)定場景中的每個畫面的全畫面運動，在由所述代表圖像創(chuàng)建塊創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號。
16.一種圖像處理方法，包括以下步驟創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及基于所述預(yù)定場景中的每個畫面的全畫面運動，在代表圖像創(chuàng)建步驟中創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號，其中，所述符號描繪步驟根據(jù)要在輸出設(shè)備上顯示的所述代表圖像的顯示大小來描繪指示全畫面運動的符號。
17.一種圖像處理裝置，包括代表圖像創(chuàng)建塊，該代表圖像創(chuàng)建塊被配置為創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及符號描繪塊，該符號描繪塊被配置為基于所述預(yù)定場景中的每個畫面的全畫面運動， 在由所述代表圖像創(chuàng)建塊創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號。
18.一種圖像處理裝置，包括代表圖像創(chuàng)建裝置，用于創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及符號描繪裝置，用于基于所述預(yù)定場景中的每個畫面的全畫面運動，在由所述代表圖像創(chuàng)建裝置創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號，其中所述符號描繪裝置根據(jù)要在輸出設(shè)備上顯示的所述代表圖像的顯示大小來描繪指示全畫面運動的符號。
19.一種圖像處理裝置，包括代表圖像創(chuàng)建裝置，用于創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及符號描繪裝置，用于基于所述預(yù)定場景中的每個畫面的全畫面運動，在由所述代表圖像創(chuàng)建裝置創(chuàng)建的所述代表圖像的邊緣上描繪指示全畫面運動的符號。
全文摘要
本發(fā)明提供了圖像處理裝置和圖像處理方法。這里公開了一種圖像處理裝置，包括代表圖像創(chuàng)建塊，被配置為創(chuàng)建相互鏈接了構(gòu)成預(yù)定場景的畫面的圖像的并集圖像作為代表圖像；以及符號描繪塊，被配置為基于預(yù)定場景中的每個畫面的全畫面運動，在由代表圖像創(chuàng)建塊創(chuàng)建的代表圖像的邊緣上描繪指示全畫面運動的符號，其中，符號描繪塊根據(jù)要在輸出設(shè)備上顯示的代表圖像的顯示大小來描繪指示全畫面運動的符號。
文檔編號H04N5/265GK102196179SQ201110065698
公開日2011年9月21日 申請日期2011年3月14日 優(yōu)先權(quán)日2010年3月19日
發(fā)明者高木芳德 申請人:索尼公司