專(zhuān)利名稱(chēng):定向內(nèi)插和數(shù)據(jù)后處理的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及內(nèi)插和后處理。
背景技術(shù):
在許多環(huán)境和應(yīng)用中,信號(hào)的分辨率可能需要做出讓步。例如,這可以用來(lái)減小表示信號(hào)所需的帶寬,降低解碼復(fù)雜度,適合特定顯示裝置的特性等。也可以在多個(gè)域/維度中指定信號(hào)的分辨率。在視頻信號(hào)的情況下,其中,這可以包括空間(即,水平和垂直)分辨率、時(shí)間分辨率、位深度以及甚至立體信息。在許多情況下,可以使一個(gè)維度的分辨率做出讓步以有利于另一維度的分辨率,例如,在交織視頻信號(hào)的情況下,犧牲空間分辨率以有利于時(shí)間分辨率。對(duì)于三維應(yīng)用,一個(gè)讓步是使用多種布置在空間上降低采樣,并且然后對(duì)可用的立體視圖進(jìn)行復(fù)用。降低采樣可以是基于水平的、垂直的或者甚至梅花(quincunx) 的,而數(shù)據(jù)可以被打包或交織在一起,即,使用棋盤(pán)復(fù)用(checkerboard multiplexing) 0
發(fā)明內(nèi)容
本發(fā)明人已認(rèn)識(shí)到,在給定轉(zhuǎn)換處理具有關(guān)于內(nèi)容的原始性質(zhì)和特性的較少信息或沒(méi)有該信息的情況下,用于規(guī)模縮小的或者做出讓步的視頻和其它數(shù)據(jù)的重構(gòu)的當(dāng)前方法可能在性能方面嚴(yán)重受限,或者在復(fù)雜度方面受到約束。在各個(gè)實(shí)施例中,本發(fā)明提供了將規(guī)??s小或者做出讓步的視頻或其它數(shù)據(jù)重構(gòu)回其原始的或者甚至更高的/不同的分辨率或格式。例如,720p(1280X720)分辨率的視頻可被(或者可能需要被)向上轉(zhuǎn)換為IOSOp (1920 X 1080)分辨率以顯示在更高分辨率的顯示器上。類(lèi)似地,包括以棋盤(pán)布置復(fù)用的兩個(gè)梅花采樣的視圖的三維信號(hào)或者包括以并排布置打包的兩個(gè)水平或梅花采樣的視圖的三維信號(hào)可能需要被向上轉(zhuǎn)換為兩個(gè)全分辨率三維視圖或者不同的采樣布置(諸如逐行)。圖9是示例性梅花采樣技術(shù)的圖示,其中,例如,由濾波器/函數(shù)/轉(zhuǎn)換f (x)920 對(duì)全分辨率圖像(例如,立體圖形圖像對(duì)的左視圖)進(jìn)行操作并且然后由采樣器930對(duì)其進(jìn)行梅花采樣。結(jié)果是例如如940處所示的樣本圖案。(像素?cái)?shù)據(jù)的)樣本圖案然后可與另一梅花采樣的圖像(例如,立體對(duì)的右視圖)或者可能的另一視圖或者甚至不相關(guān)的圖像進(jìn)行復(fù)用,并且然后被編碼。處理也可以應(yīng)用于使用不同采樣和打包方法(諸如并排打包的水平采樣或者逐行或者上下打包的垂直采樣)的圖像。轉(zhuǎn)換處理可以使用多種算法來(lái)進(jìn)行,包括例如可分離的或不可分離的濾波器、邊緣自適應(yīng)內(nèi)插方法等中的任意一個(gè)或多個(gè),轉(zhuǎn)換處理在各個(gè)實(shí)施例中可能還需要信號(hào)的分析和表征。圖10是根據(jù)本發(fā)明的實(shí)施例的用于梅花采樣數(shù)據(jù)的內(nèi)插器的圖示。該處理與其它采樣和打包方法類(lèi)似。如圖10所示,比特流1005被提供到對(duì)采樣圖像1080 (在該示例中為梅花采樣圖像)進(jìn)行解碼的解碼器1050,該采樣圖像1080然后被應(yīng)用于一系列濾波操作1085中的每個(gè)。濾波操作1085可包括任意的時(shí)間、空間或其它向上轉(zhuǎn)換處理或者此處針對(duì)采樣圖像的向上轉(zhuǎn)換、誤差校正、顏色校正或者一般改進(jìn)中的任意類(lèi)型而描述的任意其它處理。要用于任意特定的像素或區(qū)域的濾波操作例如由元數(shù)據(jù)提取器1070從比特流 1005提取的元數(shù)據(jù)來(lái)指定。結(jié)果是例如圖像的全分辨率版本1090。在要投射的立體圖像對(duì)的情況下,定向?yàn)V波操作可包括顏色校正,以使得左圖像和右圖像的相應(yīng)部分中的顏色與指導(dǎo)者的意圖一致。在這樣的實(shí)施例/應(yīng)用中,在使用不同顏色的光源或?yàn)V波器的投射系統(tǒng)中顏色校正尤其重要,以使得左圖像和右圖像的顏色如所期望的匹配。本發(fā)明包括如下方法其通過(guò)向例如解碼器、顯示器或其它系統(tǒng)的裝置發(fā)出應(yīng)該使用何種轉(zhuǎn)換方法的信號(hào)來(lái)實(shí)現(xiàn)改進(jìn)的轉(zhuǎn)換性能和/或控制轉(zhuǎn)換復(fù)雜度。該方法在某些情形或環(huán)境中還可用于改變或控制解碼器的行為,諸如在通過(guò)改變或者甚至禁用解碼處理原始要求(mandate)的某些工具來(lái)控制解碼器復(fù)雜度的情況下,或者在所提供的信息現(xiàn)在可以考慮用于校正信號(hào)中的誤差的更“了解情況的(informed) ”處理的錯(cuò)誤隱藏的情況下。 發(fā)信號(hào)以序列方式可以是例如圖片組、圖片或區(qū)域級(jí)。圖片組可以具有固定尺寸或者可以是任意的。類(lèi)似地,區(qū)域可以具有固定形狀和小至甚至像素的尺寸,或者也可以是任意的。 本發(fā)明不是僅限于發(fā)出所述參數(shù)的信號(hào)的方法,而是還發(fā)出關(guān)于在給定預(yù)定標(biāo)準(zhǔn)的情況下如何導(dǎo)出“最佳”參數(shù)的信號(hào)。本發(fā)明可被實(shí)施為包括如下步驟的方法接收表示要用于數(shù)據(jù)流的處理技術(shù)的信號(hào)。處理技術(shù)可包括例如如下中的任意一種或多種分辨率轉(zhuǎn)換、控制處理的復(fù)雜度、 假象減少、誤差校正、錯(cuò)誤隱藏、縮放、內(nèi)插、現(xiàn)有處理工具的變更以及至少一種工具的使能或禁用。分辨率轉(zhuǎn)換可包括空間分辨率轉(zhuǎn)換和時(shí)間分辨率轉(zhuǎn)換中的至少一種。縮放可包括解交織、時(shí)間內(nèi)插以及空間內(nèi)插中的至少一個(gè)。錯(cuò)誤隱藏可包括錯(cuò)誤的區(qū)域的運(yùn)動(dòng)預(yù)測(cè)。信號(hào)還可表示要應(yīng)用處理技術(shù)的空間和時(shí)間范圍中的至少一個(gè)。在一個(gè)實(shí)施例中,數(shù)據(jù)流是視頻數(shù)據(jù)流,并且范圍包括處理技術(shù)是否應(yīng)用于以下中的至少一個(gè)全部視頻、視頻的部分、視頻的圖片以及視頻內(nèi)的區(qū)域。視頻的圖片可包括例如視頻的幀和視頻的場(chǎng)中的任意。在一個(gè)實(shí)施例中,數(shù)據(jù)流包括具有至少兩個(gè)不同的視圖的視頻,并且信號(hào)還表示對(duì)視頻的至少一幀內(nèi)的至少一個(gè)區(qū)域執(zhí)行處理技術(shù)。不同的視圖可包括例如以下中的至少一個(gè)立體畫(huà)法視圖、兩個(gè)不同的圖像、二維圖像和深度信息、具有不同特性(諸如分辨率、 位深度或顏色信息)的二維場(chǎng)景的多視圖以及三維場(chǎng)景的多視圖。至少兩個(gè)不同的視圖也可以以能夠?qū)崿F(xiàn)單視圖視頻流的標(biāo)準(zhǔn)化運(yùn)動(dòng)圖片格式在數(shù)據(jù)流內(nèi)被壓縮和復(fù)用。視圖的壓縮可包括視圖的采樣、濾波以及抽選中的至少一個(gè)。視圖的壓縮還可包括水平、垂直濾波以及梅花采樣中的至少一個(gè)。視圖的壓縮還可包括濾波和采樣兩者。并且,采樣例如可包括水平、垂直、梅花、基于公式的、基于圖案的以及任意采樣中的至少一種。復(fù)用例如可以以如下格式中的至少一種來(lái)實(shí)現(xiàn)棋盤(pán)格式、基于象限的格式、列格式、行格式、并排格式、上下格式、基于圖案的格式以及替選格式(alternative format)。在一個(gè)實(shí)施例中,信號(hào)被配置成標(biāo)識(shí)要應(yīng)用于圖像或視頻場(chǎng)景的區(qū)域的解碼處理的至少部分和解碼后處理的至少部分中的至少一個(gè),該圖像或視頻場(chǎng)景的區(qū)域具有所標(biāo)識(shí)的處理有效地對(duì)其作用的特性。特性可包括區(qū)域的紋理、輪廓、邊緣、對(duì)比度、動(dòng)態(tài)范圍以及亮度中的至少一種。在一個(gè)實(shí)施例中,信號(hào)是從數(shù)據(jù)流和與該數(shù)據(jù)流相關(guān)的輔助信息中的至少一個(gè)接收的。在另一實(shí)施例中,發(fā)信號(hào)可包括要應(yīng)用于序列、圖片組(GOP)以及具有固定、任意或變化尺寸之一的區(qū)域中的至少一個(gè)的處理技術(shù)。該方法還可包括如下步驟基于發(fā)出信號(hào)的處理技術(shù)選擇至少一種處理技術(shù),以及將所選擇的處理技術(shù)應(yīng)用于序列、GOP以及區(qū)域中的至少一個(gè)。選擇步驟可由例如解碼器來(lái)執(zhí)行,該解碼器被配置成通過(guò)對(duì)序列、圖片組 (GOP)以及區(qū)域中的至少一個(gè)應(yīng)用所選擇的處理技術(shù)來(lái)對(duì)數(shù)據(jù)流進(jìn)行解碼。選擇步驟還可包括選擇不同處理技術(shù)類(lèi)別中的處理技術(shù),該處理技術(shù)與發(fā)出信號(hào)的處理技術(shù)不同但是最接近發(fā)出信號(hào)的處理技術(shù)。在一個(gè)實(shí)施例中,處理技術(shù)包括一系列處理技術(shù)。一系列處理技術(shù)可包括例如內(nèi)插處理、濾波以及去塊處理中的至少一種。在一個(gè)實(shí)施例中,發(fā)信號(hào)可包括發(fā)出一族處理技術(shù)的信號(hào),并且該方法還可包括如下步驟從發(fā)出信號(hào)的族選擇至少一種處理技術(shù),以及將所選擇的技術(shù)應(yīng)用于序列、圖片組(GOP)以及具有固定、任意或變化尺寸之一的區(qū)域中的至少一個(gè)。在一個(gè)實(shí)施例中,處理技術(shù)是經(jīng)由接收數(shù)據(jù)流之前的預(yù)處理步驟選擇的。預(yù)處理可包括例如在支配數(shù)據(jù)流以用于介質(zhì)存儲(chǔ)或廣播之前執(zhí)行的工作室工作。預(yù)處理可包括對(duì)相似數(shù)據(jù)流的一組潛在處理技術(shù)的重復(fù)執(zhí)行以及所選擇的處理技術(shù)的標(biāo)識(shí)符在數(shù)據(jù)流和與該數(shù)據(jù)流相關(guān)的輔助信息中的至少一個(gè)中的嵌入。預(yù)處理還可在編碼以及然后存儲(chǔ)在介質(zhì)上或者通過(guò)任意數(shù)量的信道進(jìn)行傳輸以用于端用戶(hù)的解碼和重放之前或與其同時(shí),由數(shù)據(jù)流捕獲的視頻的預(yù)處理重放期間動(dòng)態(tài)地(on-the-fly)執(zhí)行。所選擇的處理技術(shù)可能還需要在解碼器處對(duì)數(shù)據(jù)流的解碼和重放期間,通過(guò)執(zhí)行附加分析和/或處理而生成的附加信息。這樣的分析和/或處理可發(fā)生在例如編碼視頻的動(dòng)態(tài)解碼和重放期間,以供端用戶(hù)觀看者觀看。這樣的分析和/或處理可包括例如在編碼器處執(zhí)行的分析和/或處理的細(xì)化。所選擇的處理技術(shù)可包括例如最低成本處理技術(shù)、最高性能處理技術(shù)以及在成本和性能之間的組合或折衷中的至少一種。成本可包括例如復(fù)雜度、面積、功率以及價(jià)格中的至少一個(gè)。性能可包括例如質(zhì)量和速度中的至少一個(gè)。在一個(gè)實(shí)施例中,附加分析包括例如在給定所提供的信息的情況下,也可發(fā)生于解碼器裝置上的附加“輔助/第二”后處理。在另一實(shí)施例中,數(shù)據(jù)流包括編碼視頻數(shù)據(jù)流,并且發(fā)出信號(hào)的處理技術(shù)被選擇為增強(qiáng)針對(duì)視頻數(shù)據(jù)流的圖片、圖片組(GOP)以及區(qū)域的至少一個(gè)的解碼和解碼的后處理中的一個(gè)。處理技術(shù)例如在視頻數(shù)據(jù)流的編碼之前、期間或之后中的至少一個(gè)被選擇。數(shù)據(jù)流可包括例如轉(zhuǎn)碼編碼視頻流,并且處理技術(shù)可在視頻數(shù)據(jù)流的編碼之前、期間或之后中的至少一個(gè)被選擇。處理技術(shù)可包括例如要與對(duì)視頻數(shù)據(jù)流的區(qū)域的處理技術(shù)結(jié)合使用的參數(shù),并且方法還可包括接收對(duì)于區(qū)域和不同區(qū)域的子區(qū)域中的至少一個(gè)的參數(shù)改變。本發(fā)明還可被實(shí)施為方法,該方法包括如下步驟選擇用于改進(jìn)要從編碼視頻解碼的視頻的至少部分的機(jī)制,其中,所選擇的機(jī)制被配置成指導(dǎo)編碼視頻的解碼和要應(yīng)用于解碼之后視頻的后處理中的至少一個(gè);以及將所選擇的機(jī)制以及所選擇的機(jī)制的標(biāo)識(shí)符中的至少一個(gè)作為指導(dǎo)信號(hào)打包為編碼視頻和編碼視頻的輔助信息中的至少一個(gè)。所選擇的機(jī)制可包括處理和處理的參數(shù)中的至少一個(gè)。視頻的部分可包括視頻的區(qū)域和子區(qū)域中的至少一個(gè)。在一個(gè)實(shí)施例中,視頻的部分包括視頻的圖像、視頻的圖像序列、視頻的圖像區(qū)域、跨越視頻的幀的動(dòng)態(tài)區(qū)域以及視頻的任意子區(qū)域中的至少一個(gè)。替選地,視頻的部分包括視頻的包括塊的區(qū)域或子區(qū)域。在另一替選中,視頻的部分包括視頻的包括多個(gè)塊的區(qū)域或子區(qū)域。塊可以是例如不鄰接的。塊還可包括棋盤(pán)圖案的至少部分。在一個(gè)實(shí)施例中,視頻的部分包括跨越視頻的多個(gè)幀的視頻數(shù)據(jù)樣本的幾何布置。幾何布置可在尺寸和形狀中的至少一個(gè)方面在視頻的幀之間變化。在一個(gè)實(shí)施例中,視頻的部分包括視頻數(shù)據(jù)樣本的不規(guī)則布置。在另一實(shí)施例中, 視頻的部分包括視頻的立體場(chǎng)景的協(xié)同定位的樣本。在又一實(shí)施例中,視頻的部分包括具有MXKXN的長(zhǎng)方體,其中,M是寬度,K是高度,并且N是時(shí)間樣本的數(shù)量。在又一實(shí)施例中,視頻的部分包括片段和跨越多個(gè)幀跟蹤的對(duì)象之一。在再一實(shí)施例中,視頻的部分通過(guò)如下中的至少一種來(lái)確定用戶(hù)輸入、分割、對(duì)象跟蹤、場(chǎng)景剪輯檢測(cè)、邊緣檢測(cè)、分水嶺、豪斯多夫(haursdorff)方法、K均值、運(yùn)動(dòng)檢測(cè)、運(yùn)動(dòng)估計(jì)、運(yùn)動(dòng)分析以及質(zhì)量評(píng)估。在又一實(shí)施例中,方法還可包括針對(duì)視頻的第2部分重復(fù)選擇和打包的步驟。視頻的部分可包括規(guī)則形狀的區(qū)域,并且視頻的第2部分可包括不規(guī)則形狀的區(qū)域。在一個(gè)實(shí)施例中,視頻的部分和視頻的第2部分重疊。所選擇的機(jī)制可包括如何對(duì)視頻重疊中的機(jī)制執(zhí)行的處理進(jìn)行平均的指令。所選擇的機(jī)制還可包括如何順序啟動(dòng)視頻重疊中的機(jī)制的指令。在一個(gè)替選中,視頻的部分是預(yù)先定義的,并且打包不包含標(biāo)識(shí)該部分的信息。在另一替選中,視頻的部分是使用長(zhǎng)方體描述、基于向量的描述以及基于光柵的描述中的至少一個(gè)定義的。視頻的部分可以是例如以使用圖像格式編碼的數(shù)據(jù)標(biāo)識(shí)的。在另一實(shí)施例中,視頻的部分是以使用如下格式編碼的數(shù)據(jù)標(biāo)識(shí)的該格式包括 CGM、SVG、EPS、WMF、TIFF、BMP、JPEG、JPEG-2000、MPEG-2 以及 H. 264 和 MPEG4-AVC 中的至少一種。在另一實(shí)施例中,視頻的部分包括以過(guò)程圖(process map)標(biāo)識(shí)的區(qū)域。在另一實(shí)施例中,視頻的部分包括以圖像或圖形格式中的至少一種映射的區(qū)域。在另一實(shí)施例中,本發(fā)明包括將序列指令連同指導(dǎo)信號(hào)一起打包。在另一實(shí)施例中,指導(dǎo)信號(hào)包括表示要執(zhí)行的各種處理的優(yōu)選順序的排序。在另一實(shí)施例中,指導(dǎo)信號(hào)可包括要至少部分由所選擇的機(jī)制執(zhí)行的空間向上采樣、時(shí)間向上采樣以及去塊的排序。在另一實(shí)施例中,視頻的部分包括被劃分成一系列子區(qū)域的區(qū)域,其中,所選擇的機(jī)制包括與第一子區(qū)域?qū)?yīng)的第1參數(shù)以及與第二子區(qū)域?qū)?yīng)的第2參數(shù)。在另一實(shí)施例中,機(jī)制是至少部分基于機(jī)制的復(fù)雜度而選擇的。所選擇的機(jī)制可具有例如對(duì)于給定質(zhì)量閾值的最低復(fù)雜度。
本發(fā)明還可被實(shí)施為后處理裝置,該后處理裝置包括視頻輸入,被配置成接收解碼視頻流;指令機(jī)制,被配置成接受來(lái)自視頻流的輔助信息信道的指導(dǎo)指令以及從解碼視頻流識(shí)別指導(dǎo)指令之一;后處理器,被配置成基于指導(dǎo)指令對(duì)解碼視頻流進(jìn)行后處理;以及視頻輸出,被配置成輸出后處理后的視頻流。后處理裝置可例如被集成到顯示器、機(jī)頂盒以及媒體播放器中的至少一個(gè)中。指導(dǎo)指令可包括例如視頻中的至少一個(gè)區(qū)域和要應(yīng)用于該區(qū)域的至少一種處理方法的標(biāo)識(shí)。區(qū)域可包括例如子區(qū)域,并且指導(dǎo)指令可包括要應(yīng)用于對(duì)各個(gè)子區(qū)域進(jìn)行處理的處理方法的不同參數(shù)。指導(dǎo)信號(hào)還可標(biāo)識(shí)具有不同紋理質(zhì)量的區(qū)域以及專(zhuān)用于各種紋理質(zhì)量的處理方法。在一個(gè)實(shí)施例中,指導(dǎo)信號(hào)包括在對(duì)解碼視頻流測(cè)試多個(gè)濾波器之后選擇的濾波器標(biāo)識(shí)。濾波器標(biāo)識(shí)可包括濾波器的整個(gè)類(lèi)別的標(biāo)識(shí)。后處理器還可被配置成根據(jù)濾波器類(lèi)別選擇濾波器,并且利用所選擇的濾波器來(lái)對(duì)解碼視頻流進(jìn)行后處理。后處理器進(jìn)一步被配置成選擇具有最接近濾波器類(lèi)別的特性的特性的濾波器,并且利用所選擇的濾波器作為后處理的至少部分。在一個(gè)實(shí)施例中,后處理器進(jìn)一步被配置成選擇已知為具有如下特性的濾波器 該特性是接近濾波器標(biāo)識(shí)所標(biāo)識(shí)的濾波器的特性、或比濾波器標(biāo)識(shí)所標(biāo)識(shí)的濾波器的特性更好的特性中的至少一種。在另一實(shí)施例中,濾波器標(biāo)識(shí)是基于失真和復(fù)雜度中的至少一個(gè)而選擇的。失真可以以多種方式來(lái)評(píng)估,包括經(jīng)由SAD、SSE、主觀評(píng)估、塊化、方差、頻率特性、圖像/紋理銳度、邊緣質(zhì)量以及空間或時(shí)間上的假象中的至少一個(gè)。在一個(gè)實(shí)施例中,測(cè)試是在開(kāi)環(huán)類(lèi)型的測(cè)試裝置中執(zhí)行的,而在另一實(shí)施例中,測(cè)試是在閉環(huán)類(lèi)型的測(cè)試裝置中執(zhí)行的。測(cè)試可例如針對(duì)視頻的多個(gè)區(qū)域而執(zhí)行。多個(gè)區(qū)域可包括例如視頻的時(shí)間區(qū)域。多個(gè)時(shí)間區(qū)域包括具有變化形狀和尺寸的區(qū)域。在一個(gè)實(shí)施例中,視頻的區(qū)域通過(guò)分割、對(duì)象跟蹤、場(chǎng)景剪輯檢測(cè)、邊緣檢測(cè)、分水嶺、豪斯多夫方法、K均值、運(yùn)動(dòng)檢測(cè)、運(yùn)動(dòng)估計(jì)以及運(yùn)動(dòng)分析中的至少一個(gè)來(lái)確定。視頻的區(qū)域可使用 CGM、SVG、EPS、WMF、TIFF、BMP、JPEG、JPEG-2000、MPEG-2 以及 H. 264 和 MPEG4-AVC 中的至少一個(gè)來(lái)標(biāo)識(shí)。本發(fā)明還可被實(shí)施為一種系統(tǒng),該系統(tǒng)包括編碼器,被配置成選擇要在解碼器中利用的處理技術(shù)、處理技術(shù)類(lèi)別以及一系列處理技術(shù)中的至少一個(gè),以及在編碼視頻流和與編碼視頻流相關(guān)的輔助信息中的至少一個(gè)中對(duì)所選擇的技術(shù)或所選擇的技術(shù)的標(biāo)識(shí)符進(jìn)行編碼;以及解碼器,被配置成接收編碼視頻流以及使用所選擇的技術(shù)中的至少一種對(duì)視頻流進(jìn)行解碼。所選擇的技術(shù)是從編碼視頻流單獨(dú)識(shí)別的。所選擇的技術(shù)可例如由解碼器從相關(guān)的輔助信息和編碼視頻流中的至少一個(gè)來(lái)識(shí)別。技術(shù)可基于質(zhì)量、復(fù)雜度以及成本中的至少一個(gè)來(lái)選擇。解碼器可利用所選擇的處理技術(shù)來(lái)選擇另一處理技術(shù)。在一個(gè)實(shí)施例中,解碼器保存處理技術(shù)的目錄,并且從目錄中選擇與編碼器選擇的技術(shù)最接近匹配的一種或多種處理技術(shù)。在一個(gè)實(shí)施例中,解碼器選擇的技術(shù)是基于復(fù)雜度、成本以及質(zhì)量中的至少一個(gè)而選擇的。解碼器選擇的技術(shù)也可考慮到解碼器中可用的處理功率量而至少部分基于復(fù)雜度來(lái)選擇。裝置和方法兩者的部分可方便地以在通用計(jì)算機(jī)或網(wǎng)絡(luò)化計(jì)算機(jī)上的編程來(lái)實(shí)現(xiàn),并且結(jié)果可顯示在連接到通用計(jì)算機(jī)、網(wǎng)絡(luò)化計(jì)算機(jī)中的任意的輸出裝置上,或者可傳送到遠(yuǎn)程裝置用于輸出或顯示。另外,以計(jì)算機(jī)程序、數(shù)據(jù)序列和/或控制信號(hào)表示的本發(fā)明的任意部件可被實(shí)施為在任意介質(zhì)中以任意頻率的電子信號(hào)廣播(或傳送),包括但不限于無(wú)線廣播、以及通過(guò)銅線、光纖電纜以及同軸電纜等的傳輸。
隨著本發(fā)明的更完整理解和本發(fā)明的許多伴隨優(yōu)點(diǎn)通過(guò)參照結(jié)合附圖考慮的以下詳細(xì)描述而得到更好的理解,將容易獲得本發(fā)明的更完整理解和本發(fā)明的許多伴隨優(yōu)
點(diǎn),其中;
圖IA是根據(jù)本發(fā)明的實(shí)施例的元數(shù)據(jù)信令的固定尺寸時(shí)間區(qū)域的圖示;圖IB是根據(jù)本發(fā)明的實(shí)施例的元數(shù)據(jù)信令的可自適應(yīng)尺寸的時(shí)間區(qū)域的圖示;圖2A是根據(jù)本發(fā)明的實(shí)施例的相等尺寸的區(qū)域的圖示;圖2B是根據(jù)本發(fā)明的實(shí)施例的可自適應(yīng)定義的區(qū)域的圖示;圖2C是根據(jù)本發(fā)明的實(shí)施例的各個(gè)區(qū)域內(nèi)的子區(qū)域的圖示;圖3是根據(jù)本發(fā)明的實(shí)施例的用于嵌入元數(shù)據(jù)的開(kāi)環(huán)系統(tǒng)的圖;圖4是根據(jù)本發(fā)明的實(shí)施例的用于嵌入元數(shù)據(jù)的閉環(huán)系統(tǒng)的圖;圖5是根據(jù)本發(fā)明的實(shí)施例的基于主觀或客觀失真估計(jì)的濾波器選擇處理的圖;圖6是根據(jù)本發(fā)明的實(shí)施例的基于元數(shù)據(jù)的后處理器的圖;圖7是根據(jù)本發(fā)明的實(shí)施例的、可用于例如錯(cuò)誤隱藏或解碼器簡(jiǎn)化的基于元數(shù)據(jù)的自適應(yīng)解碼的圖;圖8是根據(jù)本發(fā)明的實(shí)施例的解碼器的圖;圖9是梅花采樣技術(shù)的圖示;圖10是根據(jù)本發(fā)明的實(shí)施例的用于梅花采樣數(shù)據(jù)的內(nèi)插器的圖示;以及圖11是示出根據(jù)本發(fā)明的實(shí)施例的、圖像區(qū)域的評(píng)估和選擇的流程圖。
具體實(shí)施例方式本發(fā)明人已觀察到算法的性能和行為取決于算法所應(yīng)用的圖像、視頻場(chǎng)景或其它數(shù)據(jù)的區(qū)域的特性而會(huì)大大不同。特別地,在視頻的情況下,對(duì)于具有低紋理特性的區(qū)域 R。,算法A0對(duì)于例如縮放來(lái)說(shuō)比算法A1表現(xiàn)更好并且導(dǎo)致更好的圖像質(zhì)量,而A1對(duì)不同的區(qū)域R1可表現(xiàn)更好并且導(dǎo)致更好的圖像質(zhì)量。雖然在給定算法Atl和A1的情況下,解碼器可試圖在給定區(qū)域特性或者甚至在給定轉(zhuǎn)換后區(qū)域的特性的情況下,確定哪種算法可更好地運(yùn)行,但是執(zhí)行該處理可能太復(fù)雜并且太費(fèi)時(shí)。此外,在給定解碼器僅具有關(guān)于圖像/視頻的有限信息的事實(shí)的情況下,性能總是受可用信息的約束。這可能會(huì)相當(dāng)大地限制這樣的方案的性能。在各個(gè)實(shí)施例中,本發(fā)明通過(guò)提供可以指示應(yīng)該使用哪種算法、多個(gè)算法、或算法組/類(lèi)來(lái)處理各個(gè)不同的區(qū)域的附加信息來(lái)輔助解碼器或后處理器。這通過(guò)如下步驟來(lái)進(jìn)行在編碼處理之前(例如,使用預(yù)處理器)、期間或之后分析和評(píng)估各個(gè)算法及其性能和 /或特性,對(duì)各個(gè)算法在給定應(yīng)用的情況下的行為進(jìn)行評(píng)級(jí),以及然后針對(duì)各個(gè)區(qū)域?qū)m當(dāng)?shù)乃惴ê腿魏蜗嚓P(guān)的參數(shù)進(jìn)行選擇和發(fā)信號(hào)。發(fā)信號(hào)可以在比特流(或數(shù)據(jù)流)本身(例如,包括比特流中的信號(hào)或元數(shù)據(jù)) 內(nèi)進(jìn)行,或者可以作為輔助信息(例如,作為元數(shù)據(jù)文件或流)來(lái)發(fā)信號(hào)。在解碼器處,關(guān)于各個(gè)區(qū)域的推薦處理信息可以被解碼,并且在信號(hào)或元數(shù)據(jù)中選擇的、包含于其中的或者以其標(biāo)識(shí)的一種或多種適當(dāng)算法用于執(zhí)行一種或多種必要的操作,該一種或多種必要的操作可以是預(yù)先確定的或者也可以以信號(hào)或元數(shù)據(jù)來(lái)標(biāo)識(shí)。注意,在本發(fā)明中,解碼器可以被配置成維持對(duì)所利用的算法的控制。例如,解碼器或后處理器可以不總是被強(qiáng)制使用所選擇的或標(biāo)識(shí)的算法或算法類(lèi),而是可取決于環(huán)境 (諸如例如某些算法的可用性和/或要實(shí)現(xiàn)的成本)而選擇忽視或選擇類(lèi)似的算法。此外, 解碼器或后處理器可選擇部分“忽略”推薦的算法(例如Atl),而是替代地使用不同的算法 (例如A1)。A1可具有與A0類(lèi)似的特性,但是可較不復(fù)雜,或者可已知為具有更好的性能。 還可能的是,A0可能是不可用的或未知的,在該情況下,解碼器或后處理器會(huì)希望使用系統(tǒng)預(yù)定義的默認(rèn)算法(例如Ad)。區(qū)域信令在預(yù)處理器和/或編碼器級(jí),各個(gè)算法或各個(gè)算法類(lèi)優(yōu)選地是在發(fā)信號(hào)之前評(píng)估的。評(píng)估可以在區(qū)域級(jí)進(jìn)行,其中,區(qū)域可以是比特流的任意部分。例如,在視頻比特流中, 區(qū)域可以是完整的序列或圖像、子序列/視頻場(chǎng)景、立體幀對(duì)或單個(gè)幀/視圖,包括圖像中的子采樣視圖或子區(qū)域。圖像中的子區(qū)域可以具有規(guī)則(例如,三角形、矩形等)或不規(guī)則 /隨機(jī)形狀,可以為任意尺寸(例如,8X8、32X32、4X64等),并且甚至可以在時(shí)間上(例如,在時(shí)間上跟蹤的對(duì)象)或空間中(例如,三維空間中的對(duì)象)擴(kuò)展。如用于三維立體遞送的梅花采樣和棋盤(pán)復(fù)用的視頻數(shù)據(jù)的情形一樣,特別是在子采樣和復(fù)用數(shù)據(jù)的情況下,也可以使用子采樣來(lái)考慮區(qū)域。區(qū)域也可以是例如由用戶(hù)預(yù)定義的。例如,整個(gè)序列可以被標(biāo)識(shí)為單個(gè)區(qū)域,或者諸如在尺寸為N的固定圖片組(GOP)的情況下,區(qū)域可以指定N個(gè)連續(xù)幀的集合。區(qū)域可包括例如用于確定針對(duì)該片段的信令的處理的空間區(qū)域分割。如圖2A所示,也可以使用具有相等尺寸(寬度/M) X (高度/K)的MXK個(gè)矩形區(qū)域,其中,寬度和高度分別是幀的寬度和高度。用戶(hù)甚至可指定所有單獨(dú)的像素,或者甚至對(duì)應(yīng)于區(qū)域的所有單獨(dú)的樣本(例如,分離亮度和色度樣本)。也可利用其它組合,包括例如將立體對(duì)中的協(xié)同定位的樣本分組在一起成為尺寸為MXKXN的長(zhǎng)方體等,其中,現(xiàn)在,N對(duì)應(yīng)于時(shí)間樣本。區(qū)域也可自適應(yīng)地來(lái)選擇和定義, 并且基本上可以是任意形狀。如圖2B所示,示出了自適應(yīng)定義的區(qū)域Atl-Ap在各個(gè)實(shí)施例中,可以使用諸如場(chǎng)景剪輯檢測(cè)、圖像/視頻分割、對(duì)象跟蹤等的多種算法中的一種或多種來(lái)選擇區(qū)域。用于分割的算法可包括使用邊緣檢測(cè)、分水嶺方法、豪斯多失距離、K均值的技術(shù), 并且還可以考慮運(yùn)動(dòng)檢測(cè)/估計(jì)和分析。運(yùn)動(dòng)估計(jì)可使用其中包括仿射、雙曲線、平移的多種算法和模型來(lái)進(jìn)行,并且可以是在空間域或頻域(例如,使用相位關(guān)聯(lián))等中基于塊或區(qū)域而進(jìn)行的。本發(fā)明不限制用于這樣的區(qū)域的確定的其它算法的應(yīng)用。區(qū)域也可在給定它們的照明和色度特性、紋理的情況下進(jìn)行分類(lèi),或者可基于語(yǔ)義信息和用戶(hù)交互。也可以使用任意形狀的和規(guī)則形狀的區(qū)域的組合。例如,區(qū)域可以具有固定的時(shí)間長(zhǎng)度N,但是其空間形狀對(duì)于每幀可改變。如圖2C所示,區(qū)域還可在子區(qū)域中進(jìn)一步被分離。在該情形下,系統(tǒng)可首先指定需要應(yīng)用特定處理方法的一組初級(jí)區(qū)域(例如,與視頻編碼系統(tǒng)中的宏塊的概念類(lèi)似),而同一區(qū)域可以可選地進(jìn)一步被分離成可以使用處理方法的不同參數(shù)(例如,相同的算法但是具有不同強(qiáng)度的濾波器或不同的閾值)的更小子區(qū)域。區(qū)域也可重疊,在該情況下,多種算法可以應(yīng)用于重疊區(qū)域,該重疊區(qū)域然后可以被組合。組合可以在使用簡(jiǎn)單平均的處理之后進(jìn)行,或者可以基于加權(quán)平均方法,該加權(quán)平均方法可以基于像素距各個(gè)區(qū)域的中心的距離、算法的特性和期望的性能以及重疊像素或區(qū)域的特性。在一個(gè)實(shí)施例中,按照指定的順序?qū)Πㄖ丿B區(qū)的各個(gè)區(qū)域應(yīng)用不同的算法。如果區(qū)域是預(yù)定義的,則不需要對(duì)關(guān)于區(qū)域的特性(例如,形狀、尺寸、重疊等) 的任何信息進(jìn)行編碼。然而,如果這些區(qū)域不是預(yù)定義的,則需要對(duì)這樣的信息進(jìn)行編碼,并且需要這樣的信息對(duì)解碼器是可用的。特別地,對(duì)于規(guī)則形狀的區(qū)域編碼不一定是復(fù)雜的,并且可以包括諸如對(duì)于長(zhǎng)方體數(shù)量的水平(M)、垂直(K)以及時(shí)間(N)的片段的情況的信息,或者對(duì)于諸如使用區(qū)域的基于向量或光柵的描述可能更復(fù)雜。例如,所有的區(qū)域可以使用計(jì)算機(jī)圖形元文件文件格式(CGM)、可縮放矢量圖形(SVG)格式、封裝的 PostScirpt(EPS)或Windows元文件(WMF)或者其它向量圖形格式來(lái)描述。類(lèi)似地,對(duì)于基于光柵的描述,我們可以使用TIFF或BMP、JPEG、JPEG-2000或者甚至使用MPEG-2或H. 264/ MPEG-4 AVC的視頻編解碼表示。在這些情形預(yù)測(cè)中,可以使用空間和時(shí)間兩者用于表示區(qū)域??梢钥紤]無(wú)損的和有損的表示,其中,在有損的情況下,會(huì)疏忽地使用不同的算法。然而,如果該處理是認(rèn)真進(jìn)行的并且在編碼器中是已知的,則這將不會(huì)導(dǎo)致任何問(wèn)題,尤其是在重復(fù)執(zhí)行任意處理的情況下。在向量和光柵表示兩者中,表示可以保持在高分辨率,或者可以下至1X1樣本進(jìn)行子采樣。在各個(gè)實(shí)施例中,圖像可以由多個(gè)可相關(guān)或可不相關(guān)的區(qū)域表示/圖來(lái)表征和表示,其中各個(gè)表示與需要應(yīng)用于圖像的不同后處理/內(nèi)插處理有關(guān)。例如,一個(gè)區(qū)域表示可以指定空間向上采樣,第二區(qū)域表示可以指定時(shí)間向上采樣/幀速率轉(zhuǎn)換,而第三區(qū)域表示可以指定去塊或去噪。應(yīng)該首先執(zhí)行哪個(gè)處理的序列可取決于在比特流中所發(fā)現(xiàn)的表示的順序,或者可以在比特流本身內(nèi)以附加的句法來(lái)描述。例如,在以上情形中,我們可以發(fā)出信號(hào)以首先執(zhí)行空間向上采樣,接下來(lái)是時(shí)間向上采樣以及然后是去塊,或者我們可以發(fā)信號(hào)通知應(yīng)該首先執(zhí)行去塊,接下來(lái)是空間向上采樣以及然后是時(shí)間向上采樣。分析和濾波器選擇本發(fā)明可被配置為發(fā)出信號(hào)以通知多種后處理方法,其中包括優(yōu)選的/推薦的空間或時(shí)間放大或縮減方法及其參數(shù)、去塊以及去噪,或者甚至在用于執(zhí)行錯(cuò)誤隱藏的解碼處理和推薦方法中的建議(非標(biāo)準(zhǔn)化)簡(jiǎn)化。要針對(duì)區(qū)域而發(fā)出信號(hào)的方法和參數(shù)可以以多種方式來(lái)選擇。特別地,參數(shù)可以是固定的(例如,對(duì)于整個(gè)序列或?qū)τ谒袔械膮^(qū)域 A0相同的方法M0,而方法M1用于區(qū)域A1),周期性地改變(例如,每隔N幀上述示例中的方法Mtl被切換為方法Mckn),或者在給定信號(hào)的某些特性或給定用戶(hù)輸入的情況下可以是自適應(yīng)的。在一個(gè)實(shí)施例中,方法是在給定場(chǎng)景的紋理、邊緣、照明、顏色以及運(yùn)動(dòng)特性的情況下而選擇的。作為示例,在高紋理化的區(qū)域中,可以發(fā)出“較柔和的”去塊方法和參數(shù)的信號(hào), 而在低紋理化的區(qū)域中,可以替代地發(fā)出不同的、更強(qiáng)烈的去塊器和參數(shù)的信號(hào)。類(lèi)似地, 在由垂直邊緣表征的區(qū)域中,可以發(fā)出更偏向垂直方向的內(nèi)插方法的信號(hào),而在具有對(duì)角線邊緣的區(qū)域中,可以替代地使用偏向?qū)蔷€的內(nèi)插方法。9/19 頁(yè)在不同的示例中,對(duì)于具有低運(yùn)動(dòng)的場(chǎng)景,可以發(fā)出運(yùn)動(dòng)補(bǔ)償方法的信號(hào)以用于時(shí)間內(nèi)插,而對(duì)于高運(yùn)動(dòng),可以使用幀復(fù)制或幀混合。該決定要求在決定之前執(zhí)行分析處理。分析可以用多種方法來(lái)執(zhí)行,其中諸如紋理分析(例如,基于方差的分析或頻率分析)、 使用運(yùn)動(dòng)估計(jì)方法以及照明改變表征,該運(yùn)動(dòng)估計(jì)方法包括諸如仿射、雙曲線以及平移 (例如,基于塊)運(yùn)動(dòng)估計(jì)的方法。在替選實(shí)施例中,決定可以使用各種方法的失真和/或復(fù)雜度分析來(lái)執(zhí)行??梢赃x擇導(dǎo)致最低失真和/或復(fù)雜度的方法作為要發(fā)出信號(hào)的方法。特別地,在向上轉(zhuǎn)換示例 (諸如720p到1080p、或水平采樣的和并排復(fù)用的、或者梅花采樣的和棋盤(pán)復(fù)用的三維視頻數(shù)據(jù)到全分辨率立體對(duì))中,針對(duì)每個(gè)區(qū)域測(cè)試所有可用的向上采樣濾波器。導(dǎo)致盡可能與原始向上轉(zhuǎn)換后的信號(hào)近似的向上轉(zhuǎn)換區(qū)域并且可選地對(duì)于轉(zhuǎn)換要求最小的或期望的復(fù)雜度的濾波器被選擇用于發(fā)出信號(hào)。圖5中示出了基于失真/復(fù)雜度的模型的結(jié)構(gòu),其中,輸入源505通過(guò)格式轉(zhuǎn)換 510、編碼器MO以及然后解碼器550進(jìn)行處理。解碼后的流然后被劃分成區(qū)域,并且每個(gè)區(qū)域被遞送到一組濾波器565 (例如,濾波器L··· N)(區(qū)域選擇560)。區(qū)域選擇560可包含用于在區(qū)域上劃分解碼流的一種或多種算法,包括預(yù)先確定的區(qū)域和/或包括基于區(qū)域亮度、對(duì)比度、邊緣、運(yùn)動(dòng)和/或其它的任何區(qū)域的自適應(yīng)確定的區(qū)域。在濾波之后,執(zhí)行失真和/或復(fù)雜度分析570。失真分析對(duì)于各種濾波器類(lèi)型可相同或者可針對(duì)各種濾波器類(lèi)型而修改。濾波器選擇機(jī)制530然后評(píng)估各個(gè)區(qū)域的失真/復(fù)雜度分析的結(jié)果。然后,將基于失真/復(fù)雜度選擇標(biāo)準(zhǔn)的最佳匹配提供到編碼器M0,以用于產(chǎn)生輸出比特流575。所選擇的最佳匹配被示出為被放置到和/或編碼到輸出比特流575中,但是可以以其它機(jī)制(未示出)來(lái)提供,包括與輸出比特流575相關(guān)的輔助信息和/或元數(shù)據(jù)。選擇可以基于例如與原始相比的失真,而且可以聯(lián)合地基于速率、失真以及甚至方法的復(fù)雜度。假設(shè)方法的編碼可考慮壓縮(例如,預(yù)測(cè)和熵編碼),則速率可以包括可能需要發(fā)出方法及其參數(shù)的信號(hào)的比特。由于可能要考慮可要求不同數(shù)量的比特的同一信號(hào)的多種替選表示,因此速率也可說(shuō)明實(shí)際視頻信號(hào)的比特。本發(fā)明所指定的不同方法可能適合于不同的表示。在該情形中,編碼器可聯(lián)合地選擇最佳表示(給定聯(lián)合的速率、失真以及復(fù)雜度標(biāo)準(zhǔn))以及最佳后處理方法。失真可基于多種度量中的一種或多種,諸如絕對(duì)差和(SAD)、平方誤差和(SSE)或包括主觀估計(jì)的其它度量。失真也可以基于在后處理之后測(cè)量圖像的多種特性(包括塊化、方差、頻率特性、 圖像/紋理銳度、邊緣質(zhì)量),或者通過(guò)由于特定方法的使用而會(huì)產(chǎn)生的假象的檢測(cè)和測(cè)量等。這樣的測(cè)量在如下情形下會(huì)是非常有用的原始內(nèi)容可能不可用,或者可用但是僅為不同的(例如,更低)分辨率或格式。作為示例,考慮30p信號(hào)到60p信號(hào)(增加了 2倍的幀速率)的向上轉(zhuǎn)換。在該情形下,時(shí)間假象的檢測(cè)對(duì)于確定針對(duì)每個(gè)幀或區(qū)域發(fā)信號(hào)的最佳方法會(huì)是非常有用的。在一個(gè)實(shí)施例中,本發(fā)明利用由各種方法導(dǎo)致的檢測(cè)到的時(shí)間假象的量或質(zhì)量中的至少一個(gè),以選擇對(duì)方法或方法類(lèi)中的哪個(gè)發(fā)出信號(hào)。選擇最佳方法可以使用完全搜索途徑(即,與原始相比或者在給定適用于該處理的可用評(píng)估度量的情況下,測(cè)試所有可用的處理方法)來(lái)進(jìn)行。然而,也可以考慮大大降低復(fù)雜度的快速方法。特別地,取代測(cè)試所有用于處理區(qū)域的可能方法,可使用區(qū)域和給定其特性的分析來(lái)提供關(guān)于適合于測(cè)試該區(qū)域的方法的選擇的引導(dǎo)。例如,對(duì)于幀速率轉(zhuǎn)換,本
13發(fā)明首先可執(zhí)行簡(jiǎn)單的運(yùn)動(dòng)估計(jì)處理,并且在給定運(yùn)動(dòng)信息的情況下,確定是否需要或者是否有必要測(cè)試任何時(shí)間(運(yùn)動(dòng)補(bǔ)償)方法、運(yùn)動(dòng)自適應(yīng)方法或者僅基本方法(諸如幀混合或幀復(fù)制)。運(yùn)動(dòng)估計(jì)可以包括基于塊的方案(諸如增強(qiáng)預(yù)測(cè)區(qū)域搜索(EPZQ算法), 或者可以?xún)H依賴(lài)于簡(jiǎn)單的幀/區(qū)域差別。圖11是示出根據(jù)本發(fā)明的實(shí)施例的圖像區(qū)域的評(píng)估和選擇的流程圖。在步驟 1110,將圖像或視頻分割成區(qū)域。區(qū)域是預(yù)先確定的或基于此處所述的任何技術(shù)而確定的。 建立循環(huán)1120以重復(fù)檢查各個(gè)區(qū)域(1120),并且初始化參數(shù)(步驟1130)。對(duì)于多種算法、 方法或者處理中的每個(gè),建立第二循環(huán)(1140)。對(duì)于各個(gè)區(qū)域,執(zhí)行各種算法/方法/處理以確定最佳模式或結(jié)果。在該示例中,計(jì)算距離函數(shù)(dist)(步驟1150),并且與先前算出的dist函數(shù)進(jìn)行比較(步驟1160)??杀4鎸?duì)于各個(gè)區(qū)域的最佳算法并且然后提供該最佳算法用于編碼,或者可提供跨越所有區(qū)域的最佳算法用于編碼(例如,步驟1170和1195)。相鄰區(qū)域的特性(包括針對(duì)這些區(qū)域所選擇的方法)如果是已經(jīng)知道的,也可以被認(rèn)為使處理加速。例如,如果左側(cè)和上部的區(qū)域選擇了方法A0,則該方法非常可能也適合于當(dāng)前區(qū)域。因此,在各個(gè)實(shí)施例中,本發(fā)明包括測(cè)試時(shí)的可能方法的優(yōu)先化、或者失真閾值的考慮和更新,該失真閾值可以基于相鄰區(qū)域并且可以用于測(cè)試是否應(yīng)該也針對(duì)當(dāng)前區(qū)域來(lái)考慮該模式或方法。替選地,已知區(qū)域中的偏移參數(shù)的模式也可被識(shí)別并且用于預(yù)測(cè)要測(cè)試的當(dāng)前區(qū)域的稍微不同組的參數(shù)。處理還可首先使得所有其它類(lèi)似方法優(yōu)先于AO。如果相鄰區(qū)域使用了不同的處理方法,則也可以做出類(lèi)似的考慮。在該情形下,在相鄰區(qū)域中使用的所有方法可以被認(rèn)為是比其它可用方法更有可能。同樣在給定區(qū)域的特性和該區(qū)域與其鄰居的特性的關(guān)系的情況下,概率會(huì)改變。例如,如果區(qū)域是高度紋理化的,則其可能將與時(shí)間上或空間上的、同樣具有類(lèi)似紋理的鄰居具有更多的關(guān)聯(lián)。與鄰居的相似度(運(yùn)動(dòng)、紋理、顏色等)越高,同樣應(yīng)該應(yīng)用的處理方法應(yīng)該相同或至少相似的概率越高。在一個(gè)實(shí)施例中,在對(duì)壓縮信號(hào)進(jìn)行解碼之后應(yīng)用所使用的方法,選擇可以基于開(kāi)環(huán)架構(gòu)。例如,在圖3中,僅給出了原始信號(hào)和各種方法將對(duì)該信號(hào)所具有的影響。如圖 3的示例所示,輸入源305進(jìn)行格式轉(zhuǎn)換310。這樣的轉(zhuǎn)換例如可以是水平或梅花采樣以及一對(duì)立體圖像的并排或棋盤(pán)打包。轉(zhuǎn)換是或者可以是區(qū)域性的或者被分割。選擇區(qū)域(例如,區(qū)域選擇320),并且各個(gè)區(qū)域依次(或者并行)被應(yīng)用于一系列濾波器(或者方法、算法或處理)(例如,濾波器1···Ν)。然后,選擇具有最高質(zhì)量、最低成本或者二者或其它因素的預(yù)定組合之一的濾波器,并且將其提供給編碼器340,在編碼器340處,選擇被提供作為在輸出比特流345中編碼(或者放置)的信號(hào)或者被提供作為與輸出比特流345相關(guān)的輔助信息(未示出)。信號(hào)可包含例如所選擇的濾波器、濾波器的標(biāo)識(shí)符或者有助于將信號(hào)轉(zhuǎn)換為其原始(例如,全分辨率)格式或其它格式的濾波器的類(lèi)或類(lèi)別的標(biāo)識(shí)符。在另一實(shí)施例中,選擇基于閉環(huán)架構(gòu)(參見(jiàn)圖4)。在閉環(huán)架構(gòu)中,選擇基于給定了實(shí)際解碼信號(hào)的方法的性能,與開(kāi)環(huán)系統(tǒng)相比,這通常導(dǎo)致改進(jìn)的性能。如圖4的示例所示,輸入源405通過(guò)格式轉(zhuǎn)換410、編碼器440以及然后解碼器450進(jìn)行處理。解碼流然后被劃分成區(qū)域并且各個(gè)區(qū)域被遞送到一組濾波器465 (例如,濾波器1···Ν)(區(qū)域選擇460)。 區(qū)域選擇460可包含一種或多種用于區(qū)域性地劃分解碼流的算法,該解碼流包括預(yù)先確定的區(qū)域和/或包括基于區(qū)域亮度、對(duì)比度、邊緣、運(yùn)動(dòng)和/或其它的任何區(qū)域的自適應(yīng)確定的區(qū)域。然后,濾波器選擇機(jī)制將解碼和濾波后的各個(gè)區(qū)域與原始輸入中的相應(yīng)區(qū)域進(jìn)行比較。然后,基于選擇標(biāo)準(zhǔn)的最佳匹配被提供到編碼器440,以產(chǎn)生輸出比特流455。所選擇的最佳匹配被示出為被放置和/或編碼在輸出比特流455中,但是再次,可以以諸如例如與輸出比特流455相關(guān)的元數(shù)據(jù)或輔助信息(未示出)的其它機(jī)制來(lái)提供。發(fā)信號(hào)可以指定特定的濾波器或方法。然而,它也可以指定可以進(jìn)一步為解碼器或后處理器提供靈活性的濾波器或方法的類(lèi)/類(lèi)型。例如,取代發(fā)出使用具有特定系數(shù)的可分離濾波器用于圖像的向上轉(zhuǎn)換的信號(hào),系統(tǒng)可以指定任何可分離的濾波器或具有特定長(zhǎng)度以及高于或低于特定長(zhǎng)度的可分離濾波器將導(dǎo)致可接受的性能。然后,在給定復(fù)雜度或可用性的情況下,解碼器或后處理器自由地選擇要使用的濾波器。如果濾波器不可用,則解碼器/后處理器也可選擇去選擇作為與發(fā)出信號(hào)的方法最相似的方法的方法(例如,對(duì)于可分離的濾波器示例,具有相同長(zhǎng)度的不可分離濾波器),或者選擇使用在系統(tǒng)中指定的、先前定義的“默認(rèn)”濾波器。在給定處理或裝置的其它特性的情況下,解碼器/后處理器還可以選擇方法或者完全忽略元數(shù)據(jù)信息。特別地,在給定裝置的功率/電池狀態(tài)的情況下,系統(tǒng)可選擇使用更高或更低復(fù)雜度的算法。實(shí)際上,本發(fā)明也可被構(gòu)造為還對(duì)在給定裝置的功率或復(fù)雜度印跡(footprint) 的情況下可以使用的元數(shù)據(jù)替選模式發(fā)出信號(hào)。例如,本發(fā)明可包括將多個(gè)替選圖嵌入在信號(hào)中(例如,2或更多),每個(gè)替選圖針對(duì)不同的裝置(例如,一個(gè)圖用于高清LCD TV,另一個(gè)圖用于等離子,另一個(gè)圖用于PC、iPod或iPhone等)和電池狀態(tài)。裝置可以檢測(cè)其對(duì)應(yīng)的圖,即,使用元數(shù)據(jù)中指定裝置的簽名,并且執(zhí)行其相應(yīng)的且優(yōu)化的處理。明顯的是,對(duì)于編碼系統(tǒng),在優(yōu)化和方法選擇處理期間,需要考慮所有的裝置。圖6是根據(jù)本發(fā)明的實(shí)施例的基于元數(shù)據(jù)的后處理器的圖。在該示例中,對(duì)編碼比特流605進(jìn)行解碼(解碼器650),并且將其提供到一系列濾波器,每個(gè)濾波器均對(duì)解碼信號(hào)進(jìn)行處理。元數(shù)據(jù)提取器識(shí)別要用于解碼比特流的正進(jìn)行濾波的當(dāng)前部分的、先前選擇的濾波器,并且從適當(dāng)?shù)臑V波器選擇濾波處理的輸出。在其它實(shí)施例中,元數(shù)據(jù)提取器可例如被輔助信息讀取器來(lái)替代,該輔助信息讀取器提供來(lái)自與輸入比特流605相關(guān)的輔助信息數(shù)據(jù)流的類(lèi)似信息。適當(dāng)?shù)臑V波器是由元數(shù)據(jù)/輔助信息標(biāo)識(shí)的濾波器,或者例如是最接近先前選擇的濾波器的特性的濾波器。所選擇的濾波器輸出然后提供輸出解碼的且濾波后的比特流680。圖7是根據(jù)本發(fā)明的實(shí)施例的、基于元數(shù)據(jù)的自適應(yīng)解碼的圖,其可用于例如錯(cuò)誤隱藏或解碼器簡(jiǎn)化。輸入比特流705被提供到一系列解碼機(jī)制720(例如,解碼器Ρ··Ν) 和元數(shù)據(jù)提取器770。元數(shù)據(jù)提取器770提取標(biāo)識(shí)先前選擇的解碼器或優(yōu)選解碼器的信號(hào), 該信號(hào)用于選擇來(lái)自一系列解碼機(jī)制720的適當(dāng)輸出。先前選擇的解碼器可以是特定的解碼器或者解碼器類(lèi)型,并且最終針對(duì)輸出比特流785選擇的解碼器輸出可以是先前選擇的解碼器、同一類(lèi)或類(lèi)型的解碼器、等同解碼器、一般解碼器或者利用如下參數(shù)優(yōu)化的解碼器或者其它該參數(shù)被選擇用于改變解碼器的性能,以與先前選擇的解碼器更好地匹配。對(duì)于一些應(yīng)用,可能期望的是,保留或改變圖像數(shù)據(jù)的處理、重編碼以及轉(zhuǎn)碼之后的元數(shù)據(jù)信息。特別地,如果內(nèi)容被重新縮放并且然后被重新編碼,則可以按原樣保留元數(shù)據(jù),或者在給定所應(yīng)用的縮放以及編碼的特性(例如,運(yùn)動(dòng)估計(jì)和補(bǔ)償?shù)男阅芤约傲炕瘏?shù))和該處理引入的假象的情況下,可以調(diào)整元數(shù)據(jù)。這可以降低重新評(píng)估可用處理方法的性能的復(fù)雜度。原始信號(hào)中用于后處理的推薦方法的特性也可以提供二次編碼中關(guān)于在隨后的解碼器處是否可應(yīng)用任何附加類(lèi)型的后處理以及何種類(lèi)型的后處理的提示。圖8是根據(jù)本發(fā)明的實(shí)施例的示例性解碼器800的圖。解碼器800利用元數(shù)據(jù) “提示”。其中,解碼器800包括元數(shù)據(jù)提取器810、循環(huán)濾波器840、視差補(bǔ)償器(提供視差補(bǔ)償)830和/或后處理器850,元數(shù)據(jù)提取器810提取在解碼器內(nèi)的多個(gè)處理中(諸如,例如解碼處理(例如,逆變換操作))所用的元數(shù)據(jù)。元數(shù)據(jù)提供用于在解碼器800、循環(huán)濾波器840、視差補(bǔ)償器830和/或后處理器850中使用的選擇、數(shù)據(jù)和/或參數(shù)中的一個(gè)或多個(gè)。元數(shù)據(jù)驅(qū)動(dòng)上述處理,例如以在這些被認(rèn)為這樣做是安全的情況下降低復(fù)雜度(例如, 以使得它們將產(chǎn)生最小的漂移和/或質(zhì)量影響)。在比特流中類(lèi)似地編碼的(或者在輔助信息中提供的)元數(shù)據(jù)可用于解碼器內(nèi)的任何其它處理或子處理或者其它外部功能。在描述圖中示出的本發(fā)明的優(yōu)選實(shí)施例時(shí),出于清楚目的而使用特定術(shù)語(yǔ)。然而, 本發(fā)明不旨在限于如此選擇的特定術(shù)語(yǔ),并且要理解,各個(gè)特定元件包括以類(lèi)似方式工作的所有技術(shù)等同方式。例如,當(dāng)描述解碼器時(shí),可用任何其它等同裝置或其中具有解碼器的裝置來(lái)替代,諸如,媒體播放器(例如,DVD、藍(lán)光、iPod、計(jì)算機(jī)等)、調(diào)諧器(例如,PAL、 ATSC等)、機(jī)頂盒、顯示器或電視機(jī)、或者具有等同功能或能力的其它裝置而不管此處是否列出。此外,發(fā)明人認(rèn)識(shí)到未知的新開(kāi)發(fā)的技術(shù)可用所述部分來(lái)替代,并且仍然不背離本發(fā)明的范圍。所有其它描述的項(xiàng)(包括但不限于裝置和處理器(例如,后處理器)、轉(zhuǎn)換方法、向上轉(zhuǎn)換方法、處理、算法、選擇機(jī)制、假象識(shí)別等)也應(yīng)該在任何以及所有可用的等同方式方面來(lái)考慮。對(duì)計(jì)算機(jī)領(lǐng)域的技術(shù)人員來(lái)說(shuō)明顯的是,本發(fā)明的部分可使用根據(jù)本公開(kāi)內(nèi)容的教導(dǎo)編程的傳統(tǒng)通用計(jì)算機(jī)或?qū)S脭?shù)字計(jì)算機(jī)或微處理器方便地實(shí)現(xiàn)。對(duì)軟件領(lǐng)域的技術(shù)人員來(lái)說(shuō)明顯的是,適當(dāng)?shù)能浖幋a可以由技術(shù)編程者基于本公開(kāi)內(nèi)容的教導(dǎo)而容易地編寫(xiě)。對(duì)本領(lǐng)域技術(shù)人員來(lái)說(shuō)明顯的是,基于本公開(kāi)內(nèi)容,本發(fā)明還可通過(guò)專(zhuān)用集成電路的制備或通過(guò)互聯(lián)傳統(tǒng)組成電路的適當(dāng)網(wǎng)絡(luò)來(lái)實(shí)現(xiàn)。本發(fā)明包括計(jì)算機(jī)程序產(chǎn)品,該計(jì)算機(jī)程序產(chǎn)品是其上存儲(chǔ)有指令的存儲(chǔ)介質(zhì)/ 該計(jì)算機(jī)程序產(chǎn)品可以用于控制或使得計(jì)算機(jī)執(zhí)行本發(fā)明的任何處理。存儲(chǔ)介質(zhì)可以包括但不限于任何類(lèi)型的盤(pán),包括軟盤(pán)、迷你盤(pán)(MD)、光盤(pán)、DVD、HD-DVD、藍(lán)光、CD-ROM、CD或者 DVD RW+/-、微驅(qū)動(dòng)器以及磁光盤(pán)、ROM、RAM、EPROM、EEPROM、DRAM、VRAM、閃存裝置(包括閃存卡、記憶棒)、磁卡或光卡、SIM卡、MEMS、納米系統(tǒng)(包括分子存儲(chǔ)器IC)、RAID裝置、遠(yuǎn)程數(shù)據(jù)存儲(chǔ)/存檔/存棧(warehousing)或者任何類(lèi)型的適合于存儲(chǔ)指令和/或數(shù)據(jù)的介質(zhì)或裝置。本發(fā)明包括存儲(chǔ)在任一計(jì)算機(jī)可讀介質(zhì)上的、用于控制通用/專(zhuān)用計(jì)算機(jī)或微處理器的硬件、以及用于使得計(jì)算機(jī)或微處理器能夠與人類(lèi)用戶(hù)或利用本發(fā)明的結(jié)果的其它機(jī)制交互的軟件。這樣的軟件可包括但不限于裝置驅(qū)動(dòng)、操作系統(tǒng)以及用戶(hù)應(yīng)用程序。最終,這樣的計(jì)算機(jī)可讀介質(zhì)還包括用于執(zhí)行如上所述的本發(fā)明的軟件。包括在通用/專(zhuān)用計(jì)算機(jī)或微處理器的編程(軟件)中的是軟件模塊,該軟件模塊用于實(shí)現(xiàn)本發(fā)明的教導(dǎo)內(nèi)容(包括但不限于方法的分析、方法的信令、方法的類(lèi)、方法的類(lèi)別、信號(hào)的準(zhǔn)備和傳輸、解碼器或后處理器處的信號(hào)的選擇)、實(shí)現(xiàn)在執(zhí)行后處理或解碼操作的至少部分的信號(hào)中標(biāo)識(shí)的算法、以及根據(jù)本發(fā)明的處理(其可包括例如后處理后的視頻信號(hào)到顯示器的傳遞)的結(jié)果的顯示、存儲(chǔ)或者通信。本發(fā)明的各個(gè)實(shí)施例可與以下的列舉示例實(shí)施例(EEE)中的一個(gè)或多個(gè)相關(guān),每個(gè)列舉示例實(shí)施例均是示例,并且如同以上提供的任何其它相關(guān)討論一樣,不應(yīng)被解釋為限制以下進(jìn)一步提供的、如現(xiàn)在有效的或者如稍后修改的、替換的或者增加的一個(gè)或多個(gè)任何權(quán)利要求。同樣,這些示例不應(yīng)被視為關(guān)于任何相關(guān)專(zhuān)利和/或?qū)@暾?qǐng)(包括任何外國(guó)或者國(guó)際對(duì)應(yīng)申請(qǐng)和/或?qū)@⒎职?、延續(xù)案、再頒專(zhuān)利(re-issue)等)的一個(gè)或多個(gè)任何權(quán)利要求而受到限制。示例列舉示例實(shí)施例I(EEEl). —種方法,包括接收表示要用于數(shù)據(jù)流的處理技術(shù)的信號(hào)的步驟。EEE2.根據(jù)EEEl的方法,其中,該處理技術(shù)包括以下中的至少一種分辨率轉(zhuǎn)換、 控制處理的復(fù)雜度、假象減少、誤差校正、錯(cuò)誤隱藏、縮放、內(nèi)插、現(xiàn)有處理工具的改變以及至少一種工具的使能或禁用。EEE3.根據(jù)EEE2的方法,其中,分辨率轉(zhuǎn)換包括空間分辨率轉(zhuǎn)換和時(shí)間分辨率轉(zhuǎn)換中的至少一種。EEE4.根據(jù)EEE2的方法,其中,縮放包括解交織、時(shí)間內(nèi)插以及空間內(nèi)插中的至少一種。EEE5.根據(jù)EEE2的方法,其中,錯(cuò)誤隱藏包括錯(cuò)誤的區(qū)域的運(yùn)動(dòng)預(yù)測(cè)。EEE6.根據(jù)EEEl的方法,其中,信號(hào)還表示要應(yīng)用處理技術(shù)的空間和時(shí)間范圍中的至少一個(gè)。EEE7.根據(jù)EEE6的方法,其中,數(shù)據(jù)流是視頻數(shù)據(jù)流,并且范圍包括處理技術(shù)是否應(yīng)用于所有視頻、視頻的部分、視頻的圖片以及視頻內(nèi)的區(qū)域中的至少一個(gè)。EEE8.根據(jù)EEE7的方法,其中,視頻的圖片包括視頻的幀和視頻的場(chǎng)中的任意。EEE9.根據(jù)EEEl的方法,其中,數(shù)據(jù)流包括具有至少兩個(gè)不同視圖的視頻,并且信號(hào)還表示處理技術(shù)是針對(duì)視頻的至少一幀內(nèi)的至少一個(gè)區(qū)域執(zhí)行的。EEE10.根據(jù)EEE9的方法,其中,不同的視圖包括立體畫(huà)法視圖、兩個(gè)不同的圖像、 二維圖像和深度信息、二維場(chǎng)景的多個(gè)視圖以及三維場(chǎng)景的多個(gè)視圖中的至少一個(gè)。EEEl 1.根據(jù)EEE9的方法,其中,以能夠?qū)崿F(xiàn)單個(gè)視圖視頻流的標(biāo)準(zhǔn)運(yùn)動(dòng)圖片格式在數(shù)據(jù)流內(nèi)壓縮和復(fù)用至少兩個(gè)不同的視圖。EEE12.根據(jù)EEE9的方法,其中,視圖的壓縮包括視圖的采樣、濾波以及抽選中的至少一個(gè)。EEE13.根據(jù)EEE9的方法,其中,視圖的壓縮包括水平、垂直濾波以及梅花采樣中的至少一個(gè)。EEE14.根據(jù)EEE9的方法,其中,視圖的壓縮包括濾波和采樣兩者。EEE15.根據(jù)EEE14的方法,其中,采樣包括水平、垂直、梅花、基于公式的、基于圖案的以及任意采樣中的至少一種。EEE16.根據(jù)EEE14的方法,其中,復(fù)用是以如下格式中的至少一種實(shí)現(xiàn)的棋盤(pán)格式、基于象限的格式、列格式、行格式、并排格式、上下格式、基于圖案的格式以及替選格式。EEE17.根據(jù)EEEl的方法,其中,信號(hào)標(biāo)識(shí)要應(yīng)用于圖像或視頻場(chǎng)景的區(qū)域的解碼處理的至少部分和解碼后處理的至少部分中的至少一個(gè),該圖像或視頻場(chǎng)景的區(qū)域具有所標(biāo)識(shí)的處理有效地對(duì)其作用的特性。EEE18.根據(jù)EEE17的方法,其中,特性包括區(qū)域的紋理、輪廓、邊緣、對(duì)比度、動(dòng)態(tài)范圍以及亮度中的至少一個(gè)。EEE19.根據(jù)EEEl的方法,其中,信號(hào)是從數(shù)據(jù)流和與該數(shù)據(jù)流相關(guān)的輔助信息中的至少一個(gè)接收的。EEE20.根據(jù)EEEl的方法,其中,發(fā)信號(hào)包括要應(yīng)用于序列、圖片組(GOP)以及具有固定、任意或變化尺寸之一的區(qū)域中的至少一個(gè)的處理技術(shù)。EEE21.根據(jù)EEE20的方法,其中,該方法還包括如下步驟基于發(fā)出信號(hào)的處理技術(shù)選擇至少一種處理技術(shù),以及將所選擇的處理技術(shù)應(yīng)用于序列、GOP以及區(qū)域中的至少一個(gè)。EEE22.根據(jù)EEE21的方法,其中,選擇步驟由解碼器執(zhí)行,該解碼器被配置成通過(guò)對(duì)序列、圖片組(GOP)以及區(qū)域中的至少一個(gè)應(yīng)用所選擇的處理技術(shù)來(lái)對(duì)數(shù)據(jù)流進(jìn)行解碼。EEE23.根據(jù)EEE21的方法,其中,選擇步驟包括選擇不同處理技術(shù)類(lèi)別中的處理技術(shù),該處理技術(shù)與發(fā)出信號(hào)的處理技術(shù)不同但是最接近發(fā)出信號(hào)的處理技術(shù)。EEE24.根據(jù)EEEl的方法,其中,處理技術(shù)包括一系列處理技術(shù)。EEE25.根據(jù)EEE24的方法,其中,一系列處理技術(shù)包括內(nèi)插處理、濾波以及去塊處理中的至少一種。EEE26.根據(jù)EEEl的方法,其中,發(fā)信號(hào)包括發(fā)出一族處理技術(shù)的信號(hào),并且該方法還包括如下步驟從發(fā)出信號(hào)的族選擇至少一種處理技術(shù),以及將所選擇的技術(shù)應(yīng)用于序列、圖片組(GOP)以及具有固定、任意或變化尺寸之一的區(qū)域中的至少一個(gè)。EEE27.根據(jù)EEEl的方法,其中,處理技術(shù)是經(jīng)由接收數(shù)據(jù)流之前的預(yù)處理選擇的。EEE28.根據(jù)EEE27的方法,其中,預(yù)處理包括在支配數(shù)據(jù)流用于介質(zhì)存儲(chǔ)或廣播之前執(zhí)行的工作室工作。EEE29.根據(jù)EEE27的方法,其中,處理技術(shù)是從數(shù)據(jù)流的重放開(kāi)始動(dòng)態(tài)地執(zhí)行的。EEE30.根據(jù)EEE27的方法,其中,預(yù)處理包括對(duì)相似數(shù)據(jù)流的一組潛在處理技術(shù)的重復(fù)執(zhí)行以及所選擇的處理技術(shù)的標(biāo)識(shí)符在數(shù)據(jù)流和與該數(shù)據(jù)流相關(guān)的輔助信息中的至少一個(gè)中的嵌入。EEE31.根據(jù)EEE27的方法,其中,預(yù)處理是在數(shù)據(jù)流捕獲的視頻的重放期間動(dòng)態(tài)地執(zhí)行的。EEE32.根據(jù)EEE27的方法,其中,所選擇的處理技術(shù)包括最低成本處理技術(shù)、最高性能處理技術(shù)以及在成本和性能之間的組合或折衷中的至少一種。EEE33.根據(jù)EEE32的方法,其中,成本包括復(fù)雜度、面積、功率以及價(jià)格中的至少一個(gè)。EEE34.根據(jù)EEE32的方法,其中,性能包括質(zhì)量和速度中的至少一個(gè)。EEE35.根據(jù)EEEl的方法,其中,數(shù)據(jù)流包括編碼視頻數(shù)據(jù)流,并且發(fā)出信號(hào)的處理技術(shù)被選擇為增強(qiáng)針對(duì)視頻數(shù)據(jù)流的圖片、圖片組(GOP)以及區(qū)域的至少一個(gè)的解碼和解碼的后處理之一。
EEE36.根據(jù)EEE35的方法,其中,處理技術(shù)是在視頻數(shù)據(jù)流的編碼之前、期間或之 后中的至少一個(gè)選擇的。EEE37.根據(jù)EEE35的方法,其中,數(shù)據(jù)流包括轉(zhuǎn)碼的編碼視頻流。EEE38.根據(jù)EEE37的方法,其中,處理技術(shù)是在視頻數(shù)據(jù)流的轉(zhuǎn)碼之前、期間或之 后中的至少一個(gè)選擇的。EEE39.根據(jù)EEE35的方法,其中,處理技術(shù)包括要與對(duì)視頻數(shù)據(jù)流的區(qū)域的處理 技術(shù)結(jié)合使用的參數(shù),并且方法還包括接收對(duì)于區(qū)域和不同區(qū)域的子區(qū)域中的至少一個(gè)的 參數(shù)改變。EEE40. —種方法,包括以下步驟選擇用于改進(jìn)要從編碼視頻解碼的視頻的至少部分的機(jī)制,其中,所選擇的機(jī)制 被配置成指導(dǎo)編碼視頻的解碼和應(yīng)用于解碼之后的視頻的后處理中的至少一個(gè);以及將所選擇的機(jī)制以及所選擇的機(jī)制的標(biāo)識(shí)符中的至少一個(gè)作為指導(dǎo)信號(hào)打包為 編碼視頻和編碼視頻的輔助信息中的至少一個(gè)。EEE41.根據(jù)EEE40的方法,其中,所選擇的機(jī)制包括處理和處理的參數(shù)中的至少一個(gè)。EEE42.根據(jù)EEE40的方法,其中,視頻的部分包括視頻的區(qū)域和子區(qū)域中的至少一個(gè)。EEE43.根據(jù)EEE40的方法,其中,視頻的部分包括視頻的圖像、視頻的圖像序列、 視頻的圖像區(qū)域、跨越視頻的巾貞的動(dòng)態(tài)區(qū)域以及視頻的任意子區(qū)域中的至少一個(gè)。EEE44.根據(jù)EEE40的方法,其中,視頻的部分包括視頻的包括塊的區(qū)域或子區(qū)域。EEE45.根據(jù)EEE40的方法,其中,視頻的部分包括視頻的包括多個(gè)塊的區(qū)域或子 區(qū)域。EEE46.根據(jù)EEE45的方法,其中,塊是不鄰接的。EEE47.根據(jù)EEE45的方法,其中,塊包括棋盤(pán)圖案的至少部分。EEE48.根據(jù)EEE40的方法,其中,視頻的部分包括跨越視頻的多個(gè)巾貞的視頻數(shù)據(jù) 樣本的幾何布置。EEE49.根據(jù)EEE48的方法,其中,幾何布置在尺寸和形狀中的至少一個(gè)方面在視 頻的巾貞之間變化。EEE50.根據(jù)EEE40的方法,其中,視頻的部分包括視頻數(shù)據(jù)樣本的不規(guī)則布置。EEE51.根據(jù)EEE40的方法,其中,視頻的部分包括視頻的立體場(chǎng)景的協(xié)同定位的 樣本。EEE52.根據(jù)EEE40的方法,其中,視頻的部分包括具有MXKXN的長(zhǎng)方體,其中,M 是寬度,K是高度,并且N是時(shí)間樣本的數(shù)量。EEE53.根據(jù)EEE40的方法,其中,視頻的部分包括片段和跨越多個(gè)巾貞跟蹤的對(duì)象之一。EEE54.根據(jù)EEE40的方法,其中,視頻的部分通過(guò)用戶(hù)輸入、分割、對(duì)象跟蹤、場(chǎng)景 剪輯檢測(cè)、邊緣檢測(cè)、分水嶺、豪斯多夫方法、K均值、運(yùn)動(dòng)檢測(cè)、運(yùn)動(dòng)估計(jì)、運(yùn)動(dòng)分析以及質(zhì) 量評(píng)估中的至少一種來(lái)確定。EEE55.根據(jù)EEE40的方法,還包括針對(duì)視頻的第2部分重復(fù)選擇和打包步驟的步馬聚οEEE56.根據(jù)EEE55的方法,其中,視頻的部分包括規(guī)則形狀的區(qū)域,并且視頻的第 2部分包括不規(guī)則形狀的區(qū)域。EEE57.根據(jù)EEE55的方法,其中,視頻的部分和視頻的第2部分重疊。EEE58.根據(jù)EEE57的方法,其中,所選擇的機(jī)制包括如何對(duì)視頻重疊中的機(jī)制執(zhí)行的處理進(jìn)行平均的指令。EEE59.根據(jù)EEE57的方法,其中,所選擇的機(jī)制包括如何順序啟動(dòng)視頻重疊中的機(jī)制的指令。EEE60.根據(jù)EEE57的方法,其中,視頻的部分是預(yù)先定義的,并且打包不包含標(biāo)識(shí)該部分的信息。EEE61.根據(jù)EEE57的方法,其中,視頻的部分是使用長(zhǎng)方體描述、基于向量的描述以及基于光柵的描述中的至少一種定義的。EEE62.根據(jù)EEE40的方法,其中,視頻的部分是以使用圖像格式編碼的數(shù)據(jù)標(biāo)識(shí)的。EEE63.根據(jù)EEE40的方法,其中,視頻的部分是以使用如下格式編碼的數(shù)據(jù)標(biāo)識(shí)的該格式包括 CGM、SVG, EPS、WMF、TIFF、BMP、JPEG、JPEG-2000、MPEG-2 以及 H. 264 和 MPEG4-AVC中的至少一種。EEE64.根據(jù)EEE40的方法,其中,視頻的部分包括以過(guò)程圖標(biāo)識(shí)的區(qū)域。
根據(jù)EEE40的方法,其中,視頻的部分包括以圖像或圖形格式中的至少一
根據(jù)EEE40的方法,還包括將序列指令連同指導(dǎo)信號(hào)一起打包的步驟。 根據(jù)EEE40的方法,其中,指導(dǎo)信號(hào)包括表示要執(zhí)行的各種處理的優(yōu)選順EEE65
種映射的區(qū)域。EEE66EEE67 序的排序。EEE68.根據(jù)EEE40的方法,其中,指導(dǎo)信號(hào)包括要至少部分由所選擇的機(jī)制執(zhí)行的空間向上采樣、時(shí)間向上采樣以及去塊的排序。EEE69.根據(jù)EEE40的方法,其中,視頻的部分包括被劃分成一系列子區(qū)域的區(qū)域, 其中,所選擇的機(jī)制包括與第一子區(qū)域?qū)?yīng)的第1參數(shù)以及與第二子區(qū)域?qū)?yīng)的第2參數(shù)。EEE70.根據(jù)EEE40的方法,其中,機(jī)制是至少部分基于機(jī)制的復(fù)雜度而選擇的。EEE71.根據(jù)EEE40的方法,其中,所選擇的機(jī)制具有對(duì)于給定質(zhì)量閾值的最低復(fù)雜度。EEE72.根據(jù)EEE40的方法,其中所述方法以存儲(chǔ)在電可讀介質(zhì)上的一組指令來(lái)實(shí)施;所述指令當(dāng)被加載到處理裝置中時(shí),使得處理裝置執(zhí)行所述方法的步驟。EEE73.根據(jù)EEE72的方法,其中,所述指令是作為可執(zhí)行程序存儲(chǔ)在所述電可讀介質(zhì)上的編譯計(jì)算機(jī)指令。EEE74.根據(jù)EEE40的方法,其中,所述方法以存儲(chǔ)在電信號(hào)中的一組電可讀指令來(lái)實(shí)施。EEE75. —種后處理裝置,包括視頻輸入,被配置成接收解碼視頻流;
指令機(jī)制,被配置成接受來(lái)自視頻流的輔助信息信道的指導(dǎo)指令以及從解碼視頻 流識(shí)別指導(dǎo)指令之一;后處理器,被配置成基于指導(dǎo)指令對(duì)解碼視頻流進(jìn)行后處理;以及視頻輸出,被配置成輸出后處理后的視頻流。EEE76.根據(jù)EEE75的后處理裝置,其中,后處理裝置被集成到顯示器、機(jī)頂盒以及 媒體播放器中的至少ー個(gè)中。EEE77.根據(jù)EEE75的后處理裝置,其中,指導(dǎo)指令包括視頻中的至少ー個(gè)區(qū)域和 要應(yīng)用于該區(qū)域的至少ー種處理方法的標(biāo)識(shí)。EEE78.根據(jù)EEE77的后處理裝置,其中,區(qū)域包括子區(qū)域,并且指導(dǎo)指令包括要應(yīng) 用于對(duì)各個(gè)子區(qū)域進(jìn)行處理的處理方法的不同參數(shù)。EEE79.根據(jù)EEE77的后處理裝置,其中,指導(dǎo)信號(hào)標(biāo)識(shí)具有不同紋理質(zhì)量的區(qū)域 以及專(zhuān)用于各種紋理質(zhì)量的處理方法。EEE80.根據(jù)EEE75的后處理裝置,其中,指導(dǎo)信號(hào)包括在對(duì)解碼視頻流測(cè)試多個(gè) 濾波器之后選擇的濾波器標(biāo)識(shí)。EEE81.根據(jù)EEE80的后處理裝置,其中,濾波器標(biāo)識(shí)包括濾波器的整個(gè)類(lèi)別的標(biāo) 識(shí)。EEE82.根據(jù)EEE81的后處理裝置,其中,后處理器進(jìn)ー步被配置成根據(jù)濾波器類(lèi) 別選擇濾波器,并且利用所選擇的濾波器來(lái)對(duì)解碼視頻流進(jìn)行后處理。EEE83.根據(jù)EEE82的后處理裝置,其中,后處理器進(jìn)ー步被配置成選擇具有最接 近濾波器類(lèi)別的特性的特性的濾波器,并且利用所選擇的濾波器作為后處理的至少部分。EEE84.根據(jù)EEE80的后處理裝置,其中,后處理器進(jìn)ー步被配置成選擇已知為具 有如下特性的濾波器該特性是接近濾波器標(biāo)識(shí)所標(biāo)識(shí)的濾波器的特性、或比濾波器標(biāo)識(shí) 所標(biāo)識(shí)的濾波器的特性更好的特性中的至少ー種。EEE85.根據(jù)EEE80的后處理裝置,其中,濾波器標(biāo)識(shí)是基于失真和復(fù)雜度中的至 少ー個(gè)而選擇的。EEE86.根據(jù)EEE84的方法,其中,失真經(jīng)由以下中的至少ー種來(lái)評(píng)估SAD、SSE、主 觀評(píng)估、塊化、方差、頻率特性、圖像/紋理銳度、邊緣質(zhì)量以及空間或時(shí)間上的假象。EEE87.根據(jù)EEE80的后處理裝置,其中,測(cè)試是在開(kāi)環(huán)類(lèi)型的測(cè)試裝置中執(zhí)行的。EEE88.根據(jù)EEE80的后處理裝置,其中,測(cè)試是在閉環(huán)類(lèi)型的測(cè)試裝置中執(zhí)行的。EEE89.根據(jù)EEE80的后處理裝置,其中,測(cè)試是針對(duì)視頻的多個(gè)區(qū)域而執(zhí)行的。EEE90.根據(jù)EEE89的后處理裝置,其中,多個(gè)區(qū)域包括視頻的時(shí)間區(qū)域。EEE91.根據(jù)EEE90的后處理裝置,其中,多個(gè)時(shí)間區(qū)域包括具有變化形狀和尺寸 的區(qū)域。EEE92.根據(jù)EEE89的方法,其中,視頻的區(qū)域通過(guò)分割、對(duì)象跟蹤、場(chǎng)景剪輯檢測(cè)、 邊緣檢測(cè)、分水嶺、豪斯多夫方法、K均值、運(yùn)動(dòng)檢測(cè)、運(yùn)動(dòng)估計(jì)以及運(yùn)動(dòng)分析中的至少ー種 來(lái)確定。EEE93.根據(jù) EEE75 的方法,其中,視頻的區(qū)域使用 CGM、SVG、EPS、WMF、TIFF、BMP、 JPEG、JPEG-2000、MPEG-2 以及 H. 264 和 MPEG4-AVC 中的至少ー種來(lái)標(biāo)識(shí)。EEE94. —種系統(tǒng),包括
編碼器,被配置成選擇要在解碼器中利用的處理技術(shù)、處理技術(shù)類(lèi)別以及一系列處理技術(shù)中的至少一個(gè),以及在編碼視頻流和與編碼視頻流相關(guān)的輔助信息中的至少一個(gè)中對(duì)所選擇的技術(shù)或所選擇的技術(shù)的標(biāo)識(shí)符進(jìn)行編碼;以及解碼器,被配置成接收編碼視頻流,以及使用所選擇的技術(shù)中的至少一種對(duì)視頻流進(jìn)行解碼。EEE95.根據(jù)EEE94的系統(tǒng),其中,所選擇的技術(shù)是從編碼視頻流單獨(dú)識(shí)別的。EEE96.根據(jù)EEE94的系統(tǒng),其中,所選擇的技術(shù)是由解碼器從相關(guān)的輔助信息和編碼視頻流中的至少一個(gè)識(shí)別的。EEE97.根據(jù)EEE94的系統(tǒng),其中,技術(shù)是基于質(zhì)量、復(fù)雜度以及成本中的至少一個(gè)而選擇的。EEE98.根據(jù)EEE94的系統(tǒng),其中,解碼器使用所選擇的處理技術(shù)來(lái)選擇另一處理技術(shù)。EEE99.根據(jù)EEE94的系統(tǒng),其中,解碼器保存處理技術(shù)的目錄,并且從目錄中選擇與編碼器選擇的技術(shù)最接近匹配的一種或多種處理技術(shù)。EEE100.根據(jù)EEE98的系統(tǒng),其中,解碼器選擇的技術(shù)是基于復(fù)雜度、成本以及質(zhì)量中的至少一個(gè)而選擇的。EEE101.根據(jù)EEE98的系統(tǒng),其中,解碼器選擇的技術(shù)是考慮到解碼器中可用的處理功率量而至少部分基于復(fù)雜度選擇的。EEE102. 一種解碼器,被配置成使用在視頻流或者經(jīng)由與視頻流相關(guān)的輔助信息中標(biāo)識(shí)的解碼處理和后處理之一來(lái)對(duì)編碼視頻流進(jìn)行解碼,其中,解碼器被配置成執(zhí)行用于為解碼處理或后處理提供輔助的、對(duì)視頻流和解碼視頻流中的至少一個(gè)的附加分析。EEE103.根據(jù)EEE102的解碼器,其中,附加分析利用在編碼視頻流或輔助信息中編碼的信息。EEE104.根據(jù)EEE102的解碼器,其中,附加分析至少部分由在編碼視頻流或輔助信息中編碼的信息來(lái)指導(dǎo)。EEE105.根據(jù)EEE102的解碼器,其中,附加分析包括在視頻流編碼的或在輔助信息中提供的信息的細(xì)化。EEE106.根據(jù)EEE105的解碼器,其中,細(xì)化包括較低成本。EEE107.根據(jù)EEE75的后處理裝置,還包括后處理分析器,該后處理分析器被配置成分析解碼視頻流和解碼之前的視頻流中的至少一個(gè),以及基于該分析,指導(dǎo)解碼處理和后處理器中的至少一個(gè)的至少部分。EEE108.根據(jù)EEE107的后處理裝置,其中,分析器是基于包含在視頻流或與視頻流相關(guān)的輔助信息中的信息而被指導(dǎo)的。EEE109.根據(jù)EEE40的方法,還包括以下步驟針對(duì)在解碼和/或解碼之后的視頻數(shù)據(jù)的后處理期間要由解碼器和后處理器中的至少一個(gè)執(zhí)行的附加分析而對(duì)指導(dǎo)指令進(jìn)行打包。EEE110. —種方法,包括以下步驟接收表示要用于編碼視頻數(shù)據(jù)流的處理技術(shù)的信號(hào),該編碼視頻數(shù)據(jù)流包括向下采樣的復(fù)用的視圖;以及
執(zhí)行與所接收的信號(hào)一致的編碼視頻流的解碼和后處理中的至少一個(gè);以及執(zhí)行編碼視頻流和解碼/經(jīng)后處理的視頻流中的至少一個(gè)的進(jìn)一步分析,以及基于該分析,執(zhí)行改進(jìn)解碼、改進(jìn)后處理以及執(zhí)行第二后處理中的至少一個(gè)。EEEl 11.根據(jù)EEEllO的方法,還包括在EEE 2-39中描述的任意步驟。EEE112.根據(jù)EEEllO的方法,其中,執(zhí)行進(jìn)一步分析的步驟包括所指示的處理技術(shù)的細(xì)化。EEE113.根據(jù)EEE112的方法,其中,該方法由媒體播放器、機(jī)頂盒、轉(zhuǎn)換器盒以及顯示裝置中的至少一個(gè)來(lái)執(zhí)行。本發(fā)明可適當(dāng)?shù)匕ā?、或者基本上包含如本文所述的元?本發(fā)明的各種部件或特征)和它們的等同方式中的任意。此外,本文說(shuō)明性地公開(kāi)的本發(fā)明可在不存在任意元件的情況下來(lái)實(shí)踐,不管是否在本文中具體地公開(kāi)。顯然,按照以上教導(dǎo),本發(fā)明的多種修改和變化是可能的。因此,要理解的是,在所附權(quán)利要求的范圍內(nèi),本發(fā)明可以以除本文具體描述的方式之外的方式來(lái)實(shí)踐。
權(quán)利要求
1.一種方法,包括接收表示要用于數(shù)據(jù)流的處理技術(shù)的信號(hào)的步驟,所述數(shù)據(jù)流包括具有至少兩個(gè)視圖的視頻。
2.根據(jù)權(quán)利要求1所述的方法,其中,所述處理技術(shù)包括分辨率轉(zhuǎn)換,所述分辨率轉(zhuǎn)換包括空間分辨率轉(zhuǎn)換和時(shí)間分辨率轉(zhuǎn)換中的至少一種。
3.根據(jù)權(quán)利要求1所述的方法,其中,所述處理技術(shù)包括縮放,所述縮放包括解交織、 時(shí)間內(nèi)插以及空間內(nèi)插中的至少一種。
4.根據(jù)權(quán)利要求1所述的方法,其中,所述處理技術(shù)包括錯(cuò)誤隱藏,所述錯(cuò)誤隱藏包括錯(cuò)誤的區(qū)域的運(yùn)動(dòng)預(yù)測(cè)。
5.根據(jù)權(quán)利要求1所述的方法,其中,所述信號(hào)還表示要應(yīng)用所述處理技術(shù)的空間和時(shí)間范圍中的至少一個(gè),并且所述數(shù)據(jù)流是視頻數(shù)據(jù)流,且所述范圍包括所述處理技術(shù)是否應(yīng)用于所述視頻的全部、所述視頻的部分、所述視頻的圖片以及所述視頻內(nèi)的區(qū)域中的至少一個(gè)。
6.根據(jù)權(quán)利要求1所述的方法,其中,所述視圖包括立體畫(huà)法視圖、兩個(gè)不同的圖像、 二維圖像和深度信息、二維場(chǎng)景的多個(gè)視圖以及三維場(chǎng)景的多個(gè)視圖中的至少一個(gè)。
7.根據(jù)權(quán)利要求1所述的方法,其中,以能夠?qū)崿F(xiàn)單個(gè)視圖視頻流的標(biāo)準(zhǔn)化運(yùn)動(dòng)圖片格式在所述數(shù)據(jù)流內(nèi)對(duì)所述至少兩個(gè)視圖進(jìn)行壓縮和復(fù)用。
8.根據(jù)權(quán)利要求7所述的方法,其中,所述視圖的壓縮包括所述視圖的采樣、濾波以及抽選中的至少一個(gè);以及所述視圖的壓縮包括水平、垂直濾波以及梅花采樣中的至少一個(gè)。
9.根據(jù)權(quán)利要求14所述的方法,其中,所述采樣包括水平、垂直、梅花、基于公式的、基于圖案的以及任意采樣中的至少一種;以及所述復(fù)用是以下述格式中的至少一種實(shí)現(xiàn)的 棋盤(pán)格式、基于象限的格式、列格式、行格式、并排格式、上下格式、基于圖案的格式以及替選格式。
10.根據(jù)權(quán)利要求1所述的方法,其中,所述信號(hào)標(biāo)識(shí)要應(yīng)用于圖像或視頻場(chǎng)景的區(qū)域的解碼處理的至少部分和解碼后處理的至少部分中的至少一個(gè),所述圖像或視頻場(chǎng)景的區(qū)域具有所標(biāo)識(shí)的處理有效地對(duì)其作用的特性;所述特性包括所述區(qū)域的紋理、輪廓、邊緣、對(duì)比度、動(dòng)態(tài)范圍以及亮度中的至少一個(gè);以及發(fā)信號(hào)包括要應(yīng)用于序列、圖片組GOP以及具有固定、任意或變化尺寸之一的區(qū)域中的至少一個(gè)的處理技術(shù)。
11.根據(jù)權(quán)利要求1所述的方法,還包括以下步驟基于表示信號(hào)選擇至少一種處理技術(shù),以及將所選擇的處理技術(shù)應(yīng)用于所述視頻的所述序列、GOP以及區(qū)域中的至少一個(gè);以及其中,所述選擇步驟是由解碼器執(zhí)行的,所述解碼器被配置成通過(guò)對(duì)所述序列、圖片組 GOP以及區(qū)域中的至少一個(gè)應(yīng)用所選擇的處理技術(shù)來(lái)對(duì)所述數(shù)據(jù)流進(jìn)行解碼。
12.根據(jù)權(quán)利要求1所述的方法,其中,所述處理技術(shù)包括一系列處理技術(shù),所述一系列處理技術(shù)包括內(nèi)插處理、濾波和去塊處理中的至少一種。
13.根據(jù)權(quán)利要求1所述的方法,其中,所述發(fā)信號(hào)包括發(fā)出一族處理技術(shù)的信號(hào),并且所述方法還包括以下步驟從發(fā)出信號(hào)的族選擇至少一種處理技術(shù),以及將所選擇的技術(shù)應(yīng)用于序列、圖片組GOP以及具有固定、任意或變化尺寸之一的區(qū)域中的至少一個(gè)。
14.根據(jù)權(quán)利要求1所述的方法,其中,所述數(shù)據(jù)流包括轉(zhuǎn)碼編碼視頻流。
15.一種后處理裝置,包括視頻輸入,被配置成接收解碼視頻流;指令機(jī)制,被配置成接受來(lái)自所述視頻流的輔助信息信道的指導(dǎo)指令以及從所述解碼視頻流識(shí)別指導(dǎo)指令之一;后處理器,被配置成基于所述指導(dǎo)指令對(duì)所述解碼視頻流進(jìn)行后處理;以及視頻輸出,被配置成輸出后處理后的視頻流。
16.根據(jù)權(quán)利要求15所述的后處理裝置,其中,所述后處理裝置被集成到顯示器、機(jī)頂盒以及媒體播放器的至少一個(gè)中。
17.根據(jù)權(quán)利要求15所述的后處理裝置,其中,所述指導(dǎo)指令包括所述視頻中的至少一個(gè)區(qū)域和要應(yīng)用于所述區(qū)域的至少一種處理方法的標(biāo)識(shí),以及所述區(qū)域包括子區(qū)域,并且所述指導(dǎo)指令包括要應(yīng)用于對(duì)各個(gè)子區(qū)域進(jìn)行處理的處理方法的不同參數(shù)。
18.根據(jù)權(quán)利要求17所述的后處理裝置,其中,所述指導(dǎo)信號(hào)標(biāo)識(shí)具有不同紋理質(zhì)量的區(qū)域和專(zhuān)用于各種紋理質(zhì)量的處理方法。
19.根據(jù)權(quán)利要求15所述的后處理裝置,其中,所述指導(dǎo)信號(hào)包括在對(duì)所述解碼視頻流測(cè)試多個(gè)濾波器之后選擇的濾波器標(biāo)識(shí)。
20.根據(jù)權(quán)利要求15所述的后處理裝置,其中,所述指導(dǎo)信號(hào)包括濾波器標(biāo)識(shí),所述濾波器標(biāo)識(shí)包括濾波器的整個(gè)類(lèi)別的標(biāo)識(shí),并且所述后處理器進(jìn)一步被配置成根據(jù)所述濾波器類(lèi)別選擇濾波器,并且利用所選擇的濾波器對(duì)所述解碼視頻流進(jìn)行后處理。
21.根據(jù)權(quán)利要求20所述的后處理裝置,其中,所述后處理器進(jìn)一步被配置成選擇具有最接近所述濾波器類(lèi)別的特性的特性的濾波器,并且利用所選擇的濾波器作為所述后處理的至少部分。
22.根據(jù)權(quán)利要求19所述的后處理裝置,其中,所述后處理器進(jìn)一步被配置成選擇已知為具有以下特性的濾波器所述特性是接近所述濾波器標(biāo)識(shí)所標(biāo)識(shí)的濾波器的特性、或比所述濾波器標(biāo)識(shí)所標(biāo)識(shí)的濾波器的特性更好的特性中的至少一種。
23.根據(jù)權(quán)利要求15所述的后處理裝置,還包括后處理分析器,所述后處理分析器被配置成分析所述解碼視頻流和解碼之前的所述視頻流中的至少一個(gè),以及基于所述分析, 指導(dǎo)解碼處理和所述后處理器中的至少一個(gè)的至少部分。
24.一種系統(tǒng),包括編碼器,被配置成選擇要在解碼器中利用的處理技術(shù)、處理技術(shù)類(lèi)別以及一系列處理技術(shù)中的至少一個(gè),以及在編碼視頻流和與所述編碼視頻流相關(guān)的輔助信息中的至少一個(gè)中對(duì)所選擇的技術(shù)或所選擇的技術(shù)的標(biāo)識(shí)符進(jìn)行編碼;以及解碼器,被配置成接收所述編碼視頻流,以及使用所選擇的技術(shù)中的至少一種對(duì)所述視頻流進(jìn)行解碼。
25.根據(jù)權(quán)利要求M所述的系統(tǒng),其中,所選擇的技術(shù)是由所述解碼器從相關(guān)的輔助信息和所述編碼視頻流中的至少一個(gè)識(shí)別的。
26.根據(jù)權(quán)利要求M所述的系統(tǒng),其中,所述解碼器使用所選擇的處理技術(shù)來(lái)選擇另一處理技術(shù)。
27.根據(jù)權(quán)利要求M所述的系統(tǒng),其中,所述解碼器保存處理技術(shù)的目錄,并且從所述目錄中選擇與所述編碼器選擇的技術(shù)最接近匹配的一種或多種處理技術(shù)。
全文摘要
編碼裝置對(duì)要應(yīng)用于視頻流的多種處理和/或后處理算法和/或方法進(jìn)行評(píng)估,以及以編碼比特流或作為與編碼比特流相關(guān)的輔助信息而發(fā)出所選擇的方法、算法、方法/算法的類(lèi)或類(lèi)別的信號(hào)。解碼裝置或后處理器利用發(fā)出信號(hào)的算法,或者基于發(fā)出信號(hào)的方法或算法而選擇算法/方法。選擇例如基于解碼器/后處理器處的算法/方法的可用性和/或?qū)崿F(xiàn)的成本。視頻流可包括例如向下采樣的復(fù)用立體圖像,并且所選擇的算法可包括有助于向下采樣圖像的恢復(fù)的向上轉(zhuǎn)換和/或誤差校正技術(shù)中的任意。
文檔編號(hào)H04N7/26GK102450010SQ201080013000
公開(kāi)日2012年5月9日 申請(qǐng)日期2010年4月20日 優(yōu)先權(quán)日2009年4月20日
發(fā)明者亞歷山德羅斯·圖拉皮斯, 佩沙拉·V·帕哈拉瓦達(dá), 凱文·J·斯特茨, 阿薩納西奧斯·萊昂塔里斯 申請(qǐng)人:杜比實(shí)驗(yàn)室特許公司