專利名稱：：用于在視頻編碼中隨機存取和逐步更新圖像的方法用于在柳頻編碼中隨IM取和逐步，圖像的方法相關申請的參考本申請是國家申請?zhí)枮?3816727.1的申請的分案申請，該申請的國際申請日是2003年7月16日，國際申請?zhí)柺荘CT/US2003/022262,發(fā)明名稱是"AMETHODFORRANDOMACCESSANDGRADUALPICTUREREFRESHINVIDEOCODING(用于在現(xiàn)頻編碼中隨機存取和逐步魏圖像的方法)"。相關申請的^X參考本專利申請要求申i轉為60396200，申請日為2002年4月16的申請的優(yōu)先權。本發(fā)明主要涉M柳頃圖像的隨機存取和逐步Mff。特別地，本發(fā)明涉及一禾中在根據ITU-TH.264|ISO/ECMPEG4第十部分柳鵬碼標準編碼的現(xiàn)辦歹仲的柳頻圖像的隨m^取和逐步，的方法。背景脈視頻齊列由一系列的靜止圖41>條^;。視/!M^方^S于^HJi!/，列的兀余的以及與感知上不相關的部分。柳頻,列中的冗余可以分類為頻譜、空間和時間冗余。頻譜冗余涉及到同一圖像中不同顏色成分之間的相似性，而空間冗余是由于圖像中的相鄰象素之間的糊以ffiM的。時間冗余是因為在先前圖像中出現(xiàn)的物體在當前圖像中很可育級會出現(xiàn)而存在的。fi^PI以Mil利用時間冗余和根據另一個被稱為錨定或##圖像的圖像將頁測當前圖像來誠。實際上，這是3iil產生一個描述在當前謝射晩前圖^t間的運動的運動彬嘗,來完成的。視頻壓縮方法典型地區(qū)分禾,時間兀余減少的圖像和那些不利用時間冗余>的圖像。不利用時間冗余>方法的臓圖{繊常被稱為INTRA域I)幀或圖像。在時間上預測的圖^M常是根據在當前圖^^前出現(xiàn)的圖像向前預測出的，并且被稱為INTER或P幀。在INTER幀的情況下，預測的運動卑M嘗圖傲艮難足夠精確，因而空間臓的預測體幀會伴隨魏一個INTER幀。INTER圖像可以包括INTRA^馬區(qū)域。B圖像|入到I稱或P幀的錨定圖f樹之間，并根據其中的一個或兩，定圖像5l^翻!)。B圖{魏常產生與向前預測的INTER編碼的P斷象相比增強的臓。B圖像不當作固定器(anchor)圖像{頓，iMI是，其它的圖像不根據它們^J頁測。因此，它們可以被丟棄(有mtlM^意地)，而不會影響將來的圖像的圖像質量。同時，與P圖像比較，B圖像可以改善i^縮性能，它們的產生需要更大的計算復雜性和存儲器《頓，并且它們還4引入附加的延時。對于例如挪頻流的非實時應用來說這可能不是一個問題，但就于例如現(xiàn)^i義的實時鵬來說就會弓跑問題。因而，如上面所闡述的，一個ii^的挪^l^典型地由圖像序列^臓，該圖像序列被粗略地分類為在時間上獨立的INTRA圖像，在時間上被不同編碼的INTER圖像和(可能的)雙向預測B圖像。由于INTRA編碼圖像的M效率通常低于INTER編碼圖像的臓效率，所以f頓INTRA圖像比肺約，特別是在低比特率應用中。然而，因為INTRA編碼圖像可以3te于現(xiàn)辦列中的其它圖像而被解碼，所以每一個INTRA圖衞饈一^\^的現(xiàn)鵬歹啲入口(體隨機存取點)厄就是一M莉馬的起始點。因而，在編碼的柳辦列中包含一定M的INTRA編碼圖像是有禾啲，例如每隔一定間隔，以便允許隨豐賭取游列。此外，一個典型的視列包含很多的,和3^續(xù)鏡頭。由于圖像內—個場景和另一個場景之間可能有很值得注意的區(qū)別，因jlt^每一條力錄的第一圖像以INTRA格^i^彌鵬是有利的。這樣，即使沒有其它的INTRA編磡貞包含在編碼序列中，至少每一個力綠中的第Hi貞衛(wèi)共了一個隨+膽取點。編稱見辦列中的每^a可^^解碼的圖像都以INTRA編石別貞(構成隨tJl^取點)開始并且以緊接在下一個INTRA繊別貞之前的幀結束，它通常被稱為圖條且或簡寫為GOP。某些隨機存TO作是由終端用戶產生的(例如，挪鵬列的3船)，例如由于用戶在流傳輸?shù)囊曨l文件中，新位置。在這禾襯青況下，解碼激艮可能得至,戶產生的隨機存取操作附際并且可以相/SJ4執(zhí)行。但是，在一些瞎況下，隨機存取操作不是由終端用戶控制的。例如，在^流中，,纖輯過的M流可能包括一些具有與用戶實施的隨機存鵬作糊以的特點的"切入口(cut)"。但是，在后面的這種情況下，解石^^就可會繼收不至IJ這樣的切入口B^產生的指示，并且可能不能正確ifel碼序列中te的圖像。因此為視^P碼:^lf共一種用于檢測編蹄1中的隨*0#作或切入口的可靠的方法慰^的?，F(xiàn)代現(xiàn)頻編碼標準定義了"^自給自足的年鵬比特流的語法。在撰寫本文最流行的標準是國際電信MITU-T建議H.263，"用于低比特率通信的柳^(Videocodingforlowbitratecommunication)"，1998年2月；國際標準fb^纟R/國際電子工程委員會ISO/正C14496-2，"音視^J^的普il^碼.第二部分柳頻(GenericCodingofAudiovisualObject.Part2:Visual)"，1999^(稱為MPEG4);以及ITU-T建議H.262(ISO/EC13818-2)(稱為MPEG-2)。i^^標準為比特流以及相應地為圖像序列及圖像定義了"^別。財卜的柳MW標準仍^M中。f親提，對H.263的長期接任者的研究的標準化努力，如已知的ITU-TH.264|ISO/IECMPEG4第十部分正在被稱為ISO/ECMPEG(運動圖像專家組)的^^視頻iS(JVT)和ITU-TVCEG(枧碼專家組)的標準化主體的S^支持下進行。這些標準的一^^方面和特別是與本發(fā)明相關的H.264冬jj^編碼標準的那對寺性在下面將被描述。附圖1^^了一個傳統(tǒng)的編碼圖,列，包括INTRA編碼的I圖像，INTER編碼的P圖像和雙向編碼的B圖像，并被排列為具有形式IBBP…籍的駄。方框表明以顯玩l,咧的幀，箭頭表明運動W嘗，灘中的字職明幀的鄉(xiāng)，并且方框中的數(shù)錢幀的編號(如根據H264柳頻編碼標準指定的)表明幀的編麵。術語"引導幀"或"引導圖像"被用于描述樹可在隨t/U^取先前的I幀之后不能被正確碼的幀或圖像，并且它們的顯示時間是在I幀的顯示時間之前(附圖l中的B幀B17是弓I導幀的例子)。在該描述中，術語"開路l^^l更新"(ODR)圖像，細于標識一個具有弓l導圖像的可隨豐膽取的幀。與附圖1所示的相類似的編石別貞的模式是普遍的，并且使得對ODR圖像的隨機存取盡可肖她簡單是希望得到的。B^^^很多可供逃擇的iW4^存取ODR圖像。一個典型的解決方案只是簡單地丟棄一些引導B圖像。這是一種在不允許參考圖^i^f2U6碼和顯示)l鵬的去耦的1見碼標準中典3^的方法，其中I圖像始終是一，豐膽取點。該問題的另一^I決方案是將緊隨在一個I幀(按照編5矽解碼)i鵬)后面的所有未存儲的幀視為引導幀。當該方法在附圖1所描述的簡單的情況下工作時，它缺少AbS存儲的弓l導幀的性能。附圖2示出了一賴碼方案的例子，其中在可隨機存取的I幀之前具有一個存儲的引導幀。在該例子中，剛才描述的引導幀的簡單的lt^示識符并沒有正Wkx作。另夕卜一個簡明的想法是將所有在I幀(按照編砂解陶1)之后出現(xiàn)的B圖像視為引導圖像。但是，引導圖像并不是始終是B圖像。例如，由MiskaMHannuksela寫的科學論文，題目為:"SimplePacketLossRecoveryMethodforVideoStreaming",ProceedingsofPacketVideoWorkshop2001,Kyongju，韓國，2001年4月30日一5月1日以及ITU-TSG16/Q15文獻Q15-K38提出一種用于改善在柳頻編碼中的i^M彈性(eirorresiliency)的INTRA幀M3S方法，該方法的，使得這個用于標識弓l導幀的簡單方法不可行。附圖3示出了一個lteifi了一個存儲的幀間隔的INTRA幀的例子。因此，有一個按照濕玩l,先于INTRA幀的P幀(P17)。JVTJVT-B063提出一幀可以與予體52iE相關聯(lián)(在現(xiàn)頻比特流中,作為補充增強信息)，其用于指示魏一偉定的幀開女^#馬之后用于按照顯示順序的所有遊賣的幀在內容上，綜全^IE^占用的時間。在存取ODR圖像時，可以{鯛該予體艦SEI信息。但是，有三錯點伴隨^^種方法。第一，用于雌SEI信息的解碼^是制示準化的，也就是它不是H.264標準的命令部分并且因而不必由所有的根據H.264實現(xiàn)的鵬馬器支持。因此，可以有一個月g^標準的不矢爐SEI的解石^l來隨t條柳g^標準的流，但是由于它缺少用于弓i導圖像的參考幀而不旨戰(zhàn)軒馬該流。第二，解碼器可能會不必要^~^，如存儲的引導幀，因為它并不知道它們對魏操作來說是朋的。第三，參鄉(xiāng)少的幀的驢的解碼繊作變得更鋭。因此，該方制乍為ODR圖像隨t膽取的解決方案不劍雄的。H,264挪鄉(xiāng)碼標準(如在JVT委員會草案中指定的)艦"瞬時解碼器更新"和"獨立GOP"的概念。術語"瞬時解碼器更新"涉誕lj—種"整潔"的隨機存取方法，其中在解碼ai呈中，不設計先于INTRA幀的數(shù)據。一刊teGOP是一個可以3te于先前或以后的圖像^lf碼的圖像組?！獋€"瞬時l^馬器更新"(IDR)圖像發(fā)出一條的3蚊GOP開始的信號。因此，根據H.264，一個IDR圖像可以當作一個隨m^取點使用。(詳情參見JVT-B041，它分析了瞬時解碼器，的必^f牛，和JVTC083,其提出了該特性的語法，語義，和標準文本。)建議包含在H.264視頻編碼標準中的另一個概念是"逐步解碼器更新"(GDR)。它被稱為"不整潔"的隨,取，其中涉及先前編碼的但可能沒有接收至啲娜，并臟確的圖像內^tl據多^fHi畐編碼圖像被逐頻恢復。GDR允許使用任何一種幀的隨機存取功能。一種用于GDR的信令機制首先在JVTJVT-B063中提出(并且隨后在JVT出版:^JVT-B109中)。JVT-B063斷定主要有兩個基本的可供選擇的辦^fMGDR,處理，"最佳效果解碼"和"保險解碼"。在最佳效mil碼中，所有不可用的幀S^予體為中間等級總，開始所有幀的解碼，但僅僅在確定的指示^f牛滿;^t后才認為它"旌內容上完全正確。在"保險解碼"中解碼器從一個I幀開々辦碼，然后在試圖解蹄if可更多的非I幀之前等待，以確保剩余的幀不包含對不可用的數(shù)據的參考。該"最^^果"可供選擇的方法在JVT-B063中是首選的。關于逐^碼器，的編碼的問題在JVT，JVR:074中研究。i^m斷定GDR不可能實現(xiàn)使用在當時有效的JVTH.264編碼解石^^版本,并提出一種稱為"隔離區(qū)m^"GREG)的方法應被用于GDR編碼。該隔離區(qū):^t是在JVT，JVKX)72中提出的。該隔離區(qū)J^^塊的一個可靠區(qū)域，用于定勉界的微，環(huán)路濾波在穿過該邊界時應被關閉以及空間圖像內預測被限制于該邊界。參考頃中的隔離區(qū)嫩卜面的時間預測也應被禁止。在大量連續(xù)的編碼圖像期間，隔離區(qū)域的皿可以Ji^展的。在圖像組(GOP)中，隔離區(qū)域的形狀取決于先前圖像中的相應的隔離區(qū)域的皿，并且該圖像組包括具有絲進行時間預測的情況下編碼的原始隔離區(qū)域的圖像，這種圖^^且被稱為"具有謝七的隔離區(qū)域的圖像組"(IREGGOP)。相應的周期(根據編碼參考幀)被稱為"i^七的隔離區(qū)域周期"或者"IREG周期"。如上面所述，IREG提供了一種實實現(xiàn)GDR功能的極好的方袪并且可以被用于衝共體彈性和恢復(參見JVT規(guī)JVTC073)，感興趣區(qū)鄉(xiāng)碼和優(yōu)先化，畫中畫功能，和遮掩的視頻皿轉變的,(參見JVTC075)?；贗REG的逐步隨豐幾存取，能實現(xiàn)接收機W^體信道的轉換，月艮務器的比特繊換，并且還允許新來者在多點傳輸^Sffi中很容易進行存取。改進的隔離區(qū)域的誤差彈性特性和逐步解碼器更,性可以同時應用。因此，當一個編碼器纟頓隔離區(qū)鄉(xiāng)^^碼器魏時，不用附加的比特斜口，性的代價可以"免費"得到的^彈性。包含在H.264視頻編碼標準中的另外一個概念是"靈活的宏塊順序"(FMO)。FMO首先在JVT娜JVT-C089中提出，隨后被包含在H.264標準的JVT委員會草案中。il31將圖像分割為切片組，F(xiàn)MO允許以一種不同于典型的光柵掃描順序的順序編碼宏塊。由該機制實現(xiàn)的主要娜是聽彈性方法、例如離散切片(slice)(參見JVT，JVT-C090)和切片!^^只(如在JVT，JVTC091中提出的)的執(zhí)行。由于它的靈活性，具有靈活的宏與頓序的其它應用也是可以的。JVTJVT-D095提出了一自FMO的增強。在文獻JVTC117中提出了在切片邊界上關閉環(huán)路搶波器來改善^M彈性和支持理想的GDR。該環(huán)路搶波器的P蹄懼有兩個另外的tt^:第一，撒共了一種關于FMO投術中固有的荊于^M問題的很好的解決方案，并，二它是及時實現(xiàn)舌,切片的正確解碼所必須的。
發(fā)明內容本發(fā)明弓1入用于實現(xiàn)隨機存取和逐步^蹄]^列中的圖像的方法。它特別是基于在H.264視繊J碼標準的發(fā)展期間提出的逐i^f碼器更新的方法并且提出了一種用于在H.264枧，碼解碼器環(huán)境中的GDR的可行實I肪案。但是，應該知道本發(fā)明并不僅P艮于在H.264標準的限制范圍的應用iTPT以應用于其它視頻編碼標準，其中挪頻序列4OTINTRA和INTER編碼幀的組合，碼，并且其采用了與在H.264中所4OT的語法相對以的語法。更明確地，本發(fā)明提出了M^頓隔離區(qū)域、可對嫁與l,和在切片邊界上關閉環(huán)路濾波器來實現(xiàn)逐步解碼器更新的實現(xiàn)方案。特別是，本發(fā)明使得JVTC072的初始的隔離區(qū)微術適舒被包含在辻264柳鄉(xiāng)碼標準中，并且引入了一種用于3^^石馬^l，的jf令方法。本發(fā)明iQi出了一種用于可^測隨豐膽作的機制。本發(fā)明,出了用于引導幀和ODR圖像的可靠的jt令^制。附圖1描述了一個IBBP編^li貞模式并示出了引導B幀的位置；附圖2示出了具有存儲的弓l導幀的可隨機存取的I幀；附圖3描述了INTRA巾J^fi的S7lt:和附圖4描述了根據本發(fā)明的方框外部順時針方向^^展的增扮頓序。具體實《式JM描述一個根據本發(fā)明的逐^^碼器Mf的可行實m^案。如同本發(fā)明的背景獄中所描述的，在切片邊界上環(huán)路濾波的關閉有利于逐步解碼器更新的執(zhí)行。特別是，穿過已更新的區(qū):l^i界的環(huán)路濾te該被關閉以避免在正常解碼時和在隨機存te的i^馬期間的象素值失配。沒有環(huán)路濾波器限制(也就是具有仍欽活的環(huán)路濾波的)的逐^I碼器頓是可能的并且令AM惡的失配不是非?？蓵生，但^制失配的振幅和傳謝艮困難，所以關閉環(huán)路濾波器是更可取的。因此，本發(fā)明建iOT以下方絲P蹄杯路濾波，即將切片邊界作為圖{敏界進行鵬。這個P蹄何以在逐圖像的敲HU:用信令総。更特別地，根據本發(fā)明的一^Ht^實施例，如果一個宏iM其Si的相鄰宏塊屬于不同的切片，該宏塊如同在圖像左邊界一#1皮、2^波。如果一個宏:tM其上面的相鄰宏^！于不同的切片，則戯塊如同在圖像中社面一行宏塊中一稱皮濾波。本發(fā)明進一步引入用于結^，碼器更新一起^ffi的概念"切片組"。根據本發(fā)明，一個切片組被定義為MM圖像的一定區(qū)域的一組切片，在該組中的每一個切片的尺寸是可以多te調整的。有利地，一個切片的綱尺寸根據雌的傳輸包尺寸進纟預整。一個切片組，如根據本發(fā)明定義的，對于執(zhí)行細隔離區(qū)域方法的逐^lf碼器更新(如JVT^MJVT"C072介紹和先ttT^本文中描述的)來說是理想的。特別是，一個隔離區(qū)^^一定的空間區(qū)域，該區(qū)域可以包括多于一個切片并且它的邊界應當采用與切片邊界相似的方^4行皿(特別是，環(huán)路熗波禾吶部預測必須停止)。當隔離區(qū)繊細于執(zhí)ffi^W^^魏時，隔離區(qū)域的形伏，尺寸，位置產生演4七，因為，，的區(qū)m型ite圖iti間增長。當這種^R^可以MH.264柳碼標準的FMO語^^傳達時，當用于,演變的特定的FMO語法被定義時，很多比特可以被節(jié)省。根據本發(fā)明，在3^j)貞中的隔離區(qū)域的^R和^l信息被存儲?！繼信息被用T^動估計。執(zhí)^i謝古計/州嘗的方、她被修^^艦隔離區(qū)域的4柳。特別的，當進行全象素運動估計時，在相應的##()貞中盼涉及隔離區(qū)嫩卜的運動向量被丟棄而不計織碼駄。頓非^^素併Jf率拋fit動估計/州嘗時，特定的措施也是4fe^、要的。H.264年li^編碼標準允許對1/4或1/8象素精確度執(zhí)ffi^動估計/州嘗。不同的內掛慮波親細于內插V4和1/8子象素。對于1/4象素精確度，1/2抽樹i^頓6抽頭^1內插，并且1/4抽#^1^平均^^1/2抽靴置上的兩個最近的抽樣來內插。有一個不同于戰(zhàn)一船見則的例外，被稱為"^#&H",它M31平均就的四個S^樣來獲得。內插M的結果是，雜"剩余(left-over)"區(qū)^響位于內部但敲巨離隔離區(qū):^界少于兩個^素的子象素。根據本發(fā)明，當執(zhí)行對子象素^fl率的運謝古計時，這一事實被考慮。更特另哋，涉朋巨離隔離區(qū)鄉(xiāng)界近于兩個象素的塊的運動向量被丟棄而不用計織碼鉢。當1/8象素併,率用于運動估計/州嘗時，進行一個類似,作。如上面闡明的，當使用隔離區(qū)，，碼器，時，隔離區(qū):^尺寸，微和位置上產生演化。最終，作為逐^碼器魏處理的結果，獲得一個可靠的(即完全重建的)幀。這在隔離區(qū)^^為等于^貞(即驢了針圖像區(qū)域)時實現(xiàn)。根據本發(fā)明，一fiiii腿種情況，下面的限制就會3勧肝后面幀的編碼1.新的隔離區(qū)^^、須避，據先前的IREGGOP進^M測；對于剩余區(qū)域，應該避免參考先于可^1J貞的幀中的剩余區(qū)域的預測和參考在時間上處于先前的IREGGOP之前的幀中招可塊的預測。應用適當?shù)念愃朴谏厦婷枋龅膮⒖紟拗坪瓦\動向量限諱睞滿^^兩個要求。在4頓了禾傭根據本發(fā)明實現(xiàn)的隔離區(qū)域的GDR技術的幀中，每一幅圖像包括一個隔離區(qū)嫩d—個剩余區(qū)域。該隔離區(qū)i^i—個切片組，并助除區(qū)鵬另一個切片組。根據用信令通知的區(qū)域的增長率，兩個切片組的區(qū)^W^M變化并隨著圖^^間的隔離區(qū)^M。本發(fā)明還弓l入了另外的包含在H.264冬見頻^^馬標準中的用于啟動隔離區(qū)域的信令的語法。更特別，根據本發(fā)明，一些新的mb—allocationjn^—types被增加到H,264標準語法中。這些在下面的表格l中示出，其中增加的被弓l入以支持隔離區(qū)域的語法元素由右手列中的"EREG"表示以及"RECT"表示矩形切片組(如JVT-D095中提出的)<table>tableseeoriginaldocumentpage14</column></row><table>表格1:根據本發(fā)明的用于支撤te區(qū)域的語法^^格1中，當mtLallocationjnapJype是4，5,或6的時候(是只有兩個切片組在圖像中)，,num—slice_jroiqD—minusl被設定為1。參數(shù)growth_rate^^^幅圖像中隔離區(qū)長的宏塊的數(shù)量。使用growth—rate參數(shù)和得矢P^皮更新的圖像的尺寸，一，碼器可以決定完全更新整個圖像所需要的時間(稱為GDR周期)。例如，在QCEF圖像(在UX9的娜P車列中其包括99個16X16的象素宏塊)和每幅圖像中10個宏塊的growtii—rate的情況下，^一個完全，的圖像需要從GDR周期開始(包含的)的ceil(99/10)=10幅圖像。新的mtuallocationjiiap—types4，5,6和根據本發(fā)明定義的并在表格1中示出的evdutioiuiirections定義隔離區(qū)域的六個切片組演化模式，如下面表格2所示:(<table>tableseeoriginaldocumentpage15</column></row><table>表格2:根據本發(fā)明的,刀片組演化牛M在表格2中示出的六個區(qū)職化模貌義如下-1.光柵掃描隔離區(qū)域的第一個宏塊是圖像頂端《^的宏塊。隔離區(qū)域以掃描的)1,增長。2.反向光柵掃描隔離區(qū)域的第一個宏塊是圖像底部最右邊的宏塊。隔離區(qū)域以反向娜掃描的)l,增長。3.向右擦除隔離區(qū)域的第一個宏塊是圖像頂端te邊的宏i央。隔離區(qū)域從頂部向底部增長。在一列的驗部的宏塊之后的下一個宏賊銜佑判啲那列的最頂部的宏塊。4.向錢除隔離區(qū)域的第一個宏塊是圖像底部最右邊的宏塊。隔離區(qū)域從底部向頂部增長。在一列的最頂部的宏塊之后的下一個宏塊是在銜i」的左^i5.口:^卜部順時針方向^f柳一個原點在頂端teii^艦并且具有宏塊間隔尺寸的(、y)坐標系，以及{頓H^^圖像中編碼宏塊的行數(shù)，<頓W來表示圖像中編碼宏塊的列數(shù)，隔離區(qū)域中的第一宏塊是具有坐標(x0,y0)KW/2JH/2)的宏塊。"/"標舍位除法(divisionbytruncation)。隔離區(qū)域增抝l,的定義如附圖4中別示。6.，外部反時針方向使用與在上面5中所介紹的相同的坐標系，和數(shù)學運算的定義，隔離區(qū)域中的第一宏塊是具有坐標為(x0,y0)=<(W-1>2,((H-iy2)的宏塊。增份頃序與附圖4所示的相似，但是沿反時針方向。為了4撫麟、繊馬范圍編輯單飛啊絡單膽易辨別一個隨禾膽取點，本發(fā)明的一^HM實施例提出GDR周期的開始根據網絡適配層(NAL)單^IM的H264語法用信令総。GDR周期的第一幅圖像被稱為一個GDR圖像。并不需要精確的語法，但是可能f頓的示例的語法可以在JVT-C074工作草案中找到。本發(fā)明鵬出了用于可靠的指示ODR圖《斜卩引導幀的機制。以與岡l沐結合GDR圖像的信令附寸論的相類似的方式，本發(fā)明提出了帶有專用的NAL單^的ODR圖像。財卜，在本發(fā)明的一4^實施例中，弓l導幀被明確艦示識出。由于其纖碼^#1行沒有強加任何限制和^^化，并且衝共了一種機制，編碼器可以M31該機制容易地i朋咄引導幀，因此駄法是首選的。根據本發(fā)明，引導圖像可以是樹可運動W嘗圖像，例如，P，B和SP圖像(SP圖像鄉(xiāng)是鵬H,264定義的運動彬嘗圖像的#^鄉(xiāng))。有利地，一個凈斜己(被稱為leading_picture_flag)與這些圖像鄉(xiāng)相關并被加AlijH.264NAL單^iE吾法中赫斷誠切片報頭語法中，以提供一個明確的指示即麟的圖像是一個引導圖像。這1擇是非常有利的，由于它需對艮少跡需要比特率TO并且易于編5^I和解碼器的《糊。根據本發(fā)明，使用如JVT;^JVT-D098中所描述的"子序列豐斜只符"菊旨示隨即存取點。用于GDR和ODR圖像以及弓l導圖像的信令的準確的語法可以根據應用于H.264視,碼標準的NAL單^^語法的細節(jié)來改變。根據本發(fā)明定義的一個ODR圖像具有以下特征1.解碼鵬可以在一個隨t膝鵬作后從—個ODR圖像開始M新幵始。2.—個ODR圖像只包括I或SI切片；3.ODRNAL單元包括一^K刀片EBSP;以及4.ODRNAL單元^OT于所有包含一個ODR圖像的編碼宏±^的NAL單元。根據本發(fā)明定義的一個GDR圖像具有以下特征1.解碼鵬可以在一領船鵬作后從一個GDR圖像開始驢新開始。2.—個GDR圖像可以以樹可^^^進fi^碼。200810003744.3說明書第12/12頁3GDRNAL單^Mffi于所有包含一個GDR圖像的綱宏^W的NAL單元。根據本發(fā)明，與弓l導圖像相關聯(lián)的leadingj)icture一flag具有以下餘征1.如果解碼,開々好按照J^llW的的前一幅ODR圖像并且按照J^順序在當前圖像和該ODR圖^t間沒有出現(xiàn)一個IDR圖像，則leadingj)icture一flag標明—個不應該,碼的圖像。2.leadingjcture—flag使倉^tODR圖像的隨la^取，該圖像OT作為按照i示Jil^在時間上絲的圖像的運動豐M嘗參考，如果ODR副象被隨豐賭取，貝懷解碼這些不能被正確魏的幀。在H.264解碼M中的以下改變是由于采用ODR和GDR圖f斜n隨t/l^取點的信令機制以及如根據本發(fā)明定義的弓瞎巾麻導致的.-1.如果一個GDR或ODR圖像的子序列標識符與先臓收至啲子序列標識符不同，貝,碼離斷一個GDR或ODR圖像^ff操作，并M大的長期幀索引體為0。2.如果一個ODR操作開$纖一個ODR圖像并且如果自從原始ODR圖像沒有ODR或IDR圖像被解碼，一個具有l(wèi)eadingj)icture一flag等于"1"的圖像不,馬。3.如果一個GDR操作開^好一個GDR圖像，解碼器不l^fif可剩余區(qū)域并且如果沒有接收到剩余區(qū)域，就不推斷娜的丟失。1權利要求1.一種對視頻序列進行編碼的方法，包括參考一個或多個先前編碼的參考圖像，使用運動補償預測對第一圖像進行編碼，該第一圖像在顯示順序上在INTRA編碼的圖像之前，并且在編碼順序上在該INTRA編碼的圖像之后；在編碼的比特流中提供與該第一圖像對應的指示，該指示表明被用于對該第一圖像進行編碼的該一個或多個先前編碼的參考圖像中的至少一個在解碼順序上是否在該INTRA編碼的圖像之前。2.根據權利要求1的方法，其中在網^tt象層單元^M語法中衝共該指示。3.根據權利要求1的方法，其中在圖像報頭中衝共銜旨示。4.根據權利要求1的方法，其中在切片報頭中衝共該指示。5.根據權利要求l的方法，還在,的比特流中衝共與該INTRA,的圖^^t應的附加指示,該附加指示表明是否#參考在該INTRA編碼的圖^^前的圖像謝彌碼的至4"個圖像,iSA一個圖像具有在該INTRA編碼的圖像之前的顯示)l,和在該INTRA編碼的圖#^前的解碼",。6.根據權利要求1的方法，還包括iOT子序列標識ftt^共隨m^取點的附加指示。7.—種編碼器，該編碼繊隨成參考—個或多錯前編碼的參考圖像，鵬運動韋M舒頁測鄉(xiāng)一圖繊滿碼，i魏一圖像頓示",上在INTRA編碼的圖駄前，并且在編陶l,上在該INTRA編碼的圖it^后；在編碼柳匕特流中麟與織一圖《樹應的f際，該f繊明，細于對織—圖像謝f^碼的該一個或多，前編碼的參考圖像中的至少一個^碼i^上是否在該INTRA編碼的圖^^前。8.根據權利要求7的鄉(xiāng)馬器,其中在網細象層單^M吾法中鵬該J標。9.根據權利要求7的^^器，其中在圖像報頭中衝共該t際。10.根據權利要求7的ii^，其中在切片報頭中衝共謝際。11.根據權利要求7的編碼器，其中該編碼器還被12g鵬編碼柳匕特流中提供與該INTRA編碼的圖〗W應的附加J際，該附加J際表明g,參考在該INTRA編碼的圖^t前的圖^it^m的至少一個圖像，，^"個圖像具有在該INTRA編碼的圖歡前的顯示",和在該INTRAi^馬的圖貌前的解碼順序。12.根據權利要求7的編石驟，其中該編石^l還被配置成4頓子序列極只符繊繊膽te的附加指示。13.—種對編碼的挪鵬列進備碼的方法，包括在該編碼的枧辦列中翻i臓膽取腿對在該隨m^取，處的編碼圖ftiffffl碼；從該編碼的柳鵬列中檢索與第一圖f^t應的指示，織一圖像是參考一個或多個先前編碼的參考圖像、《頓運動州嘗預測進伊J碼的，織一圖像具有在該隨機存取位置處的編碼圖像之前的顯玩1^和在該隨,取位置處的編碼圖像之后的解卿,；以及如果所檢索到的與該第一圖像對應的信眉表明，該一個或多^前編碼的參考圖像中的至少一個在解陶IIW上在該隨TO取，處的鄉(xiāng)馬圖^t前，貝贓沒有進^lf碼的情況下丟棄該編碼的第一圖像，并且利用^l碼)l,上在該第一圖^t后的鄉(xiāng)馬圖像，續(xù)iM碼跡呈。14.根據權利要求13的方法，其中從網,象層單元鄉(xiāng)語法中驗該f際。15.根據權利要求13的方法，其中從圖像報頭中檢索該f際。16.根據權利要求13的方法，其中從切片報頭中麟該J際。17.根據權利要求13的方法，還包括從該編碼的柳鵬列中総與在該隨機存取位置處的編碼圖^"應的附加J際，該附加^^明皿#^##在該隨機存取位置處的編碼圖^t前的圖像謝彌碼的至d^個圖像，該至d^個圖像具有在該隨機存取錢處的編碼圖H前的顯示)I醉和在該隨纟膽取體處的編碼圖fe前的解卿醉。18.根據權利要求13的方法，其中隨t/l^取隨的檢I抱括総并檢查各編碼圖像的子序列標識符。19.—種鵬器，i^^M隨成在編碼的現(xiàn)辦列中檢測隨+膝取隨的J際；對在該隨m^取^s處的鄉(xiāng)馬圖^i^m碼；從該編碼的柳辦列中総與第一圖{樹應的信息，織一圖像是參考一個或多個先前編碼的參考圖像、《柳運動,M嘗預測進t彌碼的，i魏一圖像具有在該隨機存取^l處的編碼圖駄前的顯示)i^和在該隨豐膽取隨處的綱圖像之后的角軒馬鸝以及如果所檢索到的與該第一圖纟樹應的信息表明，該一個或多個先前編碼的參考圖像中的至少一個在解卿上在該隨機存取^處的,圖#^前，貝贓沒有進^1#馬的情況下丟棄該編碼的第一圖像，并且利用在解卿,上在該第一圖^^后的,馬圖像，續(xù)iMTO戰(zhàn)呈。20.根據權利要求19的鯽馬器，其中從網,象層單元鄉(xiāng)語法中総該指示。21.根據權利要求19的解碼器，其中從圖像報頭中檢索該^^。22.根據權利要求19的解碼器，其中從切片報頭中檢索該f際。23.根據權利要求19的解碼器，其中i^碼器還被lfi2成從該編碼的枧頻序列中檢索與在該隨機存取隨處的編碼斷^t應的附加指示，該附加^^表明是否，參考在該隨機存取皿處的編碼圖^t前的圖^i^彌碼的至^"個圖像，該至少一個圖像具有在該隨t膽取健處的編碼斷&前的顯示〗l,和在該隨機存刺iS處的編碼圖Jti前的解碼)i醉。24.根據權利要求19的解碼器，其中隨機存刺ifi的檢測包括驗并檢查各編碼圖像的子序列標識符。25.—種自碼的柳頻序列進fi^碼的方法，i^^S括接收在該編碼的視辦列中隨t膽取錢的指示；在該隨機存取隨處的編碼圖像處開始該編碼的冬J^列的解碼跟呈；從該編碼的柳鵬列中鶴與第一圖i樹應的信息，織一圖像是參考一個或多個先前編碼的參考圖像、使用運動州嘗預測進fi^碼的，該第一圖像具有在該隨機存取位置處的編碼圖像之前的顯玩1和在該隨#1#取皿處的1^馬圖像之后的解卿,；以及如果所檢索到的與織一圖應的信肩表明，該一個或多錢前編碼的參考圖像中的至少一個，卿,上在該隨禾膽取，處的編碼Ste前，貝臟沒有進1灘碼的情況下丟棄該^^馬的第一圖像，并且利用^lf卿鵬上在織一圖fc后的編碼圖像鄉(xiāng)續(xù)繊碼鵬。26.根據權利要求25的方法，其中在網,象層單元IIM語法中,該J標。27.根據權利要求25的方法，其中在圖像報頭中掛共該t際。28.根據權利要求25的方法，其中在切片報頭中衝共該^f^。29.—種解碼器，繊繊皮配驗接收在該編碼的ij^序列中隨m^取,的ji^在該隨機存取腿處的綱圖像處開始該編碼的現(xiàn)辦列的解碼鵬從該編碼的現(xiàn)頻序列中檢索與第一副t^t應的信息，該第一圖像是參考一個或多個先前編碼的參考圖像、〗頓運動州嘗預測進fim的，織一圖像具有在該隨機存取位置處的編碼圖#^前的顯示1和在該隨機存取隨處的編碼圖像之后的解碼鵬以及如果所檢索到的與織一圖像對應的信息表明，該一個鄉(xiāng)^前編碼的參考圖像中的至少一個^l卿,上在該隨豐膽取，處的編碼圖^^前，貝贓沒有進^灘碼的情況下丟棄該編碼的第一圖像，并且利用^)1,上在織一圖齢后的編碼圖像纖賣繊馬鵬。30.根據權利要求29的解石驟，其中在網鄉(xiāng)細象層單元鄉(xiāng)語法中衝共該指示。31.根據權利要求29的解石驟，其中在圖像報頭中鄉(xiāng)該指示。32.根據權利要求29的f^，其中在切片報頭中樹共該J際。全文摘要本發(fā)明公開了一種用于在視頻編碼中隨機存取和逐步更新圖像的方法。逐步解碼器更新是通過使用隔離區(qū)域、靈活的宏塊順序(附圖4)和在切片邊界關閉環(huán)路濾波器來實現(xiàn)的。還提供一種用于隨機存取操作的可靠檢測和引導幀及開路解碼器更新(ODR)圖像的可靠信令的機制。文檔編號H04N7/32GK101232616SQ20081000374公開日2008年7月30日申請日期2003年7月16日優(yōu)先權日2002年7月16日發(fā)明者M·M·漢努克塞拉申請人:諾基亞有限公司