專利名稱：：用于圖像上采樣的方法和系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
：本發(fā)明的實(shí)施例包括用于圖像上采樣的方法和系統(tǒng)。本發(fā)明的一些實(shí)施例包括用于空間可縮放視頻編碼的圖像上采樣的方法和系統(tǒng)。
背景技術(shù)：
：H.264/MPEG—4AVC[JointVideoTeamofITU—TVCEGandISO/IECMPEG，"AdvancedVideoCoding(AVC)-4thEdition,"ITU-TRec.H.264andISO/IEC14496-10(MPEG4-Part10)，January2005]是使用宏塊預(yù)測、之后為了壓縮效率而進(jìn)行殘余編碼以減小圖像序列的時(shí)間和空間冗余的視頻編解碼規(guī)范，將其在此引入作為參考?？臻g可縮放性是指這樣的功能比特流的部分可以被去除，同時(shí)維持任意支持的空間分辨率上的比率失真性能。單層H.264/MPEG-4AVC不支持空間可縮放性。H.264/MPEG-4AVC的可縮放視頻編碼(SVC)擴(kuò)展支持空間可縮放性。在此引入作為參考的H.264/MPEG-4AVC的SVC擴(kuò)展[聯(lián)合可縮放視頻模型(JSVM)的工作文件l.O(WD-1.0)(MPEGDoc.N6901)]是一種分層的視頻編解碼方案，其中通過層間預(yù)測機(jī)制來探尋空間層之間的冗余。H.264/MPEG-4AVC的SVC擴(kuò)展的設(shè)計(jì)中包含有三種層間預(yù)測技術(shù)層間運(yùn)動(dòng)預(yù)測、層間殘余預(yù)測以及層間內(nèi)部紋理預(yù)測。之前，SVC僅提出了二元空間可縮放性。二元空間可縮放性是指這樣的配置兩個(gè)連續(xù)空間層之間的圖像尺度比是2的冪。已經(jīng)提出了被稱作具有剪切窗的非二元縮放的新工具，這些新工具管理如下配置連續(xù)空間層之間的圖像尺寸比不是2的冪,而且更高級的圖像包含相應(yīng)的更低級圖像中不存在的區(qū)域。所有的層間預(yù)測方法都包括圖像上采樣。圖像上采樣是從較低分辨率圖像中產(chǎn)生較高分辨率圖像的過程。一些圖像上采樣過程包括采樣內(nèi)插。SVC設(shè)計(jì)中使用的先前的上采樣過程基于H.264中針對內(nèi)部預(yù)測而規(guī)定的四分之一luma采樣內(nèi)插過程。當(dāng)應(yīng)用于空間可縮放編碼時(shí)，先前的方法具有如下兩個(gè)缺點(diǎn)內(nèi)插分辨率被限制為四分之一采樣，因而不支持非二元縮放；以及需要半采樣內(nèi)插以獲得四分之一采樣位置，這使得該方法在計(jì)算上是麻煩的。期望一種克服這些限制的圖像上采樣過程。
發(fā)明內(nèi)容本發(fā)明的實(shí)施例包括通過直接內(nèi)插而實(shí)現(xiàn)的圖像上采樣，所述直接內(nèi)插使用根據(jù)待內(nèi)插的像素位置的相位而選擇的濾波器系數(shù)?？紤]下文結(jié)合附圖對本發(fā)明的詳細(xì)描述，本發(fā)明的上述和其他目的、特征和有點(diǎn)將會(huì)更加易于理解。圖l是示出增強(qiáng)層與底層之間的幾何關(guān)系的示意圖；圖2是示出增強(qiáng)層與底層中的采樣的相對位置的示意圖；圖3是本發(fā)明實(shí)施例的包括兩個(gè)方向上的內(nèi)插濾波的流程圖；圖4是示出增強(qiáng)層與底層中的宏塊之間的關(guān)系的示意圖；以及圖5是示出增強(qiáng)層與底層中的宏塊之間的關(guān)系的示意圖。具體實(shí)施例方式通過參考附圖，本發(fā)明的實(shí)施例可以得到最佳的理解，其中相似的部分由相似的數(shù)字來表示。上文列出的圖明確地被引入作為這個(gè)詳細(xì)描述的一部分。容易理解的是，附圖中大體描述并示出的本發(fā)明的組件可以按照各種不同的配置來布置和設(shè)計(jì)。因此，下面對本發(fā)明的方法和系統(tǒng)的實(shí)施例的詳細(xì)描述不意欲限制本發(fā)明的范圍，而僅僅代表本發(fā)明目前的優(yōu)選實(shí)施例。本發(fā)明實(shí)施例中的組件可以以硬件、固件和/或軟件來實(shí)現(xiàn)。雖然這里揭示的典型實(shí)施例可能僅描述了這些形式之一，然而可以理解的是，本領(lǐng)域的技術(shù)人員能夠以這些形式中的任意形式來實(shí)現(xiàn)這些元件，同時(shí)仍落入本發(fā)明的范圍。為了這個(gè)說明書和權(quán)利要求，術(shù)語"圖像(picture)"可以包括像素的陣列、數(shù)字圖像、數(shù)字圖像的細(xì)分、數(shù)字圖像的數(shù)據(jù)通道或圖像數(shù)據(jù)的另一種表示。圖l示出了與圖畫圖像(imagepicture)相對應(yīng)的兩個(gè)圖像較低空間圖像IO，也被稱作基礎(chǔ)空間圖像或底層圖像；以及較高空間圖像100，也被稱作增強(qiáng)空間圖像或增強(qiáng)層圖像。如圖l所示，基礎(chǔ)空間圖像10可能具有比增強(qiáng)空間圖像100更低的空間分辨率。如圖1所示，基礎(chǔ)空間圖像10和增強(qiáng)空間圖像100可能不包括相同的空間區(qū)域。圖1中所示的是與從增強(qiáng)空間圖像100中剪切的空間區(qū)域IIO相對應(yīng)的基礎(chǔ)空間圖像IO。在本發(fā)明的一些實(shí)施例中，基礎(chǔ)空間圖像和增強(qiáng)空間圖像可以和可縮放視頻編碼器/解碼器(編解碼器)中的兩個(gè)空間層相對應(yīng)。增強(qiáng)空間圖像100的寬度101和增強(qiáng)空間圖像100的高度102可以分別表示為we和hs?；A(chǔ)空間圖像10的寬度11和高度12可以分別表示為Wh和卜?；A(chǔ)空間圖像10可以是位于增強(qiáng)空間圖像坐標(biāo)(x。ris，y。rig)103處的增強(qiáng)空間圖像100的子區(qū)域110的子采樣形式。位置103表示剪切窗IIO左上角的位置。子區(qū)域110的寬度111和高度112可以分別表示為L和hw參數(shù)(x。rig，y。rig,w，hM,wb,hb)定義了較高空間圖像100和較低空間圖像10之間的關(guān)系。圖像上采樣可以是指從較低空間分辨率圖像中產(chǎn)生較高空間分辨率圖像。在一些實(shí)施例中，上采樣可以是指在不限于空間尺度或時(shí)間尺度的任意尺度上增大分辨率。圖2示出了較高空間分辨率圖像200中的像素位置220。在圖2中，像素位置220具有在較低空間分辨率圖像20中的相應(yīng)位置22。位置220可以和較低空間分辨率圖像20中的像素位置直接對齊，或不與較低空間分辨率圖像20中的像素位置直接對齊。在圖2中，所示的位置22位于4個(gè)底層像素21、23、24和25之間。本發(fā)明的一些實(shí)施例包括方法和系統(tǒng)，用于對于給定基礎(chǔ)空間圖像20，對增強(qiáng)空間圖像200的像素進(jìn)行直接內(nèi)插，其中尺度比不限于2的冪。本發(fā)明的一些實(shí)施例包括對基礎(chǔ)空間圖像20的整個(gè)圖像進(jìn)行上采樣。本發(fā)明的其他實(shí)施例包括逐塊地對基礎(chǔ)空間圖像20進(jìn)行上采樣。本發(fā)明的一些實(shí)施例包括在一個(gè)方向上進(jìn)行上采樣，之后在另一個(gè)方向上進(jìn)行上采樣。對于以整數(shù)采樣為單位的增強(qiáng)空間圖像中的采樣位置(x，y)，以丄采樣為單位的基礎(chǔ)空間圖像中的相應(yīng)位置0^w'^^w)可由下式給出'"及i其中參數(shù)(x。Hg，y。Hg，h吣Wb，hb)定義了較高空間圖像100和較低空間圖像10之間的關(guān)系，如圖1所示，而且&是內(nèi)插分辨率。一些實(shí)施例包括十六分之一采樣分辨率內(nèi)插，而且在該實(shí)施例中^是16。在一些實(shí)施例中，基礎(chǔ)空間圖像10中的相應(yīng)位置UaW^^(^可以由下式給出<formula>formulaseeoriginaldocumentpage11</formula>艮其中，如上所述，參數(shù)(XorigJyoHgJWex，hsx，Wb，hb)定義了較高空間圖像100和較低空間圖像10之間的關(guān)系，如圖1所示，R^是內(nèi)插分辨率，而且"〃"包括計(jì)算上簡化的除法運(yùn)算。采樣位置可以不限于2的冪，而且采樣位置的直接計(jì)算允許對該采樣位置上的圖像值進(jìn)行直接內(nèi)插。在一些實(shí)施例中，對增強(qiáng)空間圖像中的采樣位置(x，y)上的增強(qiáng)層圖像值進(jìn)行內(nèi)插包括濾波過程。該濾波過程還可以包括從查找表中確定內(nèi)插濾波器系數(shù)，其中查找表內(nèi)的索引可以與t"(^i^(^確定的內(nèi)插位置有關(guān)。在一些實(shí)施例中，內(nèi)插濾波器可以是4抽頭濾波器。在一些實(shí)施例中，內(nèi)插濾波器可以是6抽頭濾波器。在一些實(shí)施例中，濾波器系數(shù)可以從二瓣(two-lobed)或三瓣Lanczos加窗sinc函數(shù)中導(dǎo)出。表1和表2包括16相位6抽頭內(nèi)插濾波器的典型內(nèi)插濾波器系數(shù)査找表，其中相位與^"W^^》確定的內(nèi)插位置相對應(yīng),表l<table>tableseeoriginaldocumentpage12</column></row><table>表3包括16相位4抽頭內(nèi)插濾波器的內(nèi)插濾波器系數(shù)査找表，其中相位與'(/^(4^wt^確定的內(nèi)插位置相對應(yīng)。表3<table>tableseeoriginaldocumentpage13</column></row><table>圖3示出了本發(fā)明的一些實(shí)施例。x和y方向上的內(nèi)插可以分別在單獨(dú)的過程300和30中完成。在一些實(shí)施例中，每一個(gè)過程可以在圖像的宏塊或另一個(gè)細(xì)分中執(zhí)行。在其他實(shí)施例中，每一個(gè)過程可以在整個(gè)圖像內(nèi)執(zhí)行。在301處，對于增強(qiáng)層31中的采樣位置，即增強(qiáng)層像素的位置，可以確定底層32中的相應(yīng)位置。在302和303處，根據(jù)增強(qiáng)層像素位置31的相應(yīng)底層像素位置32，可以分別確定底層中采樣在每一個(gè)方向上與整數(shù)底層像素位置的偏移或相位(即y位置相位33和x位置相位34)?？梢砸詢?nèi)插分辨率為單位來確定偏移或相位。例如，對于十六分之一內(nèi)插分辨率，相位O可以和與底層像素位置無偏移相對應(yīng)。相位8可以和在一個(gè)尺度上落在底層像素位置中間的增強(qiáng)層像素相對應(yīng)。內(nèi)插濾波器系數(shù)可以由査找表來確定，其中當(dāng)在y方向上內(nèi)插時(shí)y位置的相位33可以是索引，或者當(dāng)在x方向上內(nèi)插時(shí)x位置的相位34可以是索引。對于給定的方向，位置內(nèi)插中心是底層中可以對其位置相位進(jìn)行測量的像素位置。在本發(fā)明的一些實(shí)施例中，位置內(nèi)插中心是被定為濾波器中心的像素位置。圖4示出了與圖1所示相同的幾何圖形，宏塊發(fā)生了覆蓋。增強(qiáng)空間層100中的典型宏塊可以由140表示?；A(chǔ)空間層10中的典型宏塊可以由40表示。增強(qiáng)空間層100中的宏塊142可以整個(gè)處于剪切區(qū)域110中。增強(qiáng)空間層100中的宏塊144可以整個(gè)處于剪切區(qū)域110之外。增強(qiáng)空間層100中的宏塊146—部分在剪切區(qū)域110內(nèi)，一部分在剪切區(qū)域IIO之外。圖5示出了上采樣后的基礎(chǔ)空間層50的宏塊覆蓋在增強(qiáng)空間層IOO上的典型情況。虛線表示上采樣后的基礎(chǔ)空間層宏塊。塊51是從基礎(chǔ)空間層上采樣后的典型宏塊。增強(qiáng)空間層100中的一些宏塊，例如塊52，不具有與基礎(chǔ)空間層相對應(yīng)的塊。增強(qiáng)空間層100中的其他宏塊具有一個(gè)至若干個(gè)相應(yīng)的基礎(chǔ)空間層宏塊。增強(qiáng)空間層100中的塊53具有基礎(chǔ)空間層中的一個(gè)相應(yīng)的塊54。增強(qiáng)空間層100中的塊55具有基礎(chǔ)空間層中的4個(gè)相應(yīng)的塊，即基礎(chǔ)空間層塊56、57、58和59。在以下步驟中描述與H.264/MPEG-4AVC的SVC擴(kuò)展相兼容的內(nèi)插過程的典型實(shí)施例針對增強(qiáng)圖像中的宏塊的左上l咖a采樣，定義位置(xP,yP)。當(dāng)chroma—format—idc不等于O時(shí)，即存在色度通道時(shí)，針對相同宏塊的左上色度采樣，定義位置(xC，yC)。使用如下公式導(dǎo)出luma底層圖像中的luma宏塊的相對位置"別=+15)4y貝=(pM(7尸+15)+15)4g巾<formula>formulaseeoriginaldocumentpage15</formula>如上文所述，Rf16。當(dāng)chroma—formatjdc不等于0時(shí)，使用如下公式導(dǎo)出色度底層圖像中色度宏塊的相對位置"c，;yx)l少c石-4fxCSI=0《c(xC+她歸/)C-1)+15)4[>，1)+15)4其中MbWidthC和MbHeightC分別表示水平和垂直方向上每宏塊(MB)的色度采樣個(gè)數(shù)。給定在增強(qiáng)圖像中以單色度采樣為單位的色度采樣位置(x。,y。)，其在基礎(chǔ)圖像中以基礎(chǔ)圖像的十六分之一色度采樣為單位的相應(yīng)位置(px.。，py,。)可以根據(jù)如下而導(dǎo)出<formula>formulaseeoriginaldocumentpage15</formula>其中Rc二16，(x。H^，y。Hg.。)表示剪切窗的左上角在當(dāng)前圖像中的位置，其單位是當(dāng)前圖像的單色度采樣；(m,。，hb,。)是基礎(chǔ)圖像的分辨率，其單位是基礎(chǔ)圖像的單色度采樣；(Wm,。，U是剪切窗的分辨率，其單位是當(dāng)前圖像的單色度采樣；(Pk,"pba,y)表示基礎(chǔ)圖像的相對色度相移，其單位是基礎(chǔ)圖像的四分之一色度采樣；而(p喊,，P印M)表示當(dāng)前圖像的相對色度相移，其單位是當(dāng)前圖像的四分之一色度采樣。紋理內(nèi)插過程預(yù)測這個(gè)過程的輸入包括*基礎(chǔ)圖像中的整數(shù)luma采樣位置(xB,yB)和(xBl，yBl)，*基礎(chǔ)圖像的luma采樣陣列base!ix，y]，x=-2+xB...(xBl+2)以及y二-2+yB…(yBl+2)，爭當(dāng)chroma—format—idc不等于0時(shí)，〇基礎(chǔ)圖像中的整數(shù)色度采樣位置(xCB，yCB)以及(xCBl，yCBl)，〇基礎(chǔ)圖像的兩個(gè)色度釆樣陣列basea[x，y]和base"[x，y]，x=-2+xCB…(xCBl+2)以及尸-2+yCB…(yCBl+2)。這個(gè)過程的輸出包括luma采樣宏塊陣列predL[x，y]，x=0...15且"0...15，當(dāng)chroma一formatjdc不等于0時(shí)，兩個(gè)色度采樣宏塊陣列precU[x,y]禾口predCr[x，y]，x二0…MbWidthC-l且y二O..細(xì)eightC-1。按照如下導(dǎo)出x二0…15且y^…15時(shí)的luma采樣predL[x，y]。使f-2+xB…(xBl+2)且y^0…15的tempL[x，y]成為臨時(shí)luma采樣陣列。按照如下導(dǎo)出x^-2+xB…(xBl+2)且尸0…15的每一個(gè)te卿L[x，〇按照如下導(dǎo)出底層中相應(yīng)的分?jǐn)?shù)采樣(fractionalsample)位置yf:yf=P"(y+yP)。〇設(shè)ylnt和yFrac被定義為ylnt=(yf》4)且yFrac=yf%16。〇使用yFrac作為相位從表l中選擇j:-2...3的6抽頭濾波器e[j]，并導(dǎo)出te卿L[x，y]為:baseL[x，ylnt-2〗*e[-2]+ylnt-l]*e[-l]+baseL[x,ylnt〗*e〖0〗+闊x，ylnt+l*e[l]+b欲L[x，ylot+2〗，+basejx,ylnt+3]*e[3].*按照如下導(dǎo)出F0…15且yi…15的每一個(gè)采樣predL[x,y]:〇按照如下導(dǎo)出底層中相應(yīng)的分?jǐn)?shù)采樣位置x:Xf二Px.L(X+XP)。〇設(shè)xInt和xFrac被定義為xlnt=(xf》4)且xFrac=xf%16。〇使用yFrac作為相位從表l中選擇j二-2...3的6抽頭濾波器e[j]，并導(dǎo)出predjx，y]為tempL[xM-2,y]*e[-2〗+tempL[xInt-1，y〗*e[1]+tempL,y〗*e+tempL[xtot+1,y〗*e[I]+tempjxlnt+2,y]*e[2]+tempL[xInt+3,y]*e[3〗+512)/1024),其中Cliply(x)=min(max(0,x),(1BitDepthY)—1)BitD印thY表示luma通道數(shù)據(jù)的比特深度。當(dāng)chroma—format_idc不等于O時(shí)，按照如下導(dǎo)出色度采樣predc[x,y](C表示每一個(gè)Cb和Cr)，x二O..細(xì)idthC-l且y=O...MbHeightC-1。*設(shè)tmpWx，y]和tmpU[x,y]為臨時(shí)色度采樣陣列，x:-2+xCB…(xCBl+2)且y二O...MbHeightOl。*按照如下導(dǎo)出每一個(gè)tempc[x，y]，C作為Cb和Cr，x=-2+xCB…(xCBl+2)，且y二0…MbHeightC-l:〇按照如下導(dǎo)出底層中相應(yīng)的分?jǐn)?shù)采樣位置yfC:yfC=py,c(y+yC)0〇設(shè)yIntC和yFracC被定義為yIntC=(yfC》4)且yFracOyfC%16。〇使用yFracC作為相位從表l中選擇j二-2…3的6抽頭濾波器e[j]，并導(dǎo)出te即c[x，y]為-tempc[x,y〗=basec[^yhC-2*e[-2]+basec[x,ytoC國ll*e[4!+b蹈ec[x,yIiC]*e+b,[x，ylnC++basec[x,ylntC+2]*e[2〗+basec[x,ylntC+,].*按照以下導(dǎo)出每一個(gè)采樣predc[x，y]，其中C作為Cb和Cr，x二O...MbWidthC-l且y二O,..MbHeightC-l:〇按照如下導(dǎo)出底層中相應(yīng)的分?jǐn)?shù)采樣位置xfC:xfC=px,c(x+xC)o〇設(shè)xIntC和xFracC被定義為xlntO(xfC》4)且xFracC=xfC%16。〇使用xFracC作為相位從表l中選擇j二-2...3的6抽頭濾波器e[j]，并導(dǎo)出predc[x,y]為predcx^]^Cliplc((tempc[xMtC-2，y〗*e[-2+tefflpc[xIntC-1，y]*e〖-l]+tempc[xIntC5y〗*e[0]+tempCC+1，y〗*e[l]+tempc[x!ntC+2,y]*e〖2〗+tempc[xIntC+3，y]*e[3〗+512)腿)，其中C!ipicO)=min(max(0,xX(lBkDepthc)—1)，BitD印thc表示色度通道數(shù)據(jù)的比特深度。紋理內(nèi)插過程殘余這個(gè)過程的輸入包括基礎(chǔ)圖像basePic中的整數(shù)luma采樣位置(xB，yB)和(xBl，yBl)，luma殘余采樣陣列resBaseL[x，y]，x二-xB…xBl且y二yB…yBl，當(dāng)chroma一format一idc不等于O時(shí)，〇基礎(chǔ)圖像basePic中的整數(shù)色度采樣位置(xCB，yCB)和(xCBl，yCBl)，〇兩個(gè)色度殘余采樣陣列resBasecb[x，y]和resBasecr[x，y]，其中x二xCB...xCB1且y二yCB...yCB1。這個(gè)過程的輸出包括luma采樣陣列resPredL[x，y]，其中乂=0...15且7=0...15。*當(dāng)chroma—format—idc不等于0時(shí)，兩個(gè)色度采樣陣列resPredcb[x，y]禾口resPredCr[x，y]，其中x二0…MbWidthC-1且y=0...MbHeightC-l。按照如下導(dǎo)出luma殘余采樣resPredL[x，y]，x=0...15且y二0…15。使tempL[x，y]成為臨時(shí)luma采樣陣列，x二xB…xBl且尸0…15。按照如下出每一個(gè)tempL[x，y]，x二xB…xBl且y二0…15:〇按照如下導(dǎo)出底層的相應(yīng)分?jǐn)?shù)采樣位置yf:yf二P"(y+yP)。〇設(shè)ylnt和yFrac被定義為ylnt二(yf》4)且yFrac=yf%16。〇導(dǎo)出tempjx，y]為tempL〖x，y〗=resBaseL[x，y闊氣16-yFrac)+resB^eJx,ylnt+l]糸yFrac.*按照如下導(dǎo)出每一個(gè)殘余采樣resPredJx，y]，f0…15且y二0…15:〇按照如下導(dǎo)出底層中的相應(yīng)分?jǐn)?shù)采樣位置xf:xf二p"(x+xP)。〇設(shè)xInt和xFrac被定義為xlnt=(xf》4)且xFrac=xf%16。〇導(dǎo)出resPrecUx，y]為resPredt[x，y〗=(tempL[xInt,y]*(16-xFrac)+te邊pL[xInt+1,y]*xFrac)/256.當(dāng)chroma一format一idc不等于0時(shí)，按照如下導(dǎo)出色度殘余采樣resPredc[x,y](C為Cb或Cr)，x=O...MbWidthC-1且y二0…MbHeightC-l。*使tmplc;b[x，y]和t卿k[x，y]成為臨時(shí)色度采樣陣列，x二xCB...xCB1且y二O...MbHeightC-1。*按照如下導(dǎo)出每一個(gè)tempc[x，y]，C作為Cb和Cr，x二-xCB...xCBl且y二O..細(xì)eightC-l:〇按照如下導(dǎo)出底層中相應(yīng)的分?jǐn)?shù)采樣位置yfC:yfC=py,c(y+yC)。〇設(shè)yIntC和yFracC被定義為ylntC二(yfC》4)且yFracC=yfC%16。〇導(dǎo)出tempc[x，y]為:resBasec[x,yIntC]*(16yFracC)+resBasec[AylntC+1]*yFracC.*按照以下導(dǎo)出每一個(gè)采樣resPredc[x，y]，其中C作為Cb和Cr，x=O...MbWidthC-l且y^O…MbHeightC-1:〇按照如下導(dǎo)出底層中相應(yīng)的分?jǐn)?shù)采樣位置xfC:xfOpx,c(x+xC)。〇設(shè)xIntC和xFracC被定義為xlntO(xfC》4)且xFracC=xfC%16。〇導(dǎo)出resPredc[x,y]為(tempc[x!ntC,y]*(16-xFracC)+tempc[xIntC+1，y〗*xFracC)/256.上文描述中使用的術(shù)語和表達(dá)僅用作描述性而非限制性術(shù)語，而且不打算在這些術(shù)語和表達(dá)的使用中排除所示和所述特征或其部分的等同物，可以理解的是，本發(fā)明的范圍僅由所附權(quán)利要求來定義和限定。權(quán)利要求1.一種從包括底層圖像采樣baseL[.，.]的底層圖像進(jìn)行圖像上采樣以得到包括增強(qiáng)層圖像采樣predL[.，.]的增強(qiáng)層圖像的方法，包括a)針對所述增強(qiáng)層圖像的塊的左上采樣，定義位置(xP，yP)；b)導(dǎo)出所述增強(qiáng)層圖像的所述塊在所述底層圖像中的相對位置xB、yB、xB1、yB1；c)產(chǎn)生采樣塊陣列predL[x，y]，其中所述產(chǎn)生步驟包括i)形成臨時(shí)采樣陣列tempL[x，y]；ii)導(dǎo)出所述臨時(shí)采樣陣列中的條目，其中所述導(dǎo)出包括(1)計(jì)算所述底層圖像中相應(yīng)的分?jǐn)?shù)采樣的y位置yf；(2)根據(jù)yf計(jì)算y位置的內(nèi)插中心yInt；(3)根據(jù)yf計(jì)算y位置相位；(4)獲得第一6抽頭濾波器的第一組濾波器系數(shù)，其中所述第一組濾波器系數(shù)的獲得基于所述y位置相位；以及(5)根據(jù)如下導(dǎo)出所述條目tempL[x，y]tempL[x，y]＝baseL[x，yInt-2]*e[-2]+baseL[x，yInt-1]*e[-1]+baseL[x，yInt]*e+baseL[x，yInt+1]*e[1]+baseL[x，yInt+2]*e[2]+baseL[x，yInt+3]*e[3]，其中，e[-2]、e[-1]、e、e[1]、e[2]和e[3]表示所述第一6抽頭濾波器的所述第一組濾波器系數(shù)；以及iii)導(dǎo)出所述采樣塊陣列predL[x，y]中的條目，其中所述導(dǎo)出步驟包括(1)計(jì)算所述底層圖像中相應(yīng)的分?jǐn)?shù)采樣的x位置xf；(2)根據(jù)xf計(jì)算x位置的內(nèi)插中心xInt；(3)根據(jù)xf形成x位置相位；(4)獲得第二6抽頭濾波器的第二組濾波器系數(shù)，其中所述第二組濾波器系數(shù)的獲得基于所述x位置相位；以及(5)根據(jù)如下導(dǎo)出所述條目predL[x，y]predL[x，y]＝Clip1Y((tempL[xInt-2，y]*e[-2]+tempL[xInt-1，y]*e[-1]+tempL[xInt，y]*e+tempL[xInt+1，y]*e[1]+tempL[xInt+2，y]*e[2]+tempL[xInt+3，y]*e[3]+512)/1024)，其中，e[-2]、e[-1]、e、e[1]、e[2]和e[3]表示所述第二6抽頭濾波器的所述第二組濾波器系數(shù)。2.根據(jù)權(quán)利要求1所述的方法，還包括定義內(nèi)插分辨率。3.根據(jù)權(quán)利要求2所述的方法，其中，所述內(nèi)插分辨率是圖像采樣的1A6。4.根據(jù)權(quán)利要求1所述的方法，其中，所述底層圖像采樣包括亮度采樣。5.根據(jù)權(quán)利要求1所述的方法，其中，所述底層圖像采樣包括色度采樣。6.根據(jù)權(quán)利要求1所述的方法，其中，所述第一組濾波器系數(shù)的獲得包括訪問查找表。7.根據(jù)權(quán)利要求1所述的方法，其中，所述第二組濾波器系數(shù)的獲得包括訪問查找表。8.根據(jù)權(quán)利要求6所述的方法，其中，所述查找表包括Lanczos力口窗sinc函數(shù)的采樣。9.根據(jù)權(quán)利要求7所述的方法，其中，所述查找表包括Lanczos加窗sinc函數(shù)的采樣。10.根據(jù)權(quán)利要求1所述的方法，其中，所述塊是尺寸為16乘16的宏塊。11.根據(jù)權(quán)利要求l所述的方法，其中，所述塊具有與所述增強(qiáng)層圖像相同的空間尺寸。12.—種從較低分辨率圖像進(jìn)行圖像上采樣以得到較高分辨率圖像的方法，所述方法包括a)導(dǎo)出與所述較高分辨率圖像中的采樣位置相對應(yīng)的較低分辨率圖像位置；b)根據(jù)所述位置在第一方向上計(jì)算第一位置的內(nèi)插中心；c)根據(jù)所述位置在所述第一方向上計(jì)算第一位置相位；d)根據(jù)所述位置在第二方向上計(jì)算第二位置的內(nèi)插中心；e)根據(jù)所述位置在所述第二方向上計(jì)算第二位置相位；f)獲得第一組濾波器系數(shù)，其中所述第一組濾波器系數(shù)的獲得基于所述第一位置相位；g)獲得第二組濾波器系數(shù)，其中所述第而組濾波器系數(shù)的獲得基于所述第二位置相位；h)使用包括所述第一組濾波器系數(shù)的第一濾波器在所述第一方向上對所述較低分辨率圖像進(jìn)行濾波，從而產(chǎn)生第一濾波后圖像；以及i)使用包括所述第二組濾波器系數(shù)的第二濾波器在所述第二方向上對所述第一濾波后圖像進(jìn)行濾波，從而產(chǎn)生所述較高分辨率圖像。13.根據(jù)權(quán)利要求12所述的方法，還包括定義內(nèi)插分辨率。14.根據(jù)權(quán)利要求13所述的方法，其中，所述內(nèi)插分辨率是圖像采樣的1/16。15.根據(jù)權(quán)利要求12所述的方法，其中，所述第一組濾波器系數(shù)的獲得包括訪問查找表。16.根據(jù)權(quán)利要求12所述的方法，其中，所述第二組濾波器系數(shù)的獲得包括訪問查找表。17.根據(jù)權(quán)利要求15所述的方法，其中，所述查找表包括Lanczos加窗sinc函數(shù)的采樣。18.根據(jù)權(quán)利要求16所述的方法，其中，所述查找表包括Lanczos加窗sinc函數(shù)的采樣。19.一種從較低分辨率圖像進(jìn)行圖像上采樣以得到較高分辨率圖像的系統(tǒng)，所述系統(tǒng)包括-a)相對位置推導(dǎo)器，用于導(dǎo)出與所述較高分辨率圖像中的采樣位置相對應(yīng)的較低分辨率圖像位置；b)第一位置內(nèi)插中心計(jì)算器，用于根據(jù)所述位置在第一方向上計(jì)算第一位置的內(nèi)插中心；c)第一位置相位計(jì)算器，用于根據(jù)所述位置在所述第一方向上計(jì)算第一位置相位；d)第二位置內(nèi)插中心計(jì)算器，用于根據(jù)所述位置在第二方向上計(jì)算第二位置的內(nèi)插中心；e)第二位置相位計(jì)算器，用于根據(jù)所述位置在所述第二方向上計(jì)算第二位置相位；f)第一濾波器系數(shù)選擇器，用于獲得第一組濾波器系數(shù)，其中所述第一組濾波器系數(shù)的獲得基于所述第一位置相位；g)第二濾波器系數(shù)選擇器，用于獲得第二組濾波器系數(shù)，其中所述第二組濾波器系數(shù)的獲得基于所述第二位置相位；h)包括所述第一組濾波器系數(shù)的第一濾波器，用于在所述第一方向上對所述較低分辨率圖像進(jìn)行濾波，從而產(chǎn)生第一濾波后圖像；以及i)包括所述第二組濾波器系數(shù)的第二濾波器，用于在所述第二方向上對所述第一濾波后圖像進(jìn)行濾波，從而產(chǎn)生所述較高分辨率圖像。20.根據(jù)權(quán)利要求19所述的系統(tǒng)，還包括內(nèi)插分辨率。21.根據(jù)權(quán)利要求20所述的系統(tǒng)，其中，所述內(nèi)插分辨率是圖像采樣的1/16。22.根據(jù)權(quán)利要求19所述的系統(tǒng)，其中，所述第一組濾波器系數(shù)的獲得包括查找表。23.根據(jù)權(quán)利要求19所述的系統(tǒng)，其中，所述第二組濾波器系數(shù)的獲得包括查找表。24.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中，所述查找表包括Lanczos加窗sinc函數(shù)的采樣。25.根據(jù)權(quán)利要求23所述的系統(tǒng)，其中，所述查找表包括Lanczos加窗sinc函數(shù)的采樣。26.根據(jù)權(quán)利要求19所述的系統(tǒng)，還包括H.264/MPEG-4AVC視頻編解碼器。全文摘要本發(fā)明的實(shí)施例包括使用直接內(nèi)插進(jìn)行圖像上采樣的系統(tǒng)和方法。本發(fā)明的一些實(shí)施例提供了一種被設(shè)計(jì)用于h.264/MPEG-4AVC的可縮放視頻編碼擴(kuò)展的上采樣過程。文檔編號(hào)H04N7/12GK101513053SQ200680008665公開日2009年8月19日申請日期2006年2月28日優(yōu)先權(quán)日2005年3月18日發(fā)明者孫式軍申請人:夏普株式會(huì)社