專利名稱:視頻位率控制裝置與方法
技術(shù)領(lǐng)域:
本發(fā)明是關(guān)于一種視頻位率控制裝置與方法。
背景技術(shù):
位率控制方法可以讓編碼后的總位數(shù)與目標(biāo)位率相去不遠(yuǎn)。然而,如果沒有參考人類視覺的特性,以這種方法呈現(xiàn)出的效果可能會(huì)讓整張畫面的影像品質(zhì)大同小異,而使得人眼覺得重要的區(qū)域沒有被突顯出來,所以在使用位數(shù)的效率上有改進(jìn)的空間。美國(guó)專利公開號(hào)2005/0008075揭露一種支持重要區(qū)域(region-of-interest, R0I)的位率控制方法。此方法先根據(jù)每一巨區(qū)塊(macroblock,MB)的優(yōu)先權(quán)(priority) 計(jì)算其巨區(qū)塊的權(quán)值活動(dòng)程度(activity),并將權(quán)值活動(dòng)程度大者歸類為重要區(qū)域。根據(jù)權(quán)值活動(dòng)程度分配(allocate)每一巨區(qū)塊的位預(yù)算值(bit budget),然后計(jì)算估測(cè)復(fù)雜度(estimated complexity)以及估測(cè)量化比例(estimated quantizerscale)因子,并編碼此巨區(qū)塊。圖IA是在一張影像上的巨區(qū)塊其優(yōu)先權(quán)表110的一個(gè)范例示意圖,例如橢圓區(qū)域(oval area) 112被定義為一重要區(qū)域,并且在橢圓區(qū)域112的巨區(qū)塊其優(yōu)先權(quán)皆為 2 ;圖IB是從優(yōu)先權(quán)表110轉(zhuǎn)換后的量化比例表120,例如優(yōu)先權(quán)為1的巨區(qū)塊的量化比例為8,而優(yōu)先權(quán)為2的巨區(qū)塊的量化比例為4。重要區(qū)域所對(duì)應(yīng)的優(yōu)先權(quán)高于非重要區(qū)域 (NROI),但重要區(qū)域的界定方式?jīng)]有進(jìn)一步的確切說明。此位率控制方法中,畫面內(nèi)編碼(Intra-coded)巨區(qū)塊的活動(dòng)程度來自于四個(gè) 8X8區(qū)塊亮度(luminance)的變異數(shù)(variance)的總和,而畫面間編碼(Inter-coded)巨區(qū)塊的活動(dòng)程度則來自于四個(gè)8X8區(qū)塊殘余值(residual)的變異數(shù)總和。美國(guó)專利號(hào)6,850, 565的文獻(xiàn)中,揭露一種實(shí)時(shí)的位率控制系統(tǒng)(Real Time Bit Rate Control System)。如圖2的范例所示,位率控制系統(tǒng)205對(duì)每一張欲編碼的畫面皆有一對(duì)應(yīng)的重要矩陣(interestmatrix),此重要矩陣與一來源模式(source model) 210和巨區(qū)塊重要性參數(shù)搭配運(yùn)作。而來源模式210結(jié)合一重要結(jié)構(gòu)(interest structure) 215 來產(chǎn)生一量化值,以編碼視頻信號(hào)。重要矩陣可由使用者輸入或使用一算法自動(dòng)產(chǎn)生。每一巨區(qū)塊的位分配方式是修改二次式位率失真(ratedistortion)模式,加入由重要矩陣得知的巨區(qū)塊重要性參數(shù),因此重要區(qū)域所分配到的位數(shù)較多,也可以搭配較小的量化參數(shù)而有較佳的影像品質(zhì)。此文獻(xiàn)中,沒有揭露重要區(qū)域與非重要區(qū)域的交接處巨區(qū)塊的量化參數(shù)調(diào)整上的技術(shù)探討。^h Proc. Of IEEE International Conference on Image Processing,pp. 53-56, 2006提出的論文“應(yīng)用于H. 264的多優(yōu)先序重要區(qū)域編碼方法(Multiple Priority Region of Interest Coding with H. 264) ”中,在給定一重要區(qū)域后,以重要區(qū)域來產(chǎn)生不同層級(jí)的漸層區(qū)域,離重要區(qū)域愈遠(yuǎn)的區(qū)域其層級(jí)愈低,所對(duì)應(yīng)的優(yōu)先權(quán)也較低,在控制位率時(shí),每一區(qū)域初步的位數(shù)分配會(huì)考慮此區(qū)域的大小、優(yōu)先權(quán)以及根據(jù)前一張畫面所估測(cè)而來的平均絕對(duì)差值(Mean Absolute Difference,MAD),再通過優(yōu)先權(quán)考量,調(diào)整不同層級(jí)區(qū)域之間的位數(shù),最后經(jīng)過二次失真模式求得每一區(qū)塊的量化參數(shù)值。此論文中,不同優(yōu)先權(quán)其層級(jí)之間的權(quán)重關(guān)系為固定,因此重要區(qū)域的影像品質(zhì)決定因素只跟層級(jí)的數(shù)量及本身視頻影像的特質(zhì)有關(guān)。在Proc. Of First Internat ional Conference on Industrial andlnformat ion Systems, Aug. 2006.論文“搭配有彈性的巨區(qū)塊順序(Flexible Macroblock Ordering, FM0)的重要區(qū)域編碼方法(Region oflnterest Video Coding with Flexible Macroblock Ordering),,中,是先針對(duì)非重要區(qū)域進(jìn)行編碼,之后將節(jié)省的位數(shù)用于增強(qiáng)重要區(qū)域的影像品質(zhì)。此論文中沒有揭露和探討可以確保重要區(qū)域相對(duì)于非重要區(qū)域的品質(zhì)的機(jī)制,也沒有揭露和探討重要區(qū)域與非重要區(qū)域在時(shí)間軸及兩者交接處的品質(zhì)平滑度。
發(fā)明內(nèi)容
本揭露的實(shí)施范例可提供一種視頻位率控制裝置與方法。在一實(shí)施范例中,所揭露者是有關(guān)于一種視頻位率控制裝置,此裝置包含一重要區(qū)域決定模塊,對(duì)于多張輸入影像中的每一張輸入影像,根據(jù)一特征地圖(saliency map) 的信息或經(jīng)由一偵測(cè)系統(tǒng)處理后的輸出,劃分出此多張輸入影像中的每一張輸入影像中的至少一重要區(qū)域和至少一非重要區(qū)域;一位率分配模塊,根據(jù)一輸入的品質(zhì)參數(shù),并搭配此至少一重要區(qū)域和此至少一非重要區(qū)域的面積大小,將一總目標(biāo)位數(shù)分配成此至少一重要區(qū)域和此至少一非重要區(qū)域?qū)?yīng)的目標(biāo)位數(shù);以及一位率控制模塊,根據(jù)此至少一重要區(qū)域和此至少一非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù)以及至少一條件限制,獨(dú)立進(jìn)行該每一張輸入影像中的該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的位率控制。在另一實(shí)施范例中,所揭露者是有關(guān)于一種視頻位率控制方法,此方法包含對(duì)于多張輸入影像中的每一張輸入影像,建構(gòu)一個(gè)反應(yīng)對(duì)此輸入影像的每一像素點(diǎn)敏感程度的一特征地圖,或偵測(cè)此多張輸入影像中的每一張輸入影像中一或多個(gè)特定物的存在范圍; 根據(jù)此特征地圖的信息或此一或多個(gè)特定物的存在范圍的信息,劃分出此輸入影像中的至少一重要區(qū)域和至少一非重要區(qū)域;根據(jù)一輸入的品質(zhì)參數(shù),并搭配此至少一重要區(qū)域和此至少一非重要區(qū)域的面積大小,將一總目標(biāo)位分配成成至少一重要區(qū)域和此至少一非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù);以及利用一位率失真模式與根據(jù)至少一條件限制,來調(diào)整此至少一重要區(qū)域和此至少一非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù),讓此至少一重要區(qū)域和此至少一非重要區(qū)域內(nèi)巨區(qū)塊的編碼位率的使用是各自獨(dú)立使用在其各自對(duì)應(yīng)的目標(biāo)位數(shù)的范圍內(nèi)。
茲配合下列附圖、實(shí)施范例的詳細(xì)說明及申請(qǐng)專利范圍,將上述及本發(fā)明的其它特征與優(yōu)點(diǎn)詳述于后,其中圖IA是在一張影像上的巨區(qū)塊其優(yōu)先權(quán)表的一個(gè)范例示意圖。圖IB是從圖IA的優(yōu)先權(quán)表轉(zhuǎn)換后的量化比例表的一個(gè)范例示意圖。圖2是一種實(shí)時(shí)的位率控制系統(tǒng)的一個(gè)范例示意圖。圖3是一種視頻位率控制裝置的一個(gè)范例示意圖,并且與所揭露的某些實(shí)施范例一致。圖4是一范例示意圖,說明特征地圖與重要區(qū)域的產(chǎn)生,并且與所揭露的某些實(shí)施范例一致。圖5是視頻位率控制方法的一個(gè)范例流程圖,并且與所揭露的某些實(shí)施范例一致。圖6是一范例流程圖,說明重要區(qū)域與非重要區(qū)域各自獨(dú)立進(jìn)行位率控制,以及后續(xù)的編碼,并且與所揭露的某些實(shí)施范例一致。圖7A與圖7B是范例流程圖,分別說明重要區(qū)域與非重要區(qū)域進(jìn)行位率控制的子步驟,并且與所揭露的某些實(shí)施范例一致。圖8是一 Foreman視頻序列的位速率控制的相關(guān)編碼參數(shù)的一個(gè)范例示意圖,并且與所揭露的某些實(shí)施范例一致。圖9至圖11是一 Foreman視頻序列分別在三種不同位速率下的控制結(jié)果的范例示意圖,并且與所揭露的某些實(shí)施范例一致。
具體實(shí)施例方式本揭露的實(shí)施范例是在每張欲編碼的視頻畫面給定一目標(biāo)位率的情況下,提供一種視頻位率控制裝置與方法,此視頻位率控制裝置與方法是針對(duì)整張畫面做有效的位率控制,以結(jié)合反應(yīng)對(duì)輸入影像的視覺特性、或輸入影像中一或多個(gè)特定物的存在范圍,來區(qū)分出重要與不重要區(qū)域,之后,對(duì)于重要與不重要區(qū)域各自獨(dú)立進(jìn)行位率控制,特定的重要區(qū)域可以給予較多的編碼資源,而不重要區(qū)域則給予較低的編碼品質(zhì),以有效運(yùn)用有限的位資源,來達(dá)到成功控制位率,并兼顧保留影像的重要信息。圖3是一種視頻位率控制裝置的一個(gè)范例示意圖,并且與所揭露的某些實(shí)施范例一致。參考圖3,視頻位率控制裝置300包含一重要區(qū)域決定模塊320、一位率分配模塊330、 以及一位率控制模塊345。重要區(qū)域決定模塊320對(duì)于多張輸入影像中的每一張輸入影像312,根據(jù)一特征地圖314的信息,例如由一特征地圖建立模塊310對(duì)于輸入影像312建構(gòu)反應(yīng)對(duì)輸入影像 312的每一像素點(diǎn)敏感程度的特征地圖,或經(jīng)由一偵測(cè)系統(tǒng)360處理后的輸出,例如偵測(cè)系統(tǒng)360偵測(cè)輸入影像312中一或多個(gè)特定物的存在范圍364,來劃分出輸入影像312中的重要區(qū)域312a和非重要區(qū)域312b。視頻位率控制裝置300也可以還包括特征地圖建立模塊 310或偵測(cè)系統(tǒng)360,或特征地圖建立模塊310與偵測(cè)系統(tǒng)360都包括。特征地圖314可包含有空間域和時(shí)間域的輸入影像312中的至少一特征,例如,人眼對(duì)影像中像素點(diǎn)敏感程度的特征可考量用來形成此特征地圖。位率分配模塊330根據(jù)一輸入的品質(zhì)參數(shù)332,搭配輸入影像312中的重要區(qū)域和非重要區(qū)域的面積大小,將輸入影像312的一總目標(biāo)位數(shù)作一適當(dāng)?shù)奈粩?shù)分配,分配成輸入影像312中的重要區(qū)域和非重要區(qū)域兩種區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù),即重要區(qū)域目標(biāo)位數(shù)334與非重要區(qū)域目標(biāo)位數(shù)336。位率控制模塊345根據(jù)重要區(qū)域與非重要區(qū)域兩種區(qū)域個(gè)別對(duì)應(yīng)的目標(biāo)位數(shù),以及至少一條件限制342,獨(dú)立進(jìn)行輸入影像312中的重要區(qū)域與非重要區(qū)域中巨區(qū)塊的位率控制,即重要區(qū)域位率控制340與非重要區(qū)域位率控制350。重要區(qū)域與非重要區(qū)域巨區(qū)塊的位率控制可各自獨(dú)立進(jìn)行,說明如下。每一輸入影像在一開始分配好重要區(qū)域與非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù)后,此輸入影像的各巨區(qū)塊的編碼所需的目標(biāo)位數(shù)是取用自其所對(duì)應(yīng)的重要區(qū)域或非重要區(qū)域。此兩種區(qū)域的巨區(qū)塊編碼所能運(yùn)用的位數(shù)并不互通,直到該輸入畫面內(nèi)的巨區(qū)塊全部編碼完畢并進(jìn)行下一輸入畫面的編碼時(shí),再重行計(jì)算下一張輸入畫面所分配的總目標(biāo)位數(shù)。由于重要區(qū)域與非重要區(qū)域是依據(jù)一開始由品質(zhì)參數(shù)332及兩者面積大小所訂定的位數(shù)分配來進(jìn)行編碼,因此在各自目標(biāo)位數(shù)的分配及使用上是獨(dú)立的。然重要與非重要區(qū)域位數(shù)的使用雖是獨(dú)立,并不代表各自區(qū)域內(nèi)巨區(qū)塊的量化參數(shù)指定是為獨(dú)立進(jìn)行。 例如,位率控制模塊345對(duì)重要區(qū)域或非重要區(qū)域中巨區(qū)塊的量化參數(shù)的調(diào)整所依據(jù)的至少一條件限制342可能來自重要區(qū)域與非重要區(qū)域兩者的交界區(qū)域的量化參數(shù)值的限制。特征地圖建立模塊310可根據(jù)空間域中影像內(nèi)容的特征,例如亮度對(duì)比 (luminance contrast)、互補(bǔ)色(color-double—opponent)、紋路(texture)禾口人臉膚色 (facial skin color)等,及時(shí)間域中的影像特征,例如運(yùn)動(dòng)向量強(qiáng)度大小等來產(chǎn)生特征影像,并結(jié)合各種特征影像來形成特征地圖314。也就是說,在特征地圖314的信息中,可包含空間域(spatialdomain)和時(shí)間域(temporal domain)的影像特征。每一特征影像可以賦予一個(gè)與該特征相關(guān)的權(quán)重(weight),而利用這些權(quán)重將每一像素的這些特征值加總結(jié)合起來,系統(tǒng)可以提供對(duì)輸入影像312中的每一像素點(diǎn)(或每一巨區(qū)塊)的人眼視覺重要性區(qū)分,例如,對(duì)比較重要的像素給予較大的特征值(saliency)。也就是說,特征地圖314可代表人眼對(duì)每一像素注視重視的程度。對(duì)比較吸引人眼視覺注意的像素可給予較大的特征值。圖4是一范例示意圖,說明特征地圖與重要區(qū)域的產(chǎn)生,并且與所揭露的某些實(shí)施范例一致。圖4的范例中,對(duì)于每一張輸入影像的內(nèi)容,分析空間域中亮度對(duì)比、互補(bǔ)色、 紋路和人臉膚色以及時(shí)間域中運(yùn)動(dòng)向量的影像特征,并產(chǎn)生相對(duì)應(yīng)的六個(gè)特征影像,即亮度對(duì)比的特征影像410、RG互補(bǔ)色的特征影像422與BY互補(bǔ)色的特征影像424、紋路的特征影像430、人臉膚色的特征影像440、以及運(yùn)動(dòng)向量的特征影像450。然后,此六個(gè)范例特征影像的每一特征影像可以賦予一個(gè)與該特征相關(guān)的權(quán)重值,假設(shè)此六個(gè)特征影像410、422、 424、430、440、以及 450 的權(quán)重值分別為 wl 至 w6,例如 wl = w2 = w3 = w5 = l,w4 = 2,w6 =4。則以各權(quán)重值結(jié)合此六個(gè)范例特征影像可形成一范例特征地圖460。再將范例特征地圖460經(jīng)進(jìn)一步處理(例如二值化)后,可決定并產(chǎn)生出此輸入影像的重要區(qū)域470,其余區(qū)域則為非重要區(qū)域。范例特征地圖的組成并不限于上述所提出的六種影像特征,與人眼對(duì)影像中像素點(diǎn)敏感程度的特征皆可考量用來形成特征地圖。除了經(jīng)由影像特征處理之外,重要區(qū)域也可以不經(jīng)由特征地圖的估算,而經(jīng)由使用者在編碼器編碼之前預(yù)先指定(例如將影像的中央某部份界定為重要區(qū)域),或是可經(jīng)由其它影像處理子系統(tǒng)(例如人臉偵測(cè)器統(tǒng)、車牌偵測(cè)系統(tǒng))來界定。位率分配模塊330對(duì)目前畫面的目標(biāo)位率的估測(cè)方式可由多種方式來求得,例如經(jīng)由一適應(yīng)性基本單元層的位率控制(Adaptive Basic UnitLayer Rate Control)而求得。而品質(zhì)參數(shù)K的值可代表平均每一重要區(qū)域內(nèi)的巨區(qū)塊所分配到的位數(shù)為每一非重要區(qū)域內(nèi)巨區(qū)塊所分配到的位數(shù)的K倍,所以改變品質(zhì)參數(shù)K的值可以決定分配給重要區(qū)域的位數(shù)的多寡。品質(zhì)參數(shù)K值可以由使用者事先決定重要/非重要區(qū)域的相對(duì)位率分配, 而間接調(diào)整重要/非重要區(qū)域的相對(duì)影像品質(zhì)。當(dāng)K值愈大時(shí),重要區(qū)域內(nèi)巨區(qū)塊的影像品質(zhì)將遠(yuǎn)優(yōu)于非重要區(qū)域的品質(zhì)。但因?yàn)榉侵匾獏^(qū)域內(nèi)巨區(qū)塊仍需要最基本的位數(shù)量來完成編碼,所以實(shí)際可達(dá)到的K值也是有限的,太大的K值要求,在實(shí)際上可能無法達(dá)成。較大的K值設(shè)定可以讓非重要區(qū)域被給予較低的編碼品質(zhì),而讓有限的位率提供給重要區(qū)域以作更加有效的運(yùn)用。至少一條件限制是對(duì)重要區(qū)域和非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù)的條件限制。位率控制模塊345還可包括一量化參數(shù)調(diào)整模塊,此量化參數(shù)調(diào)整模塊可根據(jù)一位率失真模式與此至少一條件限制,來調(diào)整重要區(qū)域和非重要區(qū)域中各巨區(qū)塊的相對(duì)應(yīng)量化參數(shù),讓重要區(qū)域和非重要區(qū)域的位率的使用被控制在其個(gè)別對(duì)應(yīng)的目標(biāo)位數(shù)的范圍內(nèi)。所以,對(duì)于重要區(qū)域位率控制340與非重要區(qū)域位率控制350,此量化參數(shù)調(diào)整模塊可先分別利用一位率失真模式,例如二次式位率失真模式,來決定輸入影像312中重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的一初始量化參數(shù)。如果每一巨區(qū)塊所初步計(jì)算出的量化參數(shù)值沒有考慮空間域上與時(shí)間域上的連續(xù)性,加上重要區(qū)域與非重要區(qū)域的位率控制是各自獨(dú)立進(jìn)行的,則在此兩種區(qū)域的交界處的量化參數(shù)值可能會(huì)有很大的差異,而造成此交接處的影像品質(zhì)不平順而影響視覺感受。所以,量化參數(shù)調(diào)整模塊得到初始量化參數(shù)之后,還需要考量一些“時(shí)間、空間、區(qū)域交互性”等前述這些條件限制,來進(jìn)行量化參數(shù)值的調(diào)整。量化參數(shù)調(diào)整模塊分別計(jì)算出重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的初始量化參數(shù)值后,分別再考量對(duì)輸入影像312中的重要區(qū)域與非重要區(qū)域中巨區(qū)塊的量化參數(shù)的至少一條件限制,來調(diào)整初始量化參數(shù)值至一最終量化參數(shù)值,以進(jìn)行重要區(qū)域與非重要區(qū)域中巨區(qū)塊的編碼。也就是說,在位率控制模塊345中,對(duì)輸入影像312中的重要區(qū)域的位率控制與非重要區(qū)域的位率控制雖是獨(dú)立進(jìn)行,但對(duì)于各區(qū)域內(nèi)巨區(qū)塊量化參數(shù)的指定仍需考量區(qū)域相互之間的影響。輸入影像312中的重要區(qū)域或是非重要區(qū)域中巨區(qū)塊的量化參數(shù)的至少一條件限制例如是前一張輸入影像的重要區(qū)域與非重要區(qū)域中巨區(qū)塊的平均量化參數(shù)值的限制、 或是來自同一影像中前一個(gè)已編碼完成巨區(qū)塊的量化參數(shù)值的限制、或是重要區(qū)域與非重要區(qū)域兩者的交界區(qū)域的量化參數(shù)值的限制、或是來自前一張影像的位率控制的結(jié)果等。 位率控制模塊345分別經(jīng)由前述量化參數(shù)的限制條件的調(diào)整,可在速率控制過程中考慮不同漸層的區(qū)域之間的連續(xù)性,讓影像品質(zhì)更加平順,以及位率的使用能精確地控制在目標(biāo)范圍內(nèi)。而最后所決定的該巨區(qū)塊的量化參數(shù)值被送往一巨區(qū)塊編碼模塊,此巨區(qū)塊編碼模塊可根據(jù)位率控制模塊345傳送過來的量化參數(shù)值,據(jù)以對(duì)重要區(qū)域或非重要區(qū)域中一相對(duì)應(yīng)的巨區(qū)塊來進(jìn)行編碼。每一輸入影像中的重要區(qū)域與非重要區(qū)域中巨區(qū)塊的量化參數(shù)的至少一條件限制可以由一限制條件數(shù)據(jù)庫(kù)來儲(chǔ)存。位率控制模塊345也可以通過一查詢表,來查詢畫面中各重要區(qū)域的面積大小、以及各自對(duì)應(yīng)的目標(biāo)位數(shù)與所應(yīng)指定的固定量化參數(shù)值。此限制條件數(shù)據(jù)庫(kù)或查詢表也可以建立在視頻位率控制裝置300中。視頻位率控制裝置300進(jìn)行重要區(qū)域位率控制340與非重要區(qū)域位率控制350 之前,將每一畫面一開始的總位數(shù)依據(jù)品質(zhì)參數(shù)332,分配給重要與非重要區(qū)域兩個(gè)區(qū)域, 再各自獨(dú)立進(jìn)行位率控制,可以避免非重要區(qū)域受重要區(qū)域的影響而無法達(dá)到最低品質(zhì)保障。其結(jié)合人眼視覺特性可以讓較多資源分配在重要的區(qū)域,而非重要區(qū)域也有基本的影
像品質(zhì)。
8
承上述,圖5是視頻位率控制方法的一個(gè)范例流程圖,并且與所揭露的某些實(shí)施范例一致。在圖5的范例中,首先,對(duì)于多張輸入影像中的每一張輸入影像,建構(gòu)一個(gè)“反應(yīng)對(duì)此輸入影像的每一像素點(diǎn)敏感程度”的一特征地圖,或偵測(cè)此多張輸入影像中的每一張輸入影像中一或多個(gè)特定物的存在范圍,如步驟510所示。然后,根據(jù)此特征地圖的信息或此一或多個(gè)特定物的存在范圍的信息,劃分出此輸入影像中的至少一重要區(qū)域和至少一非重要區(qū)域,如步驟520所示。根據(jù)一輸入的品質(zhì)參數(shù),并搭配此至少一重要區(qū)域和此至少一非重要區(qū)域的面積大小,將一總目標(biāo)位數(shù)分配成至少一重要區(qū)域和此至少一非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù),如步驟530所示。利用一位率失真模式與根據(jù)至少一條件限制,來調(diào)整此至少一重要區(qū)域和此至少一非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù),讓此至少一重要區(qū)域和此至少一非重要區(qū)域內(nèi)巨區(qū)塊的編碼位率的使用是各自獨(dú)立使用在其各自對(duì)應(yīng)的目標(biāo)位數(shù)的范圍內(nèi),如步驟540所示。如前所述,此至少一條件限制是對(duì)至少一重要區(qū)域和至少一非重要區(qū)域的巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù)的條件限制。關(guān)于前一張輸入影像的重要區(qū)域與非重要區(qū)域的巨區(qū)塊的平均量化參數(shù)值的限制,說明如下。因?yàn)榍耙粡堄跋衽c后一張影像的品質(zhì)差距不宜相距太大,所以目前巨區(qū)塊的量化參數(shù)值需與前一張影像的平均量化參數(shù)值的差異不能過大,如此在播放視頻時(shí)才不會(huì)產(chǎn)生視覺上不舒適的感覺。而重要區(qū)域的目前巨區(qū)塊參考的是前一張影像中重要區(qū)域的平均量化參數(shù)值,同理,非重要區(qū)域的目前巨區(qū)塊參考的是前一張影像內(nèi)非重要區(qū)域的平均量化參數(shù)值。關(guān)于來自同一張影像中前一個(gè)已編碼完成的巨區(qū)塊的量化參數(shù)值的限制,說明如下。目前巨區(qū)塊的量化參數(shù)值必須考量前一個(gè)已編碼完成的巨區(qū)塊的量化參數(shù)值。若兩者同屬一樣性質(zhì)的區(qū)域,例如同樣是屬重要區(qū)域或同樣是屬非重要區(qū)域,則兩者的量化參數(shù)值宜盡量相近;若兩者分屬不同性質(zhì)的區(qū)域,則宜參考重要區(qū)域與非重要區(qū)域交界區(qū)域的量化參數(shù)值的限制的處理方法。關(guān)于重要區(qū)域與非重要區(qū)域交界區(qū)域的量化參數(shù)值的限制,說明如下。如果非重要區(qū)域與重要區(qū)域在交界處的巨區(qū)塊的量化參數(shù)值與鄰近重要區(qū)域的巨區(qū)塊的量化參數(shù)值差異較小時(shí),可以讓相鄰區(qū)域的影像品質(zhì)的差距較小,視覺感知上也會(huì)較平順,但有可能讓此交接處的非重要區(qū)域的巨區(qū)塊花費(fèi)較多的位數(shù),而使目前影像的編碼位數(shù)超出目標(biāo)位數(shù),如此會(huì)影響之后影像畫面所能分配到的位數(shù),而造成不佳的位率控制結(jié)果。另一方面, 如果非重要區(qū)域與重要區(qū)域交界處的巨區(qū)塊的量化參數(shù)值與鄰近重要區(qū)域的巨區(qū)塊的量化參數(shù)值的差距若過大,則可能會(huì)造成區(qū)塊效應(yīng),所以在重要區(qū)域與非重要區(qū)域兩者的交接處的區(qū)塊必需適當(dāng)?shù)恼{(diào)整其量化參數(shù)值。關(guān)于來自前一張影像的位率控制的結(jié)果,說明如下。前一張影像編碼完成后,將會(huì)根據(jù)其目標(biāo)位數(shù)的使用狀況作為目前巨區(qū)塊的量化參數(shù)值增減的依據(jù)。若前一張影像所使用的位數(shù)比給定的目標(biāo)位數(shù)超出一給定的門檻值時(shí),代表前一張影像所使用的量化參數(shù)值明顯過小,因此目前影像的巨區(qū)塊的量化參數(shù)值也將適當(dāng)?shù)卣{(diào)高;若前一張影像所使用的位數(shù)比給定的目標(biāo)位數(shù)低于一給定的門檻值時(shí),則將調(diào)低目前巨區(qū)塊的量化參數(shù)值。此種考量是想要藉由觀察已經(jīng)編碼完畫面的位使用狀況,來調(diào)整后面還未編碼的影像的量化參數(shù)值,使最后使用的總位數(shù)和給定的目標(biāo)位數(shù)相近。在步驟510中,例如可針對(duì)每一輸入影像來產(chǎn)生不同的特征影像的信息(如前述的運(yùn)動(dòng)向量、亮度對(duì)比、互補(bǔ)色、紋路和人臉膚色等),并經(jīng)過適當(dāng)?shù)臋?quán)重線性組合后產(chǎn)生符合人眼視覺特性的特征地圖。在步驟520中,例如可搭配適當(dāng)?shù)拈T檻值,來決定出此輸入影像中人眼較為注視區(qū)域,并歸類為重要區(qū)域,不屬于重要區(qū)域則歸類為非重要區(qū)域。在步驟 540之前,也可以先判斷重要區(qū)域占據(jù)影像的畫面區(qū)域是否夠小,如果重要區(qū)域的面積大小與輸入影像的畫面區(qū)域的面積大小的比例夠小,例如小于一門檻值時(shí),也可以指定一特定的量化參數(shù)值給此重要區(qū)域中的巨區(qū)塊。此特定的量化參數(shù)值可根據(jù)一查詢表,來查詢此重要區(qū)域中的巨區(qū)塊所應(yīng)指定的固定量化參數(shù)值。如果重要區(qū)域的面積大小與輸入影像的畫面區(qū)域的面積大小的比例夠小,也可以適度減少非重要區(qū)域的目標(biāo)位率。在步驟540中,重要區(qū)域與非重要區(qū)域是各自獨(dú)立進(jìn)行位率控制。如第六圖的范例流程所示,先判斷一巨區(qū)塊是否屬于重要區(qū)域(步驟640)。當(dāng)一巨區(qū)塊是屬于重要區(qū)域時(shí),進(jìn)行重要區(qū)域位率控制(步驟650);當(dāng)一巨區(qū)塊不屬于重要區(qū)域時(shí)(即屬于非重要區(qū)域),則進(jìn)行非重要區(qū)域位率控制(步驟660)。得知此巨區(qū)塊是屬于重要區(qū)域或是非重要區(qū)域后,重要區(qū)域位率控制與非重要區(qū)域位率控制皆可各自利用一位率失真模式與根據(jù)至少一條件限制,來調(diào)整此巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù),讓此巨區(qū)塊的位率的使用在相對(duì)應(yīng)的目標(biāo)位數(shù)的范圍內(nèi)。也就是說,重要區(qū)域與非重要區(qū)域的位率控制的范例流程可設(shè)計(jì)為對(duì)稱而雷同的,但是各自獨(dú)立進(jìn)行。得到巨區(qū)塊的量化參數(shù)值之后,即重要區(qū)域位率控制或非重要區(qū)域位率控制完成之后,即可據(jù)此量化參數(shù)值來編碼巨區(qū)塊(步驟670),此編碼包含如移動(dòng)搜尋、移動(dòng)補(bǔ)償、畫面內(nèi)預(yù)測(cè)、整數(shù)離散是數(shù)轉(zhuǎn)換(DiscreteCoefficient Transform,DCT)、量化以及 Entropy編碼等動(dòng)作。編碼完此巨區(qū)塊后,更新重要區(qū)域與非重要區(qū)域各自剩下的目標(biāo)位數(shù)與相關(guān)參數(shù)(步驟680),因?yàn)榫幋a完每一巨區(qū)塊后,剩余的位數(shù)即是原本目標(biāo)位數(shù)扣除已編碼完成巨區(qū)塊所實(shí)際使用的位數(shù)。接著,編碼下一個(gè)巨區(qū)塊(步驟690);在編碼下一個(gè)巨區(qū)塊時(shí),也會(huì)更新相關(guān)的編碼參數(shù)并分配此下一巨區(qū)塊的目標(biāo)位數(shù)。步驟670、680、690可由一巨區(qū)塊編碼模塊來進(jìn)行,以完成每一輸入影像的編碼。如圖7A的范例流程所示,重要區(qū)域位率控制650可包含子步驟751、753、755、757、 759 ;如圖7B的范例流程所示,非重要區(qū)域位率控制660可包含子步驟761、763、765、767、 769。參考圖7A的范例流程,先判斷重要區(qū)域目前剩下的目標(biāo)位數(shù)是否大于零(子步驟 751);若目前剩下的目標(biāo)位數(shù)小于零,則根據(jù)重要區(qū)域的至少一第一條件限制來決定此巨區(qū)塊的量化參數(shù)值(子步驟759),例如是一設(shè)定的(default)條件限制,此設(shè)定的條件限制是由前一張已編碼完成的同性質(zhì)區(qū)域所使用的平均量化參數(shù)值加上一固定偏移量(例如 3)來做為此巨區(qū)塊的量化參數(shù)值。若目前剩下的目標(biāo)位數(shù)大于零,則估計(jì)編碼此巨區(qū)塊所需的目標(biāo)位數(shù)(子步驟 753);然后,利用一位率失真模式來得到一對(duì)應(yīng)的量化參數(shù)值(子步驟755),即為初始量化參數(shù)值;再根據(jù)重要區(qū)域的至少一第二條件限制來調(diào)整初始量化參數(shù)與決定此巨區(qū)塊的最終量化參數(shù)值(子步驟757)。子步驟755中,先計(jì)算求得初始量化的階大小(st印size), 再得到對(duì)應(yīng)的量化參數(shù)值。子步驟757中,重要區(qū)域的第二條件限制是額外的(extra)條件限制,此額外的條件限制是選自時(shí)間、空間、區(qū)域交互性的前述三種特性的其中一種組合的限制,例如之前所述,是前一張輸入影像的重要區(qū)域的巨區(qū)塊的平均量化參數(shù)值的限制、或是來自同一影像中前一個(gè)已編碼完成巨區(qū)塊的量化參數(shù)值的限制、或是重要區(qū)域與非重要區(qū)域兩者的交界區(qū)域的量化參數(shù)值的限制(區(qū)域交互性的限制)、或是來自前一張影像的位控制的結(jié)果等, 此額外的條件限制可做為增減此巨區(qū)塊的量化參數(shù)值的依據(jù),如此可使此巨區(qū)塊的位超用和過剩的狀況趨緩及變少,進(jìn)而達(dá)到接近目標(biāo)位數(shù)的結(jié)果。當(dāng)非重要區(qū)域的位率控制的范例流程設(shè)計(jì)為對(duì)稱而雷同時(shí),子步驟761、763、765、 767,769則可根據(jù)子步驟751、753、755、757、759,僅將重要區(qū)域分別改為非重要區(qū)域即可, 如圖7B的范例流程所示,不再重述。也就是說,在本揭露的實(shí)施范例中,其位率控制是對(duì)于每一張輸入影像,先建構(gòu)一反應(yīng)對(duì)此影像的每一像素點(diǎn)敏感程度的特征地圖,或偵測(cè)此影像中的每一張輸入影像中一或多個(gè)特定物的存在范圍。然后根據(jù)此特征地圖的信息,或此一或多個(gè)特定物的存在范圍的信息,劃分出此影像中的重要區(qū)域和非重要區(qū)域。再根據(jù)一品質(zhì)參數(shù),搭配此影像中的重要區(qū)域和非重要區(qū)域的面積大小,將此影像的一總目標(biāo)位數(shù)作一適當(dāng)?shù)奈粩?shù)分配,分別計(jì)算出此影像中的重要和非重要兩種區(qū)域個(gè)別的目標(biāo)位數(shù)。在給定各自的目標(biāo)位數(shù)后,重要區(qū)域和非重要區(qū)域可獨(dú)立地進(jìn)行位率控制,其中影像中的每一巨區(qū)塊可利用二次失真模式來估測(cè)一初始量化參數(shù)值,并搭配時(shí)間、空間以及區(qū)域交互性的至少一條件限制進(jìn)行量化參數(shù)值的調(diào)整,后續(xù)進(jìn)行編碼。在更新相關(guān)參數(shù)后,可繼續(xù)下一個(gè)巨區(qū)塊的位率控制與編碼。依此,完成各影像中此兩種區(qū)域里巨區(qū)塊的位率控制。以下將本揭露的實(shí)施范例實(shí)現(xiàn)于三種不同的位速率環(huán)境,來驗(yàn)證一 i^reman視頻序列的位速率控制結(jié)果,其編碼平臺(tái)的范例為JM。其中,圖8是位速率控制的相關(guān)編碼參數(shù)的一個(gè)范例示意圖,并且與所揭露的某些實(shí)施范例一致。圖8的范例中,以100張影像的畫面,例如人臉或車牌等影像畫面,為例。重要區(qū)域與非重要區(qū)域兩者的平均面積比為8 比25,約為1比3。圖9至圖11是i^reman視頻序列在三種不同位速率,分別為^6Kbps、 143Kbps、以及79. 2Kbps,的實(shí)驗(yàn)結(jié)果,并且與所揭露的某些實(shí)施范例一致,其中,T_R0I和 T_NR0I分別代表實(shí)際上重要區(qū)域內(nèi)平均每一巨區(qū)塊與非重要區(qū)域內(nèi)平均每一巨區(qū)塊所分配到的位數(shù);品質(zhì)參數(shù)K值代表理想上平均每一重要區(qū)域內(nèi)巨區(qū)塊所分配到的位數(shù)為每一非重要區(qū)域內(nèi)巨區(qū)塊所分配到的位數(shù)的K倍;峰值信噪比(Peak Signal To NoiseRatio, PSNR)值越大,代表影像品質(zhì)失真越少。由圖9至圖11的實(shí)驗(yàn)結(jié)果的范例看來,T_R0I與T_NR0I的實(shí)際比值與所設(shè)定的品質(zhì)參數(shù)K值差異不大。然而,隨著整個(gè)視頻的目標(biāo)位率下降時(shí),T_R0I與T_NR0I的實(shí)際比值將小于設(shè)定的K值。其原因在于,在低位率的情況下,非重要區(qū)域仍需要基本的位量量來完成編碼,而無法無限制的節(jié)省位數(shù)來提供給重要區(qū)域使用。并且,圖9至圖11提供兩種比較對(duì)象的實(shí)驗(yàn)結(jié)果的范例看來,包括固定量化參數(shù)值的情況(亦即沒有位速率控制)、以及開啟JM編碼平臺(tái)本身內(nèi)含的位速率控制方法。由圖10的數(shù)據(jù)可觀察到,在固定量化參數(shù)值(例如35)的情況下,T_R0I與T_NR0I的實(shí)際比值大約為2. 84左右;而重要區(qū)域的峰值信噪比值(33.07)與非重要區(qū)域的峰值信噪比值(32. 86)相近。而JM編碼平臺(tái)開啟位速率控制時(shí),其T_R0I與T_NR0I的實(shí)際比值偏小, 約為2. 04左右,且重要區(qū)域的峰值信噪比值(32. 35)略小于非重要區(qū)域的峰值信噪比值 (32. 98),代表編碼平臺(tái)本身的位速率控制方法無法讓人眼所著重區(qū)域得到較好的影像品質(zhì)。反觀本揭露的實(shí)施范例在重要區(qū)域與非重要區(qū)域的峰值信噪比的表現(xiàn)上,由圖9 至圖11的實(shí)驗(yàn)結(jié)果的范例可發(fā)現(xiàn),隨著品質(zhì)參數(shù)K值的增加,在重要區(qū)域的峰值信噪比值遠(yuǎn)優(yōu)于非重要區(qū)域的峰值信噪比值。例如,在高位率觀610^8的情況下,重要區(qū)域的峰值信噪比值較非重要區(qū)域的峰值信噪比值高上6dB的多。所以,本揭露的實(shí)施范例在給定的目標(biāo)位率下,可以在人眼較著重的重要區(qū)域有較佳的品質(zhì)表現(xiàn),并且可優(yōu)先保留重要的信息。綜上所述,本揭露的實(shí)施范例可提供一種視頻位速率控制裝置與方法。在有限的編碼總位率下,考慮時(shí)間、空間、或區(qū)域交互性等特性限制,進(jìn)行量化參數(shù)值的調(diào)整,讓影像品質(zhì)更加平順。能夠?qū)τ跋裰械闹匾獏^(qū)域給予較高的編碼品質(zhì),而非重要區(qū)域給予較低的編碼品質(zhì),以有效運(yùn)用有限的位率。重要區(qū)域與非重要區(qū)域的決定可來自于一個(gè)以視覺特性為基礎(chǔ)的特征地圖的信息或是偵測(cè)出的一或多個(gè)特定物的存在范圍的信息,也可以是事先設(shè)定的固定區(qū)域。本揭露的實(shí)施范例可應(yīng)用于監(jiān)控視頻環(huán)境中對(duì)所欲監(jiān)控目標(biāo)、或在視頻通訊等環(huán)境中對(duì)主體目標(biāo)的特定區(qū)域(例如人臉、車牌等),來加強(qiáng)影像的品質(zhì)。以上所述者僅為本揭露的實(shí)施范例,當(dāng)不能依此限定本發(fā)明實(shí)施的范圍。即凡是本發(fā)明申請(qǐng)專利范圍所作的均等變化與修飾,皆應(yīng)仍屬本發(fā)明權(quán)利要求涵蓋的范圍。
權(quán)利要求
1.一種視頻位率控制裝置,該裝置包含一重要區(qū)域決定模塊,對(duì)于多張輸入影像中的每一張輸入影像,根據(jù)一特征地圖的信息或經(jīng)由一偵測(cè)系統(tǒng)處理后的輸出,劃分出該多張輸入影像中的每一張輸入影像中的至少一重要區(qū)域和至少一非重要區(qū)域;一位率分配模塊,根據(jù)一輸入的品質(zhì)參數(shù),并搭配該至少一重要區(qū)域和該至少一非重要區(qū)域的面積大小,將一總目標(biāo)位數(shù)分配成該至少一重要區(qū)域和該至少一非重要區(qū)域?qū)?yīng)的目標(biāo)位數(shù);以及一位率控制模塊,根據(jù)該至少一重要區(qū)域和該至少一非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù)以及至少一條件限制,獨(dú)立進(jìn)行該每一張輸入影像中的該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的位率控制。
2.如權(quán)利要求1所述的視頻位率控制裝置,該裝置還包括一特征地圖建立模塊,該特征地圖建立模塊對(duì)于該多張輸入影像中的每一張輸入影像,建構(gòu)反應(yīng)對(duì)該輸入影像的每一像素點(diǎn)敏感程度的一特征地圖,該特征地圖包含有空間域和時(shí)間域的該多張輸入影像中的每一張輸入影像中的至少一特征。
3.如權(quán)利要求1所述的視頻位率控制裝置,該裝置還包括一偵測(cè)系統(tǒng),該偵測(cè)系統(tǒng)偵測(cè)該多張輸入影像中的每一張輸入影像中一或多個(gè)特定物的存在范圍。
4.如權(quán)利要求1所述的視頻位率控制裝置,其中該至少一條件限制是對(duì)該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù)的條件限制。
5.如權(quán)利要求4所述的視頻位率控制裝置,其中該位率控制模塊還包括一量化參數(shù)調(diào)整模塊,來決定該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的一初始量化參數(shù),并根據(jù)對(duì)該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的量化參數(shù)的該至少一條件限制,來調(diào)整該初始量化參數(shù)至一最終量化參數(shù)。
6.如權(quán)利要求1所述的視頻位率控制裝置,該裝置對(duì)于該至少一特征的每一特征的像素點(diǎn)賦予一個(gè)與該特征相關(guān)的權(quán)重值,并結(jié)合每一特征的像素點(diǎn)值,來提供對(duì)該每一張輸入影像中的每一像素點(diǎn)或每一巨區(qū)塊的人眼視覺重要性區(qū)分。
7.如權(quán)利要求1所述的視頻位率控制裝置,其中該位率控制模塊通過一查詢表,查詢?cè)撝辽僖恢匾獏^(qū)域的面積大小以及各自對(duì)應(yīng)的目標(biāo)位數(shù)與所應(yīng)指定的固定量化參數(shù)值。
8.如權(quán)利要求1所述的視頻位率控制裝置,其中該至少一重要區(qū)域和該至少一非重要區(qū)域各自對(duì)應(yīng)的至少一條件限制是由一限制條件數(shù)據(jù)庫(kù)來儲(chǔ)存。
9.如權(quán)利要求5所述的視頻位率控制裝置,其中該最終量化參數(shù)被傳送至一巨區(qū)塊編碼模塊,該巨區(qū)塊編碼模塊根據(jù)該最終量化參數(shù)值,對(duì)該至少一重要區(qū)域或該至少一非重要區(qū)域中一相對(duì)應(yīng)的巨區(qū)塊來進(jìn)行編碼。
10.一種視頻位率控制方法,該方法包含對(duì)于多張輸入影像中的每一張輸入影像,建構(gòu)一個(gè)反應(yīng)對(duì)該多張輸入影像中的每一張?jiān)撦斎胗跋竦拿恳幌袼攸c(diǎn)敏感程度的一特征地圖,或偵測(cè)該多張輸入影像中的每一張輸入影像中一或多個(gè)特定物的存在范圍;根據(jù)該特征地圖的信息或該一或多個(gè)特定物的存在范圍的信息,劃分出該每一張輸入影像中的至少一重要區(qū)域和至少一非重要區(qū)域;根據(jù)一輸入的品質(zhì)參數(shù),并搭配該至少一重要區(qū)域和該至少一非重要區(qū)域的面積大小,將一總目標(biāo)位數(shù)分配成該至少一重要區(qū)域和該至少一非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù);以及利用一位率失真模式與根據(jù)至少一條件限制,來調(diào)整該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù),讓該至少一重要區(qū)域和該至少一非重要區(qū)域內(nèi)巨區(qū)塊的編碼位率的使用是各自獨(dú)立使用在其各自對(duì)應(yīng)的目標(biāo)位數(shù)的范圍內(nèi)。
11.如權(quán)利要求10所述的視頻位率控制方法,其中在該至少一重要區(qū)域中,對(duì)于屬于該至少一重要區(qū)域中的一巨區(qū)塊,該方法還包括判斷該至少一重要區(qū)域目前剩下的目標(biāo)位數(shù)是否大于零;不是的話,根據(jù)該至少一重要區(qū)域的至少一第一條件限制來決定該巨區(qū)塊的一量化參數(shù)值;是的話,進(jìn)行下列所有步驟估計(jì)編碼該巨區(qū)塊所需的位數(shù);利用該位率失真模式來得到一初始量化參數(shù)值;以及根據(jù)該至少一重要區(qū)域的至少一第二條件限制來調(diào)整該初始量化參數(shù)值并決定該巨區(qū)塊的一最終量化參數(shù)值。
12.如權(quán)利要求11所述的視頻位率控制方法,其中將該總目標(biāo)位數(shù)分配成該至少一重要區(qū)域和該至少一非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù)之后,該方法還包括先判斷該至少一重要區(qū)域的面積大小與該輸入影像的畫面區(qū)域的面積大小的比例是否小于一門檻值;以及是的話,則指定一特定的量化參數(shù)值給該至少一重要區(qū)域中的巨區(qū)塊,否則才利用該位率失真模式與根據(jù)該至少一條件限制來調(diào)整該至少一重要區(qū)域和該至少一非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù)。
13.如權(quán)利要求11所述的視頻位率控制方法,其中該最終量化參數(shù)值被傳送至一巨區(qū)塊編碼模塊,該巨區(qū)塊編碼模塊據(jù)以進(jìn)行編碼該巨區(qū)塊,并更新該至少一重要區(qū)域的目標(biāo)位數(shù)與相關(guān)參數(shù),以及編碼該至少一重要區(qū)域的下一個(gè)巨區(qū)塊,以完成每一輸入影像的編碼。
14.如權(quán)利要求13所述的視頻位率控制方法,其中該至少一第一條件限制是由前一張已編碼完成的該至少一重要區(qū)域所使用的平均量化參數(shù)值加上一固定偏移量來做為該巨區(qū)塊的量化參數(shù)值。
15.如權(quán)利要求11所述的視頻位率控制方法,其中該至少一第二條件限制是選自時(shí)間、空間、區(qū)域交互性的前述三種特性的其中一種組合的限制。
16.如權(quán)利要求15所述的視頻位率控制方法,其中該至少一第二條件限制至少包括該至少一重要區(qū)域與該至少一非重要區(qū)域兩者的交界區(qū)域的量化參數(shù)值的限制。
17.如權(quán)利要求10所述的視頻位率控制方法,其中該特征地圖反應(yīng)人眼對(duì)該多張輸入影像中的每一張?jiān)撦斎胗跋竦拿恳幌袼攸c(diǎn)敏感程度。
全文摘要
一種視頻位率控制方法是對(duì)于每一張輸入影像,建構(gòu)一反應(yīng)對(duì)此輸入影像的每一像素點(diǎn)敏感程度的特征地圖,或偵測(cè)此輸入影像中一或多個(gè)特定物的存在范圍。然后根據(jù)此特征地圖的信息,或此一或多個(gè)特定物的存在范圍,劃分出此影像中的重要區(qū)域和非重要區(qū)域。再根據(jù)一品質(zhì)參數(shù),搭配此影像中的重要區(qū)域和非重要區(qū)域的面積大小,將一總目標(biāo)位數(shù)分配成此重要區(qū)域和此非重要區(qū)域各自對(duì)應(yīng)的目標(biāo)位數(shù)。再利用一位率失真模式與根據(jù)至少一條件限制,來調(diào)整此重要區(qū)域和非重要區(qū)域中巨區(qū)塊的各自相對(duì)應(yīng)的量化參數(shù),讓此重要區(qū)域和非重要區(qū)域內(nèi)巨區(qū)塊的編碼位率的使用是各自獨(dú)立使用在其各自對(duì)應(yīng)的目標(biāo)位數(shù)的范圍內(nèi)。
文檔編號(hào)H04N7/26GK102263943SQ201010188360
公開日2011年11月30日 申請(qǐng)日期2010年5月25日 優(yōu)先權(quán)日2010年5月25日
發(fā)明者周凡迪, 江瑞秋, 謝政晟, 賴文能 申請(qǐng)人:財(cái)團(tuán)法人工業(yè)技術(shù)研究院