背景技術：

1、數(shù)字視頻流可以使用幀或靜止圖像的序列來表示視頻。數(shù)字視頻可以用于各種應用，所述應用包括例如視頻會議、高清視頻娛樂、視頻廣告或用戶生成的視頻的共享。數(shù)字視頻流可以包含大量的數(shù)據(jù)并消耗計算裝置的相當大量的計算或通信資源以用于對視頻數(shù)據(jù)的處理、發(fā)送或存儲。已經(jīng)提出各種方法來減少視頻流中的數(shù)據(jù)量，包括壓縮和其他編碼技術。

2、一種壓縮技術使用參考幀來生成與要編碼的當前塊相對應的預測塊?？梢詫︻A測塊與當前塊之間的差異進行編碼，而不是對當前塊的值本身進行編碼，以減少經(jīng)編碼的數(shù)據(jù)量。

技術實現(xiàn)思路

1、本公開內容總體上涉及使用局部運動擴展來對視頻數(shù)據(jù)進行編碼和解碼，并且更具體地涉及使用從與當前塊相鄰的塊的局部運動擴展來產(chǎn)生用于當前塊的幀間預測的翹曲模型。

2、本公開的一個方面是一種方法，該方法包括：確定用于與要預測的當前塊共享邊界的至少一部分的相鄰塊的幀間預測的運動模型；確定用于當前塊的幀間預測的平移運動矢量；使用運動模型和平移運動矢量來生成用于當前塊的幀間預測的翹曲模型；以及使用翹曲模型來對當前塊執(zhí)行幀間預測過程。

3、在一些實現(xiàn)方式中，運動模型是第一平移運動矢量或第一翹曲模型中的一者。在一些實現(xiàn)方式中，用于當前塊的幀間預測的翹曲模型是第二翹曲模型。

4、在一些實現(xiàn)方式中，生成第二翹曲模型包括維持跨邊界的像素的運動連續(xù)性。

5、在一些實現(xiàn)方式中，當相鄰塊的每像素運動矢量跨相鄰塊與當前塊之間的邊界是連續(xù)時，存在運動連續(xù)性。

6、在一些實現(xiàn)方式中，生成第二翹曲模型包括為運動模型和第二平移運動矢量建立公共坐標系，以及使用公共坐標系來求解第二翹曲模型的參數(shù)。

7、在一些實現(xiàn)方式中，生成第二翹曲模型包括使用運動模型和第二平移運動矢量來求解第二翹曲模型的參數(shù)。

8、在一些實現(xiàn)方式中，對當前塊執(zhí)行幀間預測過程包括：使用第二翹曲模型和參考幀來確定當前塊的預測塊；生成包括當前塊的像素與預測塊的像素之間的差異的殘差；以及將殘差編碼為經(jīng)編碼的位流。

9、在一些實現(xiàn)方式中，對當前塊執(zhí)行幀間預測過程包括使用第二翹曲模型和參考幀來確定當前塊的預測塊；從經(jīng)編碼的位流中對殘差進行解碼；以及通過將殘差的像素添加到預測塊的像素來重建當前塊。

10、在一些實現(xiàn)方式中，第二翹曲模型是六參數(shù)方程，其表示旋轉、縮放、剪切或拉伸中的至少一者。

11、在一些實現(xiàn)方式中，邊界是相鄰塊與當前塊之間的垂直線，該垂直線具有水平坐標x和針對垂直坐標y的多個值，并且生成第二翹曲模型包括：生成第一方程，該第一方程使運動模型的垂直坐標y的第一系數(shù)等于第二翹曲模型的垂直坐標y的第一系數(shù)；生成第二方程，該第二方程使運動模型的垂直坐標y的第二系數(shù)等于第二翹曲模型的垂直坐標y的第二系數(shù)；生成第三方程，該第三方程使運動模型的水平坐標x的第一系數(shù)和第一平移參數(shù)等于第二翹曲模型的水平坐標x的第一系數(shù)和第一平移參數(shù)；生成第四方程，該第四方程使運動模型的水平坐標x的第二系數(shù)和第二平移參數(shù)等于第二翹曲模型的水平坐標x的第二系數(shù)和第二平移參數(shù)；使用當前塊中的定義像素位置來生成第五方程，該第五方程使使用第二平移運動矢量獲得的預測水平像素坐標等于使用第二翹曲模型獲得的預測水平像素坐標；使用當前塊中的定義像素位置來生成第六方程，該第六方程使使用第二平移運動矢量獲得的預測垂直像素坐標等于使用第二翹曲模型獲得的預測垂直像素坐標；以及求解第一方程、第二方程、第三方程、第四方程、第五方程和第六方程以獲得第二翹曲模型的垂直坐標y的第一系數(shù)、第二翹曲模型的垂直坐標y的第二系數(shù)、第二翹曲模型的水平坐標x的第一系數(shù)、第二翹曲模型的第一平移參數(shù)、第二翹曲模型的水平坐標x的第二系數(shù)和第二翹曲模型的第二平移參數(shù)。

12、在一些實現(xiàn)方式中，運動模型是第一翹曲模型，并且生成第二翹曲模型包括使用第二平移運動矢量來修改第一翹曲模型。

13、在一些實現(xiàn)方式中，運動模型是第一平移運動矢量，并且生成第二翹曲模型包括使用第一平移運動矢量來確定六參數(shù)翹曲模型以及使用第二平移運動矢量來修改六參數(shù)翹曲模型。

14、在一些實現(xiàn)方式中，當前塊的預測模式是復合預測模式。該方法包括確定用于當前塊的幀間預測的第三平移運動矢量，以及使用運動模型和第三平移運動矢量來生成用于當前塊的幀間預測的第三翹曲模型。對當前塊執(zhí)行幀間預測過程包括使用第二翹曲模型和第三翹曲模型來執(zhí)行幀間預測過程。

15、在一些實現(xiàn)方式中，當前塊的預測模式是復合預測模式，該復合預測模式具有使用幀內預測來預測的當前塊的第一部分和使用第二平移運動矢量來預測的當前塊的第二部分。對當前塊執(zhí)行幀間預測過程包括使用第二翹曲模型來僅對當前塊的第二部分執(zhí)行幀間預測過程。

16、本公開的一個方面是單獨地或組合執(zhí)行執(zhí)行上述方法中的任何方法的設備。例如，該設備可以包括被配置為執(zhí)行上述方法中的任何方法的處理器。

17、本公開的這些和其他方面在以下對實施例的具體描述、所附權利要求和附圖中進行公開。

技術特征：

1.一種方法，包括：

2.如權利要求1所述的方法，其中，所述運動模型是第一平移運動矢量或第一翹曲模型中的一者。

3.如權利要求1所述的方法，其中，生成所述翹曲模型包括：

4.如權利要求3所述的方法，其中，當所述相鄰塊的每像素運動矢量跨所述相鄰塊與所述當前塊之間的所述邊界是連續(xù)時，存在所述運動連續(xù)性。

5.如權利要求1至4中任一項所述的方法，其中，生成所述翹曲模型包括：

6.如權利要求1至4中任一項所述的方法，其中，生成所述翹曲模型包括：

7.如權利要求1至6中任一項所述的方法，其中，對所述當前塊執(zhí)行幀間預測過程包括：

8.如權利要求1至6中任一項所述的方法，其中，對所述當前塊執(zhí)行幀間預測過程包括：

9.如權利要求1至8中任一項所述的方法，其中，所述翹曲模型包括表示旋轉、縮放、剪切或拉伸中的至少一者的六參數(shù)方程。

10.如權利要求1至8中任一項所述的方法，其中，所述邊界包括所述相鄰塊與所述當前塊之間的垂直線，所述垂直線具有水平坐標和針對垂直坐標的多個值，并且生成所述翹曲模型包括：

11.如權利要求1至10中任一項所述的方法，其中，所述運動模型包括第一翹曲模型，并且生成所述翹曲模型包括使用所述平移運動矢量來修改所述第一翹曲模型。

12.如權利要求1至10中任一項所述的方法，其中，所述運動模型包括第一平移運動矢量，并且生成所述翹曲模型包括：

13.如權利要求1至12中任一項所述的方法，其中：

14.如權利要求1至12中任一項所述的方法，其中：

15.一種設備，包括：

技術總結
通過使用局部運動擴展來確定要編解碼的塊的翹曲模型。將相鄰塊的運動局部擴展到該塊中，以確定用于預測該塊的運動。確定用于與要預測的當前塊共享邊界的至少一部分的相鄰塊的幀間預測的運動模型。運動模型是第一平移運動矢量或第一翹曲模型。確定用于當前塊的幀間預測的第二平移運動矢量。使用運動模型和第二平移運動矢量來確定用于當前塊的幀間預測的第二翹曲模型。使用第二翹曲模型來對當前塊執(zhí)行幀間預測過程。例如，幀間預測過程可以包括確定用于對當前塊進行編碼或解碼的預測塊。

技術研發(fā)人員：雷切爾·巴克,德巴爾加·慕克吉,陳建樂
受保護的技術使用者：谷歌有限責任公司
技術研發(fā)日：
技術公布日：2024/12/10