本申請(qǐng)涉及圖像超分，更具體地，涉及一種圖像超分方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、圖像超分又稱圖像超分辨率，是通過算法將低分辨率的圖像轉(zhuǎn)換為高分辨率的圖像的過程，在提高圖像分辨率的同時(shí)，盡可能地還原和豐富圖像紋理細(xì)節(jié)，使圖像更加清晰。

2、當(dāng)前主流的圖像超分技術(shù)主要是基于深度學(xué)習(xí)的超分重建算法，但是，受現(xiàn)有算法結(jié)構(gòu)的限制，存在對(duì)圖像全局特征的捕捉與較低的計(jì)算復(fù)雜度導(dǎo)致無法兼得的問題。

技術(shù)實(shí)現(xiàn)思路

1、本申請(qǐng)?zhí)岢隽艘环N圖像超分方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，以改善上述缺陷。

2、第一方面，本申請(qǐng)實(shí)施例提供了一種圖像超分方法，所述方法包括：獲取待處理圖像的初始特征圖，并輸入多個(gè)特征提取模塊，每個(gè)所述特征提取模塊的輸入端和輸出端依次串聯(lián)；通過每個(gè)所述特征提取模塊將輸入端特征圖劃分為多個(gè)圖像塊，以預(yù)設(shè)掃描間隔沿著多個(gè)掃描方向掃描所述圖像塊，得到多個(gè)對(duì)應(yīng)于所述掃描方向的一維序列，所述一維序列用于表征對(duì)應(yīng)于所述圖像塊的圖像特征，并基于多個(gè)所述一維序列，獲取所述待處理圖像的全局特征；通過每個(gè)所述特征提取模塊基于所述輸入端特征圖獲取待處理圖像的局部特征；通過每個(gè)所述特征提取模塊基于所述待處理圖像的全局特征和局部特征，得到輸出端特征圖并輸出；對(duì)最后一個(gè)所述特征提取模塊的輸出端特征圖進(jìn)行反卷積操作得到目標(biāo)圖像，所述目標(biāo)圖像的分辨率高于所述待處理圖像的分辨率。

3、第二方面，本申請(qǐng)實(shí)施例還提供了一種圖像超分裝置，所述裝置包括：初始特征獲取模塊，用于獲取待處理圖像的初始特征圖，并輸入多個(gè)特征提取模塊，通過每個(gè)所述特征提取模塊的輸入端和輸出端依次串聯(lián)；全局特征提取模塊，用于使每個(gè)所述特征提取模塊將輸入端特征圖劃分為多個(gè)圖像塊，以預(yù)設(shè)掃描間隔沿著多個(gè)掃描方向掃描所述圖像塊，得到多個(gè)對(duì)應(yīng)于所述掃描方向的一維序列，所述一維序列用于表征對(duì)應(yīng)于所述圖像塊的圖像特征，并基于多個(gè)所述一維序列，獲取所述輸入端特征圖的全局特征；局部特征提取模塊，用于使所述特征提取模塊獲取所述輸入端特征圖的局部特征；特征融合模塊，用于使所述特征提取模塊基于所述輸入端特征圖的全局特征和局部特征，得到輸出端特征圖并輸出；圖像超分模塊，用于對(duì)最后一個(gè)所述特征提取模塊的輸出端特征圖進(jìn)行反卷積操作得到目標(biāo)圖像，所述目標(biāo)圖像的分辨率高于所述待處理圖像的分辨率。

4、第三方面，本申請(qǐng)實(shí)施例還提供了一種電子設(shè)備，包括：一個(gè)或多個(gè)處理器；存儲(chǔ)器；一個(gè)或多個(gè)應(yīng)用程序，其中所述一個(gè)或多個(gè)應(yīng)用程序被存儲(chǔ)在所述存儲(chǔ)器中并被配置為由所述一個(gè)或多個(gè)處理器執(zhí)行，所述一個(gè)或多個(gè)應(yīng)用程序配置用于執(zhí)行上述方法。

5、第四方面，本申請(qǐng)實(shí)施例還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有處理器可執(zhí)行的程序代碼，所述程序代碼被所述處理器執(zhí)行時(shí)使所述處理器執(zhí)行上述方法。

6、因此，本申請(qǐng)?zhí)峁┑囊环N圖像超分方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，所述方法包括：獲取待處理圖像的初始特征圖，并輸入多個(gè)特征提取模塊，每個(gè)所述特征提取模塊的輸入端和輸出端依次串聯(lián)；通過每個(gè)所述特征提取模塊將輸入端特征圖劃分為多個(gè)圖像塊，以預(yù)設(shè)掃描間隔沿著多個(gè)掃描方向掃描所述圖像塊，得到多個(gè)對(duì)應(yīng)于所述掃描方向的一維序列，并基于多個(gè)所述一維序列，獲取所述輸入端特征圖的全局特征，所述一維序列用于表征對(duì)應(yīng)于所述圖像塊的圖像特征；通過每個(gè)所述特征提取模塊獲取輸入端特征圖的局部特征；通過每個(gè)所述特征提取模塊基于所述輸入端特征圖的全局特征和局部特征，得到輸出端特征圖并輸出；對(duì)最后一個(gè)所述特征提取模塊的輸出端特征圖進(jìn)行反卷積操作得到目標(biāo)圖像，所述目標(biāo)圖像的分辨率高于所述待處理圖像的分辨率。本申請(qǐng)通過使每個(gè)特征提取模塊融合輸入端特征圖的全局特征和局部特征，使得到的輸出端特征圖特征表達(dá)更加豐富，圖像超分效果更佳，并且在保持圖像全局建模能力的同時(shí)，節(jié)省了狀態(tài)空間模型的計(jì)算成本，進(jìn)一步地，設(shè)置特征提取模塊的數(shù)量可變，使該方法能夠適用在不同算力的設(shè)備上，應(yīng)用范圍更廣。

7、本申請(qǐng)實(shí)施例的其他特征和優(yōu)點(diǎn)將在隨后的說明書闡述，并且，部分地從說明書中變得顯而易見，或者通過實(shí)施本申請(qǐng)實(shí)施例而了解。本申請(qǐng)實(shí)施例的目的和其他優(yōu)點(diǎn)可通過在所寫的說明書、權(quán)利要求書、以及附圖中所特別指出的結(jié)構(gòu)來實(shí)現(xiàn)和獲得。

技術(shù)特征：

1.一種圖像超分方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于多個(gè)所述一維序列，獲取所述輸入端特征圖的全局特征，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，在所述基于所述融合特征向量及所述融合特征向量中元素與圖像塊的位置關(guān)系，重構(gòu)得到對(duì)應(yīng)于所述輸入端特征圖的全局特征之后，所述方法還包括：

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述以預(yù)設(shè)掃描間隔沿著多個(gè)掃描方向掃描所述圖像塊，得到多個(gè)對(duì)應(yīng)于所述掃描方向的一維序列，包括：

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述通過每個(gè)所述特征提取模塊基于所述輸入端特征圖的全局特征和局部特征，得到輸出端特征圖，包括：

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述通過每個(gè)所述特征提取模塊基于所述輸入端特征圖的全局特征和局部特征，得到輸出端特征圖之后，所述方法還包括：

7.一種圖像超分裝置，其特征在于，所述裝置包括：

8.一種電子設(shè)備，其特征在于，包括：

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有處理器可執(zhí)行的程序代碼，所述程序代碼被所述處理器執(zhí)行時(shí)使所述處理器執(zhí)行權(quán)利要求1-6任一項(xiàng)所述方法。

10.一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)指令，其特征在于，所述計(jì)算機(jī)指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-6中任一項(xiàng)所述的方法。

技術(shù)總結(jié)
本申請(qǐng)公開了一種圖像超分方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，涉及圖像超分技術(shù)領(lǐng)域，方法包括：獲取待處理圖像的初始特征圖并輸入多個(gè)特征提取模塊；通過每個(gè)所述特征提取模塊將輸入端特征圖劃分為多個(gè)圖像塊，以預(yù)設(shè)掃描間隔沿著多個(gè)掃描方向掃描所述圖像塊，得到多個(gè)對(duì)應(yīng)于所述掃描方向的一維序列，并基于多個(gè)所述一維序列獲取所述輸入端特征圖的全局特征；獲取輸入端特征圖的局部特征；基于所述全局特征和局部特征，得到輸出端特征圖并輸出；對(duì)最后一個(gè)特征提取模塊的輸出端特征圖進(jìn)行反卷積操作得到目標(biāo)圖像。本申請(qǐng)通過使每個(gè)特征提取模塊融合輸入端特征圖的全局特征和局部特征，使得到的輸出端特征圖特征表達(dá)更加豐富，圖像超分效果更佳。

技術(shù)研發(fā)人員：羅林鋒,葉廣明
受保護(hù)的技術(shù)使用者：深圳市斯遠(yuǎn)電子技術(shù)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/10