本公開(kāi)涉及信息處理，尤其涉及一種圖像檢索方法、裝置、設(shè)備及介質(zhì)。

背景技術(shù)：

1、在諸如海報(bào)等圖像的創(chuàng)作中，通常需要合適的素材構(gòu)圖，以此突顯出圖像主題，或者使圖像更美觀。但是檢索所需的圖像素材是較為困難的事情，通常需要耗費(fèi)較高的人工成本。傳統(tǒng)的圖像檢索方式效果不佳，檢索到的圖像難以滿足用戶(hù)需求。

技術(shù)實(shí)現(xiàn)思路

1、為了解決上述技術(shù)問(wèn)題或者至少部分地解決上述技術(shù)問(wèn)題，本公開(kāi)提供了一種圖像檢索方法、裝置、設(shè)備及介質(zhì)。

2、本公開(kāi)實(shí)施例提供了一種圖像檢索方法，所述方法包括：獲取檢索參考信息；其中，所述檢索參考信息包括第一語(yǔ)義信息以及第一像素信息；基于所述第一語(yǔ)義信息，從預(yù)設(shè)的語(yǔ)義信息庫(kù)中進(jìn)行檢索，得到與所述第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息；其中，所述語(yǔ)義信息庫(kù)中包含有多張樣本圖像的語(yǔ)義信息；基于所述多個(gè)候選語(yǔ)義信息分別所屬的候選樣本圖像，從預(yù)設(shè)的像素信息庫(kù)中進(jìn)行檢索，得到多張所述候選樣本圖像各自對(duì)應(yīng)的候選像素信息；其中，所述像素信息庫(kù)中包含有所述多張樣本圖像的像素信息；根據(jù)多張所述候選樣本圖像各自對(duì)應(yīng)的候選像素信息分別與所述第一像素信息之間的相似度，從多張所述候選樣本圖像中選取出目標(biāo)樣本圖像，并將所述目標(biāo)樣本圖像作為所述檢索參考信息對(duì)應(yīng)的檢索結(jié)果圖像。

3、可選的，所述獲取檢索參考信息，包括：獲取第一參考圖像；對(duì)所述第一參考圖像進(jìn)行語(yǔ)義特征提取，得到第一語(yǔ)義信息；以及，對(duì)所述第一參考圖像進(jìn)行像素特征提取，得到第一像素信息。

4、可選的，所述獲取第一參考圖像，包括：獲取目標(biāo)參考圖像；獲取所述目標(biāo)參考圖像中所包含的素材對(duì)應(yīng)的圖像，并將所述素材對(duì)應(yīng)的圖像作為第一參考圖像。

5、可選的，所述目標(biāo)參考圖像中所包含的素材數(shù)量為多個(gè)，所述方法還包括：基于多個(gè)所述素材在所述目標(biāo)參考圖像中的位置信息和圖層信息，對(duì)多個(gè)所述素材對(duì)應(yīng)的檢索結(jié)果圖像進(jìn)行組合處理，得到所述目標(biāo)參考圖像對(duì)應(yīng)的匹配圖像。

6、可選的，所述對(duì)所述第一參考圖像進(jìn)行語(yǔ)義特征提取，得到第一語(yǔ)義信息，包括：對(duì)所述第一參考圖像進(jìn)行語(yǔ)義特征提取，得到第一語(yǔ)義特征；將所述第一語(yǔ)義特征作為第一語(yǔ)義信息；或者，基于預(yù)設(shè)的量化語(yǔ)義碼本獲取所述第一語(yǔ)義特征對(duì)應(yīng)的量化特征，并基于所述第一語(yǔ)義特征對(duì)應(yīng)的量化特征得到第一語(yǔ)義信息。

7、可選的，所述對(duì)所述第一參考圖像進(jìn)行像素特征提取，得到第一像素信息，包括：對(duì)所述第一參考圖像進(jìn)行像素特征提取，得到第一像素特征；將所述第一像素特征作為第一像素信息；或者，基于預(yù)設(shè)的量化像素碼本獲取所述第一像素特征對(duì)應(yīng)的量化特征，并基于所述第一像素特征對(duì)應(yīng)的量化特征得到第一像素信息。

8、可選的，所述獲取檢索參考信息，包括：獲取檢索提示信息；基于所述檢索提示信息，利用預(yù)設(shè)的生成模型生成第一語(yǔ)義信息和第一像素信息。

9、可選的，所述基于所述檢索提示信息，利用預(yù)設(shè)的生成模型生成第一語(yǔ)義信息和第一像素信息，包括：基于所述檢索提示信息，利用預(yù)設(shè)的生成模型生成第一語(yǔ)義特征標(biāo)志序列以及第一像素特征標(biāo)志序列；基于預(yù)設(shè)的量化語(yǔ)義碼本得到所述第一語(yǔ)義特征標(biāo)志序列對(duì)應(yīng)的量化特征，將所述第一語(yǔ)義特征標(biāo)志序列對(duì)應(yīng)的量化特征作為第一語(yǔ)義信息；基于預(yù)設(shè)的量化像素碼本得到所述第一像素特征標(biāo)志序列對(duì)應(yīng)的量化特征，將所述第一像素特征標(biāo)志序列對(duì)應(yīng)的量化特征作為第一像素信息。

10、可選的，所述從預(yù)設(shè)的語(yǔ)義信息庫(kù)中進(jìn)行檢索，得到與所述第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息，包括：將所述第一語(yǔ)義信息與預(yù)設(shè)的語(yǔ)義信息庫(kù)中的語(yǔ)義信息之間的相似度按照大小順序排列，選取前n個(gè)相似度最高的語(yǔ)義信息作為與所述第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息；其中，n為大于1的預(yù)設(shè)正整數(shù)；或者，將所述第一語(yǔ)義信息與預(yù)設(shè)的語(yǔ)義信息庫(kù)中的語(yǔ)義信息之間的相似度高于預(yù)設(shè)閾值的語(yǔ)義信息，作為與所述第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息。

11、本公開(kāi)實(shí)施例還提供了一種圖像檢索裝置，包括：信息獲取模塊，用于獲取檢索參考信息；其中，所述檢索參考信息包括第一語(yǔ)義信息以及第一像素信息；第一檢索模塊，用于基于所述第一語(yǔ)義信息，從預(yù)設(shè)的語(yǔ)義信息庫(kù)中進(jìn)行檢索，得到與所述第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息；其中，所述語(yǔ)義信息庫(kù)中包含有多張樣本圖像的語(yǔ)義信息；第二檢索模塊，用于基于所述多個(gè)候選語(yǔ)義信息分別所屬的候選樣本圖像，從預(yù)設(shè)的像素信息庫(kù)中進(jìn)行檢索，得到多張所述候選樣本圖像各自對(duì)應(yīng)的候選像素信息；其中，所述像素信息庫(kù)中包含有所述多張樣本圖像的像素信息；結(jié)果獲得模塊，用于根據(jù)多張所述候選樣本圖像各自對(duì)應(yīng)的候選像素信息分別與所述第一像素信息之間的相似度，從多張所述候選樣本圖像中選取出目標(biāo)樣本圖像，并將所述目標(biāo)樣本圖像作為所述檢索參考信息對(duì)應(yīng)的檢索結(jié)果圖像。

12、本公開(kāi)實(shí)施例還提供了一種電子設(shè)備，所述電子設(shè)備包括：處理器；用于存儲(chǔ)所述處理器可執(zhí)行指令的存儲(chǔ)器；所述處理器，用于從所述存儲(chǔ)器中讀取所述可執(zhí)行指令，并執(zhí)行所述指令以實(shí)現(xiàn)如本公開(kāi)實(shí)施例提供的圖像檢索方法。

13、本公開(kāi)實(shí)施例還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述存儲(chǔ)介質(zhì)存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序用于執(zhí)行如本公開(kāi)實(shí)施例提供的圖像檢索方法。

14、本公開(kāi)實(shí)施例提供的上述技術(shù)方案，無(wú)需人工再費(fèi)時(shí)費(fèi)力進(jìn)行圖像檢索，而是能夠首先獲取第一語(yǔ)義信息以及第一像素信息這兩個(gè)維度的檢索參考信息，然后基于第一語(yǔ)義信息和第一像素信息，利用語(yǔ)義信息庫(kù)(包含有多張樣本圖像的語(yǔ)義信息)以及像素信息庫(kù)(包含有多張樣本圖像的像素信息)先后進(jìn)行語(yǔ)義信息檢索和像素信息檢索，這種檢索方式能夠有效保障檢索結(jié)果圖像在語(yǔ)義層面以及圖像像素層面都符合需求，且分階段檢索方式也能夠更高效率地檢索到符合需求的圖像，綜合保障了檢索結(jié)果符合需求及檢索效率。

15、應(yīng)當(dāng)理解，本部分所描述的內(nèi)容并非旨在標(biāo)識(shí)本公開(kāi)的實(shí)施例的關(guān)鍵或重要特征，也不用于限制本公開(kāi)的范圍。本公開(kāi)的其它特征將通過(guò)以下的說(shuō)明書(shū)而變得容易理解。

技術(shù)特征：

1.一種圖像檢索方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取檢索參考信息，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述獲取第一參考圖像，包括：

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述目標(biāo)參考圖像中所包含的素材數(shù)量為多個(gè)，所述方法還包括：

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對(duì)所述第一參考圖像進(jìn)行語(yǔ)義特征提取，得到第一語(yǔ)義信息，包括：

6.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對(duì)所述第一參考圖像進(jìn)行像素特征提取，得到第一像素信息，包括：

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取檢索參考信息，包括：

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述基于所述檢索提示信息，利用預(yù)設(shè)的生成模型生成第一語(yǔ)義信息和第一像素信息，包括：

9.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述從預(yù)設(shè)的語(yǔ)義信息庫(kù)中進(jìn)行檢索，得到與所述第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息，包括：

10.一種圖像檢索裝置，其特征在于，包括：

11.一種電子設(shè)備，其特征在于，所述電子設(shè)備包括：

12.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述存儲(chǔ)介質(zhì)存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序用于執(zhí)行上述權(quán)利要求1-9中任一所述的圖像檢索方法。

技術(shù)總結(jié)
本公開(kāi)實(shí)施例涉及一種圖像檢索方法、裝置、設(shè)備及介質(zhì)，其中該方法包括：獲取檢索參考信息；檢索參考信息包括第一語(yǔ)義信息以及第一像素信息；基于第一語(yǔ)義信息，從預(yù)設(shè)的語(yǔ)義信息庫(kù)中進(jìn)行檢索，得到與第一語(yǔ)義信息匹配的多個(gè)候選語(yǔ)義信息；基于多個(gè)候選語(yǔ)義信息分別所屬的候選樣本圖像，從預(yù)設(shè)的像素信息庫(kù)中進(jìn)行檢索，得到多張候選樣本圖像各自對(duì)應(yīng)的候選像素信息；根據(jù)多張候選樣本圖像各自對(duì)應(yīng)的候選像素信息分別與第一像素信息之間的相似度，從多張候選樣本圖像中選取出目標(biāo)樣本圖像，并將目標(biāo)樣本圖像作為檢索參考信息對(duì)應(yīng)的檢索結(jié)果圖像。本公開(kāi)實(shí)施例能夠有效保障檢索結(jié)果符合需求以及保障檢索效率。

技術(shù)研發(fā)人員：施公雷,程宇濤,楊茂柯,張釗
受保護(hù)的技術(shù)使用者：北京字跳網(wǎng)絡(luò)技術(shù)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/10