本技術(shù)涉及氣體檢測，特別是涉及基于多數(shù)據(jù)混合的泄露氣體的檢測方法、裝置及電子設(shè)備。

背景技術(shù)：

1、在工業(yè)生產(chǎn)、運(yùn)輸中和日常生活中，氣體泄露可能會導(dǎo)致嚴(yán)重的安全事故或者環(huán)境污染，對人們的生命安全構(gòu)成威脅以及造成財(cái)產(chǎn)損失。通過進(jìn)行氣體泄漏檢測，可以及時發(fā)現(xiàn)并處理潛在的氣體泄漏源，從而有效預(yù)防這些安全事故的發(fā)生。

2、相關(guān)技術(shù)中，氣體泄露檢測方法主要包括兩類：第一類氣體泄露檢測方法是基于傳統(tǒng)圖像處理、機(jī)器學(xué)習(xí)實(shí)現(xiàn)的，其流程為：首先使用紅外相機(jī)拍攝當(dāng)前場景，得到視頻成像數(shù)據(jù)，然后對視頻圖像進(jìn)行增強(qiáng)處理，減弱噪聲，增強(qiáng)氣云特征，再基于相鄰視頻幀進(jìn)行差分計(jì)算，獲得運(yùn)動目標(biāo)區(qū)域，最后對運(yùn)動目標(biāo)區(qū)域進(jìn)行分類，確定分類結(jié)果為氣云并報(bào)警，但該類方法在場景復(fù)雜、低溫差、環(huán)境光弱等復(fù)雜環(huán)境時檢測效果較差，導(dǎo)致檢測準(zhǔn)確率較低；第二類氣體泄露檢測方案是通過引入處理能力較強(qiáng)的深度神經(jīng)網(wǎng)絡(luò)，同時處理當(dāng)前場景的紅外圖像和可見光圖像，其流程為：首先將紅外圖像送入泄露氣體目標(biāo)檢測模型，獲得泄露氣體初步可疑位置，然后將可見光圖像送入場景理解模型中，并根據(jù)輸出的場景區(qū)域分割圖，對上述泄露氣體初步可疑位置進(jìn)行篩選，去除特定區(qū)域內(nèi)氣體可疑位置，例如去除天空上氣體可疑位置可以減少云彩造成的誤報(bào)，以獲得泄露氣體高度可疑位置；再將紅外通道時序多幀圖像送入氣體序列分類模型中，對上述泄露氣體高度可疑位置進(jìn)一步篩選，獲得最終的泄露氣體報(bào)警位置，該類方法是直接使用相機(jī)采集的原始數(shù)據(jù)或者是直接處理原始數(shù)據(jù)壓縮后獲得的圖像數(shù)據(jù)，若使用相機(jī)采集的原始數(shù)據(jù)，可以實(shí)現(xiàn)模型性能的最優(yōu)化，提高對于復(fù)雜場景的處理能力，準(zhǔn)確獲得場景中存在泄露氣體報(bào)警位置，但使用原始數(shù)據(jù)存在儲存量大、傳輸速度慢的問題，會導(dǎo)致在增加產(chǎn)品成本的同時延長模型的迭代周期，進(jìn)而導(dǎo)致檢測效率降低；若直接處理原始數(shù)據(jù)壓縮后獲得的圖像數(shù)據(jù)，可以降低產(chǎn)品傳輸成本，但會導(dǎo)致檢測精確度較低的問題。

3、可見，相關(guān)技術(shù)對泄露氣體進(jìn)行檢測時，存在泄露氣體檢測準(zhǔn)確率較低或檢測效率較低的問題，如何對泄露氣體進(jìn)行快速準(zhǔn)確地檢測，成為相關(guān)領(lǐng)域亟待解決的技術(shù)問題。

技術(shù)實(shí)現(xiàn)思路

1、本技術(shù)實(shí)施例的目的在于提供基于多數(shù)據(jù)混合的泄露氣體的檢測方法、裝置及電子設(shè)備，以實(shí)現(xiàn)對泄露氣體進(jìn)行快速準(zhǔn)確地檢測。具體技術(shù)方案如下：

2、第一方面，本技術(shù)實(shí)施例提供了一種基于多數(shù)據(jù)混合的泄露氣體檢測方法，所述方法包括：

3、獲取對多個第一紅外原始圖像分別進(jìn)行壓縮得到的多個壓縮圖像，其中，所述第一紅外原始圖像為拍攝目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像；

4、根據(jù)所述多個壓縮圖像預(yù)測得到潛在泄露氣體的位置，作為候選位置；

5、分別從多個第二紅外原始圖像中提取所述候選位置處的子圖像，作為紅外子圖像，其中，所述第二紅外原始圖像為拍攝所述目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像，并且所述多個第一紅外原始圖像的拍攝時間跨度為所述多個第二紅外原始圖像的拍攝時間跨度的真子集；

6、根據(jù)所有所述紅外子圖像預(yù)測得到所述候選位置的第一分類結(jié)果，所述第一分類結(jié)果用于表示所述候選位置存在泄露氣體，或者，所述候選位置不存在泄露氣體。

7、在一種可能的實(shí)施方式中，所述根據(jù)所有所述紅外子圖像預(yù)測得到所述候選位置的第一分類結(jié)果，包括：

8、提取至少一個所述紅外子圖像的圖像特征，作為紅外空間特征；并提取由所有所述紅外子圖像按照拍攝時間的先后順序排序形成的圖像序列的序列特征，作為紅外序列特征；

9、根據(jù)所述紅外空間特征和所述紅外序列特征，預(yù)測得到所述候選位置的第一分類結(jié)果。

10、在一種可能的實(shí)施方式中，所述提取至少一個所述紅外子圖像的圖像特征，作為紅外空間特征，包括：

11、分別預(yù)測得到所有所述紅外子圖像的氣體得分，其中，所述氣體得分與圖像中包含的泄露氣體的特征數(shù)目正相關(guān)；

12、從所有所述紅外子圖像中確定所述氣體得分滿足預(yù)設(shè)篩選條件的圖像，作為目標(biāo)紅外子圖像；

13、提取所述目標(biāo)紅外子圖像的圖像特征，作為紅外空間特征。

14、在一種可能的實(shí)施方式中，所述方法還包括：

15、分別從多個可見光原始圖像中提取所述候選位置處的子圖像，作為可見光子圖像，其中，所述可見光原始圖像為拍攝所述目標(biāo)場景得到的未經(jīng)壓縮的可見光圖像，并且所述多個第二紅外原始圖像的拍攝時間跨度與所述多個可見光原始圖像的拍攝時間跨度相同；

16、根據(jù)所有所述可見光子圖像預(yù)測得到所述候選位置的第二分類結(jié)果，所述第二分類結(jié)果用于表示所述候選位置存在運(yùn)動對象，或者，所述候選位置不存在運(yùn)動對象；

17、若所述第二分類結(jié)果表示不存在運(yùn)動對象，且所述第一分類結(jié)果表示存在泄露氣體，則確定所述候選位置存在泄露氣體。

18、在一種可能的實(shí)施方式中，所述根據(jù)所有所述可見光子圖像預(yù)測得到所述候選位置的第二分類結(jié)果，包括：

19、提取目標(biāo)可見光子圖像的圖像特征，作為可見光空間特征；并提取由所有所述可見光子圖像按照拍攝時間的先后順序排序形成的圖像序列的序列特征，作為可見光序列特征；

20、根據(jù)所述可見光空間特征和所述可見光序列特征，預(yù)測得到所述候選位置的第二分類結(jié)果；

21、其中，所述目標(biāo)可見光子圖像為在所述圖像序列中的順位遠(yuǎn)離首尾的可見光子圖像。

22、在一種可能的實(shí)施方式中，所述方法還包括：

23、獲取從待檢測時刻起始往前第一時長內(nèi)拍攝目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像，作為第一紅外原始圖像；

24、獲取從所述待檢測時刻起往前第二時長內(nèi)拍攝目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像，作為第二紅外原始圖像，其中，所述第二時長大于所述第一時長。

25、第二方面，本技術(shù)實(shí)施例提供了一種基于多數(shù)據(jù)混合的泄露氣體檢測裝置，所述裝置包括：

26、第一獲取模塊，用于獲取對多個第一紅外原始圖像分別進(jìn)行壓縮得到的多個壓縮圖像，其中，所述第一紅外原始圖像為拍攝目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像；

27、位置預(yù)測模塊，用于根據(jù)所述多個壓縮圖像預(yù)測得到潛在泄露氣體的位置，作為候選位置；

28、第一提取模塊，用于分別從多個第二紅外原始圖像中提取所述候選位置處的子圖像，作為紅外子圖像，其中，所述第二紅外原始圖像為拍攝所述目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像，并且所述多個第一紅外原始圖像的拍攝時間跨度為所述多個第二紅外原始圖像的拍攝時間跨度的真子集；

29、第一分類模塊，用于根據(jù)所有所述紅外子圖像預(yù)測得到所述候選位置的第一分類結(jié)果，所述第一分類結(jié)果用于表示所述候選位置存在泄露氣體，或者，所述候選位置不存在泄露氣體。

30、在一種可能的實(shí)施方式中，所述第一分類模塊，包括：

31、第一分類子模塊，用于提取至少一個所述紅外子圖像的圖像特征，作為紅外空間特征；并提取由所有所述紅外子圖像按照拍攝時間的先后順序排序形成的圖像序列的序列特征，作為紅外序列特征；

32、第二分類子模塊，用于根據(jù)所述紅外空間特征和所述紅外序列特征，預(yù)測得到所述候選位置的第一分類結(jié)果。

33、在一種可能的實(shí)施方式中，所述第一分類子模塊，包括：

34、第一分類單元，用于分別預(yù)測得到所有所述紅外子圖像的氣體得分，其中，所述氣體得分與圖像中包含的泄露氣體的特征數(shù)目正相關(guān)；

35、第二分類單元，用于從所有所述紅外子圖像中確定所述氣體得分滿足預(yù)設(shè)篩選條件的圖像，作為目標(biāo)紅外子圖像；

36、第三分類單元，用于提取所述目標(biāo)紅外子圖像的圖像特征，作為紅外空間特征。

37、在一種可能的實(shí)施方式中，所述裝置還包括：

38、第二提取模塊，用于分別從多個可見光原始圖像中提取所述候選位置處的子圖像，作為可見光子圖像，其中，所述可見光原始圖像為拍攝所述目標(biāo)場景得到的未經(jīng)壓縮的可見光圖像，并且所述多個第二紅外原始圖像的拍攝時間跨度與所述多個可見光原始圖像的拍攝時間跨度相同；

39、第二分類模塊，用于根據(jù)所有所述可見光子圖像預(yù)測得到所述候選位置的第二分類結(jié)果，所述第二分類結(jié)果用于表示所述候選位置存在運(yùn)動對象，或者，所述候選位置不存在運(yùn)動對象；

40、結(jié)果確定模塊，用于若所述第二分類結(jié)果表示不存在運(yùn)動對象，且所述第一分類結(jié)果表示存在泄露氣體，則確定所述候選位置存在泄露氣體。

41、在一種可能的實(shí)施方式中，所述第二分類模塊，包括：

42、第四分類單元，用于提取目標(biāo)可見光子圖像的圖像特征，作為可見光空間特征；并提取由所有所述可見光子圖像按照拍攝時間的先后順序排序形成的圖像序列的序列特征，作為可見光序列特征；

43、第五分類單元，用于根據(jù)所述可見光空間特征和所述可見光序列特征，預(yù)測得到所述候選位置的第二分類結(jié)果；

44、其中，所述目標(biāo)可見光子圖像為在所述圖像序列中的順位遠(yuǎn)離首尾的可見光子圖像。

45、在一種可能的實(shí)施方式中，所述裝置還包括：

46、第二獲取模塊，用于獲取從待檢測時刻起始往前第一時長內(nèi)拍攝目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像，作為第一紅外原始圖像；

47、第三獲取模塊，用于獲取從所述待檢測時刻起往前第二時長內(nèi)拍攝目標(biāo)場景得到的未經(jīng)壓縮的紅外圖像，作為第二紅外原始圖像，其中，所述第二時長大于所述第一時長。

48、第三方面，本技術(shù)實(shí)施例提供了一種電子設(shè)備，包括：

49、存儲器，用于存放計(jì)算機(jī)程序；

50、處理器，用于執(zhí)行存儲器上所存放的程序時，實(shí)現(xiàn)上述任一所述的基于多數(shù)據(jù)混合的泄露氣體檢測方法。

51、第四方面，本技術(shù)實(shí)施例提供了一種計(jì)算機(jī)可讀存儲介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲介質(zhì)內(nèi)存儲有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時實(shí)現(xiàn)上述任一所述的基于多數(shù)據(jù)混合的泄露氣體檢測方法。

52、第五方面，本技術(shù)實(shí)施例提供了本技術(shù)實(shí)施例還提供了一種包含指令的計(jì)算機(jī)程序產(chǎn)品，當(dāng)其在計(jì)算機(jī)上運(yùn)行時，使得計(jì)算機(jī)執(zhí)行上述任一所述的基于多數(shù)據(jù)混合的泄露氣體檢測方法。

53、本技術(shù)實(shí)施例有益效果：

54、本技術(shù)實(shí)施例提供的基于多數(shù)據(jù)混合的泄露氣體檢測方法，先根據(jù)目標(biāo)場景的壓縮后的紅外原始圖像預(yù)測得到潛在泄露氣體的候選位置，然后從各紅外原始圖像中提取各候選位置處的紅外子圖像，最后根據(jù)各紅外子圖像預(yù)測候選位置是否存在泄露氣體。通過本技術(shù)實(shí)施例的方法，由于壓縮后的紅外圖像的數(shù)據(jù)量小，處理速度相對較快，根據(jù)壓縮后的紅外圖像確定候選位置可以快速得到各候選位置；并且，由于紅外原始圖像中包括的信息比壓縮后的紅外原始圖像中包括的信息全面，因此在基于壓縮后的紅外原始圖像得到潛在泄露氣體的候選位置后，通過提取紅外原始圖像中各候選位置出的子圖像，基于各子圖像可以準(zhǔn)確確定各候選位置處是否存在氣體泄露，從而實(shí)現(xiàn)對泄露氣體進(jìn)行快速準(zhǔn)確地檢測。

55、此外，根據(jù)目標(biāo)場景的壓縮后的紅外原始圖像預(yù)測得到潛在泄露氣體的候選位置可以是基于預(yù)先訓(xùn)練好的模型實(shí)現(xiàn)的，在訓(xùn)練得到該模型的過程中該模型的輸入也為壓縮后的紅外原始圖像，由于壓縮圖像的成本比較低，若當(dāng)前場景比較復(fù)雜，可以在較短時間內(nèi)對模型進(jìn)行迭代，提升該模型的場景適應(yīng)能力；并且，根據(jù)所有紅外子圖像預(yù)測得到候選位置的第一分類結(jié)果也可以是基于預(yù)先訓(xùn)練好的模型實(shí)現(xiàn)的，在訓(xùn)練得到該模型的過程中該模型的輸入也為紅外子圖像，由于各紅外子圖像為紅外原始圖像中候選位置處的子圖像，而候選位置通常較小，使得該模型的處理任務(wù)比較單一，從而該模型無需頻繁迭代更新，進(jìn)而實(shí)現(xiàn)在控制成本不增加或增加極小的同時實(shí)現(xiàn)快速準(zhǔn)確的泄露氣體檢測效果。

56、當(dāng)然，實(shí)施本技術(shù)的任一產(chǎn)品或方法并不一定需要同時達(dá)到以上所述的所有優(yōu)點(diǎn)。