本技術(shù)涉及信息處理,尤其涉及一種行為信息的識(shí)別方法、系統(tǒng)、設(shè)備、存儲(chǔ)介質(zhì)和程序產(chǎn)品。
背景技術(shù):
1、隨著零售業(yè)務(wù)的發(fā)展,超市已經(jīng)不要求客戶存包袋,將商品裝入自帶包袋中(下述將這種行為成為“裝包行為”),并帶出超市導(dǎo)致商品損失。為了及時(shí)發(fā)現(xiàn)并制止裝包行為,超市一般配有防損員,通過(guò)人工巡排查出視超市中可能存在的商品裝包行為。
2、然而裝包行為的整個(gè)發(fā)生過(guò)程時(shí)間一般較短,超市面積較大且人多,防損員難以及時(shí)準(zhǔn)確發(fā)現(xiàn)裝包行為并制止,排查效率低下。
技術(shù)實(shí)現(xiàn)思路
1、本技術(shù)實(shí)施例的主要目的在于提供一種行為信息的識(shí)別方法、系統(tǒng)、設(shè)備、存儲(chǔ)介質(zhì)和程序產(chǎn)品,實(shí)現(xiàn)了通過(guò)結(jié)合裝包姿態(tài)、手持物品行為以及目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),能夠準(zhǔn)確判斷人體對(duì)象是否發(fā)生裝包行為,減少了誤判的可能性,提高了裝包行為的識(shí)別效率。
2、第一方面,本技術(shù)實(shí)施例提供一種行為信息的識(shí)別方法,包括:獲取指定區(qū)域內(nèi)的監(jiān)控視頻幀;識(shí)別所述監(jiān)控視頻幀中人體對(duì)象區(qū)域存在的目標(biāo)包袋信息;檢測(cè)所述人體對(duì)象發(fā)生的裝包姿態(tài)和手持物品行為;若所述裝包姿態(tài)是所述目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),并且在所述裝包姿態(tài)發(fā)生之前所述人體對(duì)象存在手持物品行為,確定所述人體對(duì)象在所述指定區(qū)域內(nèi)發(fā)生裝包行為,發(fā)出提示信息。
3、于一實(shí)施例中,所述識(shí)別所述監(jiān)控視頻幀中人體對(duì)象區(qū)域存在的目標(biāo)包袋信息,包括:識(shí)別出所述監(jiān)控視頻幀中的人體軌跡信息;根據(jù)所述人體軌跡信息從所述監(jiān)控視頻幀中截取人體圖像;將所述人體圖像輸入預(yù)設(shè)包袋檢測(cè)模型,以使所述預(yù)設(shè)包袋檢測(cè)模型輸出所述人體圖像中存在的目標(biāo)包袋信息,所述目標(biāo)包袋信息包括包袋位置和/或包袋類型。
4、于一實(shí)施例中,在所述將所述人體圖像輸入預(yù)設(shè)包袋檢測(cè)模型之前,還包括:獲取包袋樣本圖像集,所述包袋樣本圖像中標(biāo)記了不同包袋對(duì)象的位置和類型;采用所述包袋樣本圖像集訓(xùn)練預(yù)設(shè)檢測(cè)器,得到所述預(yù)設(shè)包袋檢測(cè)模型。
5、于一實(shí)施例中,所述檢測(cè)所述人體對(duì)象發(fā)生的裝包姿態(tài),包括:識(shí)別出所述監(jiān)控視頻幀中的人體軌跡信息;根據(jù)所述人體軌跡信息從所述監(jiān)控視頻幀中截取人體圖像;將所述人體圖像輸入預(yù)設(shè)姿態(tài)檢測(cè)模型,以使所述預(yù)設(shè)姿態(tài)檢測(cè)模型輸出所述人體圖像中存在的裝包姿態(tài)、發(fā)生所述裝包姿態(tài)的包袋類型以及所述裝包姿態(tài)的發(fā)生時(shí)間。
6、于一實(shí)施例中,在所述將所述人體圖像輸入預(yù)設(shè)姿態(tài)檢測(cè)模型之前,還包括:獲取裝包樣本圖像集,所述裝包樣本圖像中標(biāo)記了不同目標(biāo)包袋信息對(duì)應(yīng)的多種裝包姿態(tài)和非裝包姿態(tài);采用所述裝包樣本圖像集訓(xùn)練預(yù)設(shè)檢測(cè)器,得到所述預(yù)設(shè)姿態(tài)檢測(cè)模型。
7、于一實(shí)施例中,檢測(cè)所述人體對(duì)象發(fā)生的手持物品行為,包括:識(shí)別出所述監(jiān)控視頻幀中的人體軌跡信息;根據(jù)所述人體軌跡信息從所述監(jiān)控視頻幀中截取人體圖像;將所述人體圖像輸入預(yù)設(shè)行為檢測(cè)模型,以使所述預(yù)設(shè)行為檢測(cè)模型輸出所述人體圖像中人體對(duì)象的手部和所述手部拿著的目標(biāo)物品;若所述目標(biāo)物品的位置與所述人體對(duì)象的手部位置之間的距離小于預(yù)設(shè)閾值,確定所述人體對(duì)象發(fā)生了所述手持物品行為,并確定所述手持物品行為的發(fā)生時(shí)間。
8、于一實(shí)施例中,在所述將所述人體圖像輸入預(yù)設(shè)行為檢測(cè)模型之前,還包括:獲取手持物品樣本圖像集,所述手持物品樣本圖像中標(biāo)記了不同外形特征的物品;采用所述手持物品樣本圖像集訓(xùn)練預(yù)設(shè)檢測(cè)器,得到所述預(yù)設(shè)行為檢測(cè)模型。
9、于一實(shí)施例中,所述包袋類型包括人體雙肩背著包、包袋位于人體腰部以上的單肩挎著包、包袋位于人體腰部以下的單肩挎著包、人體的小臂挎著包和人體的手提著包中的一種或多種。
10、第二方面,本技術(shù)實(shí)施例提供一種超市防盜檢測(cè)方法,包括:獲取超市內(nèi)的監(jiān)控視頻幀;識(shí)別所述監(jiān)控視頻幀中人體對(duì)象區(qū)域存在的目標(biāo)包袋信息;檢測(cè)所述人體對(duì)象發(fā)生的裝包姿態(tài)和手持商品行為;若所述裝包姿態(tài)是所述目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),并且在所述裝包姿態(tài)發(fā)生之前所述人體對(duì)象存在手持商品行為,確定所述人體對(duì)象在所述超市內(nèi)發(fā)生將商品裝包的行為,發(fā)出防盜提示信息。
11、第三方面,本技術(shù)實(shí)施例提供一種行為信息的識(shí)別裝置,包括:
12、獲取模塊,用于獲取指定區(qū)域內(nèi)的監(jiān)控視頻幀;
13、識(shí)別模塊,用于識(shí)別所述監(jiān)控視頻幀中人體對(duì)象區(qū)域存在的目標(biāo)包袋信息;
14、檢測(cè)模塊,用于檢測(cè)所述人體對(duì)象發(fā)生的裝包姿態(tài)和手持物品行為;
15、確定模塊,用于若所述裝包姿態(tài)是所述目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),并且在所述裝包姿態(tài)發(fā)生之前所述人體對(duì)象存在手持物品行為,確定所述人體對(duì)象在所述指定區(qū)域內(nèi)發(fā)生裝包行為,發(fā)出提示信息。
16、于一實(shí)施例中,所述識(shí)別模塊,用于識(shí)別出所述監(jiān)控視頻幀中的人體軌跡信息;根據(jù)所述人體軌跡信息從所述監(jiān)控視頻幀中截取人體圖像;將所述人體圖像輸入預(yù)設(shè)包袋檢測(cè)模型,以使所述預(yù)設(shè)包袋檢測(cè)模型輸出所述人體圖像中存在的目標(biāo)包袋信息,所述目標(biāo)包袋信息包括包袋位置和/或包袋類型。
17、于一實(shí)施例中,還包括:第一訓(xùn)練模塊,用于在所述將所述人體圖像輸入預(yù)設(shè)包袋檢測(cè)模型之前,獲取包袋樣本圖像集,所述包袋樣本圖像中標(biāo)記了不同包袋對(duì)象的位置和類型;采用所述包袋樣本圖像集訓(xùn)練預(yù)設(shè)檢測(cè)器,得到所述預(yù)設(shè)包袋檢測(cè)模型。
18、于一實(shí)施例中,所述檢測(cè)模塊,用于識(shí)別出所述監(jiān)控視頻幀中的人體軌跡信息;根據(jù)所述人體軌跡信息從所述監(jiān)控視頻幀中截取人體圖像;將所述人體圖像輸入預(yù)設(shè)姿態(tài)檢測(cè)模型,以使所述預(yù)設(shè)姿態(tài)檢測(cè)模型輸出所述人體圖像中存在的裝包姿態(tài)、發(fā)生所述裝包姿態(tài)的包袋類型以及所述裝包姿態(tài)的發(fā)生時(shí)間。
19、于一實(shí)施例中,還包括:第二訓(xùn)練模塊,用于在所述將所述人體圖像輸入預(yù)設(shè)姿態(tài)檢測(cè)模型之前,獲取裝包樣本圖像集,所述裝包樣本圖像中標(biāo)記了不同目標(biāo)包袋信息對(duì)應(yīng)的多種裝包姿態(tài)和非裝包姿態(tài);采用所述裝包樣本圖像集訓(xùn)練預(yù)設(shè)檢測(cè)器,得到所述預(yù)設(shè)姿態(tài)檢測(cè)模型。
20、于一實(shí)施例中,檢測(cè)模塊,用于識(shí)別出所述監(jiān)控視頻幀中的人體軌跡信息;根據(jù)所述人體軌跡信息從所述監(jiān)控視頻幀中截取人體圖像;將所述人體圖像輸入預(yù)設(shè)行為檢測(cè)模型,以使所述預(yù)設(shè)行為檢測(cè)模型輸出所述人體圖像中人體對(duì)象的手部和所述手部拿著的目標(biāo)物品;若所述目標(biāo)物品的位置與所述人體對(duì)象的手部位置之間的距離小于預(yù)設(shè)閾值,確定所述人體對(duì)象發(fā)生了所述手持物品行為,并確定所述手持物品行為的發(fā)生時(shí)間。
21、于一實(shí)施例中,還包括:第三訓(xùn)練模塊,用于在所述將所述人體圖像輸入預(yù)設(shè)行為檢測(cè)模型之前,獲取手持物品樣本圖像集,所述手持物品樣本圖像中標(biāo)記了不同外形特征的物品;采用所述手持物品樣本圖像集訓(xùn)練預(yù)設(shè)檢測(cè)器,得到所述預(yù)設(shè)行為檢測(cè)模型。
22、于一實(shí)施例中,所述包袋類型包括人體雙肩背著包、包袋位于人體腰部以上的單肩挎著包、包袋位于人體腰部以下的單肩挎著包、人體的小臂挎著包和人體的手提著包中的一種或多種。
23、第四方面,本技術(shù)實(shí)施例提供一種行為信息的識(shí)別系統(tǒng),包括:
24、包袋檢測(cè)模塊,用于獲取指定區(qū)域內(nèi)的監(jiān)控視頻幀,識(shí)別所述監(jiān)控視頻幀中人體對(duì)象區(qū)域存在的目標(biāo)包袋信息;
25、手持物品檢測(cè)模塊,用于檢測(cè)所述人體對(duì)象發(fā)生的手持物品行為;
26、裝包姿態(tài)檢測(cè)模塊,用于檢測(cè)所述人體對(duì)象發(fā)生的裝包姿態(tài);
27、裝包行為決策模塊,分別連接所述包袋檢測(cè)模塊、所述手持物品檢測(cè)模塊和裝包姿態(tài)檢測(cè)模塊,用于若所述裝包姿態(tài)是所述目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),并且在所述裝包姿態(tài)發(fā)生之前所述人體對(duì)象存在手持物品行為,確定所述人體對(duì)象在所述指定區(qū)域內(nèi)發(fā)生裝包行為,發(fā)出提示信息。
28、第五方面,本技術(shù)實(shí)施例提供一種電子設(shè)備,包括:
29、至少一個(gè)處理器;以及
30、與所述至少一個(gè)處理器通信連接的存儲(chǔ)器;
31、其中,所述存儲(chǔ)器存儲(chǔ)有可被所述至少一個(gè)處理器執(zhí)行的指令,所述指令被所述至少一個(gè)處理器執(zhí)行,以使所述電子設(shè)備執(zhí)行上述任一方面所述的方法。
32、第六方面,本技術(shù)實(shí)施例提供一種云設(shè)備,包括:
33、至少一個(gè)處理器;以及
34、與所述至少一個(gè)處理器通信連接的存儲(chǔ)器;
35、其中,所述存儲(chǔ)器存儲(chǔ)有可被所述至少一個(gè)處理器執(zhí)行的指令,所述指令被所述至少一個(gè)處理器執(zhí)行,以使所述云設(shè)備執(zhí)行上述任一方面所述的方法。
36、第七方面,本技術(shù)實(shí)施例提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)執(zhí)行指令,當(dāng)處理器執(zhí)行所述計(jì)算機(jī)執(zhí)行指令時(shí),實(shí)現(xiàn)上述任一方面所述的方法。
37、第八方面,本技術(shù)實(shí)施例提供一種計(jì)算機(jī)程序產(chǎn)品,包括計(jì)算機(jī)程序,該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述任一方面所述的方法。
38、本技術(shù)實(shí)施例提供的行為信息的識(shí)別方法、系統(tǒng)、設(shè)備、存儲(chǔ)介質(zhì)和程序產(chǎn)品,通過(guò)識(shí)別監(jiān)控視頻幀中人體對(duì)象區(qū)域的目標(biāo)包袋信息以及該人體對(duì)象發(fā)生的裝包姿態(tài)和手持物品行為,并將該人體對(duì)象發(fā)生的裝包姿態(tài)與目標(biāo)包袋信息進(jìn)行匹配,如果裝包姿態(tài)是目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),并且在所述裝包姿態(tài)發(fā)生之前所述人體對(duì)象存在手持物品行為,則確定所述人體對(duì)象在所述指定區(qū)域內(nèi)發(fā)生裝包行為,此時(shí)可以發(fā)出提示信息,以便及時(shí)制止裝包行為。如此通過(guò)結(jié)合裝包姿態(tài)、手持物品行為以及目標(biāo)包袋信息對(duì)應(yīng)的預(yù)設(shè)姿態(tài),能夠準(zhǔn)確判斷人體對(duì)象是否發(fā)生裝包行為,減少了誤判的可能性,提高了裝包行為的識(shí)別效率。