本技術(shù)屬于計(jì)算機(jī)視覺領(lǐng)域,具體涉及一種目標(biāo)對(duì)象的行為標(biāo)注方法、裝置、電子設(shè)備和介質(zhì)。
背景技術(shù):
1、在一些場(chǎng)景中,自動(dòng)檢測(cè)和分析目標(biāo)對(duì)象(例如,在教育場(chǎng)景中,目標(biāo)對(duì)象可以是學(xué)生)的行為(如使用電子設(shè)備、舉手、閱讀等)對(duì)于收集參與度和注意力集中度的反饋至關(guān)重要,這有助于相關(guān)人員優(yōu)化交互策略并提升整體互動(dòng)質(zhì)量。
2、現(xiàn)有技術(shù)中,行為識(shí)別技術(shù)普遍采用實(shí)例分割模型來識(shí)別和分類圖像中的目標(biāo)對(duì)象的行為。首先基于目標(biāo)檢測(cè),用以確定圖像中的目標(biāo)對(duì)象,接著通過特征金字塔網(wǎng)絡(luò)(feature?pyramid?network,fcn)來提取目標(biāo)對(duì)象的特征表示。隨后,進(jìn)行像素級(jí)別的分類,最終生成一個(gè)掩碼,該掩碼描繪了目標(biāo)對(duì)象在圖像中的形狀和輪廓。基于目標(biāo)對(duì)象在圖像中的形狀和輪廓來標(biāo)注目標(biāo)對(duì)象的行為。
3、然而,采用現(xiàn)有技術(shù)的方式,目標(biāo)對(duì)象的行為標(biāo)注的準(zhǔn)確性不高。
技術(shù)實(shí)現(xiàn)思路
1、本技術(shù)實(shí)施例提供一種目標(biāo)對(duì)象的行為標(biāo)注方法、裝置、電子設(shè)備和介質(zhì),以解決現(xiàn)有技術(shù)中目標(biāo)對(duì)象的行為標(biāo)注的可靠性不高的問題。
2、第一方面,本技術(shù)實(shí)施例提供一種目標(biāo)對(duì)象的行為標(biāo)注方法,包括:
3、基于第一待識(shí)別圖片中的關(guān)鍵點(diǎn),獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第一行為標(biāo)注結(jié)果;
4、基于第一預(yù)設(shè)模型和所述第一行為標(biāo)注結(jié)果,獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第二行為標(biāo)注結(jié)果;
5、基于所述第一待識(shí)別圖片、所述第二行為標(biāo)注結(jié)果和第三行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型,其中,所述第三行為標(biāo)注結(jié)果是基于候選行為標(biāo)注模型對(duì)所述第一待識(shí)別圖片進(jìn)行標(biāo)注得到的行為標(biāo)注結(jié)果;
6、基于目標(biāo)行為標(biāo)注模型進(jìn)行目標(biāo)對(duì)象的行為標(biāo)注。
7、可選的,所述基于所述第一待識(shí)別圖片、所述第二行為標(biāo)注結(jié)果和第三行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型,包括:
8、若所述第二行為標(biāo)注結(jié)果和所述第三行為標(biāo)注結(jié)果一致,則將第二行為標(biāo)注結(jié)果或者所述第三行為標(biāo)注結(jié)果作為目標(biāo)行為標(biāo)注結(jié)果,基于所述目標(biāo)行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型;
9、若所述第二行為標(biāo)注結(jié)果和所述第三行為標(biāo)注結(jié)果不一致,則將人工標(biāo)注結(jié)果作為目標(biāo)行為標(biāo)注結(jié)果,基于所述目標(biāo)行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型。
10、可選的,所述基于第一預(yù)設(shè)模型和所述第一行為標(biāo)注結(jié)果,獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第二行為標(biāo)注結(jié)果,包括:
11、將所述第一待識(shí)別圖片輸入第一預(yù)設(shè)模型,得到第二候選標(biāo)注結(jié)果;
12、基于所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果的一致性,得到所述第二行為標(biāo)注結(jié)果。
13、可選的,所述基于所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果的一致性,得到所述第二行為標(biāo)注結(jié)果,包括:
14、若所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果一致,則確定所述第一行為標(biāo)注結(jié)果或者所述第二候選標(biāo)注結(jié)果為所述第二行為標(biāo)注結(jié)果;
15、若所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果不一致,則獲取人工標(biāo)注結(jié)果,確定所述人工標(biāo)注結(jié)果為所述第二行為標(biāo)注結(jié)果。
16、可選的,所述將所述第一待識(shí)別圖片輸入第一預(yù)設(shè)模型,得到第二候選標(biāo)注結(jié)果,包括:
17、基于將所述第一待識(shí)別圖片輸入視覺問答模型;
18、獲取所述視覺問答模型的分類提示步驟中得到的第二初始標(biāo)注結(jié)果;
19、若在所述視覺問答模型的分類確認(rèn)步驟中所述第二初始標(biāo)注結(jié)果的置信度大于等于預(yù)設(shè)閾值,則確定所述第二初始標(biāo)注結(jié)果為第二候選標(biāo)注結(jié)果;
20、若在所述視覺問答模型的分類確認(rèn)步驟中所述第二初始標(biāo)注結(jié)果的置信度小于所述預(yù)設(shè)閾值,則獲取人工標(biāo)注結(jié)果,確定所述人工標(biāo)注結(jié)果為第二候選標(biāo)注結(jié)果。
21、可選的,所述基于第一待識(shí)別圖片中的關(guān)鍵點(diǎn),獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第一行為標(biāo)注結(jié)果,包括:
22、基于人體檢測(cè)模型,獲取所述第一待識(shí)別圖片中的目標(biāo)對(duì)象的圖像;
23、基于人體姿態(tài)識(shí)別模型,獲取所述目標(biāo)對(duì)象的圖像中的關(guān)鍵點(diǎn)坐標(biāo);
24、基于所述關(guān)鍵點(diǎn)坐標(biāo),獲取所述目標(biāo)對(duì)象的頭部高度和頭部寬度;
25、基于所述關(guān)鍵點(diǎn)坐標(biāo)、所述頭部高度和所述頭部寬度,獲取第一行為標(biāo)注結(jié)果。
26、可選的,所述關(guān)鍵點(diǎn)坐標(biāo)包括:面部關(guān)鍵點(diǎn)坐標(biāo)和身體關(guān)鍵點(diǎn)坐標(biāo);
27、所述基于所述關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部高度和頭部寬度,包括:
28、基于面部關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部高度;
29、基于身體關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部寬度。
30、可選的,所述面部關(guān)鍵點(diǎn)坐標(biāo)包括:
31、鼻部坐標(biāo)、第一側(cè)眼部坐標(biāo)、第二側(cè)眼部坐標(biāo)、第一側(cè)耳部坐標(biāo)和第二側(cè)耳部坐標(biāo);
32、所述基于面部關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部高度,包括:
33、基于所述鼻部坐標(biāo)的縱坐標(biāo)、第一眼部坐標(biāo)的縱坐標(biāo)、第二眼部坐標(biāo)的縱坐標(biāo)、第一耳朵坐標(biāo)的縱坐標(biāo)和第二耳部坐標(biāo)的縱坐標(biāo)的平均值,獲取所述頭部高度。
34、可選的,所述身體關(guān)鍵點(diǎn)坐標(biāo)包括:第一側(cè)肩膀坐標(biāo)和第二側(cè)肩膀坐標(biāo);
35、所述基于身體關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部寬度,包括:
36、基于所述第一側(cè)肩膀坐標(biāo)橫坐標(biāo)和所述第二側(cè)肩膀坐標(biāo)的橫坐標(biāo)的差值的一半,獲取所述頭部寬度。
37、可選的,所述身體關(guān)鍵點(diǎn)坐標(biāo)還包括:第一側(cè)肘關(guān)節(jié)坐標(biāo)、第二側(cè)肘關(guān)節(jié)坐標(biāo)、第一側(cè)腕關(guān)節(jié)坐標(biāo)、第二側(cè)腕關(guān)節(jié)坐標(biāo);
38、所述基于所述關(guān)鍵點(diǎn)坐標(biāo)、所述頭部高度和所述頭部寬度,獲取第一行為標(biāo)注結(jié)果,包括:
39、若第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第一姿態(tài);
40、或者,
41、若第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第一姿態(tài);
42、可選的,所述方法還包括:
43、若第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度;第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第二姿態(tài)。
44、可選的,所述身體關(guān)鍵點(diǎn)坐標(biāo)還包括:第一側(cè)臀部坐標(biāo)和第二側(cè)臀部坐標(biāo);
45、所述方法還包括:
46、若滿足下述至少四種,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第三姿態(tài);
47、第一側(cè)眼部坐標(biāo)的橫坐標(biāo)小于第二側(cè)眼部坐標(biāo)的橫坐標(biāo);
48、第一側(cè)耳部坐標(biāo)的橫坐標(biāo)小于第二側(cè)耳部坐標(biāo)的橫坐標(biāo);
49、第一側(cè)肩膀坐標(biāo)的橫坐標(biāo)小于第二側(cè)肩膀坐標(biāo)的橫坐標(biāo);
50、第一側(cè)肘關(guān)節(jié)坐標(biāo)的橫坐標(biāo)小于第二側(cè)肘關(guān)節(jié)坐標(biāo)的橫坐標(biāo);
51、第一側(cè)腕關(guān)節(jié)坐標(biāo)的橫坐標(biāo)小于第二側(cè)腕關(guān)節(jié)坐標(biāo)的橫坐標(biāo);
52、第一側(cè)臀部坐標(biāo)的橫坐標(biāo)小于第二側(cè)臀部坐標(biāo)坐標(biāo)的橫坐標(biāo)。
53、第二方面,本技術(shù)實(shí)施例提供一種目標(biāo)對(duì)象的行為標(biāo)注裝置,包括:
54、第一處理模塊,用于基于第一待識(shí)別圖片中的關(guān)鍵點(diǎn),獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第一行為標(biāo)注結(jié)果;
55、第二處理模塊,用于基于第一預(yù)設(shè)模型和所述第一行為標(biāo)注結(jié)果,獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第二行為標(biāo)注結(jié)果;
56、第三處理模塊,用于基于所述第一待識(shí)別圖片、所述第二行為標(biāo)注結(jié)果和第三行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型,其中,所述第三行為標(biāo)注結(jié)果是基于候選行為標(biāo)注模型對(duì)所述第一待識(shí)別圖片進(jìn)行標(biāo)注得到的行為標(biāo)注結(jié)果;
57、標(biāo)注模塊,用于基于目標(biāo)行為標(biāo)注模型進(jìn)行目標(biāo)對(duì)象的行為標(biāo)注。
58、可選的,所述第一處理模塊還用于,基于人體檢測(cè)模型,獲取所述第一待識(shí)別圖片中的目標(biāo)對(duì)象的圖像;
59、基于人體姿態(tài)識(shí)別模型,獲取所述目標(biāo)對(duì)象的圖像中的關(guān)鍵點(diǎn)坐標(biāo);
60、基于所述關(guān)鍵點(diǎn)坐標(biāo),獲取所述目標(biāo)對(duì)象的頭部高度和頭部寬度;
61、基于所述關(guān)鍵點(diǎn)坐標(biāo)、所述頭部高度和所述頭部寬度,獲取第一行為標(biāo)注結(jié)果。
62、可選的,所述第一處理模塊具體用于獲取關(guān)鍵點(diǎn)坐標(biāo),包括:面部關(guān)鍵點(diǎn)坐標(biāo)和身體關(guān)鍵點(diǎn)坐標(biāo);
63、所述基于所述關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部高度和頭部寬度,包括:
64、基于面部關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部高度;
65、基于身體關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部寬度。
66、可選的,所述面部關(guān)鍵點(diǎn)坐標(biāo)包括:
67、鼻部坐標(biāo)、第一側(cè)眼部坐標(biāo)、第二側(cè)眼部坐標(biāo)、第一側(cè)耳部坐標(biāo)和第二側(cè)耳部坐標(biāo);
68、所述基于面部關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部高度,包括:
69、基于所述鼻部坐標(biāo)的縱坐標(biāo)、第一眼部坐標(biāo)的縱坐標(biāo)、第二眼部坐標(biāo)的縱坐標(biāo)、第一耳朵坐標(biāo)的縱坐標(biāo)和第二耳部坐標(biāo)的縱坐標(biāo)的平均值,獲取所述頭部高度。
70、可選的,所述身體關(guān)鍵點(diǎn)坐標(biāo)包括:第一側(cè)肩膀坐標(biāo)和第二側(cè)肩膀坐標(biāo);
71、所述基于身體關(guān)鍵點(diǎn)坐標(biāo),獲取所述頭部寬度,包括:
72、基于所述第一側(cè)肩膀坐標(biāo)橫坐標(biāo)和所述第二側(cè)肩膀坐標(biāo)的橫坐標(biāo)的差值的一半,獲取所述頭部寬度。
73、可選的,所述身體關(guān)鍵點(diǎn)坐標(biāo)還包括:第一側(cè)肘關(guān)節(jié)坐標(biāo)、第二側(cè)肘關(guān)節(jié)坐標(biāo)、第一側(cè)腕關(guān)節(jié)坐標(biāo)、第二側(cè)腕關(guān)節(jié)坐標(biāo);
74、所述基于所述關(guān)鍵點(diǎn)坐標(biāo)、所述頭部高度和所述頭部寬度,獲取第一行為標(biāo)注結(jié)果,包括:
75、若第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第一姿態(tài);
76、或者,
77、若第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第一姿態(tài);
78、可選的,所述方法還包括:
79、若第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第一側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第一側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第一側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度;第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo);且,第二側(cè)肘關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上二分之一的頭部寬度小于第二側(cè)肩膀坐標(biāo)的縱坐標(biāo);且,第二側(cè)腕關(guān)節(jié)坐標(biāo)的縱坐標(biāo)加上頭部寬度小于頭部高度,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第二姿態(tài)。
80、可選的,所述身體關(guān)鍵點(diǎn)坐標(biāo)還包括:第一側(cè)臀部坐標(biāo)和第二側(cè)臀部坐標(biāo);
81、所述方法還包括:
82、若滿足下述至少四種,則確定第一行為標(biāo)注結(jié)果為所述目標(biāo)對(duì)象處于第三姿態(tài);
83、第一側(cè)眼部坐標(biāo)的橫坐標(biāo)小于第二側(cè)眼部坐標(biāo)的橫坐標(biāo);
84、第一側(cè)耳部坐標(biāo)的橫坐標(biāo)小于第二側(cè)耳部坐標(biāo)的橫坐標(biāo);
85、第一側(cè)肩膀坐標(biāo)的橫坐標(biāo)小于第二側(cè)肩膀坐標(biāo)的橫坐標(biāo);
86、第一側(cè)肘關(guān)節(jié)坐標(biāo)的橫坐標(biāo)小于第二側(cè)肘關(guān)節(jié)坐標(biāo)的橫坐標(biāo);
87、第一側(cè)腕關(guān)節(jié)坐標(biāo)的橫坐標(biāo)小于第二側(cè)腕關(guān)節(jié)坐標(biāo)的橫坐標(biāo);
88、第一側(cè)臀部坐標(biāo)的橫坐標(biāo)小于第二側(cè)臀部坐標(biāo)坐標(biāo)的橫坐標(biāo)。
89、可選的,第二處理模塊具體用于,基于第一預(yù)設(shè)模型和所述第一行為標(biāo)注結(jié)果,獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第二行為標(biāo)注結(jié)果,包括:
90、將所述第一待識(shí)別圖片輸入第一預(yù)設(shè)模型,得到第二候選標(biāo)注結(jié)果;
91、基于所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果的一致性,得到所述第二行為標(biāo)注結(jié)果。
92、可選的,第二處理模塊具體還用于,基于將所述第一待識(shí)別圖片輸入視覺問答模型;
93、獲取所述視覺問答模型的分類提示步驟中得到的第二初始標(biāo)注結(jié)果;
94、若在所述視覺問答模型的分類確認(rèn)步驟中所述第二初始標(biāo)注結(jié)果的置信度大于等于預(yù)設(shè)閾值,則確定所述第二初始標(biāo)注結(jié)果為第二候選標(biāo)注結(jié)果;
95、若在所述視覺問答模型的分類確認(rèn)步驟中所述第二初始標(biāo)注結(jié)果的置信度小于所述預(yù)設(shè)閾值,則獲取人工標(biāo)注結(jié)果,確定所述人工標(biāo)注結(jié)果為第二候選標(biāo)注結(jié)果。
96、可選的,第二處理模塊具體還用于,基于所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果的一致性,得到所述第二行為標(biāo)注結(jié)果,包括:
97、若所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果一致,則確定所述第一行為標(biāo)注結(jié)果或者所述第二候選標(biāo)注結(jié)果為所述第二行為標(biāo)注結(jié)果;
98、若所述第一行為標(biāo)注結(jié)果和所述第二候選標(biāo)注結(jié)果不一致,則獲取人工標(biāo)注結(jié)果,確定所述人工標(biāo)注結(jié)果為所述第二行為標(biāo)注結(jié)果。
99、可選的,第三處理模塊具體用于,基于所述第一待識(shí)別圖片、所述第二行為標(biāo)注結(jié)果和第三行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型,包括:
100、若所述第二行為標(biāo)注結(jié)果和所述第三行為標(biāo)注結(jié)果一致,則將第二行為標(biāo)注結(jié)果或者所述第三行為標(biāo)注結(jié)果作為目標(biāo)行為標(biāo)注結(jié)果,基于所述目標(biāo)行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型;
101、若所述第二行為標(biāo)注結(jié)果和所述第三行為標(biāo)注結(jié)果不一致,則將人工標(biāo)注結(jié)果作為目標(biāo)行為標(biāo)注結(jié)果,基于所述目標(biāo)行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型。
102、第三方面,本技術(shù)實(shí)施例提供一種電子設(shè)備,包括:處理器和存儲(chǔ)器,所述存儲(chǔ)器存儲(chǔ)可在所述處理器上運(yùn)行的程序或指令,所述程序或指令被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如第一方面任一項(xiàng)所述的目標(biāo)對(duì)象的行為標(biāo)注方法的步驟。
103、第四方面,本技術(shù)實(shí)施例提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述可讀存儲(chǔ)介質(zhì)上存儲(chǔ)程序或指令,所述程序或指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)如第一方面任一項(xiàng)所述的目標(biāo)對(duì)象的行為標(biāo)注方法的步驟。
104、第五方面,本技術(shù)實(shí)施例提供一種計(jì)算機(jī)程序產(chǎn)品,所述程序產(chǎn)品被車輛或者云服務(wù)器的處理器執(zhí)行時(shí)實(shí)現(xiàn)如第一方面任一項(xiàng)所述的目標(biāo)對(duì)象的行為標(biāo)注方法的步驟。
105、本技術(shù)實(shí)施例提供的目標(biāo)對(duì)象的行為標(biāo)注方法、裝置、電子設(shè)備和介質(zhì),基于第一待識(shí)別圖片中的關(guān)鍵點(diǎn),獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第一行為標(biāo)注結(jié)果;基于第一預(yù)設(shè)模型和所述第一行為標(biāo)注結(jié)果,獲取所述第一待識(shí)別圖片中目標(biāo)對(duì)象的第二行為標(biāo)注結(jié)果;基于所述第一待識(shí)別圖片、所述第二行為標(biāo)注結(jié)果和第三行為標(biāo)注結(jié)果,訓(xùn)練候選行為標(biāo)注模型,直至所述候選行為標(biāo)注模型收斂,得到目標(biāo)行為標(biāo)注模型;基于目標(biāo)行為標(biāo)注模型進(jìn)行目標(biāo)對(duì)象的行為標(biāo)注。本技術(shù)實(shí)施例通過多種方式進(jìn)行聯(lián)合標(biāo)注得到的行為標(biāo)注結(jié)果對(duì)候選行為標(biāo)注模型進(jìn)行訓(xùn)練,得到目標(biāo)行為標(biāo)注模型,基于目標(biāo)行為標(biāo)注模型對(duì)目標(biāo)對(duì)象進(jìn)行行為標(biāo)注,提高了目標(biāo)對(duì)象行為標(biāo)注的準(zhǔn)確性。