本申請(qǐng)涉及視頻處理，具體而言，涉及一種識(shí)別情緒狀態(tài)的方法、裝置、存儲(chǔ)介質(zhì)及電子設(shè)備。

背景技術(shù)：

1、隨著網(wǎng)約車服務(wù)的大范圍普及，乘客的乘坐體驗(yàn)逐漸成為服務(wù)質(zhì)量的重要衡量標(biāo)準(zhǔn)。為了提升乘客的乘坐體驗(yàn)，需要通過對(duì)乘客情緒狀態(tài)進(jìn)行判斷以提供個(gè)性化服務(wù)。

2、目前，在對(duì)乘客的情緒狀態(tài)進(jìn)行識(shí)別時(shí)，通常依賴于乘客的面部特征。通過對(duì)乘客進(jìn)行面部特征分析判定乘客的情緒狀態(tài)。但是，面部特征屬于乘客的隱私，通過采集面部特征進(jìn)行情緒識(shí)別無法保障乘客的隱私安全性。

3、因此，如何提供一種既準(zhǔn)確又安全的識(shí)別情緒狀態(tài)的方法的技術(shù)方案成為亟需解決的技術(shù)問題。

技術(shù)實(shí)現(xiàn)思路

1、本申請(qǐng)的一些實(shí)施例的目的在于提供一種識(shí)別情緒狀態(tài)的方法、裝置、存儲(chǔ)介質(zhì)及電子設(shè)備，通過本申請(qǐng)的實(shí)施例的技術(shù)方案可以避免使用面部識(shí)別技術(shù)，實(shí)現(xiàn)對(duì)乘客情緒狀態(tài)的準(zhǔn)確識(shí)別，隱私安全性較高。

2、第一方面，本申請(qǐng)的一些實(shí)施例提供了一種識(shí)別情緒狀態(tài)的方法，包括：在乘客系安全帶過程中，對(duì)實(shí)時(shí)獲取的系安全帶的關(guān)鍵視頻幀中的關(guān)鍵點(diǎn)進(jìn)行檢測，獲取系安全帶的瞬時(shí)力度，其中，所述關(guān)鍵點(diǎn)包括：所述乘客的手腕關(guān)鍵點(diǎn)和手臂關(guān)鍵點(diǎn)；獲取所述乘客在系安全帶過程中的平均速度和總時(shí)間；對(duì)所述瞬時(shí)力度、所述平均速度和所述總時(shí)間進(jìn)行分析，識(shí)別所述乘客的情緒狀態(tài)。

3、本申請(qǐng)的一些實(shí)施例通過在乘客系安全帶的過程中對(duì)其系安全帶的操作進(jìn)行視頻采集得到關(guān)鍵視頻幀，之后對(duì)關(guān)鍵視頻幀中的關(guān)鍵點(diǎn)進(jìn)行檢測得到系安全帶的瞬時(shí)力度，結(jié)合系安全帶的平均速度和總時(shí)間綜合分析識(shí)別乘客的情緒狀態(tài)。本申請(qǐng)的一些實(shí)施例避免了使用面部識(shí)別技術(shù)，實(shí)現(xiàn)了對(duì)乘客情緒狀態(tài)的準(zhǔn)確識(shí)別，隱私安全性較高，提升乘客的乘車體驗(yàn)。

4、在一些實(shí)施例，所述對(duì)實(shí)時(shí)獲取的系安全帶的關(guān)鍵視頻幀中的關(guān)鍵點(diǎn)進(jìn)行檢測，獲取系安全帶的瞬時(shí)力度，包括：識(shí)別所述關(guān)鍵視頻幀中的所述手腕關(guān)鍵點(diǎn)和所述手臂關(guān)鍵點(diǎn)；獲取所述關(guān)鍵視頻幀中所述手腕關(guān)鍵點(diǎn)的最大加速度；對(duì)所述手臂關(guān)鍵點(diǎn)的手臂質(zhì)量和所述最大加速度進(jìn)行計(jì)算，得到所述瞬時(shí)力度。

5、本申請(qǐng)的一些實(shí)施例通過對(duì)關(guān)鍵視頻幀中的手腕關(guān)鍵點(diǎn)和手臂關(guān)鍵點(diǎn)識(shí)別和計(jì)算，得到瞬時(shí)力度，為后續(xù)對(duì)情緒識(shí)別提供有效的數(shù)據(jù)支持。

6、在一些實(shí)施例，所述獲取所述關(guān)鍵視頻幀中所述手腕關(guān)鍵點(diǎn)的最大加速度，包括：獲取所述手臂關(guān)鍵點(diǎn)在所述關(guān)鍵視頻幀中每一幀中的位移和手腕速度；對(duì)所述每一幀中的位移和手腕速度進(jìn)行計(jì)算，得到所述每一幀的手腕加速度；從所述每一幀的手腕加速度中查找出所述最大加速度。

7、本申請(qǐng)的一些實(shí)施例通過對(duì)關(guān)鍵視頻幀中每一幀的手腕加速度進(jìn)行計(jì)算，得出最大加速度，為后續(xù)瞬時(shí)力度的準(zhǔn)確計(jì)算提供有效的數(shù)據(jù)。

8、在一些實(shí)施例，所述手臂質(zhì)量是通過如下方法獲取的：基于所述關(guān)鍵視頻幀中所述手臂關(guān)鍵點(diǎn)的手臂長度估算手臂體積；利用所述手臂體積和人體肌肉密度，確定所述手臂質(zhì)量。

9、本申請(qǐng)的一些實(shí)施例通過手臂長度估算手臂體積進(jìn)而得到手臂質(zhì)量，為后續(xù)瞬時(shí)力度的準(zhǔn)確計(jì)算提供有效的數(shù)據(jù)。

10、在一些實(shí)施例，所述對(duì)所述瞬時(shí)力度、所述平均速度和所述總時(shí)間進(jìn)行分析，識(shí)別所述乘客的情緒狀態(tài)，包括：分別將所述瞬時(shí)力度和力度閾值、所述平均速度和速度閾值以及所述總時(shí)間和時(shí)間閾值進(jìn)行對(duì)比，確定所述情緒狀態(tài)。

11、本申請(qǐng)的一些實(shí)施例通過將瞬時(shí)力度、平均速度和總時(shí)間分別與閾值對(duì)比確定情緒狀態(tài)，可以實(shí)現(xiàn)對(duì)乘客情緒狀態(tài)的精準(zhǔn)識(shí)別。

12、在一些實(shí)施例，所述分別將所述瞬時(shí)力度和力度閾值、所述平均速度和速度閾值以及所述總時(shí)間和時(shí)間閾值進(jìn)行對(duì)比，確定所述情緒狀態(tài)，包括：當(dāng)所述瞬時(shí)力度大于第一力度閾值，所述平均速度大于第一速度閾值且所述總時(shí)間小于第一時(shí)間閾值時(shí)，所述情緒狀態(tài)為憤怒狀態(tài)；當(dāng)所述瞬時(shí)力度大于第二力度閾值且不大于所述第一力度閾值，所述平均速度大于第二速度閾值且不大于所述第一速度閾值，且所述總時(shí)間小于所述第一時(shí)間閾值時(shí)，所述情緒狀態(tài)為焦慮狀態(tài)；當(dāng)所述瞬時(shí)力度大于第三力度閾值且不大于所述第二力度閾值，所述平均速度大于第三速度閾值且不大于所述第二速度閾值，且所述總時(shí)間大于第二時(shí)間閾值時(shí)，所述情緒狀態(tài)為困惑狀態(tài)；當(dāng)所述瞬時(shí)力度不大于第三力度閾值，所述平均速度不大于第三速度閾值且所述總時(shí)間大于第二時(shí)間閾值時(shí)，所述情緒狀態(tài)為放松狀態(tài)。

13、本申請(qǐng)的一些實(shí)施例通過將瞬時(shí)力度、平均速度和總時(shí)間分別與不同的閾值進(jìn)行對(duì)比，可以準(zhǔn)確識(shí)別出乘客屬于哪種情緒。

14、在一些實(shí)施例，在所述識(shí)別所述乘客的情緒狀態(tài)之后，所述方法還包括：生成與所述情緒狀態(tài)對(duì)應(yīng)的個(gè)性化服務(wù)建議，其中，所述個(gè)性化服務(wù)建議用于調(diào)整駕駛模式和車內(nèi)環(huán)境。

15、本申請(qǐng)的一些實(shí)施例通過生成個(gè)性化服務(wù)建議，可以提升服務(wù)質(zhì)量，提升乘客的乘車體驗(yàn)。

16、第二方面，本申請(qǐng)的一些實(shí)施例提供了一種識(shí)別情緒狀態(tài)的裝置，包括：檢測模塊，用于在乘客系安全帶過程中，對(duì)實(shí)時(shí)獲取的系安全帶的關(guān)鍵視頻幀中的關(guān)鍵點(diǎn)進(jìn)行檢測，獲取系安全帶的瞬時(shí)力度，其中，所述關(guān)鍵點(diǎn)包括：所述乘客的手腕關(guān)鍵點(diǎn)和手臂關(guān)鍵點(diǎn)；獲取模塊，用于獲取所述乘客在系安全帶過程中的平均速度和總時(shí)間；識(shí)別模塊，用于對(duì)所述瞬時(shí)力度、所述平均速度和所述總時(shí)間進(jìn)行分析，識(shí)別所述乘客的情緒狀態(tài)。

17、在一些實(shí)施例，所述檢測模塊，用于：識(shí)別所述關(guān)鍵視頻幀中的所述手腕關(guān)鍵點(diǎn)和所述手臂關(guān)鍵點(diǎn)；獲取所述關(guān)鍵視頻幀中所述手腕關(guān)鍵點(diǎn)的最大加速度；對(duì)所述手臂關(guān)鍵點(diǎn)的手臂質(zhì)量和所述最大加速度進(jìn)行計(jì)算，得到所述瞬時(shí)力度。

18、第三方面，本申請(qǐng)的一些實(shí)施例提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，所述程序被處理器執(zhí)行時(shí)可實(shí)現(xiàn)如第一方面任一實(shí)施例所述的方法。

19、第四方面，本申請(qǐng)的一些實(shí)施例提供一種電子設(shè)備，包括存儲(chǔ)器、處理器以及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，其中，所述處理器執(zhí)行所述程序時(shí)可實(shí)現(xiàn)如第一方面任一實(shí)施例所述的方法。

20、第五方面，本申請(qǐng)的一些實(shí)施例提供一種計(jì)算機(jī)程序產(chǎn)品，所述的計(jì)算機(jī)程序產(chǎn)品包括計(jì)算機(jī)程序，其中，所述的計(jì)算機(jī)程序被處理器執(zhí)行時(shí)可實(shí)現(xiàn)如第一方面任一實(shí)施例所述的方法。

技術(shù)特征：

1.一種識(shí)別情緒狀態(tài)的方法，其特征在于，包括：

2.如權(quán)利要求1所述的方法，其特征在于，所述對(duì)實(shí)時(shí)獲取的系安全帶的關(guān)鍵視頻幀中的關(guān)鍵點(diǎn)進(jìn)行檢測，獲取系安全帶的瞬時(shí)力度，包括：

3.如權(quán)利要求2所述的方法，其特征在于，所述獲取所述關(guān)鍵視頻幀中所述手腕關(guān)鍵點(diǎn)的最大加速度，包括：

4.如權(quán)利要求2或3所述的方法，其特征在于，所述手臂質(zhì)量是通過如下方法獲取的：

5.如權(quán)利要求1-3中任一項(xiàng)所述的方法，其特征在于，所述對(duì)所述瞬時(shí)力度、所述平均速度和所述總時(shí)間進(jìn)行分析，識(shí)別所述乘客的情緒狀態(tài)，包括：

6.如權(quán)利要求5所述的方法，其特征在于，所述分別將所述瞬時(shí)力度和力度閾值、所述平均速度和速度閾值以及所述總時(shí)間和時(shí)間閾值進(jìn)行對(duì)比，確定所述情緒狀態(tài)，包括：

7.如權(quán)利要求1-3中任一項(xiàng)所述的方法，其特征在于，在所述識(shí)別所述乘客的情緒狀態(tài)之后，所述方法還包括：

8.一種識(shí)別情緒狀態(tài)的裝置，其特征在于，包括：

9.如權(quán)利要求8所述的裝置，其特征在于，所述檢測模塊，用于：

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)有計(jì)算機(jī)程序，其中，所述計(jì)算機(jī)程序被處理器運(yùn)行時(shí)執(zhí)行如權(quán)利要求1-7中任意一項(xiàng)權(quán)利要求所述的方法。

11.一種電子設(shè)備，其特征在于，包括存儲(chǔ)器、處理器以及存儲(chǔ)在所述存儲(chǔ)器上并在所述處理器上運(yùn)行的計(jì)算機(jī)程序，其中，所述計(jì)算機(jī)程序被所述處理器運(yùn)行時(shí)執(zhí)行如權(quán)利要求1-7中任意一項(xiàng)權(quán)利要求所述的方法。

12.一種計(jì)算機(jī)程序產(chǎn)品，其特征在于，所述的計(jì)算機(jī)程序產(chǎn)品包括計(jì)算機(jī)程序，其中，所述的計(jì)算機(jī)程序被處理器運(yùn)行時(shí)執(zhí)行如權(quán)利要求1-7中任意一項(xiàng)權(quán)利要求所述的方法。

技術(shù)總結(jié)
本申請(qǐng)涉及視頻處理技術(shù)領(lǐng)域，具體提供了一種識(shí)別情緒狀態(tài)的方法、裝置、存儲(chǔ)介質(zhì)及電子設(shè)備，該方法可以包括：在乘客系安全帶過程中，對(duì)實(shí)時(shí)獲取的系安全帶的關(guān)鍵視頻幀中的關(guān)鍵點(diǎn)進(jìn)行檢測，獲取系安全帶的瞬時(shí)力度，其中，所述關(guān)鍵點(diǎn)包括：所述乘客的手腕關(guān)鍵點(diǎn)和手臂關(guān)鍵點(diǎn)；獲取所述乘客在系安全帶過程中的平均速度和總時(shí)間；對(duì)所述瞬時(shí)力度、所述平均速度和所述總時(shí)間進(jìn)行分析，識(shí)別所述乘客的情緒狀態(tài)。本申請(qǐng)的一些實(shí)施例可以實(shí)現(xiàn)對(duì)乘客情緒的準(zhǔn)確識(shí)別。

技術(shù)研發(fā)人員：高長勝,趙興科,袁魯峰,付振,王明月,何金鑫,孫建蕾,吳紅心,韓鵬,呂歡歡
受保護(hù)的技術(shù)使用者：中國第一汽車股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/19