本發(fā)明涉及汽車安全駕駛監(jiān)測(cè)技術(shù)領(lǐng)域，具體而言，涉及一種疲勞駕駛監(jiān)測(cè)方法和裝置。

背景技術(shù)：

當(dāng)代社會(huì)，開車自駕游已是人們出行的一種普遍方式，但長(zhǎng)時(shí)間的開車會(huì)出現(xiàn)疲勞，導(dǎo)致精神無(wú)法集中，碰到危險(xiǎn)時(shí)無(wú)法第一時(shí)間做出反應(yīng)，有可能釀成嚴(yán)重的交通事故。如何采取應(yīng)對(duì)措施實(shí)時(shí)監(jiān)測(cè)駕駛?cè)笋{駛狀態(tài)、提醒駕車者安全駕駛是目前疲勞駕駛監(jiān)測(cè)方法急需解決的主要問(wèn)題。

現(xiàn)有的疲勞駕駛主要有基于生理信號(hào)的監(jiān)測(cè)方法、基于行車信息的監(jiān)測(cè)方法、基于面部信息的監(jiān)測(cè)方法。

基于生理信號(hào)的監(jiān)測(cè)需要采集駕駛員的腦電以及血壓生理信號(hào)，并依據(jù)生理信號(hào)的變化做出疲勞駕駛狀態(tài)的判斷，要求有高精度的監(jiān)測(cè)儀，因此開發(fā)成本很高，另外信號(hào)采集與分析很難達(dá)到實(shí)時(shí)性。

基于行車信息的監(jiān)測(cè)主要依據(jù)汽車當(dāng)前行駛狀態(tài)，包括車輛的左右搖晃幅度、偏離車道位置、行車?yán)锍膛c時(shí)間信息，受行車道路與行車環(huán)境外在因素影響很大，容易產(chǎn)生誤判與錯(cuò)判。

基于面部信息的監(jiān)測(cè)主要通過(guò)圖像處理技術(shù)，定位人臉區(qū)域，再根據(jù)當(dāng)前人臉區(qū)域的眼睛關(guān)鍵點(diǎn)位置進(jìn)行判斷，上一幀人臉圖像是下一幀人臉圖像判定的基礎(chǔ)，分類識(shí)別、預(yù)處理是常用的處理方法。但是，在人臉定位過(guò)程中，由于駕駛員坐姿的變化，如向左、向右一定角度的偏轉(zhuǎn)，低頭以及閉眼狀態(tài)的出現(xiàn)，會(huì)使臉部圖像的實(shí)時(shí)獲取、處理以及后期眼部特征信息的統(tǒng)計(jì)分析與判別出錯(cuò)，成為實(shí)時(shí)監(jiān)測(cè)系統(tǒng)的一個(gè)技術(shù)難題。

技術(shù)實(shí)現(xiàn)要素：

有鑒于此，本發(fā)明實(shí)施例的目的在于提供一種疲勞駕駛監(jiān)測(cè)方法與裝置，以解決上述問(wèn)題。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例根據(jù)一個(gè)方面，提供了一種疲勞駕駛監(jiān)測(cè)方法，采用的技術(shù)方案如下所述。

（1）首先基于增強(qiáng)現(xiàn)實(shí)技術(shù)構(gòu)建可與真實(shí)場(chǎng)景交互的虛擬場(chǎng)景，并利用3d實(shí)感攝像技術(shù)實(shí)時(shí)跟蹤定位人體面部特征部位，根據(jù)人體面部上下嘴唇特征點(diǎn)、上下眼皮特征點(diǎn)的位置深度變化信息來(lái)確定所述駕駛員是否為疲勞駕駛。

（2）在利用嘴部和眼部特征點(diǎn)的空間位置變化信息進(jìn)行打哈氣與眼部疲勞判定前，確定上下嘴唇特征點(diǎn)的初始距離，以及上下眼皮特征點(diǎn)的初始距離，具體方法包括。

計(jì)算初始時(shí)間內(nèi)各幀深度圖像的上下嘴唇特征點(diǎn)距離平均值，作為上下嘴唇特征點(diǎn)的初始距離。

計(jì)算初始時(shí)間內(nèi)各幀深度圖像的上下眼皮特征點(diǎn)距離平均值，作為上下眼皮特征點(diǎn)的初始距離。

（3）通過(guò)上下嘴唇特征點(diǎn)的空間距離變化來(lái)實(shí)時(shí)監(jiān)測(cè)嘴巴的張合度，當(dāng)嘴巴張開持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為打哈氣。

通過(guò)上下眼皮特征點(diǎn)的空間距離變化來(lái)實(shí)時(shí)監(jiān)測(cè)雙眼張合度，當(dāng)雙眼張開度小于初始距離限定比例，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為眼部疲勞。

（4）根據(jù)在限定時(shí)間內(nèi)監(jiān)測(cè)到的打哈氣或眼部疲勞次數(shù)，判斷所述駕駛員是否疲勞駕駛，若是疲勞駕駛，報(bào)警提示。

本發(fā)明實(shí)施例根據(jù)另一個(gè)方面，還提供了一種疲勞駕駛監(jiān)測(cè)裝置，包括如下模塊。

人臉深度圖像實(shí)時(shí)采集模塊，用于實(shí)時(shí)采集人臉的深度圖像，跟蹤定位人體面部上下嘴唇、上下眼皮特征點(diǎn)的空間位置。

人體面部上下嘴唇、上下眼皮特征點(diǎn)初始距離確定模塊，用于根據(jù)所述人臉深度圖像實(shí)時(shí)采集模塊初始時(shí)間內(nèi)采集的深度圖像，確定人體面部上下嘴唇、上下眼皮特征點(diǎn)的初始距離。

打哈氣與眼部疲勞判定模塊，用于根據(jù)所述人體面部上下嘴唇、上下眼皮特征點(diǎn)初始距離確定模塊所確定的初始距離，實(shí)時(shí)判斷當(dāng)前上下嘴唇特征點(diǎn)與上下眼皮特征點(diǎn)的空間距離是否超出閾值范圍，若上下嘴唇特征點(diǎn)空間距離大于初始距離，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為打哈氣，若上下眼皮特征點(diǎn)空間距離小于初始距離一定比例，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為眼部疲勞。

疲勞駕駛判斷模塊，用于根據(jù)所述打哈氣與眼部疲勞確定模塊所確定的打哈氣與眼部疲勞狀態(tài)，在限定時(shí)間內(nèi)監(jiān)測(cè)打哈氣或眼部疲勞的次數(shù)，若次數(shù)超過(guò)限定值則判定為疲勞駕駛。

疲勞駕駛報(bào)警模塊，用于根據(jù)所述疲勞駕駛判斷模塊所確定的疲勞駕駛狀態(tài)，聲音報(bào)警提示。

與現(xiàn)有技術(shù)相比，本發(fā)明實(shí)施例提供的疲勞駕駛監(jiān)測(cè)方法，通過(guò)構(gòu)建與真實(shí)場(chǎng)景一一映射、可交互的虛擬場(chǎng)景，實(shí)時(shí)跟蹤定位人體面部特征點(diǎn)的空間位置變化信息，依據(jù)眼部和嘴部的空間位置變化信息判定所述駕駛員的疲勞駕駛狀態(tài)；相比現(xiàn)有的基于二維圖像處理的人臉特征點(diǎn)跟蹤定位方法，加入了位置深度信息，以空間位置變化信息代替二維平面信息，更不易受到人臉姿態(tài)、角度的變化影響，同時(shí)避免了因圖像預(yù)處理及分類識(shí)別引起的監(jiān)測(cè)延時(shí)問(wèn)題。

進(jìn)一步地，本發(fā)明的技術(shù)方案中，基于更高準(zhǔn)確度、精度的嘴部和眼部特征點(diǎn)位置信息進(jìn)行所述駕駛過(guò)程中打哈氣與眼部疲勞的判定，當(dāng)嘴巴張開持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為打哈氣，當(dāng)雙眼張開度小于初始距離限定比例，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為眼部疲勞；相比現(xiàn)有的打哈氣及眼部疲勞監(jiān)測(cè)方法，本發(fā)明基于更高準(zhǔn)確度、精度地監(jiān)測(cè)嘴巴的張開度及持續(xù)時(shí)間、眼睛的閉合度及持續(xù)時(shí)間，從而更準(zhǔn)確地判定是否為疲勞駕駛，當(dāng)駕駛員出現(xiàn)所述打哈氣及眼部疲勞狀態(tài)時(shí)，報(bào)警提示。

進(jìn)一步，本發(fā)明實(shí)施例的根據(jù)嘴部和眼部特征點(diǎn)的空間初始距離進(jìn)行打哈氣及眼部疲勞狀態(tài)判定方法中，初始距離是監(jiān)測(cè)初始時(shí)間內(nèi)上下嘴唇、上下眼皮特征點(diǎn)距離的平均值，計(jì)算獲得的值是每次監(jiān)測(cè)時(shí)所述駕駛員行車的最佳狀態(tài)值；相比現(xiàn)有的監(jiān)測(cè)方法，以駕駛員每次行車前的最佳狀態(tài)作為疲勞駕駛的評(píng)判標(biāo)準(zhǔn)，可以更有效地提高駕駛安全性。

進(jìn)一步，本發(fā)明實(shí)施例的根據(jù)在監(jiān)測(cè)到第一次打哈氣或閉眼后的限定時(shí)間內(nèi)，監(jiān)測(cè)到的打哈氣或眼部疲勞次數(shù)進(jìn)行疲勞駕駛判斷的方法中，以限定時(shí)間內(nèi)監(jiān)測(cè)到的次數(shù)為判定條件，若在限定時(shí)間內(nèi)打哈氣的次數(shù)超過(guò)限定值或表現(xiàn)持續(xù)眼部疲勞狀態(tài)，聲音報(bào)警提示；此方法相比現(xiàn)有的疲勞駕駛狀態(tài)監(jiān)測(cè)方法可以更及時(shí)地監(jiān)測(cè)駕駛員的疲勞駕駛狀態(tài)且降低誤判的概率，整體提高疲勞駕駛監(jiān)測(cè)的準(zhǔn)確率與安全性。

為使本發(fā)明的上述目的、特征和優(yōu)點(diǎn)能更明顯易懂，下文特舉較佳實(shí)施例，并配合所附附圖，作詳細(xì)說(shuō)明如下。

附圖說(shuō)明

為了更清楚地說(shuō)明本發(fā)明實(shí)施例的技術(shù)方案，下面將對(duì)實(shí)施例中所需要使用的附圖作簡(jiǎn)單地介紹，應(yīng)當(dāng)理解，以下附圖僅示出了本發(fā)明的某些實(shí)施例，因此不應(yīng)被看作是對(duì)范圍的限定，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他相關(guān)的附圖。

圖1為本發(fā)明實(shí)施例提供的一種疲勞駕駛監(jiān)測(cè)方法流程示意圖。

圖2為本發(fā)明較佳實(shí)施例提供的一組疲勞駕駛監(jiān)測(cè)結(jié)果圖中的人臉特征點(diǎn)定位效果圖。

圖3為本發(fā)明較佳實(shí)施例提供的一組疲勞駕駛監(jiān)測(cè)結(jié)果圖中的嘴部與眼部特征點(diǎn)的初始距離計(jì)算效果圖。

圖4為本發(fā)明較佳實(shí)施例提供的一組疲勞駕駛監(jiān)測(cè)結(jié)果圖中首次表現(xiàn)疲勞狀態(tài)，臨時(shí)監(jiān)測(cè)計(jì)時(shí)開始的效果圖。

圖5為本發(fā)明較佳實(shí)施例提供的一組疲勞駕駛監(jiān)測(cè)結(jié)果圖中出現(xiàn)疲勞駕駛狀態(tài)，達(dá)到報(bào)警條件，報(bào)警提示效果圖。

圖6為本發(fā)明實(shí)施例提供的一種可以應(yīng)用并設(shè)置于微控制單元中的疲勞駕駛監(jiān)測(cè)裝置。

具體實(shí)施方式

為使本發(fā)明實(shí)施例的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚，下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例。因此，以下對(duì)在附圖中提供的本發(fā)明的實(shí)施例的詳細(xì)描述并非旨在限制要求保護(hù)的本發(fā)明的范圍，而是僅僅表示本發(fā)明的選定實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒(méi)有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。

如圖1所示，是本發(fā)明較佳實(shí)施例提供的一種疲勞駕駛監(jiān)測(cè)方法流程示意圖。請(qǐng)參閱圖1，本實(shí)施例描述的是疲勞駕駛監(jiān)測(cè)處理流程，所述方法包括如下步驟。

步驟s101，創(chuàng)建虛擬場(chǎng)景，導(dǎo)入3d實(shí)感攝像設(shè)備。

作為一種實(shí)施方式，3d實(shí)感攝像設(shè)備進(jìn)行疲勞駕駛監(jiān)測(cè)前，需要先構(gòu)建與真實(shí)場(chǎng)景一一映射的虛擬場(chǎng)景，在此場(chǎng)景下利用3d實(shí)感攝像設(shè)備實(shí)時(shí)跟蹤定位人體面部特征點(diǎn)的深度位置信息。

本發(fā)明實(shí)施例的虛擬場(chǎng)景基于unity3d開發(fā)平臺(tái)創(chuàng)建，在unity平臺(tái)下通過(guò)新建3d工程（project）實(shí)現(xiàn)虛擬場(chǎng)景創(chuàng)建。

創(chuàng)建虛擬場(chǎng)景后導(dǎo)入3d實(shí)感攝像信息，實(shí)現(xiàn)真實(shí)場(chǎng)景與虛擬場(chǎng)景的一一映射。

步驟s102，定位人臉，捕捉人臉面部特征點(diǎn)。

作為一種實(shí)施方式，利用realsensesr300進(jìn)行人臉定位，捕捉人臉面部特征點(diǎn)時(shí)需要在虛擬場(chǎng)景中創(chuàng)建與真實(shí)場(chǎng)景中相對(duì)應(yīng)的虛擬對(duì)象，通過(guò)為虛擬對(duì)象添加目標(biāo)跟隨控件實(shí)現(xiàn)人臉特征點(diǎn)的捕捉。

在本發(fā)明所述實(shí)施例中捕捉的人臉面部特征點(diǎn)主要有上下嘴唇、左右眼上下眼皮。

對(duì)在unity平臺(tái)下為虛擬對(duì)象添加目標(biāo)跟隨控件實(shí)現(xiàn)人臉特征點(diǎn)的捕捉方法為本領(lǐng)域技術(shù)人員所熟知，此處不再贅述。

步驟s103，計(jì)算上下嘴唇、左右眼上下眼皮特征點(diǎn)初始空間距離，啟動(dòng)總計(jì)時(shí)器。

作為一種實(shí)施方式，在進(jìn)行疲勞駕駛監(jiān)測(cè)前，需要先確定所述駕駛員初始駕駛時(shí)的正常駕駛狀態(tài)，即上下嘴唇、左右眼上下眼皮特征點(diǎn)的初始空間距離。后續(xù)的疲勞駕駛狀態(tài)判定中將以上下嘴唇、左右眼上下眼皮特征點(diǎn)的初始空間距離為判定基準(zhǔn)。

計(jì)算上下嘴唇、左右眼上下眼皮特征點(diǎn)初始空間距離的計(jì)算方法包括如下。

計(jì)算初始時(shí)間內(nèi)各幀深度圖像的上下嘴唇特征點(diǎn)距離平均值，作為上下嘴唇特征點(diǎn)的初始距離。

計(jì)算初始時(shí)間內(nèi)各幀深度圖像的上下眼皮特征點(diǎn)距離平均值，作為上下眼皮特征點(diǎn)的初始距離。

空間任意兩特征點(diǎn)的距離計(jì)算公式如下。

其中a,b代表兩空間特征點(diǎn)，它們的空間坐標(biāo)分別為(x1,y1,y1),(x2,y2,y2)。

啟動(dòng)總計(jì)時(shí)器是為了統(tǒng)計(jì)總駕駛時(shí)間，在后續(xù)的持續(xù)監(jiān)測(cè)中若有總駕駛時(shí)間超過(guò)4小時(shí)情況出現(xiàn)，系統(tǒng)會(huì)報(bào)警提示。

步驟s104，實(shí)時(shí)監(jiān)測(cè)。

作為一種實(shí)施方式，實(shí)時(shí)監(jiān)測(cè)是系統(tǒng)實(shí)時(shí)監(jiān)測(cè)上下嘴唇、左右眼上下眼皮特征點(diǎn)的空間距離變化。

通過(guò)上下嘴唇特征點(diǎn)的空間距離變化來(lái)實(shí)時(shí)監(jiān)測(cè)嘴巴的張合度，當(dāng)嘴巴張開持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為打哈氣。

通過(guò)上下眼皮特征點(diǎn)的空間距離變化來(lái)實(shí)時(shí)監(jiān)測(cè)雙眼張合度，當(dāng)雙眼張開度小于初始距離限定比例，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為眼部疲勞。

步驟s105，判斷當(dāng)前監(jiān)測(cè)時(shí)刻是否出現(xiàn)打哈氣或眼部疲勞。

作為一種實(shí)施方式，實(shí)時(shí)監(jiān)測(cè)過(guò)程中，判斷當(dāng)前監(jiān)測(cè)時(shí)刻是否出現(xiàn)打哈氣或眼部疲勞。

若監(jiān)測(cè)到打哈氣或眼部疲勞，進(jìn)入步驟s107；若沒(méi)有監(jiān)測(cè)到，進(jìn)入步驟s106。

步驟s106，持續(xù)監(jiān)測(cè)。

作為一種實(shí)施方式，持續(xù)監(jiān)測(cè)是系統(tǒng)持續(xù)按上述步驟s104方法進(jìn)行上下嘴唇、左右眼上下眼皮特征點(diǎn)的空間距離變化監(jiān)測(cè)。

步驟s107，疲勞駕駛初始提示，啟動(dòng)臨時(shí)監(jiān)測(cè)計(jì)時(shí)器。

作為一種實(shí)施方式，實(shí)時(shí)監(jiān)測(cè)過(guò)程中，若在步驟s105中監(jiān)測(cè)到打哈氣或眼部疲勞，此時(shí)會(huì)對(duì)疲勞駕駛進(jìn)行初始提示，同時(shí)啟動(dòng)臨時(shí)監(jiān)測(cè)計(jì)時(shí)器，判定在后續(xù)的限定時(shí)間內(nèi)是否出現(xiàn)多次疲勞駕駛狀態(tài)。

步驟s108，打哈氣或眼部疲勞持續(xù)監(jiān)測(cè)。

作為一種實(shí)施方式，在判定初次打哈氣或眼部疲勞后，后續(xù)監(jiān)測(cè)過(guò)程中會(huì)持續(xù)監(jiān)測(cè)所述駕駛員嘴部和眼部特征點(diǎn)變化，判定在限定時(shí)間內(nèi)是否再次出現(xiàn)打哈氣或眼部疲勞。

步驟s109，限定時(shí)間內(nèi)再次出現(xiàn)打哈氣或眼部疲勞。

作為一種實(shí)施方式，實(shí)時(shí)監(jiān)測(cè)過(guò)程中，識(shí)別到初次打哈氣或眼部疲勞后，在后續(xù)監(jiān)測(cè)中判定限定時(shí)間內(nèi)是否再次出現(xiàn)打哈氣或眼部疲勞。

若在初次打哈氣或眼部疲勞后，限定時(shí)間內(nèi)再次出現(xiàn)打哈氣或眼部疲勞的次數(shù)超過(guò)預(yù)設(shè)值，將判定為疲勞駕駛，聲音報(bào)警提示。

若在初次打哈氣或眼部疲勞后，限定時(shí)間內(nèi)沒(méi)有再次出現(xiàn)打哈氣或眼部疲勞，系統(tǒng)返回步驟s106。

步驟s110，判定總計(jì)時(shí)器時(shí)間是否超過(guò)4小時(shí)。

作為一種實(shí)施方式，為了統(tǒng)計(jì)總駕駛時(shí)間，整個(gè)監(jiān)測(cè)過(guò)程中會(huì)啟動(dòng)總計(jì)時(shí)器。

監(jiān)測(cè)過(guò)程中，若沒(méi)有出現(xiàn)疲勞駕駛狀態(tài)，但是總駕駛時(shí)間超過(guò)4小時(shí)，系統(tǒng)同樣會(huì)聲音報(bào)警提示，進(jìn)入步驟s111。

如果沒(méi)有出現(xiàn)疲勞駕駛狀態(tài)，總駕駛時(shí)間也沒(méi)有超過(guò)4小時(shí)，系統(tǒng)返回步驟s106持續(xù)監(jiān)測(cè)。

如圖2-5所示，是本發(fā)明較佳實(shí)施例提供的一組電腦前坐姿監(jiān)測(cè)結(jié)果圖。

其中，圖2為系統(tǒng)的人臉特征點(diǎn)定位效果圖。

圖3為監(jiān)測(cè)過(guò)程中初始監(jiān)測(cè)時(shí)嘴部與眼部特征點(diǎn)的初始距離計(jì)算效果圖。

圖4為監(jiān)測(cè)過(guò)程中首次表現(xiàn)疲勞狀態(tài)，臨時(shí)監(jiān)測(cè)計(jì)時(shí)開始的效果圖。

圖5為在限定監(jiān)測(cè)時(shí)間內(nèi)，再次出現(xiàn)疲勞狀態(tài)，達(dá)到報(bào)警條件，報(bào)警提示效果圖。

圖6為本發(fā)明實(shí)施例提供的一種可以應(yīng)用并設(shè)置于微控制單元中的疲勞駕駛監(jiān)測(cè)裝置。具體可以包括人臉深度圖像實(shí)時(shí)采集模塊301、上下嘴唇、上下眼皮特征點(diǎn)初始距離確定模塊302、打哈氣與眼部疲勞判定模塊303、疲勞駕駛判斷模塊304、疲勞駕駛報(bào)警模塊305。

其中，人臉深度圖像實(shí)時(shí)采集模塊301，用于實(shí)時(shí)采集人臉的深度圖像，跟蹤定位人體面部上下嘴唇、上下眼皮特征點(diǎn)的空間位置。

人體面部上下嘴唇、上下眼皮特征點(diǎn)初始距離確定模塊302，用于根據(jù)所述人臉深度圖像實(shí)時(shí)采集模塊初始時(shí)間內(nèi)采集的深度圖像，確定人體面部上下嘴唇、上下眼皮特征點(diǎn)的初始距離。

打哈氣與眼部疲勞判定模塊303，用于根據(jù)所述人體面部上下嘴唇、上下眼皮特征點(diǎn)初始距離確定模塊所確定的初始距離，實(shí)時(shí)判斷當(dāng)前上下嘴唇特征點(diǎn)與上下眼皮特征點(diǎn)的空間距離是否超出閾值范圍，若上下嘴唇特征點(diǎn)空間距離大于初始距離，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為打哈氣，若上下眼皮特征點(diǎn)空間距離小于初始距離一定比例，且持續(xù)時(shí)間大于預(yù)設(shè)閾值，判定為眼部疲勞。

疲勞駕駛判斷模塊304，用于根據(jù)所述打哈氣與眼部疲勞確定模塊所確定的打哈氣與眼部疲勞狀態(tài)，在限定時(shí)間內(nèi)監(jiān)測(cè)打哈氣或眼部疲勞的次數(shù)，若次數(shù)超過(guò)限定值則判定為疲勞駕駛。

疲勞駕駛報(bào)警模塊305，用于根據(jù)所述疲勞駕駛判斷模塊所確定的疲勞駕駛狀態(tài)，聲音報(bào)警提示。

上述人臉深度圖像實(shí)時(shí)采集模塊301、人體面部上下嘴唇、上下眼皮特征點(diǎn)初始距離確定模塊302、打哈氣與眼部疲勞判定模塊303、疲勞駕駛判斷模塊304、疲勞駕駛報(bào)警模塊305的具體實(shí)現(xiàn)方法,可以參考上述如圖1和圖所示的方法流程步驟的具體內(nèi)容,此處不再贅述。

與現(xiàn)有技術(shù)相比，本發(fā)明實(shí)施例提供的一種疲勞駕駛監(jiān)測(cè)方法與裝置，基于增強(qiáng)現(xiàn)實(shí)技術(shù)構(gòu)建與真實(shí)場(chǎng)景一一映射的虛擬場(chǎng)景，在此場(chǎng)景下利用3d實(shí)感攝像技術(shù)實(shí)時(shí)跟蹤定位人體眼部與嘴部特征點(diǎn)的深度位置信息，依據(jù)眼部和嘴部的空間位置變化信息判定所述駕駛員的疲勞駕駛狀態(tài)；相比現(xiàn)有的基于二維圖像處理的人臉特征點(diǎn)跟蹤定位方法，加入了位置深度信息，以空間位置變化信息代替二維平面信息，更不易受到人臉姿態(tài)、角度的變化影響，同時(shí)避免了因圖像預(yù)處理及分類識(shí)別引起的監(jiān)測(cè)延時(shí)問(wèn)題。

而且，本發(fā)明實(shí)施例的根據(jù)嘴部和眼部特征點(diǎn)的空間初始距離進(jìn)行打哈氣及眼部疲勞狀態(tài)判定方法中，計(jì)算獲得的初始值是每次監(jiān)測(cè)時(shí)所述駕駛員行車的最佳狀態(tài)值；相比現(xiàn)有的監(jiān)測(cè)方法，以駕駛員每次行車前的最佳狀態(tài)作為疲勞駕駛的評(píng)判標(biāo)準(zhǔn)，可以更有效地提高駕駛安全性。

進(jìn)一步，本發(fā)明實(shí)施例的根據(jù)嘴部和眼部特征點(diǎn)的空間初始距離進(jìn)行打哈氣及眼部疲勞狀態(tài)判定；在監(jiān)測(cè)到第一次打哈氣或閉眼后，在后續(xù)限定時(shí)間內(nèi)，若打哈氣的次數(shù)超過(guò)限定值或表現(xiàn)持續(xù)眼部疲勞狀態(tài)，聲音報(bào)警提示，此方法相比現(xiàn)有的疲勞駕駛狀態(tài)監(jiān)測(cè)方法可以更及時(shí)地監(jiān)測(cè)駕駛員的疲勞駕駛狀態(tài)且降低誤判的概率，整體提高疲勞駕駛監(jiān)測(cè)的準(zhǔn)確率與安全性。

在本申請(qǐng)所提供的幾個(gè)實(shí)施例中，應(yīng)該理解到，所揭露的方法，也可以通過(guò)其它的方式實(shí)現(xiàn)。以上所描述的裝置實(shí)施例僅僅是示意性的，例如，附圖中的流程圖和框圖顯示了根據(jù)本發(fā)明的多個(gè)實(shí)施例的裝置、方法和計(jì)算機(jī)程序產(chǎn)品的可能實(shí)現(xiàn)的體系架構(gòu)、功能和操作。在這點(diǎn)上，流程圖或框圖中的每個(gè)方框可以代表一個(gè)模塊、程序段或代碼的一部分，所述模塊、程序段或代碼的一部分包含一個(gè)或多個(gè)用于實(shí)現(xiàn)規(guī)定的邏輯功能的可執(zhí)行指令。也應(yīng)當(dāng)注意，在有些作為替換的實(shí)現(xiàn)方式中，方框中所標(biāo)注的功能也可以以不同于附圖中所標(biāo)注的順序發(fā)生。例如，兩個(gè)連續(xù)的方框?qū)嶋H上可以基本并行地執(zhí)行，它們有時(shí)也可以按相反的順序執(zhí)行，這依所涉及的功能而定。也要注意的是，框圖和/或流程圖中的每個(gè)方框、以及框圖和/或流程圖中的方框的組合，可以用執(zhí)行規(guī)定的功能或動(dòng)作的專用的基于硬件的系統(tǒng)來(lái)實(shí)現(xiàn)，或者可以用專用硬件與計(jì)算機(jī)指令的組合來(lái)實(shí)現(xiàn)。

需要說(shuō)明的是，在本文中，術(shù)語(yǔ)“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含，從而使得包括一系列要素的過(guò)程、方法、物品或者設(shè)備不僅包括那些要素，而且還包括沒(méi)有明確列出的其他要素，或者是還包括為這種過(guò)程、方法、物品或者設(shè)備所固有的要素。在沒(méi)有更多限制的情況下，由語(yǔ)句“包括一個(gè)……”限定的要素，并不排除在包括所述要素的過(guò)程、方法、物品或者設(shè)備中還存在另外的相同要素。

以上所述，僅為本發(fā)明的具體實(shí)施方式，但本發(fā)明的保護(hù)范圍并不局限于此，任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi)，可輕易想到變化或替換，都應(yīng)涵蓋在本發(fā)明的保護(hù)范圍之內(nèi)。因此，本發(fā)明的保護(hù)范圍應(yīng)以所述權(quán)利要求的保護(hù)范圍為準(zhǔn)。