令開(kāi)啟攝像頭和麥克風(fēng)。
[0050] 服務(wù)端生成動(dòng)態(tài)提示碼，并將該動(dòng)態(tài)提示碼發(fā)送給客戶端。
[0051 ] 客戶端根據(jù)提示碼采集語(yǔ)音信號(hào)和視頻信號(hào)。
[0052] 客戶端將采集得到的語(yǔ)音和視頻信號(hào)發(fā)送至服務(wù)器，根據(jù)服務(wù)端的反饋信號(hào)，做 出相應(yīng)的響應(yīng)。
[0053] 離線狀態(tài)可以再客戶端單獨(dú)使用，也可以在服務(wù)器端單獨(dú)使用，對(duì)此本申請(qǐng)不做 具體限制。
[0054]參照?qǐng)D1，示出了本申請(qǐng)一種基于聲紋識(shí)別、人臉識(shí)別以及活體檢測(cè)的身份認(rèn)證方 法，該方法包括：
[0055] 步驟101 :獲取使用者的語(yǔ)音信號(hào)和視頻信號(hào)。
[0056] 服務(wù)端接收語(yǔ)音信號(hào)和視頻信號(hào)，調(diào)用語(yǔ)音識(shí)別模塊對(duì)語(yǔ)音信號(hào)進(jìn)行識(shí)別，獲取 語(yǔ)音信號(hào)對(duì)應(yīng)的語(yǔ)言信息。
[0057] 步驟102 :對(duì)所述語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行活體檢測(cè)，獲得活體檢測(cè)結(jié)果。
[0058] 步驟103:若所述活體檢測(cè)結(jié)果大于第一設(shè)定閾值，則執(zhí)行步驟104,若所述活體 檢測(cè)結(jié)果小于等于第一設(shè)定閾值，則執(zhí)行步驟105。
[0059] 若活體檢測(cè)結(jié)果大于第一設(shè)定閾值，則認(rèn)為使用者的活體存在；反之，則認(rèn)證失 敗。
[0060] 服務(wù)端將檢測(cè)結(jié)果反饋到用戶端；若檢測(cè)結(jié)果未通過(guò)，則服務(wù)端結(jié)束認(rèn)證，并向客 戶端反饋認(rèn)證失敗信號(hào)，若檢測(cè)結(jié)果通過(guò)，服務(wù)端繼續(xù)進(jìn)行后續(xù)的聲紋識(shí)別和人臉識(shí)別。
[0061] 其中，第一設(shè)定閾值和第二設(shè)定閾值的設(shè)定可以由本領(lǐng)域技術(shù)人員采用任意適當(dāng) 方式進(jìn)行設(shè)定，如可以采用人工經(jīng)驗(yàn)設(shè)定閾值，或者針對(duì)歷史數(shù)據(jù)的差異值設(shè)定閾值，本申 請(qǐng)對(duì)此不作限制。
[0062] 步驟104 :對(duì)獲取使用者的語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行聲紋識(shí)別和人臉識(shí)別，若聲 紋識(shí)別和人臉識(shí)別全部通過(guò)，則身份認(rèn)證通過(guò)，否則身份認(rèn)證失敗。
[0063] 步驟105 :使用者的身份認(rèn)證失敗。
[0064] 本實(shí)施例，通過(guò)將獲取的語(yǔ)音信號(hào)和視頻信號(hào)先進(jìn)行活體檢測(cè)，當(dāng)活體檢測(cè)結(jié)果 小于等于第一設(shè)定閾值時(shí)，則身份認(rèn)證失敗，當(dāng)活體檢測(cè)結(jié)果大于第一設(shè)定閾值，則繼續(xù)對(duì) 獲取的語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行聲紋識(shí)別和人臉認(rèn)識(shí)，若聲紋識(shí)別和人臉識(shí)別全部通過(guò)， 則該使用者的身份認(rèn)證通過(guò)，否則認(rèn)證失敗，通過(guò)對(duì)獲取的語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行活體 檢測(cè)、聲紋識(shí)別和人臉識(shí)別，從而極大的阻止了非法用戶的闖入，通過(guò)對(duì)使用者的語(yǔ)音信號(hào) 和視頻信號(hào)進(jìn)行多重檢測(cè)，提高了身份認(rèn)證的準(zhǔn)確性、安全性和可靠性，從而解決了現(xiàn)有技 術(shù)單一生物特征識(shí)別技術(shù)不足的問(wèn)題。
[0065] 實(shí)施例二
[0066] 參照?qǐng)D2,示出了本申請(qǐng)一種基于聲紋識(shí)別和人臉識(shí)別的身份認(rèn)證方法，該方法包 括：
[0067] 步驟201 :使用采集器采集使用者的語(yǔ)音信號(hào)和視頻信號(hào)。
[0068] 步驟202 :對(duì)所述語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行聲紋識(shí)別和人臉識(shí)別。
[0069] 將采集到的語(yǔ)音信號(hào)和視頻信號(hào)分別傳入聲紋識(shí)別認(rèn)證模塊與人臉識(shí)別認(rèn)證模 塊，對(duì)語(yǔ)音信號(hào)進(jìn)行聲紋識(shí)別，對(duì)視頻信號(hào)進(jìn)行人臉識(shí)別。
[0070] 需要說(shuō)明的是可以對(duì)語(yǔ)音信號(hào)先進(jìn)行聲紋識(shí)別，然后對(duì)視頻信號(hào)進(jìn)行人臉識(shí)別， 也可以先對(duì)視頻信號(hào)進(jìn)行人臉識(shí)別，然后對(duì)語(yǔ)音信號(hào)先進(jìn)行聲紋識(shí)別，還可以同時(shí)對(duì)語(yǔ)音 信號(hào)進(jìn)行聲紋識(shí)別，對(duì)視頻信號(hào)進(jìn)行人臉識(shí)別，對(duì)此本申請(qǐng)不做具體限制。
[0071] 步驟203 :若聲紋識(shí)別和人臉識(shí)別全部通過(guò)，則執(zhí)行步驟204,若未通過(guò)則執(zhí)行步 驟205。
[0072] 步驟204 :身份認(rèn)證通過(guò)。
[0073] 步驟205 :身份認(rèn)證失敗。
[0074] 本申請(qǐng)將獲取的語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行聲紋識(shí)別和人臉認(rèn)識(shí)，若聲紋識(shí)別和人 臉識(shí)別全部通過(guò)，則該使用者的身份認(rèn)證通過(guò)，否則認(rèn)證失敗，通過(guò)對(duì)獲取的語(yǔ)音信號(hào)和視 頻信號(hào)進(jìn)行聲紋識(shí)別和人臉識(shí)別，從而極大的阻止了非法用戶的闖入，通過(guò)對(duì)使用者的語(yǔ) 音信號(hào)和視頻信號(hào)進(jìn)行多重檢測(cè)，從而解決了現(xiàn)有技術(shù)單一生物特征識(shí)別技術(shù)的不足，進(jìn) 而提高了身份認(rèn)證的準(zhǔn)確性、安全性和可靠性。
[0075] 實(shí)施例三
[0076] 參照?qǐng)D3,示出了本申請(qǐng)一種基于聲紋識(shí)別、人臉識(shí)別以及活體檢測(cè)的身份認(rèn)證方 法，該方法包括：
[0077] 步驟301 :使用采集器采集使用者的語(yǔ)音信號(hào)和視頻信號(hào)。
[0078] 采集器包括視頻圖像采集器和語(yǔ)音采集器，使用視頻圖像采集器獲取使用者視頻 信號(hào)，使用語(yǔ)音采集器獲取使用者的語(yǔ)音信號(hào)。
[0079] 參見(jiàn)圖4示出了采集器的結(jié)構(gòu)示意圖，
[0080] 使用者通過(guò)客戶端向服務(wù)端發(fā)送身份驗(yàn)證請(qǐng)求，服務(wù)器對(duì)身份驗(yàn)證請(qǐng)求進(jìn)行驗(yàn) 證，當(dāng)身份請(qǐng)求驗(yàn)證通過(guò)，服務(wù)端向客戶端反饋信息采集指令，客戶端開(kāi)始視頻圖像采集器 和語(yǔ)音采集器，實(shí)現(xiàn)視頻信號(hào)和語(yǔ)音信號(hào)的同步采集，其中，語(yǔ)音采集器包括麥克風(fēng)或手機(jī) 或電話，使用麥克風(fēng)或手機(jī)或電話采集語(yǔ)音信號(hào)，視頻圖像采集器采集使用者的人臉和嘴 唇。
[0081] 采集器主要包括：提示顯示屏和人臉顯示屏，使用提示顯示屏顯示服務(wù)器生成的 文本串以及服務(wù)器反饋的識(shí)別結(jié)果。
[0082] 人臉顯示屏，提供用戶交互功能，實(shí)時(shí)呈現(xiàn)用戶臉部位置，方便用戶實(shí)時(shí)調(diào)整使用 者臉部位置和動(dòng)作，根據(jù)具體情況采集器還可包括指示燈、啟動(dòng)鈕和文本提示顯示屏，其 中，文本提示顯示屏作為輔助設(shè)備，不局限于顯示屏，還可以包括語(yǔ)音提示等方式。
[0083] 采集器通過(guò)端口與對(duì)應(yīng)主控電路相連，在實(shí)際中，使用者點(diǎn)擊啟動(dòng)鈕，主控電路接 收信號(hào)并啟動(dòng)語(yǔ)音視頻采集器；待指示燈和文本提示顯示屏給出信息采集提示后，使用者 人臉顯示屏提示的文本內(nèi)容；在信息采集過(guò)程中，服務(wù)器會(huì)要求使用者整個(gè)人臉圖像能夠 實(shí)時(shí)呈現(xiàn)在人臉顯示屏中；若人臉顯示屏顯示的人臉不全時(shí)，則服務(wù)器會(huì)向使用者發(fā)出提 示信號(hào)，進(jìn)行調(diào)整，當(dāng)使用者點(diǎn)擊按鈕，完成視頻信號(hào)采集；
[0084] 采集器將采集得到的語(yǔ)音信號(hào)和視頻信號(hào)通過(guò)認(rèn)證接口進(jìn)行發(fā)送到服務(wù)器進(jìn)行 身份認(rèn)證，該認(rèn)證接口可以在本地完成身份認(rèn)證。
[0085] 步驟302 :對(duì)所述語(yǔ)音信號(hào)和視頻信號(hào)進(jìn)行活體檢測(cè)，獲得活體檢測(cè)結(jié)果。
[0086] 所述活體檢測(cè)包括語(yǔ)音識(shí)別和唇語(yǔ)識(shí)別。
[0087] 需要說(shuō)明的是可以對(duì)語(yǔ)音信號(hào)先進(jìn)行語(yǔ)音識(shí)別，然后對(duì)視頻信號(hào)進(jìn)行唇語(yǔ)臉識(shí) 另IJ，也可以先對(duì)視頻信號(hào)進(jìn)行唇語(yǔ)臉識(shí)別，然后對(duì)語(yǔ)音信號(hào)進(jìn)行語(yǔ)音識(shí)別，還可以同時(shí)對(duì)語(yǔ) 音信號(hào)進(jìn)行語(yǔ)音識(shí)別，對(duì)視頻信號(hào)進(jìn)行唇語(yǔ)識(shí)別，對(duì)此本申請(qǐng)不做具體限制。
[0088] 步驟302包括以下子步驟：
[0089] 步驟3021 :對(duì)所述語(yǔ)音信號(hào)進(jìn)行語(yǔ)音識(shí)別，獲得語(yǔ)音信號(hào)對(duì)應(yīng)的語(yǔ)言信息。
[0090] 使用預(yù)先訓(xùn)練的語(yǔ)音語(yǔ)言模塊對(duì)語(yǔ)音信號(hào)進(jìn)行識(shí)別獲得語(yǔ)音信號(hào)對(duì)應(yīng)的語(yǔ)言信 息，其中語(yǔ)言模型可以隱馬爾科夫HMM-GMM或者深度神經(jīng)網(wǎng)絡(luò)模型。
[0091]步驟3022 :對(duì)所述視頻信號(hào)進(jìn)行分幀處理，獲得分幀后的每幀圖像中的嘴唇位 置；
[0092] 步驟3023 :服務(wù)端對(duì)視頻信號(hào)進(jìn)行分幀，捕獲分幀后的每幀圖像中嘴唇位置，調(diào) 用唇語(yǔ)識(shí)別模塊，獲得分幀后的每幀圖像中的嘴唇位置。
[0093] 對(duì)捕獲分幀后的每幀圖像中嘴唇位置和語(yǔ)音信號(hào)進(jìn)行采樣，采樣精度可以為每 20ms取一幀圖像，并以10ms的窗長(zhǎng)移動(dòng)，保證語(yǔ)音信號(hào)和視頻信號(hào)的同步采樣；捕獲分幀 后的每幀圖像中嘴唇位置方法有很多，例如跟蹤每幀嘴唇位置之間設(shè)定關(guān)鍵點(diǎn)的位置變化 情況，通過(guò)計(jì)算設(shè)定關(guān)鍵點(diǎn)之間的差值變化，得到每幀嘴唇圖像中的嘴唇位置，本申請(qǐng)對(duì)此 不做限制。
[0094] 步驟3024 :對(duì)所述每幀圖像中的嘴唇位置進(jìn)行唇語(yǔ)識(shí)別，獲得每幀圖像的唇語(yǔ)對(duì) 應(yīng)的語(yǔ)言信息。