本發(fā)明涉及人機(jī)交互技術(shù)領(lǐng)域,尤其是涉及一種基于瞳孔跟蹤技術(shù)的終端及其遙控的方法。
背景技術(shù):目前,對(duì)電視的遙控可以分為兩類,一類是基于設(shè)備的,如遙控/手機(jī)/點(diǎn)讀筆等;另一類是基于用戶身體和行為本身的,即不需要借助外部設(shè)備,如手勢(shì)/語(yǔ)音/意念等?;谠O(shè)備的遙控涉及與設(shè)備直接的牽涉,沒(méi)有設(shè)備就無(wú)法進(jìn)行任何遙控,具有強(qiáng)制性的前提條件,這樣的模式已越來(lái)越不太適應(yīng)現(xiàn)代的智能家具生活中;基于用戶本身的遙控是現(xiàn)在的研究熱點(diǎn),但各種方法各有利弊,其中基于手勢(shì)的遙控,用戶一直抬手容易疲勞,語(yǔ)音操作容易受到環(huán)境干擾,意念遙控存在技術(shù)瓶頸,還未出現(xiàn)真正的產(chǎn)品。隨著科技的發(fā)展,特別是人臉檢測(cè)和人眼檢測(cè)技術(shù)的成熟為人機(jī)交互提供了更多的可能。如果能夠直接通過(guò)人眼(瞳孔)完成對(duì)顯示設(shè)備的遙控,則使我們的智能家居生活更加智能化,更加便捷化,更具有人性化。申請(qǐng)?zhí)枮?01210333443.3專利申請(qǐng)文獻(xiàn)公開(kāi)了一種移動(dòng)終端及其遙控方法,具體公開(kāi)了一種檢測(cè)用戶瞳孔運(yùn)動(dòng)軌跡,根據(jù)該運(yùn)動(dòng)軌跡相應(yīng)發(fā)出控制指令的技術(shù)方案。即現(xiàn)有技術(shù)中已存在通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)對(duì)顯示設(shè)備的遙控技術(shù)?,F(xiàn)有的這種通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)對(duì)移動(dòng)設(shè)備遙控技術(shù),需進(jìn)行兩次人眼定位,其具體人眼定位方式為:首先根據(jù)臉部膚色的聚類特性檢測(cè)用戶臉部位置,即在人臉檢測(cè)的基礎(chǔ)上,根據(jù)眼睛在人臉上的幾何位置分布,確定眼睛的大概位置,縮小眼部檢測(cè)的區(qū)域范圍;其次,在縮小的眼部搜索區(qū)域范圍內(nèi),利用Sobel邊緣檢測(cè)算法對(duì)眼部區(qū)域進(jìn)行邊緣檢測(cè),提取眼部的邊緣信息,進(jìn)行人眼精確檢測(cè)。現(xiàn)有這種進(jìn)行兩次人眼定位的方法,在確定人眼的大概位置時(shí),僅根據(jù)眼睛與周圍膚色的不同來(lái)確定,并不很準(zhǔn)確,也即現(xiàn)有技術(shù)僅能確定膚色不同的地方不是用戶臉皮,卻不能確定該地方一定是眼睛,因?yàn)楹芸赡軙?huì)由于眉毛、較長(zhǎng)的頭發(fā)或化妝效果等干擾因素導(dǎo)致檢測(cè)不準(zhǔn)確。
技術(shù)實(shí)現(xiàn)要素:本發(fā)明的主要目的在于提供一種基于瞳孔跟蹤技術(shù)的終端及其遙控的方法,提高瞳孔定位的準(zhǔn)確度,在通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)遙控終端的過(guò)程,防止因瞳孔定位不準(zhǔn)確,使終端識(shí)別瞳孔運(yùn)動(dòng)錯(cuò)誤,導(dǎo)致終端誤操作現(xiàn)象的發(fā)生,提高用戶體驗(yàn)效果。本發(fā)明提出一種終端遙控的方法,包括:獲取設(shè)定區(qū)域內(nèi)用戶的至少兩幀圖像,對(duì)每幀圖像進(jìn)行人臉定位,獲得人臉圖像;根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況;從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能;所述用戶的雙眼基準(zhǔn)位置創(chuàng)建過(guò)程為:獲取設(shè)定區(qū)域內(nèi)所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建所述用戶的雙眼基準(zhǔn)位置。優(yōu)選地,所述根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況包括:根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼定位,獲得對(duì)應(yīng)的第一人眼圖像;對(duì)每幀第一人眼圖像進(jìn)行邊緣提取和閾值分割計(jì)算,根據(jù)計(jì)算結(jié)果確定人眼在對(duì)應(yīng)的人臉圖像中的精確位置,獲取第二人眼圖像;對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位,根據(jù)每幀第二人眼圖像中瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況。優(yōu)選地,所述對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位具體包括:對(duì)每幀第二人眼圖像進(jìn)行灰度值比較,將每幀第二人眼圖像中灰度值低的區(qū)域的重心位置定位為瞳孔位置。優(yōu)選地,所述獲取設(shè)定區(qū)域內(nèi)用戶的至少兩幀圖像之后還包括:對(duì)所述至少兩幀圖像中的每幀圖像分別進(jìn)行光照校正和降噪處理;所述獲取設(shè)定區(qū)域內(nèi)所述用戶的雙眼睜圖像和雙眼閉圖像之后還包括:對(duì)所述雙眼睜圖像和雙眼閉圖像分別進(jìn)行光照校正和降噪處理。優(yōu)選地,所述對(duì)每幀圖像進(jìn)行人臉定位具體包括:采用AdaBoost算法或膚色檢測(cè)算法對(duì)每幀圖像進(jìn)行人臉定位。本發(fā)明另提出一種終端,包括:人臉定位模塊,用于獲取設(shè)定區(qū)域內(nèi)用戶的至少兩幀圖像,對(duì)每幀圖像進(jìn)行人臉定位,獲得人臉圖像;人眼瞳孔定位模塊,用于根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況;執(zhí)行模塊,用于從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能;雙眼基準(zhǔn)位置創(chuàng)建模塊,用于獲取設(shè)定區(qū)域內(nèi)的所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建所述用戶的雙眼基準(zhǔn)位置。優(yōu)選地,所述人眼瞳孔定位模塊,具體還用于根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼定位,獲得對(duì)應(yīng)的第一人眼圖像;對(duì)每幀第一人眼圖像進(jìn)行邊緣提取和閾值分割計(jì)算,根據(jù)計(jì)算結(jié)果確定人眼在對(duì)應(yīng)的人臉圖像中的精確位置,獲取第二人眼圖像;以及對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位,根據(jù)每幀人眼圖像中瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況。優(yōu)選地,所述人眼瞳孔定位模塊,具體用于對(duì)每幀第二人眼圖像進(jìn)行灰度值比較,將每幀第二人眼圖像中灰度值低的區(qū)域的重心位置定位為瞳孔位置。優(yōu)選地,所述的終端還包括:圖像預(yù)處理模塊,用于對(duì)所述至少兩幀圖像中的每幀圖像、所述雙眼睜圖像、以及雙眼閉圖像分別進(jìn)行光照校正和降噪處理。優(yōu)選地,所述人臉定位模塊,具體用于采用AdaBoost算法或膚色檢測(cè)算法對(duì)每幀圖像進(jìn)行人臉定位。本發(fā)明所提供的一種終端及其遙控的方法,通過(guò)根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)獲取的用戶的每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況;從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能的方式,其中通過(guò)獲取設(shè)定區(qū)域內(nèi)的所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建所述用戶的雙眼基準(zhǔn)位置;因雙眼睜圖像和雙眼閉圖像差異之處僅在于人眼圖像,不會(huì)受眉毛、較長(zhǎng)的頭發(fā)或化妝效果等因素所干擾,因此相比現(xiàn)有的瞳孔跟蹤技術(shù),大大地提高了瞳孔定位的準(zhǔn)確度,在用戶通過(guò)瞳孔運(yùn)動(dòng)遙控終端過(guò)程中可防止因瞳孔定位不準(zhǔn)確,使終端識(shí)別瞳孔運(yùn)動(dòng)錯(cuò)誤的問(wèn)題,大大減少了終端因瞳孔運(yùn)動(dòng)識(shí)別錯(cuò)誤而導(dǎo)致誤操作現(xiàn)象的發(fā)生,提高了用戶的體驗(yàn)效果。附圖說(shuō)明圖1是本發(fā)明的終端的遙控方法一實(shí)施例的流程圖;圖2是本發(fā)明的終端一實(shí)施例的結(jié)構(gòu)示意圖;圖3是本發(fā)明的終端另一實(shí)施例的結(jié)構(gòu)示意圖。本發(fā)明目的的實(shí)現(xiàn)、功能特點(diǎn)及優(yōu)點(diǎn)將結(jié)合實(shí)施例,參照附圖做進(jìn)一步說(shuō)明。具體實(shí)施方式應(yīng)當(dāng)理解,此處所描述的具體實(shí)施例僅僅用以解釋本發(fā)明,并不用于限定本發(fā)明。參見(jiàn)圖1,圖1是本發(fā)明的一種終端遙控的方法一實(shí)施例的流程圖,所述終端遙控的方法包括:步驟S101、獲取設(shè)定區(qū)域內(nèi)用戶的至少兩幀圖像,對(duì)每幀圖像進(jìn)行人臉定位,獲得人臉圖像。本實(shí)施例中,所述設(shè)定區(qū)域指:用戶通過(guò)身體動(dòng)作(如控制瞳孔運(yùn)動(dòng))實(shí)現(xiàn)遙控終端,用戶所應(yīng)處的有效區(qū)域。本步驟中,所述至少兩幀圖像具體是通過(guò)攝像頭獲取的。在獲取所述用戶后續(xù)的至少兩幀圖像后,還分別對(duì)每幀圖像進(jìn)行圖像預(yù)處理,以達(dá)到提高雙眼睜圖像和雙眼閉圖像的信噪比,抑制背景噪聲,最真實(shí)的還原原始雙眼睜圖像和雙眼閉圖像信息。所述圖像預(yù)處理包括:對(duì)圖像進(jìn)行光照校正和降噪處理。即對(duì)所述至少兩幀圖像中的每幀圖像分別進(jìn)行光照校正和降噪處理。其中,對(duì)圖像進(jìn)行光照校正主要是對(duì)圖像中原始特定信息圖中夾雜的一些變化信息(如光照變化、角度變化等)進(jìn)行處理??刹捎玫墓庹招U椒òǎ篏amma校正、圖像亮度非線性變換、直方圖均衡化、最高亮度點(diǎn)光照補(bǔ)償。Gamma校正和圖像亮度非線性變換是通過(guò)對(duì)圖像中像素點(diǎn)進(jìn)行非線性調(diào)整,從而去除原始信息圖中的一些無(wú)關(guān)的變化信息。直方圖均衡化和最高亮度點(diǎn)光照補(bǔ)償算法是對(duì)圖像進(jìn)行對(duì)比度調(diào)整的方法,能增強(qiáng)圖像局部對(duì)比度。對(duì)圖像進(jìn)行降噪處理主要是對(duì)原始圖像中的噪聲信息進(jìn)行濾除,圖像中典型的噪聲有高斯噪聲、椒鹽噪聲、加性噪聲等。本實(shí)施例可采用均值濾波、中值濾波和高斯濾波等。另外,本步驟具體采用AdaBoost算法或膚色檢測(cè)算法對(duì)每幀圖像進(jìn)行人臉定位。步驟S102、根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況。本步驟S102具體處理如下:根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼定位,獲得對(duì)應(yīng)的第一人眼圖像;對(duì)每幀第一人眼圖像進(jìn)行邊緣提取和閾值分割計(jì)算,根據(jù)計(jì)算結(jié)果確定人眼在對(duì)應(yīng)的人臉圖像中的精確位置,獲取第二人眼圖像;對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位,根據(jù)每幀第二人眼圖像中瞳孔的位置差異,確定瞳孔的運(yùn)動(dòng)情況。其中,所述對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位具體處理過(guò)程如下:采用圓心定位法或角點(diǎn)檢測(cè)法對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位?;蛘撸瑢?duì)每幀第二人眼圖像進(jìn)行灰度值比較,將每幀第二人眼圖像中灰度值低的區(qū)域的重心位置定位為瞳孔位置。本步驟所述的用戶的雙眼基準(zhǔn)為準(zhǔn)的創(chuàng)建過(guò)程如下:獲取設(shè)定區(qū)域內(nèi)所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建用戶的雙眼基準(zhǔn)位置,所述垂直灰度投影直方圖包括垂直灰度縱向投影直方圖和垂直灰度橫向投影直方圖。其中,所述雙眼睜圖像和雙眼閉圖像具體是通過(guò)攝像頭獲取的。另外,中創(chuàng)建用戶的雙眼基準(zhǔn)位置過(guò)程中,在獲取所述雙眼睜圖像和雙眼閉圖像后,分別對(duì)二者進(jìn)行圖像預(yù)處理。本實(shí)施例中創(chuàng)建用戶的雙眼基準(zhǔn)位置過(guò)程對(duì)獲取的雙眼睜圖像和雙眼閉圖像進(jìn)行的圖像預(yù)處理原理與上述步驟S101的對(duì)所述至少兩幀圖像中的每幀圖像分別進(jìn)行圖像預(yù)處理的原理相同,在此不再贅述。步驟S103、從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能。本實(shí)施例中,所述預(yù)設(shè)的操作策略包括:瞳孔的運(yùn)動(dòng)情況、操作指令、操作動(dòng)作,以及該三者的對(duì)應(yīng)關(guān)系。參見(jiàn)表1,如“雙眼向上”對(duì)應(yīng)的操作指令為“Key_Up”,對(duì)應(yīng)的操作動(dòng)作為“模擬遙控向上按鈕”。現(xiàn)以一個(gè)具體事例對(duì)所述預(yù)設(shè)的操作策略進(jìn)行詳細(xì)說(shuō)明:在未開(kāi)通瞳孔運(yùn)動(dòng)遙控終端功能之前,當(dāng)終端處于視頻音量菜單項(xiàng),用戶通過(guò)遙控器遙控向上按鈕,則終端執(zhí)行增大一級(jí)視頻音量的操作,即實(shí)現(xiàn)增大一級(jí)視頻音量。在開(kāi)通瞳孔運(yùn)動(dòng)遙控終端功能之后,當(dāng)終端處于視頻音量菜單項(xiàng)時(shí),終端根據(jù)已獲取的至少兩幀用戶的瞳孔圖像的相對(duì)變化情況(即瞳孔的位置差異),確定用戶瞳孔的運(yùn)動(dòng)情況是“雙眼向上”時(shí),預(yù)設(shè)的操作策略中存在的與該“雙眼向上”對(duì)應(yīng)的操作指令為“Key_Up”,對(duì)應(yīng)的操作動(dòng)作為“模擬遙控器遙控向上按鈕”。終端確定用戶瞳孔的運(yùn)動(dòng)情況為“雙眼向上”后,則模擬接收遙控器遙控向上按鈕的指令,執(zhí)行“增加一級(jí)視頻音量”功能操作。即用戶通過(guò)控制雙眼向上即可實(shí)現(xiàn)終端播放的視頻的音量增加一級(jí)。本實(shí)施例中,可以在每次實(shí)現(xiàn)通過(guò)用戶瞳孔運(yùn)動(dòng)遙控終端之前預(yù)先創(chuàng)建用戶的雙眼基準(zhǔn)位置,為后續(xù)的定位同一用戶的眼睛位置作參考。當(dāng)然若始終只有同一用戶采用通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)遙控終端的方式遙控,也可只創(chuàng)建一次用戶的雙眼基準(zhǔn)位置,然后將創(chuàng)建后的用戶的雙眼基準(zhǔn)位置信息(雙眼在人臉圖像中的坐標(biāo)值)存儲(chǔ),以后需要采用通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)遙控終端的方式,只需調(diào)出所述雙眼基準(zhǔn)位置作參考即可,無(wú)需再次創(chuàng)建。上述提供的終端遙控的方法實(shí)施例,通過(guò)根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)獲取的用戶的每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況;從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能的方式,其中通過(guò)獲取設(shè)定區(qū)域內(nèi)的所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建所述用戶的雙眼基準(zhǔn)位置;因雙眼睜圖像和雙眼閉圖像差異之處僅在于人眼圖像,不會(huì)受眉毛、較長(zhǎng)的頭發(fā)或化妝效果等因素所干擾,因此相比現(xiàn)有的瞳孔跟蹤技術(shù),大大地提高了瞳孔定位的準(zhǔn)確度,在用戶通過(guò)瞳孔運(yùn)動(dòng)遙控終端過(guò)程中可防止因瞳孔定位不準(zhǔn)確,使終端識(shí)別瞳孔運(yùn)動(dòng)錯(cuò)誤,大大減少了終端因瞳孔運(yùn)動(dòng)識(shí)別錯(cuò)誤而導(dǎo)致誤操作現(xiàn)象的發(fā)生,提高了用戶的體驗(yàn)效果。參見(jiàn)圖2,圖2是本發(fā)明的一種終端100一實(shí)施例結(jié)構(gòu)示意圖,所述終端100包括:人臉定位模塊110、人眼瞳孔定位模塊120、執(zhí)行模塊130、以及雙眼基準(zhǔn)位置創(chuàng)建模塊140。所述人臉定位模塊110,用于獲取設(shè)定區(qū)域內(nèi)用戶的至少兩幀圖像,對(duì)每幀圖像進(jìn)行人臉定位,獲得人臉圖像。所述人眼定位模塊120,用于根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況。所述執(zhí)行模塊130,用于從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能。所述雙眼基準(zhǔn)位置創(chuàng)建模塊140,用于獲取設(shè)定區(qū)域內(nèi)所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建所述用戶的雙眼基準(zhǔn)位置,所述垂直灰度投影直方圖包括垂直灰度縱向投影直方圖和垂直灰度橫向投影直方圖。本實(shí)施例中,所述設(shè)定區(qū)域?yàn)橛脩敉ㄟ^(guò)身體動(dòng)作(如控制瞳孔運(yùn)動(dòng))實(shí)現(xiàn)遙控終端100,用戶所應(yīng)處的有效區(qū)域。進(jìn)一步地,上述終端100實(shí)施例中,所述人眼瞳孔定位模塊120,具體用于根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)每幀人臉圖像進(jìn)行人眼定位,獲得對(duì)應(yīng)的第一人眼圖像;對(duì)每幀第一人眼圖像進(jìn)行邊緣提取和閾值分割計(jì)算,根據(jù)計(jì)算結(jié)果確定人眼在對(duì)應(yīng)的人臉圖像中的精確位置,獲取第二人眼圖像;以及對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位,根據(jù)每幀人眼圖像中瞳孔的位置差異,確定瞳孔的運(yùn)動(dòng)情況。另外,所述人眼瞳孔定位模塊120,具體用于采用圓心定位法或角點(diǎn)檢測(cè)法對(duì)每幀第二人眼圖像進(jìn)行瞳孔定位;或者,對(duì)每幀第二人眼圖像進(jìn)行灰度值比較,將每幀第二人眼圖像中灰度值低的區(qū)域的重心位置定位為瞳孔位置。本實(shí)施例中,所述至少兩幀圖像中的每幀圖像、所述雙眼睜圖像、以及所述雙眼閉圖像均可由攝像頭獲取。本實(shí)施例中,所述預(yù)設(shè)的操作策略包括:瞳孔的運(yùn)動(dòng)情況、操作指令、操作動(dòng)作,以及該三者的對(duì)應(yīng)關(guān)系。參見(jiàn)表1,如“雙眼向上”對(duì)應(yīng)的操作指令為“Key_Up”,對(duì)應(yīng)的操作動(dòng)作為“模擬遙控向上按鈕”?,F(xiàn)以一個(gè)具體事例對(duì)所述預(yù)設(shè)的操作策略進(jìn)行詳細(xì)說(shuō)明:在未開(kāi)通瞳孔運(yùn)動(dòng)遙控終端100功能之前,當(dāng)終端100處于視頻音量菜單項(xiàng),用戶通過(guò)遙控器遙控向上按鈕,則終端100執(zhí)行增大一級(jí)視頻音量的操作,即實(shí)現(xiàn)增大一級(jí)視頻音量。在開(kāi)通瞳孔運(yùn)動(dòng)遙控終端100功能之后,當(dāng)終端100處于視頻音量菜單項(xiàng)時(shí),終端100根據(jù)已獲取的至少兩幀用戶的瞳孔圖像的相對(duì)變化情況(即瞳孔的位置差異),確定用戶瞳孔的運(yùn)動(dòng)情況是“雙眼向上”時(shí),預(yù)設(shè)的操作策略中存在的與該“雙眼向上”對(duì)應(yīng)的操作指令為“Key_Up”,對(duì)應(yīng)的操作動(dòng)作為“模擬遙控器遙控向上按鈕”。終端100確定用戶瞳孔的運(yùn)動(dòng)情況為“雙眼向上”后,則模擬接收遙控器遙控向上按鈕的指令,執(zhí)行“增加一級(jí)視頻音量”功能操作。即用戶通過(guò)控制雙眼向上即可實(shí)現(xiàn)終端100播放的視頻的音量增加一級(jí)。本實(shí)施例中,可以在每次實(shí)現(xiàn)通過(guò)用戶瞳孔運(yùn)動(dòng)遙控終端100之前預(yù)先創(chuàng)建用戶的雙眼基準(zhǔn)位置,為后續(xù)的定位同一用戶的眼睛位置作參考。當(dāng)然若始終只有同一用戶采用通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)遙控終端100的方式遙控,也可只創(chuàng)建一次用戶的雙眼基準(zhǔn)位置,然后將創(chuàng)建后的用戶的雙眼基準(zhǔn)位置信息(雙眼在人臉圖像中的坐標(biāo)值)存儲(chǔ),以后需要采用通過(guò)瞳孔運(yùn)動(dòng)實(shí)現(xiàn)遙控終端100的方式,只需調(diào)出所述雙眼基準(zhǔn)位置作參考即可,無(wú)需再次創(chuàng)建。參見(jiàn)圖3,圖3是本發(fā)明的一種終端100另一實(shí)施例的結(jié)構(gòu)示意圖,在上述終端100實(shí)施例的基礎(chǔ)上,所述終端100還包括:圖像預(yù)處理模塊150。所述圖像預(yù)處理模塊150,用于對(duì)所述至少兩幀圖像中的每幀圖像、所述雙眼睜圖像、以及所述雙眼閉圖像分別進(jìn)行光照校正和降噪處理,以達(dá)到提高所述至少兩幀圖像中的每幀圖像、所述雙眼睜圖像、以及所述雙眼閉圖像的信噪比,抑制背景噪聲,最真實(shí)的還原原始雙眼睜圖像和雙眼閉圖像信息。其中,對(duì)圖像進(jìn)行光照校正主要是對(duì)圖像中原始特定信息圖中夾雜的一些變化信息(如光照變化、角度變化等)進(jìn)行處理??刹捎玫墓庹招U椒òǎ篏amma校正、圖像亮度非線性變換、直方圖均衡化、最高亮度點(diǎn)光照補(bǔ)償。Gamma校正和圖像亮度非線性變換是通過(guò)對(duì)圖像中像素點(diǎn)進(jìn)行非線性調(diào)整,從而去除原始信息圖中的一些無(wú)關(guān)的變化信息。直方圖均衡化和最高亮度點(diǎn)光照補(bǔ)償算法是對(duì)圖像進(jìn)行對(duì)比度調(diào)整的方法,能增強(qiáng)圖像局部對(duì)比度。對(duì)圖像進(jìn)行降噪處理主要是對(duì)原始圖像中的噪聲信息進(jìn)行濾除,圖像中典型的噪聲有高斯噪聲、椒鹽噪聲、加性噪聲等。本實(shí)施例可采用均值濾波、中值濾波和高斯濾波等。進(jìn)一步地,上述終端100實(shí)施例中,所述人臉定位模塊110,具體用于采用AdaBoost算法或膚色檢測(cè)算法對(duì)每幀圖像進(jìn)行人臉定位。上述提供的終端100實(shí)施例,通過(guò)根據(jù)預(yù)先創(chuàng)建的所述用戶的雙眼基準(zhǔn)位置,對(duì)獲取的用戶的每幀人臉圖像進(jìn)行人眼瞳孔定位,根據(jù)每幀人臉圖像中人眼瞳孔的位置確定瞳孔的運(yùn)動(dòng)情況;從預(yù)設(shè)的操作策略中查找并執(zhí)行與所述瞳孔的運(yùn)動(dòng)情況對(duì)應(yīng)的遙控指令,實(shí)現(xiàn)對(duì)應(yīng)的操作功能的方式,其中通過(guò)獲取設(shè)定區(qū)域內(nèi)的所述用戶的雙眼睜圖像和雙眼閉圖像,根據(jù)雙眼睜圖像的垂直灰度投影直方圖與雙眼閉圖像的垂直灰度投影直方圖之間的差異創(chuàng)建所述用戶的雙眼基準(zhǔn)位置;因雙眼睜圖像和雙眼閉圖像差異之處僅在于人眼圖像,不會(huì)受眉毛、較長(zhǎng)的頭發(fā)或化妝效果等因素所干擾,因此相比現(xiàn)有的瞳孔跟蹤技術(shù),大大地提高了瞳孔定位的準(zhǔn)確度,在用戶通過(guò)瞳孔運(yùn)動(dòng)遙控終端過(guò)程中可防止因瞳孔定位不準(zhǔn)確,使終端識(shí)別瞳孔運(yùn)動(dòng)錯(cuò)誤,大大減少了終端因瞳孔運(yùn)動(dòng)識(shí)別錯(cuò)誤而導(dǎo)致誤操作現(xiàn)象的發(fā)生,提高了用戶的體驗(yàn)效果。應(yīng)當(dāng)理解的是,以上僅為本發(fā)明的優(yōu)選實(shí)施例,不能因此限制本發(fā)明的專利范圍,凡是利用本發(fā)明說(shuō)明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換,或直接或間接運(yùn)用在其他相關(guān)的技術(shù)領(lǐng)域,均同理包括在本發(fā)明的專利保護(hù)范圍內(nèi)。表1: