一種人機(jī)交互系統(tǒng)的制作方法
【專(zhuān)利摘要】本實(shí)用新型公開(kāi)一種人機(jī)交互系統(tǒng)，涉及人機(jī)交互技術(shù)領(lǐng)域，為解決用戶進(jìn)行虛擬現(xiàn)實(shí)技術(shù)的人機(jī)交互活動(dòng)的操作便利性較低的問(wèn)題。所述人機(jī)交互系統(tǒng)包括可穿戴設(shè)備和顯示設(shè)備，可穿戴設(shè)備包括攝像頭、存儲(chǔ)器、處理器和投影鏡頭；攝像頭用于采集用戶的當(dāng)前手勢(shì)圖像和顯示設(shè)備的顯示圖像；處理器用于將當(dāng)前手勢(shì)圖像與存儲(chǔ)器中預(yù)存的手勢(shì)進(jìn)行匹配，根據(jù)匹配出的手勢(shì)的手勢(shì)類(lèi)別，查找預(yù)設(shè)的與匹配出的手勢(shì)的手勢(shì)類(lèi)別對(duì)應(yīng)的虛擬工具圖像；投影鏡頭用于在可穿戴設(shè)備前方投影出包括虛擬工具圖像和顯示設(shè)備的顯示圖像的虛擬圖像。本實(shí)用新型提供的人機(jī)交互系統(tǒng)用于人機(jī)交互活動(dòng)。
【專(zhuān)利說(shuō)明】
一種人機(jī)交互系統(tǒng)
技術(shù)領(lǐng)域
[0001]本實(shí)用新型涉及人機(jī)交互技術(shù)領(lǐng)域，尤其涉及一種人機(jī)交互系統(tǒng)。
【背景技術(shù)】
[0002]隨著電子信息科學(xué)技術(shù)的發(fā)展，人與計(jì)算機(jī)的交互活動(dòng)在人們的日常生活中占據(jù)了重要的地位，其中，結(jié)合虛擬現(xiàn)實(shí)技術(shù)利用人的動(dòng)作進(jìn)行人機(jī)交互活動(dòng)也成為了人機(jī)交互活動(dòng)的一個(gè)主要發(fā)展趨勢(shì)。
[0003]現(xiàn)有技術(shù)中，結(jié)合虛擬現(xiàn)實(shí)技術(shù)進(jìn)行人機(jī)交互活動(dòng)時(shí)，用戶需要與計(jì)算機(jī)直接接觸，或者使用實(shí)體輸入裝置對(duì)計(jì)算機(jī)發(fā)出操作指令。比如，用戶對(duì)計(jì)算機(jī)進(jìn)行觸摸操作，從而實(shí)現(xiàn)計(jì)算機(jī)的各種功能，或者，計(jì)算機(jī)連接有鼠標(biāo)和鍵盤(pán)，用戶利用鼠標(biāo)和鍵盤(pán)對(duì)計(jì)算機(jī)發(fā)出操作指令，從而實(shí)現(xiàn)計(jì)算機(jī)的各種功能。但是，由于用戶需要使用實(shí)體物理裝置來(lái)操作計(jì)算機(jī)的方式較為復(fù)雜，使得用戶進(jìn)行虛擬現(xiàn)實(shí)技術(shù)的人機(jī)交互活動(dòng)的操作便利性較低。
【實(shí)用新型內(nèi)容】
[0004]本實(shí)用新型的目的在于提供一種人機(jī)交互系統(tǒng)，用于提高用戶進(jìn)行虛擬現(xiàn)實(shí)技術(shù)的人機(jī)交互活動(dòng)的操作便利性。
[0005]為了實(shí)現(xiàn)上述目的，本實(shí)用新型提供如下技術(shù)方案:
[0006]—種人機(jī)交互系統(tǒng)，包括:可穿戴設(shè)備和顯示設(shè)備；
[0007]所述可穿戴設(shè)備包括攝像頭、存儲(chǔ)器、處理器和投影鏡頭；
[0008]所述攝像頭、投影鏡頭、存儲(chǔ)器分別與所述處理器信號(hào)連接，所述攝像頭用于采集用戶的當(dāng)前手勢(shì)圖像和所述顯示設(shè)備的顯示圖像，并提供給處理器；
[0009]所述處理器用于將所述當(dāng)前手勢(shì)圖像與所述存儲(chǔ)器中預(yù)存的手勢(shì)進(jìn)行匹配，根據(jù)匹配出的手勢(shì)的手勢(shì)類(lèi)別，查找預(yù)設(shè)的與所述匹配出的手勢(shì)的手勢(shì)類(lèi)別對(duì)應(yīng)的虛擬工具圖像，并將所述虛擬工具圖像和所述顯示設(shè)備的顯示圖像提供給投影鏡頭；
[0010]所述投影鏡頭用于在所述可穿戴設(shè)備前方投影出包括所述虛擬工具圖像和所述顯示設(shè)備的顯示圖像的虛擬圖像。
[0011]本實(shí)用新型提供的人機(jī)交互系統(tǒng)中，攝像頭采集用戶的當(dāng)前手勢(shì)圖像和顯示設(shè)備的顯示圖像，處理器將當(dāng)前手勢(shì)圖像與存儲(chǔ)器中預(yù)存的手勢(shì)進(jìn)行匹配，根據(jù)匹配出的手勢(shì)的手勢(shì)類(lèi)別，查找預(yù)設(shè)的與匹配出的手勢(shì)的手勢(shì)類(lèi)別對(duì)應(yīng)的虛擬工具圖像，投影鏡頭投影出包括虛擬工具圖像和顯示設(shè)備的顯示圖像的虛擬圖像。與需要利用物理實(shí)體裝置實(shí)現(xiàn)人機(jī)交互活動(dòng)的現(xiàn)有技術(shù)相比，本實(shí)用新型利用用戶的手勢(shì)就能生成控制指令，生成與控制指令對(duì)應(yīng)的虛擬工具圖像，使用戶能夠通過(guò)可穿戴設(shè)備看到包括虛擬工具圖像和顯示設(shè)備的顯示圖像的虛擬圖像，不需要特意使用物理實(shí)體裝置對(duì)顯示設(shè)備進(jìn)行操作，就能夠?qū)崿F(xiàn)虛擬現(xiàn)實(shí)技術(shù)中的人機(jī)交互活動(dòng)，提高了用戶進(jìn)行虛擬現(xiàn)實(shí)技術(shù)的人機(jī)交互活動(dòng)的操作便利性。
【附圖說(shuō)明】
[0012]此處所說(shuō)明的附圖用來(lái)提供對(duì)本實(shí)用新型的進(jìn)一步理解，構(gòu)成本實(shí)用新型的一部分，本實(shí)用新型的示意性實(shí)施例及其說(shuō)明用于解釋本實(shí)用新型，并不構(gòu)成對(duì)本實(shí)用新型的不當(dāng)限定。在附圖中:
[0013]圖1為本實(shí)用新型實(shí)施例一中人機(jī)交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0014]圖2為本實(shí)用新型實(shí)施例三、四中人機(jī)交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0015]圖3為本實(shí)用新型實(shí)施例三中智能眼鏡的結(jié)構(gòu)示意圖；
[0016]圖4為本實(shí)用新型實(shí)施例二中人機(jī)交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0017]圖5為本實(shí)用新型實(shí)施例四中人機(jī)交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0018]圖6為本實(shí)用新型實(shí)施例四中用戶的視覺(jué)效果圖。
[0019]附圖標(biāo)記:
[0020]10-人機(jī)交互系統(tǒng)，11-可穿戴設(shè)備，12-顯示設(shè)備，13-鏡片，14-鏡架，15-虛擬筆，16-智能眼鏡，111-攝像頭，112-存儲(chǔ)器，113-處理器，114-投影鏡頭，115-信息發(fā)送接口，141-鏡框，142-鏡腿，1111-圖像處理器，1131-比較電路。
【具體實(shí)施方式】
[0021]為了進(jìn)一步說(shuō)明本實(shí)用新型實(shí)施例提供的人機(jī)交互系統(tǒng)，下面結(jié)合說(shuō)明書(shū)附圖進(jìn)行詳細(xì)描述。
[0022]實(shí)施例一
[0023]請(qǐng)參閱圖1，本實(shí)用新型實(shí)施例提供的人機(jī)交互系統(tǒng)10包括可穿戴設(shè)備11和顯示設(shè)備12，可穿戴設(shè)備11包括攝像頭111、存儲(chǔ)器112、處理器113和投影鏡頭114;攝像頭111、存儲(chǔ)器112、投影鏡頭114分別與處理器113信號(hào)連接，攝像頭111用于采集用戶的當(dāng)前手勢(shì)圖像和顯示設(shè)備12的顯示圖像，并將當(dāng)前手勢(shì)圖像和顯示設(shè)備12的顯示圖像提供給處理器113，具體的，攝像頭111也可以替換為拍照鏡頭或圖像傳感器等具有圖像采集功能的結(jié)構(gòu)；處理器113用于將當(dāng)前手勢(shì)圖像與存儲(chǔ)器112中預(yù)存的手勢(shì)進(jìn)行匹配，根據(jù)匹配出的手勢(shì)的手勢(shì)類(lèi)別，查找預(yù)設(shè)的與匹配出的手勢(shì)的手勢(shì)類(lèi)別對(duì)應(yīng)的虛擬工具圖像，并將虛擬工具圖像和顯示設(shè)備12的顯示圖像提供給投影鏡頭114，虛擬工具圖像為某種工具的虛擬顯示圖像，如虛擬筆的圖像、虛擬放大鏡的圖像或虛擬手槍的圖像等，需要說(shuō)明的是，存儲(chǔ)器112中存儲(chǔ)有手勢(shì)數(shù)據(jù)庫(kù)，手勢(shì)數(shù)據(jù)庫(kù)中包括多種手勢(shì)以及多種手勢(shì)自身的各類(lèi)屬性或特征，其中，手勢(shì)類(lèi)別就是手勢(shì)自身的一種屬性，在具體實(shí)施過(guò)程中，存儲(chǔ)器112還具有自學(xué)習(xí)的功能，能夠?qū)W(xué)習(xí)到的新的手勢(shì)添加到手勢(shì)數(shù)據(jù)庫(kù)中；投影鏡頭114用于在可穿戴設(shè)備11前方投影出包括虛擬工具圖像和顯示設(shè)備12的顯示圖像的虛擬圖像，且該虛擬圖像會(huì)根據(jù)攝像頭111采集到的當(dāng)前手勢(shì)圖像和顯示設(shè)備的顯示圖像進(jìn)行實(shí)時(shí)更新，也就是說(shuō)，投影鏡頭114能夠投影出連貫的畫(huà)面;具體的，顯示設(shè)備12具體可以為智能手機(jī)、平板電腦等便于攜帶的手持顯示終端，在此并不限定。
[0024]本實(shí)用新型提供的人機(jī)交互系統(tǒng)10中，攝像頭111采集用戶的當(dāng)前手勢(shì)圖像和顯示設(shè)備的顯示圖像，處理器113將當(dāng)前手勢(shì)圖像與存儲(chǔ)器112中預(yù)存的手勢(shì)進(jìn)行匹配，根據(jù)匹配出的手勢(shì)的手勢(shì)類(lèi)別，查找預(yù)設(shè)的與匹配出的手勢(shì)的手勢(shì)類(lèi)別對(duì)應(yīng)的虛擬工具圖像，投影鏡頭114投影出包括虛擬工具圖像和顯示設(shè)備12的顯示圖像的虛擬圖像。與需要利用物理實(shí)體裝置實(shí)現(xiàn)人機(jī)交互活動(dòng)的現(xiàn)有技術(shù)相比，本實(shí)用新型利用用戶的手勢(shì)就能生成控制指令，生成與控制指令對(duì)應(yīng)的虛擬工具圖像，使用戶能夠通過(guò)可穿戴設(shè)備看到包括虛擬工具圖像和顯示設(shè)備的顯示圖像的虛擬圖像，不需要特意使用物理實(shí)體裝置對(duì)顯示設(shè)備進(jìn)行操作，就能夠?qū)崿F(xiàn)虛擬現(xiàn)實(shí)技術(shù)中的人機(jī)交互活動(dòng)，提高了用戶進(jìn)行虛擬現(xiàn)實(shí)技術(shù)的人機(jī)交互活動(dòng)的操作便利性。
[0025]實(shí)施例二
[0026]請(qǐng)參閱圖4，在實(shí)施例一的基礎(chǔ)上，可穿戴設(shè)備11還包括信息發(fā)送接口115，信息發(fā)送接口 115與處理器113信號(hào)連接，用于將處理器根據(jù)手勢(shì)類(lèi)別提供的控制指令發(fā)送給顯示設(shè)備12，信息發(fā)送接口 115可以根據(jù)可穿戴設(shè)備11與顯示設(shè)備12之間使用的通信技術(shù)而定，可穿戴設(shè)備11與顯示設(shè)備12之間能夠通過(guò)有線連接，也可以通過(guò)無(wú)線連接，優(yōu)選無(wú)線連接，比如利用WiFi (WIreless-Fidel ity，無(wú)線寬帶)、藍(lán)牙、ZigBee (紫蜂協(xié)議)等無(wú)線通訊手段進(jìn)行通信，從而使用對(duì)應(yīng)的信息發(fā)送接口 115，信息發(fā)送接口 115優(yōu)選為無(wú)線接口，具體的，信息發(fā)送接口 115可以為WiFi模塊、藍(lán)牙模塊、ZigBee模塊等。
[0027]實(shí)施例三
[0028]請(qǐng)參閱圖2和圖3，可穿戴設(shè)備具體可以為智能眼鏡、穿戴頭盔、智能手環(huán)等設(shè)備，下面以智能眼鏡16為例進(jìn)行說(shuō)明。智能眼鏡16包括與左右眼對(duì)應(yīng)的兩個(gè)鏡片13和用于支撐鏡片的鏡架14，具體的，攝像頭111、存儲(chǔ)器112、處理器113均設(shè)置在鏡架14上，投影鏡頭114設(shè)置在鏡架14或鏡片13上;鏡架14包括鏡框141和鏡腿142，鏡片13設(shè)置在鏡框141中，鏡片13為具有投影功能的近眼透鏡，顯示設(shè)備12上的顯示圖像以及用戶的手勢(shì)圖像均可以通過(guò)鏡片13透射至佩戴智能眼鏡16的用戶的雙眼，使得用戶能夠通過(guò)智能眼鏡16觀看虛擬工具圖像和顯示設(shè)備12的顯示圖像，或者觀看虛擬工具圖像、顯示設(shè)備12的顯示圖像和用戶的當(dāng)前手勢(shì)圖像。攝像頭111設(shè)置在鏡框141上，具體的，攝像頭111的數(shù)量為兩個(gè)，兩個(gè)攝像頭111分別設(shè)置在鏡框141上靠近鏡腿142的區(qū)域。
[0029]實(shí)施例四
[0030]請(qǐng)參閱圖5，下面將介紹上述人機(jī)交互系統(tǒng)中可穿戴設(shè)備中的某些部件的具體構(gòu)成，具體說(shuō)明如下:
[0031]攝像頭111包括圖像處理器1111，用于在同時(shí)采集到包含用戶當(dāng)前手勢(shì)和所述顯示設(shè)備的顯示圖像的混合圖像時(shí)，從所述混合圖像中分別識(shí)別出當(dāng)前手勢(shì)圖像和所述顯示設(shè)備的顯示圖像，需要說(shuō)明的是，在用戶還未做出手勢(shì)，即攝像頭111中的圖像處理器1111還未拍攝到用戶的手勢(shì)圖像時(shí)，圖像處理器1111先拍攝顯示設(shè)備12的顯示圖像，從而得到當(dāng)前場(chǎng)景下手勢(shì)圖像所處的主體環(huán)境，在圖像處理器1111同時(shí)拍攝到手勢(shì)圖像和顯示設(shè)備12的顯示圖像的混合圖像時(shí)，圖像處理器1111利用背景分離方法將當(dāng)前手勢(shì)圖像和顯示設(shè)備12當(dāng)前的顯示圖像分離。
[0032]處理器113包括比較電路1131，比較電路1131用于比較當(dāng)前手勢(shì)圖像的手勢(shì)邊緣輪廓和存儲(chǔ)器112預(yù)存的手勢(shì)的手勢(shì)邊緣輪廓，以及比較當(dāng)前手勢(shì)圖像的手勢(shì)運(yùn)動(dòng)軌跡和存儲(chǔ)器112預(yù)存的手勢(shì)的手勢(shì)運(yùn)動(dòng)軌跡，輸出與當(dāng)前手勢(shì)圖像的手勢(shì)邊緣輪廓和手勢(shì)運(yùn)動(dòng)軌跡匹配的預(yù)存的手勢(shì)的手勢(shì)邊緣輪廓和手勢(shì)運(yùn)動(dòng)軌跡對(duì)應(yīng)的手勢(shì)類(lèi)別。也就是說(shuō)，當(dāng)存儲(chǔ)器中預(yù)存的某一手勢(shì)的手勢(shì)邊緣輪廓與當(dāng)前手勢(shì)圖像的手勢(shì)邊緣輪廓匹配，且存儲(chǔ)器中預(yù)存的該手勢(shì)的手勢(shì)運(yùn)動(dòng)軌跡與當(dāng)前手勢(shì)圖像的手勢(shì)運(yùn)動(dòng)軌跡匹配，則存儲(chǔ)器中預(yù)存的該手勢(shì)的手勢(shì)類(lèi)別與當(dāng)前手勢(shì)圖像相對(duì)應(yīng)，比較電路輸出存儲(chǔ)器中預(yù)存的該手勢(shì)的手勢(shì)類(lèi)另IJ。需要說(shuō)明的是，手勢(shì)邊緣輪廓用于表示手勢(shì)的輪廓和具體形狀，手勢(shì)運(yùn)動(dòng)軌跡用于表示手勢(shì)的運(yùn)動(dòng)方向以及變化過(guò)程等，比如:攝像頭111中的圖像處理器1111采集到用戶的手握成實(shí)心拳，在顯示設(shè)備12前直線移動(dòng)的手勢(shì)，其中，手勢(shì)邊緣輪廓表示握成實(shí)心拳的手的輪廓為近似于圓形的形狀，以及實(shí)心拳的具體各個(gè)手指的形狀和位置，手勢(shì)運(yùn)動(dòng)軌跡表示實(shí)心拳呈直線運(yùn)動(dòng);再比如，攝像頭111中的圖像處理器1111采集到用戶的手握成空心拳，在顯示設(shè)備12前曲線移動(dòng)的手勢(shì)，手勢(shì)邊緣輪廓表示握成空心拳的手的外部輪廓為近似于圓形的形狀，以及空心拳的具體各個(gè)手指的形狀和位置，手勢(shì)運(yùn)動(dòng)軌跡數(shù)據(jù)表示空心拳呈曲線運(yùn)動(dòng)；當(dāng)區(qū)分實(shí)心拳與空心拳時(shí)，由于實(shí)心拳與空心拳這兩個(gè)手勢(shì)中各個(gè)手指的形狀和位置不同，故可以由手勢(shì)邊緣輪廓來(lái)區(qū)分實(shí)心拳和空心拳的不同。值得一提的是，用于表征手勢(shì)的特征包括但并不限于上述手勢(shì)邊緣輪廓和手勢(shì)運(yùn)動(dòng)軌跡，能夠表征手勢(shì)的不同的特征均屬于本實(shí)用新型的保護(hù)范圍。
[0033]下面以一具體舉例來(lái)進(jìn)行本實(shí)施例中人機(jī)交互系統(tǒng)實(shí)現(xiàn)人機(jī)交互活動(dòng)的說(shuō)明:如圖2所示，智能眼鏡16利用攝像頭111中的圖像處理器1111采集圖像，顯示設(shè)備12為平板電腦，平板電腦上顯示的畫(huà)面是文字閱讀界面，圖像處理器1111對(duì)平板電腦顯示的文字閱讀界面進(jìn)行拍攝，得到平板電腦的顯示圖像；用戶此時(shí)希望對(duì)文字閱讀界面中的某句文字進(jìn)行標(biāo)記，故用戶做出握筆手勢(shì)，想要在該句文字對(duì)應(yīng)的位置做出標(biāo)記，需要注意的是，用戶手中不存在觸摸筆等真實(shí)物理工具，此時(shí)，圖像處理器1111拍攝到了平板電腦顯示的文字閱讀界面和用戶的握筆手勢(shì)，從而得到顯示圖像和當(dāng)前手勢(shì)圖像；智能眼鏡16中的處理器113中的比較電路1131比較用戶的握筆手勢(shì)的手勢(shì)邊緣輪廓與存儲(chǔ)器112中存儲(chǔ)的手勢(shì)的手勢(shì)邊緣輪廓，并比較用戶的握筆手勢(shì)的手勢(shì)運(yùn)動(dòng)軌跡與存儲(chǔ)器112中存儲(chǔ)的手勢(shì)的手勢(shì)運(yùn)動(dòng)軌跡，從而輸出握筆手勢(shì)的手勢(shì)類(lèi)別為握筆標(biāo)記手勢(shì)，投影鏡頭114在用戶的視野范圍內(nèi)投射出虛擬筆15的圖像，以及握筆手勢(shì)對(duì)應(yīng)的文字處的標(biāo)記，使得用戶可以通過(guò)智能眼鏡16看到虛擬筆15的圖像以及文字閱讀界面的標(biāo)記，用戶看到的效果圖為圖6，與用戶使用觸摸筆等真實(shí)物理工具進(jìn)行標(biāo)記的效果相同。
[0034]下面再以另一具體舉例來(lái)進(jìn)行本實(shí)施例中人機(jī)交互系統(tǒng)實(shí)現(xiàn)人機(jī)交互活動(dòng)的說(shuō)明:智能眼鏡16利用攝像頭111中的圖像處理器1111采集圖像，顯示設(shè)備12為平板電腦，平板電腦上顯示的畫(huà)面是文字閱讀界面或游戲界面，用戶需要將文字閱讀界面或游戲界面放大，則可做出手持放大鏡的手勢(shì)或加號(hào)手勢(shì)，圖像處理器1111拍攝到手持放大鏡的手勢(shì)圖像或加號(hào)手勢(shì)圖像后，智能眼鏡16中的處理器113中的比較電路1131比較用戶的放大鏡的手勢(shì)圖像或加號(hào)手勢(shì)圖像的手勢(shì)邊緣輪廓與存儲(chǔ)器112中存儲(chǔ)的手勢(shì)的手勢(shì)邊緣輪廓，并比較用戶的放大鏡的手勢(shì)圖像或加號(hào)手勢(shì)圖像的手勢(shì)運(yùn)動(dòng)軌跡與存儲(chǔ)器112中存儲(chǔ)的手勢(shì)的手勢(shì)運(yùn)動(dòng)軌跡，從而輸出放大鏡的手勢(shì)或加號(hào)手勢(shì)的手勢(shì)類(lèi)別為放大手勢(shì)，投影鏡頭114在用戶的視野范圍內(nèi)形成虛擬放大鏡的圖像，并將文字閱讀界面或游戲界面放大，用戶可以通過(guò)智能眼鏡16看到虛擬放大鏡的圖像以及放大的文字閱讀界面或游戲界面。
[0035]本實(shí)施例中的人機(jī)交互系統(tǒng)10，可穿戴設(shè)備11利用手勢(shì)邊緣輪廓和手勢(shì)運(yùn)動(dòng)軌跡對(duì)采集到的手勢(shì)進(jìn)行識(shí)別和匹配，并根據(jù)目標(biāo)手勢(shì)生成控制指令，根據(jù)控制指令生成虛擬工具圖像，使得利用虛擬現(xiàn)實(shí)技術(shù)的人機(jī)交互活動(dòng)更加精準(zhǔn)、完善。
[0036]本說(shuō)明書(shū)中的各個(gè)實(shí)施例均采用遞進(jìn)的方式描述，各個(gè)實(shí)施例之間相同相似的部分互相參見(jiàn)即可，每個(gè)實(shí)施例重點(diǎn)說(shuō)明的都是與其他實(shí)施例的不同之處。
[0037]在上述實(shí)施方式的描述中，具體特征、結(jié)構(gòu)、材料或者特點(diǎn)可以在任何的一個(gè)或多個(gè)實(shí)施例或示例中以合適的方式結(jié)合。
[0038]以上所述，僅為本實(shí)用新型的【具體實(shí)施方式】，但本實(shí)用新型的保護(hù)范圍并不局限于此，任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本實(shí)用新型揭露的技術(shù)范圍內(nèi)，可輕易想到變化或替換，都應(yīng)涵蓋在本實(shí)用新型的保護(hù)范圍之內(nèi)。因此，本實(shí)用新型的保護(hù)范圍應(yīng)以所述權(quán)利要求的保護(hù)范圍為準(zhǔn)。
【主權(quán)項(xiàng)】
1.一種人機(jī)交互系統(tǒng)，其特征在于，包括:可穿戴設(shè)備和顯示設(shè)備； 所述可穿戴設(shè)備包括攝像頭、存儲(chǔ)器、處理器和投影鏡頭； 所述攝像頭、投影鏡頭、存儲(chǔ)器分別與所述處理器信號(hào)連接，所述攝像頭用于采集用戶的當(dāng)前手勢(shì)圖像和所述顯示設(shè)備的顯示圖像，并提供給處理器； 所述處理器用于將所述當(dāng)前手勢(shì)圖像與所述存儲(chǔ)器中預(yù)存的手勢(shì)進(jìn)行匹配，根據(jù)匹配出的手勢(shì)的手勢(shì)類(lèi)別，查找預(yù)設(shè)的與所述匹配出的手勢(shì)的手勢(shì)類(lèi)別對(duì)應(yīng)的虛擬工具圖像，并將所述虛擬工具圖像和所述顯示設(shè)備的顯示圖像提供給投影鏡頭； 所述投影鏡頭用于在所述可穿戴設(shè)備前方投影出包括所述虛擬工具圖像和所述顯示設(shè)備的顯示圖像的虛擬圖像。2.根據(jù)權(quán)利要求1所述的人機(jī)交互系統(tǒng)，其特征在于，所述可穿戴設(shè)備還包括信息發(fā)送接口，所述信息發(fā)送接口與所述處理器信號(hào)連接，用于向顯示設(shè)備發(fā)送所述處理器根據(jù)所述手勢(shì)類(lèi)別提供的控制指令。3.根據(jù)權(quán)利要求1所述的人機(jī)交互系統(tǒng)，其特征在于，所述可穿戴設(shè)備為智能眼鏡，所述智能眼鏡包括鏡架和鏡片，以及設(shè)置在所述鏡架上的所述攝像頭、所述存儲(chǔ)器、所述處理器和設(shè)置在所述鏡架或所述鏡片上的所述投影鏡頭。4.根據(jù)權(quán)利要求3所述的人機(jī)交互系統(tǒng)，其特征在于，所述鏡架包括鏡框和鏡腿，所述攝像頭設(shè)置在所述鏡框上。5.根據(jù)權(quán)利要求3所述的人機(jī)交互系統(tǒng)，其特征在于，所述鏡片為具有投影功能的近眼透鏡。6.根據(jù)權(quán)利要求1所述的人機(jī)交互系統(tǒng)，其特征在于，所述攝像頭包括圖像處理器，用于在同時(shí)采集到包含用戶當(dāng)前手勢(shì)和所述顯示設(shè)備的顯示圖像的混合圖像時(shí)，從所述混合圖像中分別識(shí)別出當(dāng)前手勢(shì)圖像和所述顯示設(shè)備的顯示圖像。7.根據(jù)權(quán)利要求1所述的人機(jī)交互系統(tǒng)，其特征在于，所述處理器包括比較電路，用于比較所述當(dāng)前手勢(shì)圖像的手勢(shì)邊緣輪廓和所述存儲(chǔ)器預(yù)存的手勢(shì)的手勢(shì)邊緣輪廓，以及比較所述當(dāng)前手勢(shì)圖像的手勢(shì)運(yùn)動(dòng)軌跡和所述存儲(chǔ)器預(yù)存的手勢(shì)的手勢(shì)運(yùn)動(dòng)軌跡，輸出與所述當(dāng)前手勢(shì)圖像的手勢(shì)邊緣輪廓和手勢(shì)運(yùn)動(dòng)軌跡匹配的預(yù)存的手勢(shì)的手勢(shì)邊緣輪廓和手勢(shì)運(yùn)動(dòng)軌跡對(duì)應(yīng)的手勢(shì)類(lèi)別。8.根據(jù)權(quán)利要求2所述的人機(jī)交互系統(tǒng)，其特征在于，所述信息發(fā)送接口為無(wú)線接口。9.根據(jù)權(quán)利要求4所述的人機(jī)交互系統(tǒng)，其特征在于，所述攝像頭的數(shù)量為兩個(gè)，分別設(shè)置在所述鏡框上靠近所述鏡腿的區(qū)域。
【文檔編號(hào)】G06F3/01GK205485916SQ201620006644
【公開(kāi)日】2016年8月17日
【申請(qǐng)日】2016年1月4日
【發(fā)明人】盧永春
【申請(qǐng)人】京東方科技集團(tuán)股份有限公司