體感交互方法、系統(tǒng)以及裝置的制造方法
【專利摘要】本發(fā)明公開了一種體感交互方法、系統(tǒng)以及裝置，所述體感交互方法包括：體感交互裝置獲取圖像信息；對所述圖像信息進行姿勢或動作識別；獲取與識別結(jié)果對應的體感交互動作指令；將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。通過上述方式，本發(fā)明降低了完成體感交互操作的設備的要求，相較于現(xiàn)有技術(shù)需要特殊深度相機相匹配的方式，大大降低了研發(fā)人員的工作量和工作難度，降低了體感交互設備的成本，也促進了體感交互技術(shù)的發(fā)展。
【專利說明】
體感交互方法、系統(tǒng)以及裝置
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及智能終端技術(shù)領(lǐng)域，特別是涉及一種體感交互方法、系統(tǒng)以及裝置。
【背景技術(shù)】
[0002]體感游戲是通過自身的身體動作來操作游戲，相較于傳統(tǒng)的通過鍵盤、鼠標以及有線手柄等的游戲，體感游戲不再是手指操作運動，身體的運動量和娛樂性都得到了很大的提高，因此，體感游戲得到了很好的發(fā)展。
[0003]現(xiàn)有的體感游戲一般都是采用深度相機與處理設備如智能電視或計算機等智能終端設備相結(jié)合的方式來實現(xiàn)，即通過深度相機獲取到的目標深度圖像，通過有線或無線的方式傳輸?shù)教幚碓O備，二者相互配合來實現(xiàn)對體感動作的識別。
[0004]然而，在智能設備種類越來越豐富的同時，同一種類不同型號的智能終端的型號也在不斷的更新完善，由于不同種類以及不同型號的智能設備所能匹配的深度相機并不相同，即均需要進行特制的深度相機與其匹配才能正常使用。這種匹配方式的限制不僅加大了研發(fā)人員的工作量和工作難度，也阻礙了體感游戲的發(fā)展。

【發(fā)明內(nèi)容】

[0005]本發(fā)明主要解決的技術(shù)問題是提供一種體感交互方法、裝置以及系統(tǒng)，能夠有效解決不同型號顯示設備與深度相機不匹配的問題。
[0006]為解決上述技術(shù)問題，本發(fā)明采用的一個技術(shù)方案是:提供一種體感交互方法，所述體感交互方法包括:
[0007]體感交互裝置獲取圖像信息；
[0008]對所述圖像信息進行姿勢或動作識別；
[0009 ]獲取與識別結(jié)果對應的體感交互動作指令；
[0010]將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
[0011]其中，所述將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令的步驟之前還包括如下步驟:
[0012]所述體感交互裝置判斷所述顯示設備能否識別所述體感交互動作指令；
[0013]如果所述顯示設備不能識別所述體感交互動作指令，則將所述體感交互動作指令傳輸至服務器進行處理；
[0014]接收所述服務器返回的經(jīng)處理的體感交互動作指令；
[0015]所述將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令的步驟包括:
[0016]將所述經(jīng)處理的體感交互動作指令發(fā)送至所述顯示設備。
[0017]其中，所述體感交互裝置包括圖像采集單元和處理器；
[0018]其中，所述獲取圖像信息以及所述對所述圖像信息進行姿勢或動作識別的步驟由所述圖像采集單元執(zhí)行；
[0019]所述獲取與識別結(jié)果對應的體感交互動作指令的步驟由所述處理器執(zhí)行。
[0020]其中，所述體感交互裝置包括圖像采集單元和處理器；
[0021]其中，所述獲取深度圖像信息由所述圖像采集單元執(zhí)行；
[0022]所述對所述深度圖像信息進行姿勢或動作識別以及所述獲取與識別結(jié)果對應的體感交互動作指令的步驟由所述處理器執(zhí)行。
[0023]其中，所述獲取與識別結(jié)果對應的體感交互動作指令的步驟具體包括:
[0024]根據(jù)所述體感交互裝置存儲的轉(zhuǎn)換參數(shù)將所述識別結(jié)果轉(zhuǎn)換成與執(zhí)行所述深度圖像信息的終端對應的體感交互動作指令。
[0025]為解決上述技術(shù)問題，本發(fā)明采用的另一個技術(shù)方案是:提供一種體感交互系統(tǒng)，所述體感交互系統(tǒng)包括體感交互裝置，以及與所述體感交互裝置有線或無線連接的顯示設備，
[0026]所述體感交互裝置用于用于獲取圖像信息，對所述圖像信息進行姿勢或動作識另IJ;獲取與識別結(jié)果對應的體感交互動作指令，并將所述體感交互動作發(fā)送至顯示設備；
[0027]所述顯示設備用于接收體感交互動作指令，并所述根據(jù)所述體感交互動作指令執(zhí)行對應的體感交互動作。
[0028]其中，所述體感交互系統(tǒng)還包括與所述體感交互裝置無線連接的服務器，
[0029]所述服務器用于在所述體感交互裝置確定所述顯示設備不能識別所述體感交互動作指令時，對所述體感交互動作指令進行處理，并將處理后的體感交互動作指令返回給所述體感交互裝置。
[0030]其中，所述體感交互裝置包括圖像采集單元和處理器；
[0031]所述圖像采集單元用于獲取圖像信息以及所述對所述圖像信息進行姿勢或動作識別；
[0032]所述處理器用于獲取與識別結(jié)果對應的體感交互動作指令。
[0033]其中，所述體感交互裝置包括圖像采集單元和處理器；
[0034]所述圖像采集單元用于獲取深度圖像信息；
[0035]所述處理器用于對所述深度圖像信息進行姿勢或動作識別以及所述獲取與識別結(jié)果對應的體感交互動作指令。
[0036]為了解決上述技術(shù)問題，本發(fā)明采用的再一個技術(shù)方案是:提供一種體感交互裝置，
[0037]所述體感交互裝置包括相互電路連接的圖像采集單元以及處理器，
[0038]所述圖像采集單元用于獲取圖像信息；
[0039]所述圖像采集裝置或所述處理器用于對所述圖像信息進行姿勢或動作識別；
[0040]所述處理器還用于獲取與識別結(jié)果對應的體感交互動作指令，并將所述體感交互動作發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
[0041]本發(fā)明的有益效果是:區(qū)別于現(xiàn)有技術(shù)的情況，本實施方式的體感交互裝置獲取到圖像信號后，先對該圖像信息進行姿勢或動作識別，再獲取與識別結(jié)果對應的體感交互動作指令，并將該動作交互指令發(fā)送至顯示設備，以使該顯示設備執(zhí)行該體感交互動作指令。上述通過將對圖像信號采集、姿勢或動作識別以及對識別結(jié)果的轉(zhuǎn)換的功能都集成在獨立存在的體感交互裝置的方式，體感交互裝置本身具有通用性，而顯示設備僅僅起到顯示的作用，不僅能夠?qū)ν瓿审w感交互操作的設備的要求更低，相較于現(xiàn)有技術(shù)需要特殊深度相機相匹配的方式，大大降低了研發(fā)人員的工作量和工作難度，降低了體感交互設備的成本，也促進了體感交互技術(shù)的發(fā)展。
【附圖說明】
[0042]圖1是本發(fā)明體感交互方法一實施方式的流程示意圖；
[0043]圖2是本發(fā)明體感交互方法另一實施方式的流程示意圖；
[0044]圖3是本發(fā)明體感交互系統(tǒng)一實施方式的結(jié)構(gòu)示意圖；
[0045]圖4是本發(fā)明體感交互系統(tǒng)另一實施方式的結(jié)構(gòu)示意圖；
[0046]圖5是本發(fā)明體感交互系統(tǒng)再一實施方式的結(jié)構(gòu)示意圖；
[0047]圖6是本發(fā)明體感交互裝置一實施方式的結(jié)構(gòu)示意圖；
[0048]圖7是本發(fā)明體感交互裝置另一實施方式的結(jié)構(gòu)示意圖。
【具體實施方式】
[0049]參閱圖1，圖1是本發(fā)明體感交互方法一實施方式的流程示意圖。如圖1所示，本實施方式的體感交互方法包括如下步驟:
[0050]101:體感交互裝置獲取圖像信息。
[0051 ]為了完成體感交互游戲等體感交互操作，體感交互裝置首先獲取與體感交互操作對應的圖像信息，其中，在一般情況下，該圖像信息為包括用戶動作指令信息的深度圖像信息。該深度圖像信息包括深度相片以及視頻中的至少一種。
[0052]在一個具體的實施方式中，該體感交互裝置包括圖像采集單元以及處理器，該圖像采集單元包括紅外投影模組、RGB相機、紅外相機，也可以包括用于深度計算及姿勢動作識別的算法芯片;所述處理器為ARM處理器。該圖像采集單元與處理器集成在同一電路模塊中，在此不做限定。
[0053]在另一個實施方式中，該體感交互裝置還包括與該處理器電路連接的存儲單元以及接口單元，該存儲單元用于存儲體感交互裝置運行所需要的數(shù)據(jù)，比如計算運行數(shù)據(jù)、深度相機專用數(shù)據(jù)、系統(tǒng)數(shù)據(jù)等。接口電路用于與所述顯示設備連接，以將所述體感交互動作指令發(fā)送至所述顯示設備。所述存儲單元包括DDR存儲器、EMMC存儲器以及SD卡中的至少一個;所述接口電路包括藍牙電路、WiFi電路、高清晰度多媒體接口HDM1、USB接口、以太網(wǎng)接口中的至少一個。
[0054]其中，獲取圖像信息的步驟由該圖像采集單元來完成。
[0055]102:對所述圖像信息進行姿勢或動作識別。
[0056]在獲取到圖像信息后，為了將該圖像信息轉(zhuǎn)換為顯示設備可識別的體感交互動作指令，體感交互裝置首先對該圖像信息進行有效信息的鑒別，包括對有效姿勢或動作進行識別，如用戶左右擺動左右胳膊或肩膀到角度等，在此不做限定。
[0057]在一個可選的實施方式中，對所述圖像信息進行姿勢或動作識別的步驟由體感交互裝置的圖像采集單元來實施。
[0058]在另一個可選的實施方式中，對所述圖像信息進行姿勢或動作識別的步驟也由體感交互裝置的處理器來實現(xiàn)。在本實施方式中，體感交互裝置的集成度明顯高于上一個實施方式。
[0059]103:獲取與識別結(jié)果對應的體感交互動作指令。
[0060]由于最終執(zhí)行顯示該圖像信息的顯示設備的種類可能會很豐富，差異性也很大，為了保證該圖像信息能夠被當前選擇的顯示設備相匹配，體感交互裝置首先獲取該顯示設備的類型與型號，然后根據(jù)識別結(jié)果獲取與該顯示設備型號相匹配的體感交互動作指令，即將識別結(jié)果轉(zhuǎn)換成該顯示設備能夠直接執(zhí)行的體感交互動作指令。
[0061]具體地，體感交互裝置根據(jù)其存儲的轉(zhuǎn)換參數(shù)將所述識別結(jié)果轉(zhuǎn)換成與執(zhí)行所述圖像信息的顯示設備對應的體感交互動作指令。
[0062]其中，該轉(zhuǎn)化參數(shù)包括參考圖像數(shù)據(jù)以及體感交互裝置內(nèi)部參數(shù)數(shù)據(jù)等。
[0063]其中，該參考圖像數(shù)據(jù)以及體感交互裝置內(nèi)部參數(shù)數(shù)據(jù)均存儲在該體感交互裝置的存儲單元中，在此不在限定。
[0064]其中，該獲取與識別結(jié)果對應的體感交互動作指令的步驟由體感交互裝置的處理器來實現(xiàn)。
[0065]104:將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
[0066]為了實現(xiàn)體感交互操作，體感交互裝置在將圖像信息轉(zhuǎn)換成體感交互動作指令后，進一步地將該體感交互動作指令發(fā)送至顯示設備。
[0067]具體地，體感交互裝置通過其接口單元將該體感交互動作指令發(fā)送至顯示設備。即體感交互裝置可通過有線或無線的方式將該指令傳輸至顯示設備。
[0068]顯示設備接收到該體感交互動作指令后，執(zhí)行該體感交互動作指令對應的操作，如實現(xiàn)拐彎、接球等操作，在此不做限定。
[0069]其中，所述顯示設備包括顯示器、電視、平板電腦、PC機、智能手機等顯示設備中的至少一種。
[0070]在上述任一實施方式中，完成體感交互操作的所有控制程序或資源都預先存儲在體感交互裝置中，在實現(xiàn)體感交互時，只需直接獲取圖像信息即可。
[0071]但是在一些特殊的情況下，如體感交互裝置存儲的應用軟件需要更新，或或當前版本下的控制資源不能將圖像信息轉(zhuǎn)換成顯示設備可識別的體感交互動作指令，為了實現(xiàn)體感交互操作的完成，體感交互裝置需要進一步的通過服務器來更新。
[0072]進一步地如圖2所示，圖2是本發(fā)明體感交互方法另一實施方式的流程示意圖。
[0073]本實施方式的體感交互方法包括如下步驟:
[0074]201:體感交互裝置獲取圖像信息。
[0075]202:對所述圖像信息進行姿勢或動作識別。
[0076]203:獲取與識別結(jié)果對應的體感交互動作指令。
[0077]由于步驟201?203與圖1中的步驟101?103相同，具體請參閱圖1以及相關(guān)文字描述，在此不再贅述。
[0078]本實施方式的體感交互方法還包括如下步驟:
[0079]204:所述體感交互裝置判斷所述顯示設備能否識別所述體感交互動作指令。
[0080]體感交互裝置在獲取到該體感交互動作指令后，為了保證體感操作的可實施性，提高體感交互的執(zhí)行率，體感交互裝置首先判斷該顯示設備是否能夠識別該體感交互操作。即該體感交互裝置確定當前產(chǎn)生的體感交互指令對于即將執(zhí)行的體感交互裝置而言，是否為有效的指令。
[0081]在一個具體的實施方式中，體感交互裝置可通過將當前的體感交互動作指令與該顯示設備所能識別的體感交互動作指令進行比對，確定二者在格式以及內(nèi)容上是否相匹配。如果二者在格式和內(nèi)容上都相匹配，則直接執(zhí)行將該體感交互動作指令發(fā)送至顯示設備的步驟。
[0082]205:如果所述顯示設備不能識別所述體感交互動作指令，則將所述體感交互動作指令傳輸至服務器進行處理。
[0083]如果當前的體感交互動作指令與該顯示設備所能識別的體感交互動作指令在格式或內(nèi)容上不相匹配時，即顯示設備不能識別所述體感交互動作指令時，體感交互裝置將當前的體感交互動作指令進行轉(zhuǎn)換。
[0084]具體地，體感交互裝置將當前的體感交互動作指令發(fā)送至于其通過無線網(wǎng)絡連接的的服務器進行轉(zhuǎn)換。
[0085]206:接收所述服務器返回的經(jīng)處理的體感交互動作指令。
[0086]在服務器將當前顯示設備不能識別的體感交互動作指令按照該顯示設備的型號以及類型轉(zhuǎn)換成該顯示設備能夠識別的體感交互動作指令后，將該處理后的體感交互動作指令重新返回至該體感交互裝置。
[0087]對應的，體感交互裝置接收該經(jīng)處理的體感交互動作指令。
[0088]在另一個實施方式中，體感交互裝置也可以向上述服務器發(fā)送更新當前所存儲的該顯示設備的參考數(shù)據(jù)或體感交互動作指令的請求，并重新對當前采集到的圖像信息進行轉(zhuǎn)換成顯示設備能夠識別的體感交互動作指令。
[0089]在另一個實施方式中，體感交互裝置向服務器發(fā)送重新下載與該顯示設備相匹配的參考數(shù)據(jù)或體感交互動作指令的請求，并重新對當前采集到的圖像信息進行轉(zhuǎn)換成顯示設備能夠識別的體感交互動作指令。
[0090]在另一個實施方式中，當體感交互裝置與多個顯示設備連接時，如體感交互交互裝置與多個顯示設備聯(lián)網(wǎng)操作，體感交互裝置可將該體感交互指令發(fā)送至服務器，通過服務器來實現(xiàn)多個顯示設備之間的同時操作。
[0091]207:將所述經(jīng)處理的體感交互動作指令發(fā)送至所述顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
[0092]顯示設備接收到該體感交互動作指令后，執(zhí)行該體感交互動作指令對應的操作。
[0093]區(qū)別于現(xiàn)有技術(shù)，本實施方式的體感交互裝置獲取到圖像信號后，先對該圖像信息進行姿勢或動作識別，再獲取與識別結(jié)果對應的體感交互動作指令，并將該動作交互指令發(fā)送至顯示設備，以使該顯示設備執(zhí)行該體感交互動作指令。上述通過將對圖像信號采集、姿勢或動作識別以及對識別結(jié)果的轉(zhuǎn)換的功能都集成在獨立存在的體感交互裝置的方式，體感交互裝置本身具有通用性，而顯示設備僅僅起到顯示的作用，不僅能夠?qū)ν瓿审w感交互操作的設備的要求更低，相較于現(xiàn)有技術(shù)需要特殊深度相機相匹配的方式，大大降低了研發(fā)人員的工作量和工作難度，降低了體感交互設備的成本，也促進了體感交互技術(shù)的發(fā)展。
[0094]另外，本實施方式的體感交互裝置在顯示設備不能識別所述體感交互動作指令，則將所述體感交互動作指令傳輸至服務器進行處理，再將處理后的體感交互動作指令發(fā)送至顯示設備，能夠有效提高體感交互的執(zhí)行率，保證體感操作的可實施性。同時由于體感交互裝置可以直接與服務器連接進行軟件升級，系統(tǒng)更新，不僅能夠使體感交互裝置有限的內(nèi)存資源得到充分利用，也能夠為用戶節(jié)省更換體感交互裝置的成本，提高用戶體驗。另夕卜，體感交互裝置還可以通過服務器實現(xiàn)多個顯示設備的同時操控，進一步提高用戶體驗以及降低操作成本。
[0095]參閱圖3，圖3是本發(fā)明體感交互系統(tǒng)一實體感施方式的結(jié)構(gòu)示意圖。如圖3所示，本實施方式的體感交互系統(tǒng)包括體感交互裝置301以及顯示設備302，其中，體感交互裝置301與顯示設備302可通過無線連接，也可以通過有線連接。
[0096]其中，該顯示設備302包括顯示器、電視、平板電腦、PC機、智能手機等顯示設備中的至少一種。
[0097]該體感交互裝置301用于獲取圖像信息，對所述圖像信息進行姿勢或動作識別;獲取與識別結(jié)果對應的體感交互動作指令，并將所述體感交互動作發(fā)送至顯示設備302。
[0098]顯示設備302用于接收體感交互動作指令，并所述根據(jù)所述體感交互動作指令執(zhí)行對應的體感交互動作。
[0099]為了清楚詳細的描述上述體感交互系統(tǒng)的工作過程，進一步地參閱圖4，圖4是本發(fā)明體感交互系統(tǒng)另一實施方式的結(jié)果示意圖，是圖3體感交互系統(tǒng)的一【具體實施方式】的結(jié)構(gòu)示意圖。
[0100]本實施方式的體感交互裝置401包括圖像采集單元4011以及處理器4012，其中，圖像采集單元4011與處理器4012電路連接。該圖像采集單元4011包括紅外投影模組、RGB相機、紅外相機。處理器4012為ARM處理器。在一個優(yōu)選的實施方式中，為了提高體感交互裝置401的集成度，該圖像采集單元4011與處理器4012可集成在同一電路模塊中，在此不做限定。
[0101]該體感交互裝置401還包括與該處理器4012電路連接的存儲單元4013以及接口單元4014，該存儲單元4013用于存儲體感交互裝置401運行所述產(chǎn)生的數(shù)據(jù)。接口電路4014用于與所述顯示設備402連接，以將所述體感交互動作指令發(fā)送至所述顯示設備402。所述存儲單元4013包括DDR存儲器、EMMC存儲器以及SD卡中的至少一個;所述接口電路包括藍牙電路、WiFi電路、高清晰度多媒體接口HDM1、AV0UT接口、USB接口、以太網(wǎng)接口中的至少一個。
[0102]在一個具體的實施方式中，如圖4所示，體感交互裝置401通過其圖像采集單元4011獲取圖像信息。其中，在一般情況下，該圖像信息為包括用戶動作指令信息的深度圖像信息。該深度圖像信息包括深度相片以及視頻中的至少一種。
[0103]圖像采集單元4011在獲取到圖像信息后，為了將該圖像信息轉(zhuǎn)換為顯示設備可識別的體感交互動作指令，圖像采集單元4011進一步對該圖像信息進行有效信息的鑒別，包括對有效姿勢或動作進行識別，如用戶左右擺動左右胳膊或肩膀到角度等，在此不做限定。
[0104]在另一個實施方式中，體感交互裝置401通過其處理器4012對所述圖像信息進行姿勢或動作識別。通過服務器4012對所述圖像信息進行姿勢或動作識別的方式，體感交互裝置401的集成度明顯高于通過圖像采集單元4011對所述圖像信息進行姿勢或動作識別的方式。
[0105]體感交互裝置401的處理器4012在體感交互裝置401對所述圖像信息進行姿勢或動作識別后，進一步用于獲取與識別結(jié)果對應的體感交互動作指令。
[0106]為了保證該圖像信息能夠被當前選擇的顯示設備402相匹配，處理器4012首先獲取該顯示設備402的類型與型號，然后根據(jù)識別結(jié)果獲取與該顯示設備402型號相匹配的體感交互動作指令，即將識別結(jié)果轉(zhuǎn)換成該顯示設備402能夠直接執(zhí)行的體感交互動作指令。
[0107]具體地，處理器4012根據(jù)其存儲的轉(zhuǎn)換參數(shù)將所述識別結(jié)果轉(zhuǎn)換成與執(zhí)行所述圖像信息的顯示設備402對應的體感交互動作指令。
[0108]其中，該轉(zhuǎn)化參數(shù)包括參考圖像數(shù)據(jù)以及體感交互裝置內(nèi)部參數(shù)數(shù)據(jù)等。
[0109]其中，該參考圖像數(shù)據(jù)以及體感交互裝置內(nèi)部參數(shù)數(shù)據(jù)均存儲在該體感交互裝置401的存儲單元4013中，在此不在限定。
[0110]體感交互裝置401的接口單元4014用于將將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
[0111]顯示設備402接收到該體感交互動作指令后，執(zhí)行該體感交互動作指令對應的操作，如實現(xiàn)拐彎、接球等操作，在此不做限定。
[0112]在上述任一實施方式中，完成體感交互操作的所有控制程序或資源都預先存儲在體感交互裝置401的存儲單元4013中，在實現(xiàn)體感交互時，只需直接獲取圖像信息即可。
[0113]但是在一些特殊的情況下，如體感交互裝置401存儲的應用軟件需要更新，或或當前版本下的控制資源不能將圖像信息轉(zhuǎn)換成顯示設備402可識別的體感交互動作指令，為了實現(xiàn)體感交互操作的完成，體感交互裝置401需要進一步的通過服務器來更新。
[0114]進一步地參閱圖5，圖5是本發(fā)明體感交互系統(tǒng)再一實施方式的結(jié)構(gòu)示意圖。
[0115]本實施方式的體感交互系統(tǒng)除了包括體感交互裝置501以及與其連接的顯示設備502，還包括與該體感交互裝置501連接的服務器503。
[0116]本實施方式的體感交互系統(tǒng)與上一個實施方式的體感交互系統(tǒng)的區(qū)別在于，本實施方式的體感交互裝置501在獲取圖像信息，對所述圖像信息進行姿勢或動作識別，獲取與識別結(jié)果對應的體感交互動作指令后，還用于判斷所述顯示設備502能否識別所述體感交互動作指令。
[0117]具體地，體感交互裝置501在獲取到該體感交互動作指令后，為了保證體感操作的可實施性，提高體感交互的執(zhí)行率，體感交互裝置501首先判斷該顯示設備502是否能夠識別該體感交互操作。即該體感交互裝置確定當前產(chǎn)生的體感交互指令對于即將執(zhí)行的體感交互裝置而言，是否為有效的指令。
[0118]在一個具體的實施方式中，體感交互裝置501可通過將當前的體感交互動作指令與該顯示設備502所能識別的體感交互動作指令進行比對，確定二者在格式以及內(nèi)容上是否相匹配。如果二者在格式和內(nèi)容上都相匹配，則直接將該體感交互動作指令發(fā)送至顯示設備502。
[0119]體感交互裝置501還用于在顯示設備502不能識別所述體感交互動作指令，將所述體感交互動作指令傳輸至服務器503進行處理。
[0120]在服務器503將當前顯示設備502不能識別的體感交互動作指令按照該顯示設備502的型號以及類型轉(zhuǎn)換成該顯示設備502能夠識別的體感交互動作指令后，將該處理后的體感交互動作指令重新返回至該體感交互裝置501。[0121 ] 對應的，體感交互裝置501接收該經(jīng)處理的體感交互動作指令。
[0122]在另一個實施方式中，體感交互裝置501也可以向上述服務器503發(fā)送更新當前所存儲的該顯示設備502的參考數(shù)據(jù)或體感交互動作指令的請求，并重新對當前采集到的圖像信息進行轉(zhuǎn)換成顯示設備502能夠識別的體感交互動作指令。
[0123]在另一個實施方式中，體感交互裝置501向服務器503發(fā)送重新下載與該顯示設備502相匹配的參考數(shù)據(jù)或體感交互動作指令的請求，并重新對當前采集到的圖像信息進行轉(zhuǎn)換成顯示設備502能夠識別的體感交互動作指令。
[0124]在另一個實施方式中，當體感交互裝置與多個顯示設備連接時，如體感交互交互裝置與多個顯示設備聯(lián)網(wǎng)操作，體感交互裝置可將該體感交互指令發(fā)送至服務器，通過服務器來實現(xiàn)多個顯示設備之間的同時操作。
[0125]體感交互裝置501還用于將所述經(jīng)處理的體感交互動作指令發(fā)送至所述顯示設備。
[0126]顯示設備503用于接收到該體感交互動作指令后，執(zhí)行該體感交互動作指令對應的操作。
[0127]區(qū)別于現(xiàn)有技術(shù)，本實施方式的體感交互系統(tǒng)包括體感交互裝置以及顯示設備，體感交互裝置獲取到圖像信號后，先對該圖像信息進行姿勢或動作識別，再獲取與識別結(jié)果對應的體感交互動作指令，并將該動作交互指令發(fā)送至顯示設備，顯示設備執(zhí)行該體感交互動作指令。上述通過將對圖像信號采集、姿勢或動作識別以及對識別結(jié)果的轉(zhuǎn)換的功能都集成在獨立存在的體感交互裝置上，不僅使體感交互裝置本身具有通用性，而且顯示設備僅僅起到顯示的作用，能夠?qū)ν瓿审w感交互操作的設備的要求更低，相較于現(xiàn)有技術(shù)需要特殊深度相機相匹配的方式，大大降低了研發(fā)人員的工作量和工作難度，降低了體感交互設備的成本，也促進了體感交互技術(shù)的發(fā)展。
[0128]另外，本實施方式的體感交互裝置在顯示設備不能識別所述體感交互動作指令，則將所述體感交互動作指令傳輸至服務器進行處理，再將處理后的體感交互動作指令發(fā)送至顯示設備，能夠有效提高體感交互的執(zhí)行率，保證體感操作的可實施性。同時由于體感交互裝置可以直接與服務器連接進行軟件升級，系統(tǒng)更新，不僅能夠使體感交互裝置有限的內(nèi)存資源得到充分利用，也能夠為用戶節(jié)省更換體感交互裝置的成本，提高用戶體驗。另夕卜，體感交互裝置還可以通過服務器實現(xiàn)多個顯示設備的同時操控，進一步提高用戶體驗以及降低操作成本。
[0129]參閱圖6，圖6是本發(fā)明體感交互裝置一實施方式的結(jié)構(gòu)示意圖。本實施方式的體感交互裝置包括相互電路連接的圖像采集單元601以及處理器602。該圖像采集單元601包括紅外投影模組、RGB相機、紅外相機，也可以包括用于深度計算及姿勢動作識別的算法芯片。處理器602為ARM處理器。在一個優(yōu)選的實施方式中，為了提高體感交互裝置的集成度，該圖像采集單元601與處理器602可集成在同一電路模塊中，在此不做限定。
[0130]圖像采集單元601用于獲取圖像信息。其中，在一般情況下，該圖像信息為包括用戶動作指令信息的深度圖像信息。該深度圖像信息包括深度相片以及視頻中的至少一種。
[0131]圖像采集單元601在獲取到圖像信息后，為了將該圖像信息轉(zhuǎn)換為顯示設備可識別的體感交互動作指令，圖像采集單元601進一步對該圖像信息進行有效信息的鑒別，包括對有效姿勢或動作進行識別，如用戶左右擺動左右胳膊或肩膀到角度等，在此不做限定。
[0132]在另一個實施方式中，也可通過處理器602對所述圖像信息進行姿勢或動作識別。通過處理器602對所述圖像信息進行姿勢或動作識別的方式，體感交互裝置的集成度明顯高于通過圖像采集單元601對所述圖像信息進行姿勢或動作識別的方式。
[0133]處理器602在體感交互裝置對所述圖像信息進行姿勢或動作識別后，進一步用于獲取與識別結(jié)果對應的體感交互動作指令。
[0134]具體地，處理器602根據(jù)其存儲的轉(zhuǎn)換參數(shù)將所述識別結(jié)果轉(zhuǎn)換成與執(zhí)行所述圖像信息的顯示設備對應的體感交互動作指令。并將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
[0135]其中，該轉(zhuǎn)化參數(shù)包括參考圖像數(shù)據(jù)以及體感交互裝置內(nèi)部參數(shù)數(shù)據(jù)等。
[0136]在其他實施方式中，為了保證體感操作的可實施性，提高體感交互的執(zhí)行率，處理器602還用于判斷該顯示設備能否識別所述體感交互動作指令。具體地，處理器602可通過將當前的體感交互動作指令與該顯示設備所能識別的體感交互動作指令進行比對，確定二者在格式以及內(nèi)容上是否相匹配。如果二者在格式和內(nèi)容上都相匹配，則直接將該體感交互動作指令發(fā)送至顯示設備。如果顯示設備不能識別所述體感交互動作指令，將所述體感交互動作指令傳輸至服務器進行處理。并將處理后的體感交互動作指令發(fā)送至顯示設備。
[0137]在另一個方式中，如圖7所示，體感交互裝置除了包括體感交互裝置701以及處理器702，還包括與處理器702電路連接的存儲單元703以及接口單元704，該存儲單元703用于存儲體感交互裝置運行所述產(chǎn)生的數(shù)據(jù)。接口電路704用于與外界設備如顯示設備或/和服務器連接，以將所述體感交互動作指令發(fā)送至所述顯示設備。所述存儲單元703包括DDR存儲器、EMMC存儲器以及SD卡中的至少一個;所述接口電路包括藍牙電路、WiFi電路、高清晰度多媒體接口 HDM1、AVOUT接口、USB接口、以太網(wǎng)接口中的至少一個。
[0138]區(qū)別于現(xiàn)有技術(shù)，本實施方式的體感交互裝置包括圖像采集單元以及處理器，圖像采集單元獲取到圖像信號后，圖像采集單元或處理器先對該圖像信息進行姿勢或動作識另Ij，處理器再獲取與識別結(jié)果對應的體感交互動作指令，并將該動作交互指令發(fā)送至顯示設備，以通過顯示設備執(zhí)行該體感交互動作指令。上述通過將對圖像信號將完成采集、姿勢或動作識別以及對識別結(jié)果的轉(zhuǎn)換的功能的圖像采集單元以及處理器都集成在獨立存在的體感交互裝置上，不僅使體感交互裝置本身具有通用性，而且顯示設備僅僅起到顯示的作用，能夠?qū)ν瓿审w感交互操作的設備的要求更低，相較于現(xiàn)有技術(shù)需要特殊深度相機相匹配的方式，大大降低了研發(fā)人員的工作量和工作難度，降低了體感交互設備的成本，也促進了體感交互技術(shù)的發(fā)展。
[0139]以上所述僅為本發(fā)明的實施方式，并非因此限制本發(fā)明的專利范圍，凡是利用本發(fā)明說明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換，或直接或間接運用在其他相關(guān)的技術(shù)領(lǐng)域，均同理包括在本發(fā)明的專利保護范圍內(nèi)。
【主權(quán)項】
1.一種體感交互方法，其特征在于，所述體感交互方法包括: 體感交互裝置獲取圖像信息； 對所述圖像信息進行姿勢或動作識別； 獲取與識別結(jié)果對應的體感交互動作指令； 將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。2.根據(jù)權(quán)利要求1所述的體感交互方法，其特征在于，所述將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令的步驟之前還包括如下步驟: 所述體感交互裝置判斷所述顯示設備能否識別所述體感交互動作指令； 如果所述顯示設備不能識別所述體感交互動作指令，則將所述體感交互動作指令傳輸至服務器進行處理； 接收所述服務器返回的經(jīng)處理的體感交互動作指令； 所述將所述體感動作交互指令發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令的步驟包括: 將所述經(jīng)處理的體感交互動作指令發(fā)送至所述顯示設備。3.根據(jù)權(quán)利要求1所述的體感交互方法，其特征在于，所述體感交互裝置包括圖像采集單元和處理器； 其中，所述獲取圖像信息以及所述對所述圖像信息進行姿勢或動作識別的步驟由所述圖像采集單元執(zhí)行； 所述獲取與識別結(jié)果對應的體感交互動作指令的步驟由所述處理器執(zhí)行。4.根據(jù)權(quán)利要求1所述的體感交互方法，其特征在于，所述體感交互裝置包括圖像采集單元和處理器； 其中，所述獲取深度圖像信息由所述圖像采集單元執(zhí)行； 所述對所述深度圖像信息進行姿勢或動作識別以及所述獲取與識別結(jié)果對應的體感交互動作指令的步驟由所述處理器執(zhí)行。5.根據(jù)權(quán)利要求1所述的體感交互方法，其特征在于，所述獲取與識別結(jié)果對應的體感交互動作指令的步驟具體包括: 根據(jù)所述體感交互裝置存儲的轉(zhuǎn)換參數(shù)將所述識別結(jié)果轉(zhuǎn)換成與執(zhí)行所述圖像信息的顯示設備對應的體感交互動作指令。6.—種體感交互系統(tǒng)，其特征在于，所述體感交互系統(tǒng)包括體感交互裝置，以及與所述體感交互裝置有線或無線連接的顯示設備， 所述體感交互裝置用于獲取圖像信息，對所述圖像信息進行姿勢或動作識別；獲取與識別結(jié)果對應的體感交互動作指令，并將所述體感交互動作發(fā)送至顯示設備； 所述顯示設備用于接收體感交互動作指令，并所述根據(jù)所述體感交互動作指令執(zhí)行對應的體感交互動作。7.根據(jù)權(quán)利要求6所述的體感交互系統(tǒng)，其特征在于，所述體感交互系統(tǒng)還包括與所述體感交互裝置無線連接的服務器， 所述服務器用于在所述體感交互裝置確定所述顯示設備不能識別所述體感交互動作指令時，對所述體感交互動作指令進行處理，并將處理后的體感交互動作指令返回給所述體感交互裝置。8.根據(jù)權(quán)利要求6所述的體感交互系統(tǒng)，其特征在于，所述體感交互裝置包括圖像采集單元和處理器； 所述圖像采集單元用于獲取圖像信息以及所述對所述圖像信息進行姿勢或動作識別； 所述處理器用于獲取與識別結(jié)果對應的體感交互動作指令。9.根據(jù)權(quán)利要求6所述的體感交互系統(tǒng)，其特征在于，所述體感交互裝置包括圖像采集單元和處理器； 所述圖像采集單元用于獲取深度圖像信息； 所述處理器用于對所述深度圖像信息進行姿勢或動作識別以及所述獲取與識別結(jié)果對應的體感交互動作指令。10.—種體感交互裝置，其特征在于，所述體感交互裝置包括相互電路連接的圖像采集單元以及處理器， 所述圖像采集單元用于獲取圖像信息； 所述圖像采集裝置或所述處理器用于對所述圖像信息進行姿勢或動作識別； 所述處理器還用于獲取與識別結(jié)果對應的體感交互動作指令，并將所述體感交互動作發(fā)送至顯示設備，以使所述顯示設備執(zhí)行所述體感交互動作指令。
【文檔編號】G06F3/01GK106095082SQ201610388234
【公開日】2016年11月9日
【申請日】2016年6月2日 公開號201610388234.7, CN 106095082 A, CN 106095082A, CN 201610388234, CN-A-106095082, CN106095082 A, CN106095082A, CN201610388234, CN201610388234.7
【發(fā)明人】黃源浩, 劉龍, 肖振中, 許星, 許崇言
【申請人】深圳奧比中光科技有限公司