根據(jù)基于事件的傳感器的輸出提取靜態(tài)圖案的方法和設(shè)備的制造方法
【專利摘要】提供根據(jù)基于事件的傳感器的輸出提取靜態(tài)圖案的方法和設(shè)備。一種從基于事件的傳感器的輸出提取靜態(tài)圖案的方法。所述方法可包括：響應(yīng)于動(dòng)態(tài)輸入從基于事件的傳感器接收事件信號(hào)；基于包括在事件信號(hào)中的標(biāo)識(shí)和時(shí)間來(lái)提取與動(dòng)態(tài)輸入相關(guān)聯(lián)的靜態(tài)圖案。從基于標(biāo)識(shí)和時(shí)間生成的圖提取靜態(tài)圖案。
【專利說(shuō)明】根據(jù)基于事件的傳感器的輸出提取靜態(tài)圖案的方法和設(shè)備
[0001 ] 本申請(qǐng)要求于2015年4月28日提交到韓國(guó)知識(shí)產(chǎn)權(quán)局的第10-2015-0059746號(hào)韓國(guó)專利申請(qǐng)的優(yōu)先權(quán)，該韓國(guó)專利申請(qǐng)的公開(kāi)通過(guò)引用全部包含于此。
技術(shù)領(lǐng)域
[0002]與示例性實(shí)施例一致的方法和設(shè)備涉及處理基于事件的傳感器的輸出。
【背景技術(shù)】
[0003]人機(jī)交互(HCI)在用戶接口中進(jìn)行操作。用于識(shí)別用戶輸入的各種用戶接口可在人與計(jì)算機(jī)之間提供自然交互。
[0004]為了識(shí)別用戶輸入，可使用各種傳感器。為了提供自然交互，可使用快速響應(yīng)用戶輸入的傳感器。例如，各種移動(dòng)裝置可能需要在使用用戶接口執(zhí)行各種智能功能的同時(shí)消耗相對(duì)低的功率。因此，需要用于感測(cè)目的的具有低功耗、高響應(yīng)速度以及高可靠性的傳感器。此外，因?yàn)閭鞲衅鞯妮敵龌趥鞲衅鞯牟僮魈匦员淮_定，所以需要處理傳感器的輸出的方案。

【發(fā)明內(nèi)容】

[0005]示例性實(shí)施例可至少解決上面的問(wèn)題和/或缺點(diǎn)以及上面未描述的其他缺點(diǎn)。此夕卜，示例性實(shí)施例不需要克服上面描述的缺點(diǎn)，并且示例性實(shí)施例可不克服上面描述的任何問(wèn)題。
[0006]根據(jù)示例性實(shí)施例的一個(gè)方面，提供一種圖案提取方法，包括:從基于事件的傳感器接收指示事件的信號(hào);基于包括在接收的事件信號(hào)中的標(biāo)識(shí)和時(shí)間來(lái)提取靜態(tài)圖案;輸出提取的靜態(tài)圖案。
[0007]根據(jù)示例性實(shí)施例的另一方面，提供一種圖案提取設(shè)備，包括:基于事件的傳感器，被配置為輸出指示事件的信號(hào)，其中，事件信號(hào)包括事件的時(shí)間和標(biāo)識(shí)；以及處理器，被配置為基于事件信號(hào)提取靜態(tài)圖案，并且將提取的靜態(tài)圖案輸出到圖案提取設(shè)備的外部。
【附圖說(shuō)明】
[0008]從以下結(jié)合附圖對(duì)示例性實(shí)施例進(jìn)行的詳細(xì)描述，示例性實(shí)施例的以上和/或其他方面將變得清楚和更容易理解，其中:
[0009]圖1是示出根據(jù)示例性實(shí)施例的圖案提取設(shè)備的框圖；
[0010]圖2是示出根據(jù)示例性實(shí)施例的時(shí)間戳圖(timestampmap)的示圖；
[0011]圖3是示出根據(jù)示例性實(shí)施例的靜態(tài)圖案提取結(jié)果的流程示圖；
[0012]圖4和圖5是示出根據(jù)示例性實(shí)施例的時(shí)間戳圖的脊(ridge)的示圖；
[0013]圖6是示出根據(jù)示例性實(shí)施例的基于閾值時(shí)間間隔提取靜態(tài)圖案的處理的示圖；
[0014]圖7和圖8是示出根據(jù)示例性實(shí)施例的在最小數(shù)量的元素被設(shè)置時(shí)提取靜態(tài)圖案的處理的流程示圖；
[0015]圖9和圖10是示出根據(jù)示例性實(shí)施例的在最大數(shù)量的元素被設(shè)置時(shí)提取靜態(tài)圖案的處理的流程示圖；
[0016]圖11和圖12是示出根據(jù)示例性實(shí)施例的基于邊緣的厚度提取靜態(tài)圖案的處理的示圖；
[0017]圖13和圖14是示出根據(jù)示例性實(shí)施例的基于在時(shí)間戳圖中設(shè)置的多個(gè)區(qū)域提取靜態(tài)圖案的處理的示圖；
[0018]圖15是示出根據(jù)示例性實(shí)施例的圖案提取設(shè)備的另一示例的框圖；
[0019]圖16是示出根據(jù)示例性實(shí)施例的處理多個(gè)時(shí)間戳圖的處理的流示圖；
[0020]圖17是示出根據(jù)示例性實(shí)施例的通過(guò)處理多個(gè)時(shí)間戳圖獲得的結(jié)果的流示圖；
[0021]圖18是示出根據(jù)示例性實(shí)施例的圖案提取方法的流程圖。
【具體實(shí)施方式】
[0022]現(xiàn)在，將詳細(xì)描述示例性實(shí)施例，示例性實(shí)施例的示例在附圖中示出，其中，相同的標(biāo)號(hào)始終表示相同的元件。以下參照附圖來(lái)描述示例性實(shí)施例。
[0023]示例性實(shí)施例的具體結(jié)構(gòu)或功能描述僅為了說(shuō)明的目的，并且根據(jù)本公開(kāi)的構(gòu)思的示例性實(shí)施例可以以各種形式被實(shí)現(xiàn)，并且不應(yīng)被解釋為受限于本公開(kāi)中所描述的示例性實(shí)施例。
[0024]可對(duì)示例性實(shí)施例進(jìn)行各種改變和修改，將在附圖中詳細(xì)地示出一些示例性實(shí)施例。然而，應(yīng)理解，這些示例性實(shí)施例不被解釋為受限于示出的形式，而是包括本公開(kāi)內(nèi)的所有改變、等同物或替換物。
[0025]盡管術(shù)語(yǔ)“第一”或“第二”被用于解釋各種組件，但是這些組件不受限于這些術(shù)語(yǔ)。這些術(shù)語(yǔ)僅被用于將一個(gè)組件與另一組件進(jìn)行區(qū)分。例如，在本公開(kāi)的范圍內(nèi)，第一組件可被稱為第二組件，相似地，第二組件可被稱為第一組件。
[0026]將理解，當(dāng)元件被稱為被“連接”或“親合”到另一元件時(shí)，該元件可被直接地連接到或耦合到該另一元件，或者可存在中間元件。相反，當(dāng)元件被稱為被“直接地連接”或“直接地耦合”到另一元件時(shí)，不存在中間元件。用于描述元件或?qū)又g的關(guān)系的其他詞語(yǔ)應(yīng)以類似方式被解釋(例如，“在…之間”與“直接在…之間”、“相鄰”與“直接相鄰”等)O
[0027]在此使用的術(shù)語(yǔ)僅是描述具體示例性實(shí)施例的目的，而不意在限制示例性實(shí)施例。除非上下文另有清楚地指示，否則如在此使用的單數(shù)形式也意圖包括復(fù)數(shù)形式。還將理解，當(dāng)在說(shuō)明書(shū)中使用術(shù)語(yǔ)“包括”和/或“包含”時(shí)，說(shuō)明存在敘述的特征、整體、步驟、操作、元件、組件和/或它們的組合，但不排除存在或添加一個(gè)或多個(gè)其他特征、整體、步驟、操作、元件、組件和/或它們的組。
[0028]除非另有定義，否則這里使用的所有術(shù)語(yǔ)(包括技術(shù)術(shù)語(yǔ)和科學(xué)術(shù)語(yǔ))具有與本領(lǐng)域的普通技術(shù)人員通常理解的含義相同的含義。除非這里另有定義，否則在常用詞典中定義的術(shù)語(yǔ)應(yīng)被解釋為具有與它們?cè)谙嚓P(guān)領(lǐng)域的上下文中的含義匹配的含義，而不被解釋為理想化或過(guò)于正式的含義。
[0029]圖1是示出根據(jù)示例性實(shí)施例的圖案提取設(shè)備的框圖。
[0030]參照?qǐng)D1，圖案提取設(shè)備100包括基于事件的傳感器110和處理器130?？赏ㄟ^(guò)微處理器、控制器、中央處理單元(CPU)、算術(shù)邏輯單元(ALU)、數(shù)字信號(hào)處理(DSP)、現(xiàn)場(chǎng)可編程門(mén)陣列(FPGA)、可編程邏輯單元(PLU)、能夠響應(yīng)并執(zhí)行指令的一個(gè)或多個(gè)通用或?qū)Ｓ糜?jì)算機(jī)或它們的組合來(lái)實(shí)現(xiàn)處理器130。
[0031]在示例性實(shí)施例中，為了便于描述，將描述圖案提取設(shè)備的操作和結(jié)構(gòu)，然而，示例性實(shí)施例可被擴(kuò)展到各種設(shè)備。例如，示例性實(shí)施例還可應(yīng)用于包括圖案提取設(shè)備的各種計(jì)算設(shè)備、移動(dòng)設(shè)備或各種安全設(shè)備。移動(dòng)設(shè)備可包括，例如，智能電話或可穿戴裝置。
[0032]基于事件的傳感器110響應(yīng)于動(dòng)態(tài)輸入來(lái)輸出事件信號(hào)。事件信號(hào)可包括與動(dòng)態(tài)輸入相應(yīng)的時(shí)間信息和標(biāo)識(shí)信息。動(dòng)態(tài)輸入可包括用于改變?nèi)肷湓诨谑录膫鞲衅?10中的至少一個(gè)像素上的光的事件。標(biāo)識(shí)信息可以是包括在基于事件的傳感器110中的多個(gè)像素的地址。時(shí)間信息可包括指示由基于事件的傳感器110中的至少一個(gè)像素感測(cè)到動(dòng)態(tài)輸入的時(shí)間的時(shí)間戳。在下文中，將根據(jù)示例性實(shí)施例進(jìn)一步描述基于事件的處理器110生成事件信號(hào)的處理。
[0033]基于事件的傳感器110可包括多個(gè)感測(cè)像素?；谑录膫鞲衅?10可生成包括多個(gè)感測(cè)像素中感測(cè)到事件的激活的像素的標(biāo)識(shí)信息的事件信號(hào)。根據(jù)示例性實(shí)施例，基于事件的傳感器110可使用神經(jīng)形態(tài)感測(cè)方案。
[0034]如上所述，動(dòng)態(tài)輸入可包括用于改變?nèi)肷湓诨谑录膫鞲衅?10中的至少一個(gè)像素上的光的事件。例如，事件可以是與輸入的改變相關(guān)聯(lián)的事件。例如，事件可包括入射光的亮度改變的事件、入射光的顏色改變的事件、輸入聲音的音量改變的事件、輸入聲音的頻率改變的事件或者刺激的強(qiáng)度改變的事件。基于事件的傳感器110可以是基于事件的視覺(jué)傳感器。當(dāng)基于事件的傳感器110是基于事件的視覺(jué)傳感器時(shí)，標(biāo)識(shí)信息可包括指示包括在基于事件的傳感器110中的多個(gè)像素中感測(cè)到動(dòng)態(tài)輸入的至少一個(gè)像素的位置信息。在下文中，為了便于描述，基于事件的傳感器110被假設(shè)為用于感測(cè)入射光的亮度改變的事件的基于事件的視覺(jué)傳感器，然而，基于事件的傳感器110不限于此并且僅通過(guò)示例的方式提供基于事件的視覺(jué)傳感器。因此，示例性實(shí)施例還可應(yīng)用于各種基于事件的傳感器。
[0035 ]基于事件的傳感器110中的多個(gè)感測(cè)像素可感測(cè)事件，例如，入射光的亮度改變的事件。多個(gè)感測(cè)像素中感測(cè)到事件的感測(cè)像素可被稱為“激活的像素”。響應(yīng)于感測(cè)到事件的激活的像素，可生成激活信號(hào)。
[0036]如上所述，根據(jù)示例性實(shí)施例，標(biāo)識(shí)信息可包括指示包括在基于事件的傳感器110中的多個(gè)像素中感測(cè)到動(dòng)態(tài)輸入的至少一個(gè)像素的位置信息。基于事件的傳感器110可生成激活的像素的標(biāo)識(shí)信息。例如，基于事件的傳感器110可生成包括用于基于由激活的像素生成的激活信號(hào)識(shí)別激活的像素的位置信息的事件信號(hào)?；谑录膫鞲衅?10可異步地生成并輸出事件信號(hào)，因此，與被配置為針對(duì)每個(gè)幀掃描全部像素的基于幀的視覺(jué)傳感器相比，基于事件的傳感器110可以以高的速度和低的功率進(jìn)行工作。
[0037]標(biāo)識(shí)信息可以是包括在基于事件的傳感器110中的多個(gè)像素的地址。基于事件的傳感器110可基于激活的像素來(lái)生成異步尋址事件(AE)信號(hào)。例如，當(dāng)最近事件之后的對(duì)數(shù)光強(qiáng)的改變超出上限閾值或下限閾值時(shí)，基于事件的傳感器110可生成“開(kāi)”事件信號(hào)或“關(guān)”事件信號(hào)?；谑录膫鞲衅?10可額外地生成事件信號(hào)的時(shí)序信息?；谑录膫鞲衅?10可基于時(shí)序信息與同步系統(tǒng)交互。由于基于事件的傳感器110的輸出的低密度和低延時(shí)，基于事件的傳感器110可用于要求快速響應(yīng)的反饋的高速對(duì)象跟蹤應(yīng)用。例如，高速對(duì)象跟蹤應(yīng)用可包括高速機(jī)器人。
[0038]基于事件的傳感器可用于從包括智能電話、平板個(gè)人計(jì)算機(jī)(PC)、電視(TV)和顯示器的各種設(shè)備獲取圖像。在一個(gè)示例中，可在智能電話的接口中使用基于事件的傳感器。例如，可在非接觸手勢(shì)識(shí)別接口中使用基于事件的傳感器。接口可被用于識(shí)別用于解鎖智能電話的手勢(shì)、用于調(diào)高智能電話的音量的手勢(shì)或用于在智能電話上翻頁(yè)的手勢(shì)?；谑录膫鞲衅骺蓽?zhǔn)確有效地識(shí)別非接觸手勢(shì)。在另一示例中，可在安全相機(jī)中使用基于事件的傳感器。在該示例中，基于事件的傳感器可用于使用安全相機(jī)來(lái)識(shí)別停止運(yùn)動(dòng)的對(duì)象。
[0039]基于事件的傳感器110可輸出事件信號(hào)。基于事件的視覺(jué)傳感器的輸出可包括與實(shí)際活動(dòng)相應(yīng)的事件信號(hào)以及與背景噪聲活動(dòng)相應(yīng)的事件信號(hào)。可通過(guò)在與基于事件的傳感器110的感測(cè)像素中的浮動(dòng)結(jié)點(diǎn)連接的開(kāi)關(guān)中發(fā)生的結(jié)漏電流或者熱噪聲，來(lái)生成與背景噪聲活動(dòng)相應(yīng)的事件信號(hào)。
[0040]為了對(duì)與背景噪聲活動(dòng)相應(yīng)的事件信號(hào)執(zhí)行濾波，基于事件的傳感器110可生成通過(guò)標(biāo)志(pass flag)，以識(shí)別時(shí)空上彼此相關(guān)聯(lián)的事件信號(hào)。因此，基于事件的傳感器110可降低通信負(fù)荷和計(jì)算量，并且可提高信息速率。在一個(gè)示例性實(shí)施例中，因?yàn)楸尘霸肼暬顒?dòng)具有隨機(jī)圖案，所以作為示例，可通過(guò)使用空間相關(guān)的濾波來(lái)容易地去除背景噪聲活動(dòng)。
[0041]基于事件的傳感器110可使用功率門(mén)控方案。功率門(mén)控方案可以是通過(guò)僅激活與感測(cè)到事件的感測(cè)像素相應(yīng)的通信電路和閾值檢測(cè)電路來(lái)最小化功耗的方案。此外，基于事件的傳感器110可使用相關(guān)濾波芯片。通過(guò)使用相關(guān)濾波芯片，基于事件的傳感器110可應(yīng)用于要求低功耗和快速響應(yīng)的嵌入式神經(jīng)形態(tài)視覺(jué)和聽(tīng)覺(jué)系統(tǒng)。
[0042]如上所述，根據(jù)示例性實(shí)施例，時(shí)間信息可包括指示通過(guò)基于事件的傳感器110中的至少一個(gè)像素感測(cè)到動(dòng)態(tài)輸入的時(shí)間的時(shí)間戳?；谑录膫鞲衅?10可生成指示通過(guò)激活的像素感測(cè)到動(dòng)態(tài)輸入的時(shí)間的時(shí)間戳。響應(yīng)于感測(cè)到事件的激活的像素，激活信號(hào)可被生成。在一個(gè)示例中，基于事件的傳感器110可基于生成激活信號(hào)的時(shí)間來(lái)生成時(shí)間戳。在另一示例中，處理器130可響應(yīng)于從基于事件的傳感器110接收到事件信號(hào)來(lái)生成時(shí)間戳。
[0043]處理器130基于事件信號(hào)提取與動(dòng)態(tài)輸入相關(guān)聯(lián)的靜態(tài)圖案。如上所述，根據(jù)示例性實(shí)施例，動(dòng)態(tài)輸入可包括用于改變?nèi)肷湓诨谑录膫鞲衅?10中的至少一個(gè)像素上的光的事件。靜態(tài)圖案可對(duì)應(yīng)于與動(dòng)態(tài)輸入相關(guān)聯(lián)的對(duì)象的外觀。例如，動(dòng)態(tài)輸入可包括對(duì)象的運(yùn)動(dòng)，靜態(tài)圖案可對(duì)應(yīng)于運(yùn)動(dòng)停止的狀態(tài)時(shí)的對(duì)象的外觀。在下文中，根據(jù)示例性實(shí)施例，將進(jìn)一步描述處理器130提取靜態(tài)圖案的處理。
[0044]處理器130可基于事件信號(hào)來(lái)存儲(chǔ)標(biāo)識(shí)信息和時(shí)間信息，并且可基于存儲(chǔ)的標(biāo)識(shí)信息和存儲(chǔ)的時(shí)間信息來(lái)提取靜態(tài)圖案。例如，處理器130可基于標(biāo)識(shí)信息和時(shí)間信息的歷史來(lái)提取靜態(tài)圖案。可以以時(shí)間戳圖的形式在存儲(chǔ)器140中存儲(chǔ)標(biāo)識(shí)信息和時(shí)間信息。圖案提取設(shè)備100可包括用于存儲(chǔ)時(shí)間戳圖的存儲(chǔ)器140。存儲(chǔ)器可以在圖案提取設(shè)備的內(nèi)部或者通過(guò)網(wǎng)絡(luò)連接到圖案提取設(shè)備的外部。存儲(chǔ)器可包括緩沖器、閃存、硬盤(pán)驅(qū)動(dòng)器等。將根據(jù)示例性實(shí)施例參照?qǐng)D2進(jìn)一步描述時(shí)間戳圖。
[0045]圖2是示出根據(jù)示例性實(shí)施例的時(shí)間戳圖的示圖。參照?qǐng)D2，時(shí)間戳圖200包括與基于事件的傳感器110中的像素相應(yīng)的元素。例如，元素201存儲(chǔ)與包括在基于事件的傳感器110中的像素中的位于(i，j)的像素相應(yīng)的時(shí)間戳。
[0046]時(shí)間戳圖200中的每個(gè)元素可存儲(chǔ)與每個(gè)元素相應(yīng)的時(shí)間戳信號(hào)被接收的最新的時(shí)間。例如，參照?qǐng)D2，與位于(i，j)的元素201相應(yīng)的時(shí)間戳信號(hào)被接收的最近時(shí)間是Ti, j，與位于(i，j+l)的元素202相應(yīng)的時(shí)間戳信號(hào)被接收的最近時(shí)間是T1^1。在以下的描述中，時(shí)間戳信號(hào)被接收的時(shí)間點(diǎn)可根據(jù)示例性實(shí)施例被稱為“時(shí)間戳”。
[0047]當(dāng)時(shí)間戳信號(hào)被接收時(shí)，處理器130可基于接收的時(shí)間戳信號(hào)來(lái)更新時(shí)間戳圖200。例如，處理器130可在包括在時(shí)間戳圖200中的多個(gè)元素中檢測(cè)與接收的時(shí)間戳信號(hào)相應(yīng)的元素，并且可將存儲(chǔ)在檢測(cè)的元素中的值更新為時(shí)間戳信號(hào)被接收的時(shí)間戳。
[0048]根據(jù)示例性實(shí)施例，處理器130可針對(duì)每個(gè)元素來(lái)存儲(chǔ)以毫秒(ms)或更少或者以微秒(ys)或更少接收新的時(shí)間戳信號(hào)的時(shí)間。處理器130可基于在每個(gè)元素中接收的最近時(shí)間戳信號(hào)的時(shí)間戳來(lái)提取靜態(tài)圖案，而不管隨時(shí)間接收的時(shí)間戳信號(hào)的歷史。因此，處理器130可提取具有小的計(jì)算量和小的存儲(chǔ)容量的靜態(tài)圖案。
[0049]處理器130可使用與接收的標(biāo)識(shí)信息相應(yīng)的存儲(chǔ)元素來(lái)重寫(xiě)接收的時(shí)間信息。處理器130可丟棄先前存儲(chǔ)在存儲(chǔ)元素中的值，并且可在存儲(chǔ)元素中存儲(chǔ)接收的時(shí)間信息。將根據(jù)示例性實(shí)施例參照?qǐng)D3來(lái)進(jìn)一步描述靜態(tài)圖案。
[0050]圖3是示出根據(jù)示例性實(shí)施例的靜態(tài)圖案提取結(jié)果的流程示圖。圖3示出基于時(shí)間的事件信號(hào)的輸出10、基于時(shí)間^的事件信號(hào)的輸出21以及基于時(shí)間戳圖提取的靜態(tài)圖案22。在圖3中，時(shí)間^對(duì)應(yīng)于對(duì)象正在運(yùn)動(dòng)的狀態(tài)，時(shí)間t2對(duì)應(yīng)于對(duì)象靜止的狀態(tài)。對(duì)象在時(shí)間tjPt2存在于感測(cè)區(qū)域中。根據(jù)示例性實(shí)施例，由于基于事件的傳感器110可如上所述響應(yīng)于動(dòng)態(tài)輸入來(lái)輸出事件信號(hào)，因此與事件信號(hào)相應(yīng)的輸出可在對(duì)象停止運(yùn)動(dòng)時(shí)，從輸出10基本改變到輸出21。然而，當(dāng)根據(jù)示例性實(shí)施例基于將在下面描述的方法從時(shí)間戳圖提取圖案時(shí)，可以以靜態(tài)圖案22的形式來(lái)重建輸出10。
[0051]返回參照?qǐng)D1，根據(jù)示例性實(shí)施例，處理器130基于包括在事件信號(hào)中的標(biāo)識(shí)信息和時(shí)間信息來(lái)提取與動(dòng)態(tài)輸入相關(guān)聯(lián)的靜態(tài)圖案。例如，處理器130可基于時(shí)間戳圖的脊(ridge)來(lái)提取靜態(tài)圖案。最近接收的時(shí)間戳信號(hào)的時(shí)間戳可被存儲(chǔ)在時(shí)間戳圖中。當(dāng)對(duì)象正在運(yùn)動(dòng)時(shí)，可在時(shí)間戳圖中存儲(chǔ)各種時(shí)間戳。當(dāng)時(shí)間戳的時(shí)間被假設(shè)為高度時(shí)，預(yù)定的時(shí)間段中的時(shí)間戳可形成脊。處理器130可從時(shí)間戳圖來(lái)提取脊。根據(jù)示例性實(shí)施例，將參照?qǐng)D4和圖5來(lái)進(jìn)一步描述脊。
[0052]圖4和圖5是示出根據(jù)示例性實(shí)施例的時(shí)間戳圖的脊的視圖。圖4示出針對(duì)運(yùn)動(dòng)對(duì)象基于事件信號(hào)生成的時(shí)間戳圖。在圖4中，X軸和Y軸均表示感測(cè)動(dòng)態(tài)輸入的像素的位置信息，Z軸表示時(shí)間戳。因此，位置信息可對(duì)應(yīng)于時(shí)間戳圖的坐標(biāo)，時(shí)間信息可對(duì)應(yīng)于時(shí)間戳圖的高度。在圖4中，當(dāng)高度增加時(shí)，時(shí)間戳圖的元素可變黑。因此，圖4的時(shí)間戳圖的最黑的區(qū)域可對(duì)應(yīng)于運(yùn)動(dòng)的脊或峰。
[0053]圖5是根據(jù)示例性實(shí)施例的諸如圖4中示出的時(shí)間戳圖的二維示圖。在圖5中，X軸和Y軸均表示感測(cè)動(dòng)態(tài)輸入的像素的位置信息。因此，位置信息可對(duì)應(yīng)于時(shí)間戳圖的坐標(biāo)。此外，在圖5的圖形的右側(cè)的灰度圖“2.1”至“2.8”可表示感測(cè)動(dòng)態(tài)輸入的像素的時(shí)間戳值。例如，具有與時(shí)間戳圖中的“2.8”相應(yīng)的灰度級(jí)的區(qū)域可包括具有時(shí)間戳值“2.8”的像素。如圖5中所示，即使運(yùn)動(dòng)對(duì)象停止，關(guān)于對(duì)象的運(yùn)動(dòng)的信息也可保留在時(shí)間戳圖中。關(guān)于對(duì)象的運(yùn)動(dòng)的信息可包括對(duì)象的運(yùn)動(dòng)歷史。
[0054]與時(shí)間戳圖中的脊相應(yīng)的最黑的區(qū)域指示關(guān)于最近的運(yùn)動(dòng)的信息。例如，在時(shí)間戳圖中具有時(shí)間戳值“2.8”的像素可包括關(guān)于最近的運(yùn)動(dòng)的信息。處理器130可基于時(shí)間戳圖的脊來(lái)提取靜態(tài)圖案，因此，根據(jù)示例性實(shí)施例，處理器130可不管對(duì)象的靜止?fàn)顟B(tài)，來(lái)提供關(guān)于對(duì)象的外觀的信息。
[0055]返回參照?qǐng)D1，處理器130基于時(shí)間戳圖的標(biāo)識(shí)信息和時(shí)間信息來(lái)提取脊。處理器130可使用各種方案來(lái)確定脊。在示例性實(shí)施例中，處理器130可基于包括在時(shí)間戳圖中的多個(gè)元素中存儲(chǔ)在閾值時(shí)間間隔內(nèi)的時(shí)間信息的元素來(lái)確定脊。在另一示例性實(shí)施例中，處理器130可跟蹤脊，從而包括在脊中的邊緣的厚度可等于或小于閾值厚度。在下文中，將根據(jù)示例性實(shí)施例參照?qǐng)D6至圖12來(lái)進(jìn)一步描述確定脊的處理。
[0056]圖6是示出根據(jù)示例性實(shí)施例的基于閾值時(shí)間間隔提取靜態(tài)圖案的處理的示圖。圖6示出20 X 20的具有時(shí)間戳的時(shí)間戳圖。圖6的時(shí)間戳圖示出在從時(shí)間“29”至?xí)r間“36”的時(shí)間段期間運(yùn)動(dòng)的對(duì)象，并且當(dāng)前時(shí)間現(xiàn)在經(jīng)過(guò)時(shí)間“36”。
[0057]處理器130可基于包括在時(shí)間戳圖中的多個(gè)元素中存儲(chǔ)在閾值時(shí)間間隔內(nèi)的時(shí)間信息的元素來(lái)確定脊。例如，處理器130可基于當(dāng)前時(shí)間來(lái)設(shè)置閾值時(shí)間間隔。根據(jù)示例性實(shí)施例，與基于當(dāng)前時(shí)間的閾值時(shí)間間隔內(nèi)的時(shí)間戳相應(yīng)的元素可被用于確定脊。
[0058]例如，處理器130可將閾值時(shí)間間隔設(shè)置為從當(dāng)前時(shí)間的單位時(shí)間“5”。根據(jù)示例性實(shí)施例，如圖6的時(shí)間戳圖中所示，當(dāng)當(dāng)前時(shí)間被設(shè)置為時(shí)間“40”時(shí)，與均具有等于或大于“35”的值的時(shí)間戳相應(yīng)的元素可被確定為形成脊。
[0059]處理器130可基于提取的元素的數(shù)量來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。當(dāng)在閾值時(shí)間間隔期間存在大量的元素或少量的元素時(shí)，可能難以識(shí)別對(duì)象的外觀。因此，處理器130可將閾值時(shí)間間隔的長(zhǎng)度調(diào)整到適合于識(shí)別對(duì)象的外觀的等級(jí)。例如，處理器130可設(shè)置包括在靜態(tài)圖案中的元素的數(shù)量的參考值，并且可基于參考值來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。參考值可包括最小值和最大值中的至少一個(gè)。在示例性實(shí)施例中，可預(yù)先設(shè)置參考值，或者可基于特定情況(例如，靜態(tài)圖案的銳度)來(lái)動(dòng)態(tài)地調(diào)整參考值。處理器130可基于存儲(chǔ)具有調(diào)整的長(zhǎng)度的閾值時(shí)間間隔內(nèi)的時(shí)間信息的元素來(lái)確定脊。當(dāng)元素的最小數(shù)量被設(shè)置為“25”時(shí)，在圖6的時(shí)間戳圖中，與均具有值“35”或“36”的時(shí)間戳相應(yīng)的元素可被確定為形成脊。在下文中，將根據(jù)示例性實(shí)施例參照?qǐng)D7至圖10來(lái)進(jìn)一步描述調(diào)整元素的數(shù)量的處理。
[0060]在示例性實(shí)施例中，提取的元素的數(shù)量可能太多或不夠，這將難以識(shí)別對(duì)象的外觀。在示例性實(shí)施例中，可基于參考值來(lái)確定元素的數(shù)量是太多還是不夠?？赏ㄟ^(guò)實(shí)驗(yàn)方法確定參考值。例如，從運(yùn)動(dòng)發(fā)生的部分檢測(cè)對(duì)象，從在運(yùn)動(dòng)期間發(fā)生的事件來(lái)獲取對(duì)象的圖像，并且計(jì)算用于生成該圖像的像素的數(shù)量。在該示例中，可預(yù)測(cè)重構(gòu)圖像所需的像素的數(shù)量。在基于事件的傳感器中，事件僅發(fā)生在運(yùn)動(dòng)發(fā)生的部分，因此，在示例性實(shí)施例中，僅對(duì)運(yùn)動(dòng)發(fā)生的部分進(jìn)行分析，而不管未發(fā)生至少一次運(yùn)動(dòng)的部分。
[0061]圖7和圖8是示出根據(jù)示例性實(shí)施例的在最小數(shù)量的元素被設(shè)置時(shí)提取靜態(tài)圖案的處理的流程示圖。參照?qǐng)D7，與感測(cè)到事件的元素相應(yīng)的時(shí)間圖示出隨時(shí)間感測(cè)到事件的元素的數(shù)量。在圖7中，感測(cè)到事件的元素的數(shù)量可反復(fù)地增大或減小，這可指示對(duì)象的運(yùn)動(dòng)狀態(tài)和靜止?fàn)顟B(tài)被重復(fù)。
[0062]此外，圖7示出隨著時(shí)間包括在靜態(tài)圖案中的元素以及用于提取靜態(tài)圖案的元素的數(shù)量?？赏ㄟ^(guò)調(diào)整閾值時(shí)間間隔的長(zhǎng)度來(lái)控制用于提取靜態(tài)圖案的元素的數(shù)量。
[0063]在圖7中，tin表示元素的最小數(shù)量。處理器130可調(diào)整閾值時(shí)間間隔的長(zhǎng)度，以使包括在靜態(tài)圖案中的元素的數(shù)量可等于或大于最小數(shù)量thi。例如，根據(jù)示例性實(shí)施例，在圖7的部分31中，感測(cè)到事件的元素的數(shù)量可響應(yīng)于對(duì)象靜止而減小。
[0064]在該示例中，處理器130可適當(dāng)?shù)卣{(diào)整閾值時(shí)間間隔的長(zhǎng)度，以使包括在靜態(tài)圖案中的元素的數(shù)量可等于或大于最小數(shù)量tin。當(dāng)適當(dāng)?shù)卣{(diào)整閾值時(shí)間間隔的長(zhǎng)度時(shí)，可提高靜態(tài)圖案的銳度。
[0065]根據(jù)示例性實(shí)施例，圖8示出用于銳化靜態(tài)圖案(例如，圖7的部分31)的處理器130的操作。例如，當(dāng)靜態(tài)圖案中的元素的數(shù)量小于最小數(shù)量tin時(shí)，靜態(tài)圖案可由于用于提取靜態(tài)圖案的元素的數(shù)量不足，而具有低的銳度。處理器130可通過(guò)增大閾值時(shí)間間隔(tp)的長(zhǎng)度來(lái)增大用于提取靜態(tài)圖案的元素的數(shù)量，以提高靜態(tài)圖案的銳度。如圖8中所示，表示對(duì)象的外觀的靜態(tài)圖案的銳度可響應(yīng)于閾值時(shí)間間隔的長(zhǎng)度的增大而增大。
[0066]圖9和圖10是示出根據(jù)示例性實(shí)施例的在最大數(shù)量的元素被設(shè)置時(shí)提取靜態(tài)圖案的處理的流程圖。圖9示出隨時(shí)間的元素的數(shù)量、元素的最小數(shù)量thi以及元素的最大數(shù)量thh。處理器130可調(diào)整閾值時(shí)間間隔的長(zhǎng)度，以使包括在靜態(tài)圖案中的元素的數(shù)量可等于或大于最小數(shù)量tlu，并且可等于或小于最大數(shù)量thh。例如，在圖9的部分32中，感測(cè)到事件的元素的數(shù)量可基于對(duì)象的運(yùn)動(dòng)而增大。在該示例中，處理器130可適當(dāng)?shù)卣{(diào)整閾值時(shí)間間隔的長(zhǎng)度，以使包括在靜態(tài)圖案中的元素的數(shù)量可等于或小于最大數(shù)量thh。當(dāng)適當(dāng)?shù)卣{(diào)整閾值時(shí)間間隔的長(zhǎng)度時(shí)，可提高靜態(tài)圖案的銳度。以上已經(jīng)描述了最小數(shù)量tin的示例性實(shí)施例，因此在此將不重復(fù)它的進(jìn)一步描述。
[0067]根據(jù)示例性實(shí)施例，圖10是示出時(shí)間間隔被減小(諸如，在圖9的部分32的中的處理器130的操作)的圖像的流程示圖。例如，當(dāng)靜態(tài)圖案中的元素的數(shù)量大于最大數(shù)量thh時(shí)，由于用于提取靜態(tài)圖案的極大量的元素，靜態(tài)圖案的邊緣可能過(guò)度變厚，并且噪聲可能發(fā)生在對(duì)象的外觀中。處理器130可通過(guò)減小閾值時(shí)間間隔的長(zhǎng)度，來(lái)適當(dāng)?shù)乜刂朴糜谔崛§o態(tài)圖案的元素的數(shù)量，以提高靜態(tài)圖案的銳度。如圖10中所示，根據(jù)示例性實(shí)施例，表示對(duì)象的外觀的靜態(tài)圖案的銳度可響應(yīng)于閾值時(shí)間間隔的長(zhǎng)度的減小而增大。
[0068]如上所述，根據(jù)示例性實(shí)施例，處理器130可跟蹤脊，從而包括在脊中的邊緣的厚度可等于或小于閾值厚度。將參照?qǐng)D11和圖12來(lái)進(jìn)一步描述跟蹤脊的處理。
[0069]圖11和圖12是示出根據(jù)示例性實(shí)施例的基于邊緣的厚度提取靜態(tài)圖案的處理的示圖。圖11示出20 X 20的具有時(shí)間戳的時(shí)間戳圖。圖11的時(shí)間戳圖示出在從時(shí)間“29”至?xí)r間“36”的時(shí)間段期間運(yùn)動(dòng)的對(duì)象，并且當(dāng)前時(shí)間是在時(shí)間“36”之后。
[0070]處理器130可跟蹤脊，以使包括在脊中的邊緣的厚度可等于或小于閾值厚度。例如，根據(jù)示例性實(shí)施例，如圖11的時(shí)間戳圖中所示，當(dāng)基于沿X軸方向的元素的數(shù)量來(lái)確定邊緣的厚度時(shí)，并且當(dāng)閾值厚度被設(shè)置為“5”時(shí)，與均具有“33”與“36”之間的值的時(shí)間戳相應(yīng)的元素或像素可被確定為形成脊?？赏ㄟ^(guò)各種方案來(lái)確定邊緣的厚度。例如，可基于沿X軸方向的元素的數(shù)量、沿Y軸方向的元素的數(shù)量、垂直于脊的方向的寬度或它們的各種組合，來(lái)確定脊的厚度。僅作為示例，而不作為限制提供以上描述。
[0071]脊的跟蹤可應(yīng)用于對(duì)象具有圖案的示例性實(shí)施例。例如，當(dāng)對(duì)象具有圖案時(shí)，可需要用于重構(gòu)圖案的像素以及用于重構(gòu)可見(jiàn)輪廓線的像素。在示例性實(shí)施例中，與對(duì)象不具有圖案時(shí)相比，多個(gè)像素可用于表現(xiàn)對(duì)象的外觀。此外，可基于邊緣的厚度，通過(guò)脊的跟蹤從時(shí)間戳圖來(lái)適當(dāng)?shù)靥崛§o態(tài)圖案。
[0072]參照?qǐng)D12，根據(jù)示例性實(shí)施例，運(yùn)動(dòng)對(duì)象可具有圖案，例如，重復(fù)的圖案。例如，當(dāng)元素的數(shù)量，而不是包括在脊中的邊緣的厚度，被用于提取靜態(tài)圖案時(shí)，由于用于提取圖案以及對(duì)象的可見(jiàn)輪廓線的元素的數(shù)量不足，靜態(tài)圖案可具有低的銳度。相反地，當(dāng)脊中的邊緣的厚度被直接用于提取靜態(tài)圖案時(shí)，可基于用于提取圖案以及對(duì)象的可見(jiàn)輪廓線的元素的適當(dāng)?shù)臄?shù)量，來(lái)獲取對(duì)象的清晰的外觀，如時(shí)間點(diǎn)“I”的靜態(tài)圖案41和時(shí)間點(diǎn)“2”的靜態(tài)圖案42所示。
[0073]閾值厚度可被不同地定義。例如，閾值厚度可被定義為包括在脊中的邊緣的厚度中的最小厚度、平均厚度和最大厚度以及它們的各種組合。當(dāng)閾值厚度被定義為平均厚度時(shí)，處理器130可跟蹤脊，以使脊中的每個(gè)邊緣的厚度可等于或小于平均厚度。根據(jù)示例性實(shí)施例，處理器130可基于脊中的邊緣的厚度，通過(guò)跟蹤脊來(lái)提取具有復(fù)雜圖案的對(duì)象的清晰的靜態(tài)圖案。
[0074]以上根據(jù)示例性實(shí)施例已經(jīng)描述了在時(shí)間戳圖包括單個(gè)區(qū)域的示例中提取靜態(tài)圖案的處理。根據(jù)另一示例性實(shí)施例，時(shí)間戳圖可包括多個(gè)區(qū)域。處理器130可在時(shí)間戳圖中設(shè)置多個(gè)區(qū)域，并且可從每個(gè)區(qū)域提取靜態(tài)圖案。當(dāng)存在多個(gè)對(duì)象時(shí)，處理器130可在時(shí)間戳圖中設(shè)置與多個(gè)對(duì)象相應(yīng)的多個(gè)區(qū)域。當(dāng)在時(shí)間戳圖中設(shè)置多個(gè)區(qū)域時(shí)，多個(gè)對(duì)象中的每個(gè)對(duì)象的靜態(tài)圖案可被清楚地提取，而不管對(duì)象的運(yùn)動(dòng)之間的時(shí)間差。根據(jù)示例性實(shí)施例，將參照?qǐng)D13和圖14來(lái)進(jìn)一步描述多個(gè)區(qū)域。
[0075]圖13和圖14是示出根據(jù)示例性實(shí)施例的基于在時(shí)間戳圖中設(shè)置的多個(gè)區(qū)域提取靜態(tài)圖案的處理的示圖。圖13示出在從時(shí)間至?xí)r間t2的時(shí)間段期間的對(duì)象的運(yùn)動(dòng)、第一靜態(tài)圖案51和第一靜態(tài)圖案52以及第二靜態(tài)圖案61和第二靜態(tài)圖案62?？蓮膯蝹€(gè)區(qū)域提取第一靜態(tài)圖案51和第一靜態(tài)圖案52，可從多個(gè)區(qū)域提取第二靜態(tài)圖案61和第二靜態(tài)圖案62。在以下的示例性實(shí)施例的描述中，用戶的手和頭可分別被稱為第一對(duì)象和第二對(duì)象。在圖13中，在時(shí)間^第一對(duì)象和第二對(duì)象一起運(yùn)動(dòng)，而在時(shí)間〖2第二對(duì)象運(yùn)動(dòng)。
[0076]當(dāng)在時(shí)間戳圖中設(shè)置單個(gè)區(qū)域時(shí)，用于提取靜態(tài)圖案的標(biāo)準(zhǔn)可同樣地應(yīng)用于整個(gè)時(shí)間戳圖。在示例性實(shí)施例中，當(dāng)?shù)谝粚?duì)象和第二對(duì)象在時(shí)間t以重疊的時(shí)間間隔運(yùn)動(dòng)時(shí)，可提取第一對(duì)象的外觀和第二對(duì)象的外觀二者，如第一靜態(tài)圖案51所示。在另一示例性實(shí)施例中，當(dāng)在時(shí)間t2第一對(duì)象不運(yùn)動(dòng)而第二對(duì)象運(yùn)動(dòng)時(shí)，可基于第二對(duì)象的運(yùn)動(dòng)來(lái)形成脊。在該示例性實(shí)施例中，可在沒(méi)有第一對(duì)象的情況下提取第二對(duì)象的外觀，如第一靜態(tài)圖案52所示。
[0077]當(dāng)在時(shí)間戳圖中設(shè)置多個(gè)區(qū)域時(shí)，可適當(dāng)?shù)靥崛〉谝粚?duì)象和第二對(duì)象中的每個(gè)的外觀。當(dāng)多個(gè)區(qū)域被設(shè)置時(shí)，用于提取靜態(tài)圖案的不同的標(biāo)準(zhǔn)可應(yīng)用于時(shí)間戳圖中的每個(gè)區(qū)域。例如，處理器130可設(shè)置用于提取靜態(tài)圖案的標(biāo)準(zhǔn)，從而可基于第一區(qū)域中的第一對(duì)象的外觀來(lái)形成脊。此外，處理器130可設(shè)置用于提取靜態(tài)圖案的另一標(biāo)準(zhǔn)，從而可基于第二區(qū)域中的第二對(duì)象的外觀來(lái)形成脊，如圖13的元素62中所示。
[0078]圖14示出在根據(jù)示例性實(shí)施例的用于時(shí)間戳圖中的多個(gè)對(duì)象的第一區(qū)域71和第二區(qū)域72。第一區(qū)域71和第二區(qū)域72可分別對(duì)應(yīng)于第一對(duì)象和第二對(duì)象。第一區(qū)域71可包括與均具有“53”與“57”之間的值的時(shí)間戳相應(yīng)的元素。第二區(qū)域72可包括與均具有“60”與“63”之間的值的時(shí)間戳相應(yīng)的元素。因此，根據(jù)示例性實(shí)施例，第一對(duì)象和第二對(duì)象可被確定為順序地運(yùn)動(dòng)。也就是說(shuō)，在示例性實(shí)施例中，可基于時(shí)間戳來(lái)確定區(qū)域。換言之，每個(gè)區(qū)域可對(duì)應(yīng)于具體的沒(méi)有重疊范圍的時(shí)間戳。例如，當(dāng)用戶的手運(yùn)動(dòng)時(shí)，可生成時(shí)間戳值。使用這些生成的時(shí)間戳值，可設(shè)置區(qū)域。作為示例，而不作為限制，提供以上描述。例如，可通過(guò)預(yù)訓(xùn)練的分類器來(lái)確定區(qū)域。
[0079]處理器130可基于時(shí)間戳的分布來(lái)設(shè)置第一區(qū)域71和第二區(qū)域72。例如，處理器130可基于與動(dòng)態(tài)輸入相應(yīng)的對(duì)象的部分來(lái)設(shè)置第一區(qū)域71和第二區(qū)域72。處理器130可針對(duì)第一區(qū)域71和第二區(qū)域72中的每個(gè)設(shè)置用于提取圖案的單獨(dú)的標(biāo)準(zhǔn)。例如，處理器130可針對(duì)第一區(qū)域71和第二區(qū)域72中的每個(gè)設(shè)置單獨(dú)的閾值時(shí)間間隔。此外，處理器130可從第一區(qū)域71和第二區(qū)域72中的每個(gè)，基于包括在脊中的邊緣的厚度來(lái)跟蹤脊。處理器130可針對(duì)第一區(qū)域71和第二區(qū)域72中的每個(gè)設(shè)置單獨(dú)的閾值厚度。在下文中，作為示例，而不作為限制，來(lái)根據(jù)示例性實(shí)施例描述基于閾值時(shí)間間隔提取靜態(tài)圖案的典型處理
[0080]處理器130可基于用于第一區(qū)域71的第一閾值時(shí)間間隔，從第一區(qū)域71提取第一對(duì)象的靜態(tài)圖案，并且可基于用于第二區(qū)域的第二閾值時(shí)間間隔，從第二區(qū)域72提取第二對(duì)象的靜態(tài)圖案。例如，當(dāng)在圖14的時(shí)間戳圖中當(dāng)前時(shí)間被設(shè)置為“65”時(shí)，第一閾值時(shí)間間隔和第二閾值時(shí)間間隔可被分別設(shè)置為單位時(shí)間“10”和“3”。
[0081]上述基于單個(gè)區(qū)域提取靜態(tài)圖案的處理可應(yīng)用于基于多個(gè)區(qū)域提取靜態(tài)圖案的處理。例如，處理器130可基于在第一區(qū)域71和第二區(qū)域72中的每個(gè)中包括的元素的數(shù)量，來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。處理器130可根據(jù)基于第一區(qū)域71和第二區(qū)域72中的每個(gè)接收的有效事件信號(hào)的數(shù)量，來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。有效事件信號(hào)可表示被處理為有效的事件信號(hào)?？苫谑录盘?hào)被接收的時(shí)間來(lái)確定事件信號(hào)是否是有效的。響應(yīng)于基于第一區(qū)域71和第二區(qū)域72中的每個(gè)接收到新的事件信號(hào)，處理器130可調(diào)整閾值時(shí)間間隔的長(zhǎng)度。換言之，處理器130可僅在新的事件信號(hào)被接收時(shí)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。以上描述可應(yīng)用于在其他情況下調(diào)整閾值時(shí)間間隔。僅作為示例，而不作為限制，提供以上描述。
[0082]圖15是示出根據(jù)另一示例性實(shí)施例的圖案提取設(shè)備的框圖。
[0083]參照?qǐng)D15，圖案提取設(shè)備100-2包括基于事件的傳感器110、深度傳感器120和處理器130。圖案提取設(shè)備100-2可生成針對(duì)每個(gè)深度的多個(gè)時(shí)間戳圖，并且可從針對(duì)每個(gè)深度的多個(gè)時(shí)間戳圖來(lái)提取靜態(tài)圖案。圖案提取設(shè)備100-2可通過(guò)管理針對(duì)每個(gè)深度的多個(gè)時(shí)間戳圖，來(lái)適當(dāng)?shù)刂貥?gòu)多個(gè)對(duì)象中的每個(gè)對(duì)象的靜態(tài)圖案，而不管對(duì)象之間的重疊。
[0084]基于事件的傳感器110響應(yīng)于動(dòng)態(tài)輸入來(lái)輸出事件信號(hào)。事件信號(hào)可包括與動(dòng)態(tài)輸入相應(yīng)的標(biāo)識(shí)信息和時(shí)間信息。圖1的基于事件的傳感器110和處理器130的以上描述也可通過(guò)示例的方式應(yīng)用于圖15的基于事件的傳感器110和處理器130，因此在此將不重復(fù)圖15的基于事件的傳感器110和處理器130的進(jìn)一步描述。
[0085]深度傳感器120輸出深度信息。深度傳感器120包括多個(gè)感測(cè)像素。深度傳感器120可輸出通過(guò)多個(gè)感測(cè)像素感測(cè)的深度信息。深度傳感器120可具有與基于事件的傳感器110的分辨率相同的分辨率。響應(yīng)于動(dòng)態(tài)輸入，深度傳感器120可輸出與動(dòng)態(tài)輸入相應(yīng)的深度信息。盡管未在圖15中示出，但是深度傳感器120也可接收事件信號(hào)，并且可輸出通過(guò)與接收的事件信號(hào)的位置信息相應(yīng)的像素感測(cè)的深度信息。
[0086]處理器130可生成針對(duì)每個(gè)不同深度的多個(gè)時(shí)間戳圖。處理器130可基于從基于事件的傳感器110接收的事件信號(hào)以及從深度傳感器120接收的深度信息，來(lái)更新多個(gè)時(shí)間戳圖中的一個(gè)時(shí)間戳圖。例如，當(dāng)響應(yīng)于第一事件信號(hào)接收第一深度信息時(shí)，處理器130可基于第一事件信號(hào)在與第一深度區(qū)域相應(yīng)的第一時(shí)間戳圖中更新時(shí)間戳。根據(jù)示例性實(shí)施例，將參照?qǐng)D16和圖17來(lái)描述與多個(gè)時(shí)間戳圖相關(guān)聯(lián)的處理器130的操作。
[0087]圖16是示出根據(jù)示例性實(shí)施例的處理多個(gè)時(shí)間戳圖的處理的流程示圖。圖16示出處理器130、第一時(shí)間戳圖210、第二時(shí)間戳圖220和第三時(shí)間戳圖230。第一時(shí)間戳圖210、第二時(shí)間戳圖220和第三時(shí)間戳圖230可分別對(duì)應(yīng)于第一深度區(qū)域、第二深度區(qū)域和第三深度區(qū)域。第一時(shí)間戳圖210至第三時(shí)間戳圖230可被稱為2維(2D)時(shí)間戳圖。
[0088]當(dāng)事件信號(hào)被接收時(shí)，處理器130可基于深度信息從第一時(shí)間戳圖210至第三時(shí)間戳圖230，選擇與事件信號(hào)相應(yīng)的時(shí)間戳圖。例如，當(dāng)深度信息對(duì)應(yīng)于第一深度區(qū)域時(shí)，處理器130可選擇第一時(shí)間戳圖210。處理器130可基于包括在事件信號(hào)中的標(biāo)識(shí)信息和時(shí)間信息來(lái)更新第一時(shí)間戳圖210。
[0089]處理器130可從第一時(shí)間戳圖210至第三時(shí)間戳圖230中的至少一個(gè)來(lái)提取脊。以上已經(jīng)描述了提取脊的示例性處理，在此將不重復(fù)處理的進(jìn)一步描述。處理器130可基于提取的脊來(lái)提取靜態(tài)圖案。例如，處理器130可從第一時(shí)間戳圖210至第三時(shí)間戳圖230中的每個(gè)來(lái)提取多個(gè)靜態(tài)圖案。此外，處理器130可基于第一時(shí)間戳圖210至第三時(shí)間戳圖230來(lái)生成單個(gè)合成圖，并且可基于合成圖的脊來(lái)提取靜態(tài)圖案。當(dāng)與第一時(shí)間戳圖210至第三時(shí)間戳圖230中的相同坐標(biāo)相應(yīng)的時(shí)間戳重疊時(shí)，處理器130可基于重疊的時(shí)間戳中的最近的時(shí)間戳來(lái)生成單個(gè)合成圖。例如，可從全部的三個(gè)時(shí)間戳圖基于最近的時(shí)間戳來(lái)生成合成圖。換言之，在示例性實(shí)施例中，從各個(gè)時(shí)間戳圖(針對(duì)每個(gè)深度的一個(gè)時(shí)間戳圖)，每個(gè)像素的最高值被獲得，并且一個(gè)合成圖被生成。
[0090]盡管未在附圖中示出，但是示例性實(shí)施例可被修改為生成3維(3D)時(shí)間戳圖來(lái)代替多個(gè)2D時(shí)間戳圖的方案。例如，3D時(shí)間戳圖可在與標(biāo)識(shí)信息相應(yīng)的元素中存儲(chǔ)一對(duì)時(shí)間信息和深度信息。處理器130可在與標(biāo)識(shí)信息相應(yīng)的存儲(chǔ)元素中存儲(chǔ)時(shí)間信息和深度信息。
[0091]在示例性實(shí)施例中，深度信息可被量化到預(yù)定的深度區(qū)域。在示例性實(shí)施例中，處理器130可針對(duì)每個(gè)深度區(qū)域生成包括一對(duì)最近的時(shí)間信息和最近的深度信息的3D時(shí)間戳圖。響應(yīng)于量化到與預(yù)先存儲(chǔ)的一對(duì)時(shí)間信息和深度信息中的深度信息相同的深度區(qū)域的新的深度信息的接收，處理器130可在相應(yīng)的元素上重疊一對(duì)新的時(shí)間信息和新的深度信息。
[0092]圖17是示出根據(jù)示例性實(shí)施例的通過(guò)處理多個(gè)時(shí)間戳圖獲得的結(jié)果的流程示圖。圖17示出從多個(gè)時(shí)間戳圖提取的靜態(tài)圖案91、靜態(tài)圖案92和靜態(tài)圖案93。靜態(tài)圖案91、靜態(tài)圖案92和靜態(tài)圖案93中的每個(gè)包括與用戶的手相應(yīng)的第一對(duì)象和與用戶的臉部相應(yīng)的第二對(duì)象。在圖17中，第一對(duì)象和第二對(duì)象被假設(shè)為具有不同深度，靜態(tài)圖案91和靜態(tài)圖案92中的每個(gè)的箭頭指示第一對(duì)象的運(yùn)動(dòng)方向。
[0093]處理器130可在第一時(shí)間戳圖中更新與第一對(duì)象相應(yīng)的事件信號(hào)，并且可在第二時(shí)間戳圖中更新與第二對(duì)象相應(yīng)的事件信號(hào)。因此，當(dāng)?shù)谝粚?duì)象與第二對(duì)象之間發(fā)生重疊時(shí)，第一對(duì)象的靜態(tài)圖案和第二對(duì)象的靜態(tài)圖案可被獨(dú)立地重構(gòu)。例如，參照?qǐng)D17，第一對(duì)象與第二對(duì)象之間的重疊發(fā)生在時(shí)間^與^之間。在該示例中，可基于多個(gè)時(shí)間戳圖來(lái)獨(dú)立地重構(gòu)第一對(duì)象和第二對(duì)象二者，如靜態(tài)圖案93中所示。
[0094]處理器130可在多個(gè)時(shí)間戳圖中的至少一個(gè)中設(shè)置多個(gè)區(qū)域。處理器130可基于時(shí)間戳的分布來(lái)設(shè)置多個(gè)區(qū)域。處理器130可針對(duì)每個(gè)區(qū)域設(shè)置用于提取圖案的單獨(dú)的標(biāo)準(zhǔn)。例如，處理器130可針對(duì)每個(gè)區(qū)域設(shè)置單獨(dú)的閾值時(shí)間間隔，并且可基于包括在每個(gè)區(qū)域中的元素的數(shù)量來(lái)調(diào)整每個(gè)閾值時(shí)間間隔的長(zhǎng)度。根據(jù)示例性實(shí)施例，以上描述可應(yīng)用于針對(duì)多個(gè)區(qū)域的圖案提取處理。
[0095]圖18是示出根據(jù)示例性實(shí)施例的圖案提取方法的流程圖。
[0096]參照?qǐng)D18，在操作500中，圖案提取設(shè)備響應(yīng)于動(dòng)態(tài)輸入來(lái)接收事件信號(hào)?？赏ㄟ^(guò)基于事件的傳感器來(lái)輸出事件信號(hào)。在操作600中，圖案提取設(shè)備基于包括在事件信號(hào)中的標(biāo)識(shí)信息和時(shí)間信息來(lái)提取與動(dòng)態(tài)輸入相關(guān)聯(lián)的靜態(tài)圖案。圖1至圖17的以上描述也可通過(guò)示例的方式應(yīng)用于圖18的圖案提取方法，因此，在此將不重復(fù)它們的進(jìn)一步描述。
[0097]在另一示例性實(shí)施例中，邊緣的厚度和元素的數(shù)量二者可用于確定與事件信號(hào)相關(guān)聯(lián)的靜態(tài)圖案。在示例性實(shí)施例中，元素的數(shù)量可被調(diào)整，以使邊緣可具有預(yù)設(shè)的厚度。例如，當(dāng)對(duì)象正在移動(dòng)時(shí)，可在對(duì)象的邊緣生成事件信號(hào)，并且可調(diào)整元素的數(shù)量，以使與事件信號(hào)相應(yīng)的邊緣可繼續(xù)具有大約2像素的平均厚度。作為示例而非限制提供以上描述。在示例性實(shí)施例中，邊緣的厚度和元素的數(shù)量的組合可用于生成圖案。
[0098]可使用硬件組件、軟件組件或它們的組合來(lái)實(shí)現(xiàn)在此描述的元件或組件。例如，硬件組件可包括:麥克風(fēng)、放大器、帶通濾波器、音頻數(shù)字轉(zhuǎn)換器和處理裝置。可使用一個(gè)或多個(gè)通用或?qū)Ｓ糜?jì)算機(jī)(諸如，處理器、控制器和ALU、DSP、微型計(jì)算機(jī)、FPGA、PLU、微處理器或能夠以限定方式響應(yīng)并執(zhí)行指令的任何其他裝置)來(lái)實(shí)現(xiàn)處理裝置。處理裝置可運(yùn)行操作系統(tǒng)(OS)和在OS上運(yùn)行的一個(gè)或多個(gè)軟件應(yīng)用。處理裝置還可響應(yīng)于軟件的執(zhí)行而訪問(wèn)、存儲(chǔ)、操控、處理和創(chuàng)建數(shù)據(jù)。為了簡(jiǎn)化的目的，處理裝置的描述被用作為單數(shù)，但是本領(lǐng)域的技術(shù)人員將理解:處理裝置可包括多個(gè)處理元件和多種類型的處理元件。例如，處理裝置可包括多個(gè)處理器或者包括處理器和控制器。此外，不同的處理配置是可行的，諸如，并行處理器。
[0099]軟件可包括計(jì)算機(jī)程序、代碼段、指令或者它們的某些組合，以獨(dú)立地或共同地指示或配置處理裝置如期望地進(jìn)行操作?？梢砸匀魏晤愋偷臋C(jī)器、組件、物理或虛擬設(shè)備、計(jì)算機(jī)存儲(chǔ)介質(zhì)或裝置，或者以能夠提供指令或數(shù)據(jù)或被處理裝置解釋的傳播信號(hào)波，來(lái)永久地或暫時(shí)地實(shí)現(xiàn)軟件和數(shù)據(jù)。軟件還可分布于聯(lián)網(wǎng)的計(jì)算機(jī)系統(tǒng)，從而以分布方式存儲(chǔ)和執(zhí)行軟件?？赏ㄟ^(guò)一個(gè)或多個(gè)非暫時(shí)性計(jì)算機(jī)可讀記錄介質(zhì)來(lái)存儲(chǔ)軟件和數(shù)據(jù)。
[0100]以上描述的示例性實(shí)施例可被記錄在包括程序指令的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)中，以實(shí)現(xiàn)可由計(jì)算機(jī)執(zhí)行的各種操作。介質(zhì)還可單獨(dú)包括程序指令、數(shù)據(jù)文件、數(shù)據(jù)結(jié)構(gòu)等，或者可與程序指令相結(jié)合地包括數(shù)據(jù)文件、數(shù)據(jù)結(jié)構(gòu)等。記錄在介質(zhì)上的程序指令可以是為了示例性實(shí)施例的目的而專門(mén)設(shè)計(jì)和構(gòu)造的程序指令，或者它們可以是對(duì)計(jì)算機(jī)軟件領(lǐng)域的技術(shù)人員公知且可用的類型。非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)的示例包括:磁介質(zhì)(諸如，硬盤(pán)、軟盤(pán)和磁帶)、光學(xué)介質(zhì)(諸如，CD-ROM盤(pán)和DVD)、磁光介質(zhì)(諸如，光盤(pán))以及專門(mén)配置為存儲(chǔ)和執(zhí)行軟件指令的硬件裝置(諸如，只讀存儲(chǔ)器(R0M)、隨機(jī)存取存儲(chǔ)器(RAM)、閃存)等。程序指令的示例包括諸如由編譯器所產(chǎn)生的機(jī)器代碼和包含可由計(jì)算機(jī)使用解釋器執(zhí)行的更高級(jí)代碼的文件兩者。為了執(zhí)行以上描述的示例性實(shí)施例的操作，以上描述的裝置可被構(gòu)造為用作一個(gè)或多個(gè)軟件模塊，反之亦然。
[0101]盡管已經(jīng)示出并描述了多個(gè)示例性實(shí)施例，但是本發(fā)明構(gòu)思不限于此。相反，本領(lǐng)域技術(shù)人員將理解，在不脫離本公開(kāi)的原理和精神的情況下可對(duì)這些示例性實(shí)施例進(jìn)行改變、修改或變形，通過(guò)權(quán)利要求和它們的等同物來(lái)限定本公開(kāi)的范圍。
【主權(quán)項(xiàng)】
1.一種圖案提取方法，包括: 從基于事件的傳感器接收指示事件的信號(hào)； 基于包括在接收的事件?目號(hào)中的標(biāo)識(shí)和時(shí)間來(lái)提取靜態(tài)圖案； 輸出提取的靜態(tài)圖案。2.如權(quán)利要求1所述的圖案提取方法，還包括:基于動(dòng)態(tài)輸入由基于事件的傳感器來(lái)檢測(cè)事件，其中，動(dòng)態(tài)輸入包括以下項(xiàng)中的一個(gè):改變?nèi)肷湓诨谑录膫鞲衅髦械闹辽僖粋€(gè)像素上的光的顏色和亮度中的至少一個(gè)的事件；以及改變聲音輸入的音量和頻率中的至少一個(gè)的事件。3.如權(quán)利要求1所述的圖案提取方法，其中，靜態(tài)圖案是與動(dòng)態(tài)輸入相關(guān)聯(lián)的靜止的對(duì)象的外觀。4.如權(quán)利要求1所述的圖案提取方法，其中，事件指示對(duì)象的運(yùn)動(dòng)，其中，靜態(tài)圖案對(duì)應(yīng)于運(yùn)動(dòng)停止的狀態(tài)下的對(duì)象的外觀。5.如權(quán)利要求1所述的圖案提取方法，其中，標(biāo)識(shí)包括:指示基于事件的傳感器的多個(gè)像素中的感測(cè)到對(duì)象的運(yùn)動(dòng)的至少一個(gè)像素的位置信息。6.如權(quán)利要求1所述的圖案提取方法，其中，時(shí)間包括:指示基于由基于事件的傳感器的至少一個(gè)像素感測(cè)到動(dòng)態(tài)輸入來(lái)檢測(cè)事件的時(shí)間點(diǎn)的時(shí)間戳。7.如權(quán)利要求1所述的圖案提取方法，其中，提取的步驟包括: 針對(duì)多個(gè)接收的事件中的每個(gè)來(lái)存儲(chǔ)標(biāo)識(shí)和時(shí)間； 基于存儲(chǔ)的標(biāo)識(shí)和時(shí)間來(lái)提取靜態(tài)圖案。8.如權(quán)利要求7所述的圖案提取方法，其中，存儲(chǔ)的步驟包括: 針對(duì)基于事件的傳感器的每個(gè)元素，存儲(chǔ)包括元素的地址的標(biāo)識(shí)以及指示各個(gè)元素的最近改變的時(shí)間； 響應(yīng)于改變各個(gè)元素的狀態(tài)的事件，在各個(gè)元素的地址中針對(duì)各個(gè)元素重寫(xiě)時(shí)間。9.如權(quán)利要求1所述的圖案提取方法，其中，提取的步驟包括: 從基于標(biāo)識(shí)和時(shí)間生成的圖提取脊。10.如權(quán)利要求9所述的圖案提取方法，其中，標(biāo)識(shí)對(duì)應(yīng)于所述圖上的坐標(biāo)值，時(shí)間對(duì)應(yīng)于所述圖上的高度。11.如權(quán)利要求9所述的圖案提取方法，其中，提取脊的步驟包括: 在包括在所述圖中的多個(gè)元素中，提取存儲(chǔ)閾值時(shí)間間隔內(nèi)的時(shí)間的元素。12.如權(quán)利要求11所述的圖案提取方法，其中，提取脊的步驟還包括: 通過(guò)基于提取的元素的數(shù)量調(diào)整閾值時(shí)間間隔的長(zhǎng)度來(lái)生成新的閾值時(shí)間間隔； 提取新的閾值時(shí)間間隔內(nèi)的元素。13.如權(quán)利要求9所述的圖案提取方法，其中，提取脊的步驟包括:跟蹤脊，以使脊中的邊緣的厚度等于或小于閾值厚度。14.如權(quán)利要求1所述的圖案提取方法，其中，提取的步驟包括: 設(shè)置靜態(tài)圖案將被提取的圖的區(qū)域，其中，所述圖基于標(biāo)識(shí)和時(shí)間被生成； 基于閾值時(shí)間間隔從設(shè)置的區(qū)域提取脊。15.如權(quán)利要求14所述的圖案提取方法，其中，設(shè)置的步驟包括: 基于與生成基于事件的傳感器的事件的動(dòng)態(tài)輸入相應(yīng)的對(duì)象的一部分來(lái)設(shè)置所述區(qū)域。16.如權(quán)利要求14所述的圖案提取方法，其中，提取的步驟還包括以下步驟中的至少一個(gè): 基于在設(shè)置的區(qū)域中接收的有效事件信號(hào)的數(shù)量來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度； 響應(yīng)于在設(shè)置的區(qū)域中接收的新的事件信號(hào)來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。17.如權(quán)利要求1所述的圖案提取方法，其中，提取的步驟包括: 基于標(biāo)識(shí)和時(shí)間來(lái)生成與多個(gè)深度區(qū)域相應(yīng)的多個(gè)圖； 從所述多個(gè)圖中的至少一個(gè)提取脊。18.如權(quán)利要求17所述的圖案提取方法，其中，生成的步驟包括: 接收與通過(guò)基于事件的傳感器感測(cè)的動(dòng)態(tài)輸入相應(yīng)的深度； 基于深度從所述多個(gè)圖選擇一個(gè)圖； 基于標(biāo)識(shí)和時(shí)間來(lái)更新選擇的圖。19.如權(quán)利要求1所述的圖案提取方法，其中，提取的步驟包括: 接收與通過(guò)基于事件的傳感器感測(cè)的動(dòng)態(tài)輸入相應(yīng)的深度； 將時(shí)間和深度存儲(chǔ)在與標(biāo)識(shí)相應(yīng)的存儲(chǔ)元素中； 基于標(biāo)識(shí)以及存儲(chǔ)的時(shí)間和深度來(lái)提取靜態(tài)圖案。20.如權(quán)利要求1所述的圖案提取方法，還包括: 生成包括指示基于事件的傳感器的每個(gè)感測(cè)元素的位置(x，y)的標(biāo)識(shí)和時(shí)間作為每個(gè)位置(x，y)的值的圖； 從基于事件的傳感器接收指示至少一個(gè)另外的事件的至少一個(gè)另外的信號(hào)； 基于標(biāo)識(shí)和時(shí)間來(lái)更新所述圖中的至少一個(gè)點(diǎn)， 其中，提取靜態(tài)圖案與生成并更新所述圖是異步的。21.如權(quán)利要求1所述的圖案提取方法，其中，基于事件的傳感器僅針對(duì)形成事件的將值從關(guān)改變到開(kāi)或從開(kāi)改變到關(guān)的傳感器的感測(cè)的元素，來(lái)輸出標(biāo)識(shí)和時(shí)間。22.—種圖案提取設(shè)備，包括: 基于事件的傳感器，被配置為輸出指示事件的信號(hào)，其中，事件信號(hào)包括事件的時(shí)間和標(biāo)識(shí)； 處理器，被配置為基于事件信號(hào)提取靜態(tài)圖案，并且將提取的靜態(tài)圖案輸出到圖案提取設(shè)備的外部。23.如權(quán)利要求22所述的圖案提取設(shè)備，其中，基于事件的傳感器響應(yīng)于感測(cè)到動(dòng)態(tài)輸入來(lái)輸出事件信號(hào)，其中，動(dòng)態(tài)輸入包括入射在基于事件的傳感器中的至少一個(gè)像素上的光的改變。24.如權(quán)利要求22所述的圖案提取設(shè)備，其中，基于事件的傳感器響應(yīng)于感測(cè)到包括對(duì)象的運(yùn)動(dòng)的動(dòng)態(tài)輸入來(lái)輸出事件信號(hào)，其中，靜態(tài)圖案是運(yùn)動(dòng)停止的狀態(tài)下的對(duì)象的外觀。25.如權(quán)利要求22所述的圖案提取設(shè)備，其中，標(biāo)識(shí)包括:指示基于事件的傳感器的多個(gè)像素中的感測(cè)到動(dòng)態(tài)輸入的基于事件的傳感器的至少一個(gè)像素的位置信息， 其中，時(shí)間包括指示基于通過(guò)基于事件的傳感器的至少一個(gè)像素感測(cè)到動(dòng)態(tài)輸入來(lái)檢測(cè)事件的時(shí)間點(diǎn)的時(shí)間戳。26.如權(quán)利要求22所述的圖案提取設(shè)備，其中，處理器被配置為將標(biāo)識(shí)和時(shí)間存儲(chǔ)在存儲(chǔ)器中，并且基于存儲(chǔ)的標(biāo)識(shí)和時(shí)間來(lái)提取靜態(tài)圖案。27.如權(quán)利要求26所述的圖案提取設(shè)備，其中，處理器被配置為基于由基于事件的傳感器檢測(cè)的事件在與標(biāo)識(shí)相應(yīng)的存儲(chǔ)元素中重寫(xiě)時(shí)間。28.如權(quán)利要求22所述的圖案提取設(shè)備，其中，處理器被配置為從基于標(biāo)識(shí)和時(shí)間生成的圖提取脊， 其中，標(biāo)識(shí)是所述圖上的坐標(biāo)值，時(shí)間是所述圖上的高度。29.如權(quán)利要求28所述的圖案提取設(shè)備，其中，處理器被配置為在包括在所述圖中的多個(gè)元素中提取存儲(chǔ)閾值時(shí)間間隔內(nèi)的時(shí)間的元素。30.如權(quán)利要求29所述的圖案提取設(shè)備，其中，處理器被配置為通過(guò)基于提取的元素的數(shù)量調(diào)整閾值時(shí)間間隔的長(zhǎng)度來(lái)生成新的閾值時(shí)間，并且提取存儲(chǔ)新的閾值時(shí)間間隔內(nèi)的時(shí)間的元素。31.如權(quán)利要求28所述的圖案提取設(shè)備，其中，處理器被配置為跟蹤脊，以使脊中的邊緣的厚度等于或小于閾值厚度。32.如權(quán)利要求22所述的圖案提取設(shè)備，其中，處理器被配置為設(shè)置靜態(tài)圖案將被提取的圖的區(qū)域，并且基于閾值時(shí)間間隔從所述區(qū)域提取脊，其中，處理器基于標(biāo)識(shí)和時(shí)間來(lái)生成所述圖。33.如權(quán)利要求32所述的圖案提取設(shè)備，其中，處理器被配置為基于與感測(cè)的事件相應(yīng)的對(duì)象的一部分來(lái)設(shè)置所述區(qū)域。34.如權(quán)利要求32所述的圖案提取設(shè)備，其中，處理器被配置為基于在所述區(qū)域中接收的有效事件信號(hào)的數(shù)量來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。35.如權(quán)利要求32所述的圖案提取設(shè)備，其中，處理器被配置為響應(yīng)于在所述區(qū)域中接收的新的事件信號(hào)來(lái)調(diào)整閾值時(shí)間間隔的長(zhǎng)度。36.如權(quán)利要求22所述的圖案提取設(shè)備，其中，處理器被配置為基于標(biāo)識(shí)和時(shí)間生成與多個(gè)深度區(qū)域相應(yīng)的多個(gè)圖，并且從所述多個(gè)圖中的至少一個(gè)提取脊。37.如權(quán)利要求36所述的圖案提取設(shè)備，還包括:深度傳感器，被配置為輸出與通過(guò)基于事件的傳感器感測(cè)的事件相應(yīng)的深度， 其中，處理器被配置為基于深度從所述多個(gè)圖選擇一個(gè)圖，并且基于標(biāo)識(shí)和時(shí)間來(lái)更新選擇的圖。38.如權(quán)利要求36所述的圖案提取設(shè)備，還包括:深度傳感器，被配置為輸出與通過(guò)基于事件的傳感器感測(cè)的事件相應(yīng)的深度， 其中，處理器被配置為在通過(guò)標(biāo)識(shí)識(shí)別的存儲(chǔ)元素中存儲(chǔ)時(shí)間和深度，并且基于標(biāo)識(shí)以及存儲(chǔ)的時(shí)間和深度來(lái)提取靜態(tài)圖案。39.如權(quán)利要求36所述的圖案提取設(shè)備，其中，處理器被配置為基于所述多個(gè)圖來(lái)生成合成圖，并且基于合成圖來(lái)提取靜態(tài)圖案。
【文檔編號(hào)】G06F3/0484GK106095262SQ201610260737
【公開(kāi)日】2016年11月9日
【申請(qǐng)日】2016年4月25日 公開(kāi)號(hào)201610260737.6, CN 106095262 A, CN 106095262A, CN 201610260737, CN-A-106095262, CN106095262 A, CN106095262A, CN201610260737, CN201610260737.6
【發(fā)明人】李俊行, 樸根柱, 申昌雨, 禹周延, 柳賢錫, 洪錫瑱
【申請(qǐng)人】三星電子株式會(huì)社