眼鏡式終端及其控制方法
【專利摘要】本發(fā)明涉及眼鏡式終端及其控制方法。提供一種眼鏡式終端,包括:顯示單元,在其上顯示圖片信息;感測單元,該感測單元在用戶佩戴眼鏡式終端的狀態(tài)下感測用戶的注視已經(jīng)固定的時(shí)間段;以及控制器,在用戶的注視已經(jīng)固定了參考時(shí)間或者更長的時(shí)間段的情況下,收集與用戶注視朝向的某物相關(guān)的信息,并且以多條收集的信息之中的至少一條收集的信息被顯示在顯示單元的方式控制顯示單元。
【專利說明】
眼鏡式終端及其控制方法
技術(shù)領(lǐng)域
[0001] 本公開涉及一種眼鏡式終端和用于控制眼鏡式終端的方法。
【背景技術(shù)】
[0002] 隨著信息時(shí)代的技術(shù)進(jìn)步,特別強(qiáng)調(diào)了實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)屏幕的顯示裝置的重要性。 頭戴式顯示器是這樣的裝置的一個(gè)示例。
[0003] 主要以安全眼鏡或者頭盔的形式的頭戴式顯示器是在每個(gè)眼睛的前面具有小的 顯示光學(xué)的顯示裝置。頭戴式顯示器已經(jīng)被開發(fā)以實(shí)現(xiàn)虛擬現(xiàn)實(shí)。通常,可佩戴的眼鏡式 終端具有被安裝在緊密接近兩只眼睛的小型的液晶顯示器并且具有反映被投射的圖像的 性能。當(dāng)前,針對在空間開發(fā)、核反應(yīng)堆、軍事機(jī)構(gòu)中的使用,和對于在商業(yè)和計(jì)算機(jī)游戲中 的使用的可佩戴的眼鏡式終端的開發(fā)已經(jīng)進(jìn)行研究。
[0004] 由于這些改進(jìn),根據(jù)一個(gè)實(shí)施例的可佩戴的眼鏡式終端已經(jīng)投入市場。被實(shí)現(xiàn)為 可佩戴裝置的智能眼鏡方便地執(zhí)行在現(xiàn)有的眼鏡式終端中執(zhí)行的功能。
[0005] 智能眼鏡包括與外部設(shè)備通信的功能。其中使用智能眼鏡執(zhí)行或者控制更多不同 的功能的各種方法已經(jīng)在開發(fā)中。
【發(fā)明內(nèi)容】
[0006] 因此,詳細(xì)描述的一個(gè)方面是為了提供一種眼鏡式終端和控制眼鏡式終端的方 法,該眼鏡式終端能夠以更加容易地方式收集關(guān)于用戶的附近的信息并且在任何時(shí)候給用 戶提供被收集的信息。
[0007] 詳細(xì)描述的另一方面是為了提供一種眼鏡式終端和控制眼鏡式終端的方法,該眼 鏡式終端能夠收集與用戶移動(dòng)所沿著的路徑有關(guān)的信息并且每當(dāng)必要時(shí)給用戶提供被收 集的信息,從而幫助用戶沿著該路徑往回移動(dòng)。
[0008] 為了實(shí)現(xiàn)這些和其他優(yōu)點(diǎn)并且根據(jù)本說明書的用途,如在此具體化和廣泛地描述 的,提供一種眼鏡式終端,包括:顯示單元,在其上顯示圖片信息;感測單元,該感測單元在 用戶佩戴眼鏡式終端的狀態(tài)下感測用戶的注視已經(jīng)固定的時(shí)間段;以及控制器,在用戶的 注視已經(jīng)固定了參考時(shí)間或者更長的時(shí)間段的情況下,收集與用戶注視朝向的某物相關(guān)的 信息,并且以多條收集的信息之中的至少一條收集的信息被顯示在顯示單元的方式來控制 顯示單元。
[0009] 在眼鏡式終端中,控制器可以存儲(chǔ)關(guān)于與用戶注視朝向的某物有關(guān)的信息被收集 的時(shí)間和位置的多條信息,作為與收集的信息相對應(yīng)的多條屬性信息。
[0010] 眼鏡式終端可以進(jìn)一步包括文本識(shí)別單元,該文本識(shí)別單元識(shí)別在與用戶注視朝 向的某物有關(guān)的信息中的文本信息,其中控制器可以包括在與被收集的信息相對應(yīng)的多條 屬性信息中的通過文本識(shí)別單元的識(shí)別的結(jié)果。
[0011] 在眼鏡式終端中,當(dāng)用戶從多條屬性信息之中選擇任意一條屬性信息時(shí),基于所 選擇的屬性信息,控制器可以基于選擇的屬性信息從多條搜索的信息之中搜尋相應(yīng)的信 息,或者可以有序地排列被顯示在顯示單元上的多條信息。
[0012] 眼鏡式終端可以進(jìn)一步包括相機(jī),該相機(jī)捕獲圖片信息,其中控制器可以至少收 集通過相機(jī)捕獲的一條圖片信息,作為與用戶注視朝向的某物有關(guān)的信息。
[0013] 眼鏡式終端可以進(jìn)一步包括位置識(shí)別單元,該位置識(shí)別單元識(shí)別移動(dòng)終端的當(dāng)前 位置,其中控制器可以收集與在感測到的當(dāng)前位置的附近在與用戶的注視已經(jīng)固定了時(shí)間 段或者更長的時(shí)間段的方向相對應(yīng)的地點(diǎn)有關(guān)的信息。
[0014] 在眼鏡式終端中,控制器可以進(jìn)一步收集關(guān)于用戶移動(dòng)所沿著的路徑的信息,并 且,在用戶的請求下,可以以信息被定位在顯示單元上顯示的路徑的附近的方式在顯示單 元上顯示與用戶注視朝著的某物有關(guān)的信息。
[0015] 眼鏡式終端可以進(jìn)一步包括第二感測單元,該第二感測單元感測在被施加到眼鏡 式終端的主體的多個(gè)輕擊、以及通過用戶做出的預(yù)定姿勢以及用戶的面部肌肉的肌電圖變 化之中的至少一個(gè),其中基于感測的結(jié)果,控制器可以識(shí)別用戶的請求。
[0016] 在眼鏡式終端中,基于通過第二感測單元的感測的結(jié)果,控制器可以開始收集與 用戶注視朝向的某物有關(guān)的信息或者可以停止收集與用戶注視朝著的某物有關(guān)的信息。
[0017] 在眼鏡式終端中,在信息的收集開始或者停止的情況下,控制器可以在顯示單元 上顯示至少一個(gè)預(yù)定圖形對象。
[0018] 眼鏡式終端可以進(jìn)一步包括位置識(shí)別單元,該位置識(shí)別單元識(shí)別移動(dòng)終端的當(dāng)前 位置,其中當(dāng)從多條收集的位置信息之中選擇與用戶注視朝向的某物有關(guān)的任意一條收集 的信息時(shí),控制器可以以與所選擇的一條收集的位置信息有關(guān)的當(dāng)前位置和附加信息被顯 示在顯示單元上的方式來執(zhí)行控制。
[0019] 在眼鏡式終端中,控制器可以收集與用戶注視朝向的某物有關(guān)的信息,作為與預(yù) 定車輛被停放的位置有關(guān)的停車信息,并且可以在用戶的請求下顯示多條收集的停車信息 之中的至少一條收集的停車信息。
[0020] 在眼鏡式終端中,控制器可以基于在用戶的位置的移動(dòng)速度中的變化和在用戶的 位置和預(yù)定車輛的位置之間的距離的變化之中的至少一個(gè)來確定是否用戶從預(yù)定車輛下 車,并且可以基于確定是否用戶從預(yù)定車輛下車的結(jié)果,收集與用戶注視朝向的某物相關(guān) 的信息作為停車信息。
[0021] 眼鏡式終端可以進(jìn)一步包括相機(jī),該相機(jī)捕獲關(guān)于預(yù)定車輛被停放的位置的附近 的圖片信息,其中當(dāng)圖片信息與多條已經(jīng)收集的停車信息之中的至少一條停車信息相似達(dá) 到預(yù)定程度或者更高時(shí),控制器可以以其他多條停車信息被定位在被顯示在顯示單元上的 至少一條停車信息的附近的方式在顯示單元上顯示其他多條停車信息。
[0022] 在眼鏡式終端中,基于在被施加到眼鏡式終端的主體的多個(gè)輕擊、通過用戶做出 的預(yù)定姿勢、以及用戶的面部肌肉的肌電圖變化之中的至少一個(gè),相機(jī)可以開始操作或者 停止操作。
[0023] 在眼鏡式終端中,控制器可以進(jìn)一步收集關(guān)于用戶移動(dòng)所沿著的路徑的信息,并 且,在用戶的請求下,可以在顯示單元上顯示關(guān)于路徑的信息和停車信息。
[0024] 在眼鏡式終端中,用戶移動(dòng)所沿著的路徑可以作為使用增強(qiáng)現(xiàn)實(shí)的圖形對象被顯 示在顯示單元上。
[0025] 為了實(shí)現(xiàn)這些和其他優(yōu)點(diǎn)并且根據(jù)本說明書的用途,如在此具體化和廣泛地描述 的,提供一種控制眼鏡式終端的方法,該方法包括:在用戶佩戴眼鏡式終端的狀態(tài)下感測用 戶的注視已經(jīng)固定的時(shí)間段;在用戶的注視已經(jīng)固定了參考時(shí)間段或者更長的時(shí)間段的情 況下,收集與用戶注視朝向的某物有關(guān)的信息;以及以在顯示單元上顯示多條收集的信息 之中的至少一條收集的信息的方式來控制顯示單元。
[0026] 在該方法中,用戶的注視固定的時(shí)間段的感測可以包括:感測在被施加到眼鏡式 終端的主體的多個(gè)輕擊和用戶做出的預(yù)定姿勢之中的至少一個(gè);以及基于感測的結(jié)果,操 作被提供給眼鏡式終端的相機(jī),其中信息的收集可以是將通過操作中的相機(jī)捕獲的圖像存 儲(chǔ)為靜態(tài)圖像和運(yùn)動(dòng)圖像之中的至少一個(gè)。
[0027] 在該方法中,信息的收集進(jìn)一步包括:對收集的信息執(zhí)行文本識(shí)別;生成文本識(shí) 別的結(jié)果作為與相對應(yīng)的已經(jīng)收集的信息有關(guān)的屬性信息;以及基于生成的數(shù)據(jù)信息對已 經(jīng)存儲(chǔ)的信息分類并且存儲(chǔ)分類的結(jié)果。
[0028] 根據(jù)在下文中給出的詳細(xì)描述,本申請的進(jìn)一步范圍將變得更加顯然。然而,應(yīng)理 解的是,僅通過說明給出指示本公開的優(yōu)選實(shí)施例的特定示例和詳細(xì)描述,因?yàn)閷Ρ绢I(lǐng)域 的技術(shù)人員來說本公開的精神和范圍內(nèi)的各種變化和修改將變得更加顯然。
【附圖說明】
[0029] 被包括以提供本公開的進(jìn)一步理解并且被包含且組成本說明書的一部分的附圖, 圖示示例性實(shí)施例并且連同描述一起用以解釋本公開的原理。
[0030] 在附圖中:
[0031] 圖1是用于描述根據(jù)本發(fā)明的眼鏡式終端的圖;
[0032] 圖2是圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的可佩戴的眼鏡式終端的圖;
[0033] 圖3和圖4是其中眼鏡式終端能夠操作的通信系統(tǒng)的圖;
[0034] 圖5是用于描述根據(jù)本發(fā)明的一個(gè)實(shí)施例的控制眼鏡式移動(dòng)終端的方法的流程 圖;
[0035] 圖6是用于描述在圖5中圖示的操作過程之中收集關(guān)于用戶注視的某物有關(guān)的信 息的操作過程的流程圖;
[0036] 圖7是用于描述在圖5中圖示的操作過程之中收集關(guān)于用戶注視的某物的信息的 操作過程的另一示例的流程圖;
[0037] 圖8是用于描述在圖5中圖示的操作過程之中分類和存儲(chǔ)被收集的信息的操作過 程的流程圖;
[0038] 圖9是用于描述在圖5中圖示的操作過程之中顯示根據(jù)用戶的請求找到的信息的 操作過程的流程圖;
[0039] 圖10A至圖10C是圖示根據(jù)本發(fā)明的實(shí)施例的其中在眼鏡式終端中收集與用戶注 視的某物有關(guān)的信息的示例的圖;
[0040] 圖llA(a)和圖llA(b)和圖llB(a)和圖llB(b)是圖示根據(jù)本發(fā)明的實(shí)施例的在 眼鏡式終端中收集與用戶注視的某物有關(guān)的信息的示例的圖;
[0041] 圖12A(a)和圖12A(b)和圖12B(a)和圖12B(b)是圖示根據(jù)用戶的請求在根據(jù)本 發(fā)明的實(shí)施例的眼鏡式終端中顯示多條信息之中的至少一條收集的信息的示例的圖;
[0042] 圖12C(a)和圖12C(b)是圖示在根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端中顯示關(guān)于用 戶已經(jīng)注視某物的時(shí)間段和用戶已經(jīng)拜訪相對應(yīng)的地點(diǎn)的次數(shù)的多條信息的示例的圖;
[0043] 圖13A (a)至圖13A (f)和圖13B (a)至圖13B (f)是圖示其中在根據(jù)本發(fā)明的眼鏡 式終端中,基于用戶做出的姿勢搜尋多條已經(jīng)收集的信息的示例的圖;
[0044] 圖14A(a)和圖14A(b)和圖14B(a)和圖14B(b)是根據(jù)本發(fā)明的眼鏡式終端200 中的其中停車信息被收集并且被提供給用戶的示例的圖。
【具體實(shí)施方式】
[0045] 參考附圖,根據(jù)在此公開的示例性實(shí)施例現(xiàn)在詳細(xì)地給出描述。為了參考附圖簡 要描述,相同的或者等效的組件可以被設(shè)有相同或者相似的附圖標(biāo)記,并且其描述將不會(huì) 被重復(fù)。通常,諸如"模塊"和"單元"的后綴可以被用于指代元件或者組件。這樣的后綴 的使用在此旨在僅有助于說明書的描述,并且后綴本身旨在沒有給予任何特定的意義或者 功能。在本公開中,為了簡要描述通常已經(jīng)省略了在相關(guān)領(lǐng)域中對于普通技術(shù)人員來說公 知的后綴。附圖被用于幫助容易地理解各種技術(shù)特征并且應(yīng)理解附圖沒有限制在此提出的 實(shí)施例。正因如此,本公開應(yīng)被解釋為延伸到除了在附圖中特別地陳述的之外的任何變更、 等同物以及替代。
[0046] 本描述中的終端可以諸如包括便攜式電話、智能電話、筆記本計(jì)算機(jī)、數(shù)字廣播終 端、個(gè)人數(shù)字助理(PDA)、便攜式多媒體播放器(PMP)、導(dǎo)航儀、板式PC、平板PC、超級(jí)本、可 佩戴裝置(例如,智能手表)、頭戴式顯示器(HMD)等的移動(dòng)終端。
[0047] 然而,對于本領(lǐng)域的技術(shù)人員將會(huì)顯然的是,除了用于移動(dòng)性的特定配置之外,本 發(fā)明也可以應(yīng)用于諸如數(shù)字TV、桌上型計(jì)算機(jī)和數(shù)字簽名的固定終端。
[0048] 圖1是根據(jù)本公開的實(shí)施例的移動(dòng)終端的框圖。
[0049] 示出移動(dòng)終端100,該移動(dòng)終端100具有諸如無線通信單元110、輸入單元120、感 測單元140、輸出單元150、接口單元160、存儲(chǔ)器170、控制器180、以及電源單元190的組 件。要理解的是,不要求實(shí)現(xiàn)所有的被圖示的組件,并且可以可替選地實(shí)現(xiàn)更多或者更少的 組件。
[0050] 現(xiàn)在參考圖1,移動(dòng)終端100被示出具有無線通信單元110,該無線通信單元110 被配置有數(shù)個(gè)共同實(shí)現(xiàn)的組件。例如,無線通信單元110通常包括允許在移動(dòng)終端100和 無線通信單元或者移動(dòng)終端位于的網(wǎng)絡(luò)之間的無線通信的一個(gè)或者多個(gè)組件。
[0051] 無線通信單元110通常包括一個(gè)或者多個(gè)模塊,其允許諸如在移動(dòng)終端100和無 線通信系統(tǒng)之間的無線通信的通信、在移動(dòng)終端100和另一移動(dòng)終端之間的通信、在移動(dòng) 終端100與外部服務(wù)器之間通信。此外,無線通信單元110通常包括將移動(dòng)終端100連接 到一個(gè)或者多個(gè)網(wǎng)絡(luò)的一個(gè)或者多個(gè)模塊。為了有助于這樣的通信,無線通信單元110包 括一個(gè)或者多個(gè)廣播接收模塊111、移動(dòng)通信模塊112、無線互聯(lián)網(wǎng)模塊113、短程通信模塊 114、以及位置信息模塊115中的一個(gè)或者多個(gè)。
[0052] 輸入單元120包括用于獲得圖像或者視頻的相機(jī)121 ;麥克風(fēng)122,該麥克風(fēng)122 是一種用于輸入音頻信號(hào)的音頻輸入裝置;以及用于允許用戶輸入信息的用戶輸入單元 (例如,觸摸鍵、推動(dòng)鍵、機(jī)械鍵、軟鍵等)。數(shù)據(jù)(例如,音頻、視頻、圖像等)通過輸入單元 120被獲得并且可以根據(jù)裝置參數(shù)、用戶命令、以及其組合通過控制器180分析和處理。
[0053] 通常使用被配置成感測移動(dòng)終端的內(nèi)部信息、移動(dòng)終端的周圍環(huán)境、用戶信息等 的一個(gè)或者多個(gè)傳感器實(shí)現(xiàn)感測單元140。例如,在圖1A中,示出具有接近傳感器141和 照明傳感器的感測單元140。必要時(shí),感測單元140可以可替選地或者附加地包括其他類 型的傳感器或者裝置,諸如觸摸傳感器、加速度傳感器、磁傳感器、G傳感器、陀螺儀傳感器、 移動(dòng)傳感器、RGB傳感器、紅外(IR)傳感器、手指掃描傳感器、超聲傳感器、光學(xué)傳感器(例 如,相機(jī)121)、麥克風(fēng)122、電池量表、環(huán)境傳感器(例如,氣壓計(jì)、濕度計(jì)、溫度計(jì)、輻射監(jiān)測 傳感器、熱傳感器、以及氣體傳感器等)、以及化學(xué)傳感器(例如,電子鼻、醫(yī)療傳感器、生物 傳感器等),舉了一些例子。移動(dòng)終端100可以被配置成利用從感測單元140獲得的信息, 并且具體地,從感測單元140的一個(gè)或者多個(gè)傳感器、和其組合獲得的信息。
[0054] 感測單元140可以進(jìn)一步包括用于感測用戶的預(yù)設(shè)姿勢的姿勢傳感器142。例如, 姿勢傳感器142可以包括照片傳感器、加速度傳感器、慣性傳感器、重力傳感器等,并且可 以被配置成感測何時(shí)通過用戶的姿勢改變移動(dòng)終端100的位置。
[0055] 感測單元140可以進(jìn)一步包括肌電圖(EMG)傳感器143。該肌電圖指示當(dāng)肌肉收 縮時(shí)產(chǎn)生的電氣信號(hào)。
[0056] 輸出單元150通常被配置成輸出諸如音頻、視頻、觸覺輸出等的各種類型的信息。 示出具有顯示單元151、音頻輸出模塊152、觸覺模塊153、以及光學(xué)輸出模塊154的輸出單 元 150。
[0057] 顯示單元151可以具有與觸摸傳感器的層間結(jié)構(gòu)或者集成結(jié)構(gòu)以便于促進(jìn)觸摸 屏幕。觸摸屏幕可以在移動(dòng)終端1〇〇和用戶之間提供輸出接口,并且用作在移動(dòng)終端1〇〇 和用戶之間提供輸入接口的用戶輸入單元。
[0058] 接口單元160用作對接能夠被耦合到移動(dòng)終端100的各種類型的外部設(shè)備。例如, 接口單元160可以包括任何有線或者無線端口、外部電源端口、有線或者無線數(shù)據(jù)端口、存 儲(chǔ)卡端口、用于連接具有識(shí)別模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端 口、耳機(jī)端口等。在一些情況下,響應(yīng)于被連接到接口單元160的外部設(shè)備,移動(dòng)終端100 可以執(zhí)行與被連接的外部設(shè)備相關(guān)聯(lián)的各式各樣的控制功能。
[0059] 存儲(chǔ)器170通常被實(shí)現(xiàn)以存儲(chǔ)數(shù)據(jù)以支持移動(dòng)終端100的各種功能或者特征。例 如,存儲(chǔ)器170可以被配置成存儲(chǔ)在移動(dòng)終端100中執(zhí)行的應(yīng)用程序、用于移動(dòng)終端100的 操作的數(shù)據(jù)或者指令等。經(jīng)由無線通信可以從外部服務(wù)器下載這些應(yīng)用程序中的一些。在 制造或者裝運(yùn)時(shí)其他應(yīng)用程序可以被安裝在移動(dòng)終端100內(nèi),其通常是用于移動(dòng)終端100 的基本功能(例如,接收呼叫、撥打電話、接收消息、發(fā)送消息等)的情況。應(yīng)用程序被存儲(chǔ) 在存儲(chǔ)器170中、安裝在移動(dòng)終端100中,并且通過控制器180執(zhí)行以執(zhí)行用于移動(dòng)終端 100的操作(或者功能)是常見的。
[0060] 除了與應(yīng)用程序相關(guān)聯(lián)的操作之外,控制器180通常用作控制移動(dòng)終端100的整 體操作??刂破?80可以通過處理通過在圖1中描述的各種組件輸入或者輸出的信號(hào)、數(shù) 據(jù)、信息等,或者激活被存儲(chǔ)在存儲(chǔ)器170中的應(yīng)用程序提供或者處理適合于用戶的信息 或者功能。作為一個(gè)示例,控制器180根據(jù)已經(jīng)被存儲(chǔ)在存儲(chǔ)器170中的應(yīng)用程序的執(zhí)行 控制在圖1中圖示的一些組件或者所有組件。
[0061] 電源單元190能夠被配置成接收外部電力或者提供內(nèi)部電力以便于供應(yīng)對于操 作被包括在移動(dòng)終端100中的元件和組件所要求的適當(dāng)?shù)碾娏?。電源單?90可以包括電 池,并且電池可以被配置成被嵌入在終端主體中,或者被配置成從終端主體可拆卸。
[0062] 繼續(xù)參考圖1,現(xiàn)在將會(huì)更加詳細(xì)地描述在本附圖中描述的各種組件。關(guān)于無線通 信單元110,廣播接收模塊111通常被配置成經(jīng)由廣播信道從外部廣播管理實(shí)體接收廣播 信號(hào)和/或廣播相關(guān)信息。廣播信道可以包括衛(wèi)星信道、陸地信道、或者這兩者。在一些實(shí) 施例中,可以利用兩個(gè)或者更多個(gè)廣播接收模塊111以有助于同時(shí)接收兩個(gè)或者更多個(gè)廣 播信道,或者支持廣播信道之中的切換。
[0063] 移動(dòng)通信模塊112能夠?qū)o線信號(hào)傳送到一個(gè)或者多個(gè)網(wǎng)絡(luò)實(shí)體并且/或者從一 個(gè)或者多個(gè)網(wǎng)絡(luò)實(shí)體接收無線信號(hào)。網(wǎng)絡(luò)實(shí)體的典型示例包括基站、外部移動(dòng)終端、服務(wù)器 等。這樣的網(wǎng)絡(luò)實(shí)體形成移動(dòng)通信網(wǎng)絡(luò)的一部分,其根據(jù)用于移動(dòng)通信(例如,全球移動(dòng)通 信系統(tǒng)(GSM)、碼分多址(CDMA)、CDMA2000 (碼分多址2000)、EV-D0(增強(qiáng)的語音數(shù)據(jù)優(yōu)化 或者僅增強(qiáng)的語音數(shù)據(jù))、寬帶CDMA (WCDMA)、高速下行鏈路分組接入(HSDPA)、HSUPA (高速 上行鏈路分組接入)、長期演進(jìn)(LTE)、LTE-A(高級(jí)長期演進(jìn))等)的技術(shù)標(biāo)準(zhǔn)或者通信方 法構(gòu)造。
[0064] 經(jīng)由移動(dòng)通信模塊112傳送和/或接收到的無線信號(hào)的示例包括音頻呼叫信號(hào)、 視頻(電話)呼叫信號(hào)、或者各種格式的數(shù)據(jù)以支持文本和多媒體消息的通信。
[0065] 無線互聯(lián)網(wǎng)模塊113被配置成有助于無線互聯(lián)網(wǎng)接入。此模塊可以被內(nèi)部地或者 外部地耦合到移動(dòng)終端100。無線互聯(lián)網(wǎng)模塊113可以根據(jù)無線互聯(lián)網(wǎng)技術(shù)經(jīng)由通信網(wǎng)絡(luò) 傳送和/或接收無線信號(hào)。
[0066] 這樣的無線互聯(lián)網(wǎng)接入的示例包括無線LAN(WLAN)、無線保真(Wi-Fi)、Wi-Fi直 連、數(shù)字生活網(wǎng)絡(luò)聯(lián)盟(DLNA)、無線寬帶(Wibro)、全球微波接入互操作(Wimax)、高速下行 鏈路分組接入(HSDPA)、HSUPA (高速上行鏈路分組接入)、長期演進(jìn)(LTE)、LTE-A(長期高 級(jí)演進(jìn))等。無線互聯(lián)網(wǎng)模塊113可以根據(jù)一個(gè)或者多個(gè)這樣的無線互聯(lián)網(wǎng)技術(shù),或者其 他互聯(lián)網(wǎng)技術(shù)傳送/接收數(shù)據(jù)。
[0067] 在一些實(shí)施例中,當(dāng)根據(jù)例如WiBro、HSDPA、GSM、CDMA、WCDMA、LTE等作為移動(dòng) 通信網(wǎng)絡(luò)的一部分實(shí)現(xiàn)無線互聯(lián)網(wǎng)接入時(shí),無線互聯(lián)網(wǎng)模塊113執(zhí)行這樣的無線互聯(lián)網(wǎng)接 入。正因如此,互聯(lián)網(wǎng)模塊113可以與移動(dòng)通信模塊112協(xié)作,或者用作移動(dòng)通信模塊112。
[0068] 短程通信模塊114被配置成有助于短程通信。適合于實(shí)現(xiàn)這樣的短程通信的技 術(shù)包括:藍(lán)牙(BLUETOOTH?)、射頻識(shí)別(RFID)、紅外數(shù)據(jù)協(xié)會(huì)(IrDA)、超寬帶(UWB)、紫蜂 (ZigBee?)、近場通信(NFC)、無線保真(Wi-Fi)、Wi-Fi直連、無線USB (無線通用串行總線) 等。經(jīng)由無線局域網(wǎng),短程通信模塊114通常支持在移動(dòng)終端100和無線通信系統(tǒng)之間的 無線通信,在移動(dòng)終端100和另一移動(dòng)終端100之間的通信、或者在移動(dòng)終端和另一移動(dòng)終 端100(或者外部服務(wù)器)位于的網(wǎng)絡(luò)之間的通信。無線局域網(wǎng)的一個(gè)示例是無線個(gè)人域 網(wǎng)。
[0069] 在一些實(shí)施例中,另一移動(dòng)終端(可以類似于移動(dòng)終端100配置)可以是可佩戴 裝置,例如,智能手表、智能眼鏡或者頭戴式顯示器(HMD),其能夠與移動(dòng)終端100交換數(shù)據(jù) (或者以其他方式與移動(dòng)終端100協(xié)作)。短程通信模塊114可以感測或者識(shí)別可佩戴裝 置,并且允許在可佩戴裝置和移動(dòng)終端100之間的通信。另外,當(dāng)感測到的可佩戴裝置是被 授權(quán)以與移動(dòng)終端100通信的裝置時(shí),例如,控制器180可以使在移動(dòng)終端100中處理的數(shù) 據(jù)經(jīng)由短程通信模塊114傳輸?shù)娇膳宕餮b置。因此,可佩戴裝置的用戶可以在可佩戴裝置 上使用在移動(dòng)終端1〇〇中處理的數(shù)據(jù)。例如,當(dāng)在移動(dòng)終端1〇〇中接收到呼叫時(shí),用戶可以 使用可佩戴裝置應(yīng)答呼叫。而且,當(dāng)在移動(dòng)終端100中接收到消息時(shí),用戶能夠使用可佩戴 裝置檢查接收到的消息。
[0070] 位置信息模塊115通常被配置成檢測、計(jì)算、導(dǎo)出或者以其他方式識(shí)別移動(dòng)終端 的位置。作為示例,位置信息模塊115包括全球定位系統(tǒng)(GPS)模塊、Wi-Fi模塊、或者這 兩者。如有必要,位置信息模塊115可以與無線通信單元110中的任意其他模塊可替選地 或者附加地發(fā)揮作用以獲得與移動(dòng)終端的位置有關(guān)的信息。
[0071] 作為一個(gè)示例,當(dāng)移動(dòng)終端使用GPS模塊時(shí),可以使用從GPS衛(wèi)星發(fā)送的信號(hào)獲取 移動(dòng)終端的位置。作為另一示例,當(dāng)移動(dòng)終端使用Wi-Fi模塊時(shí),能夠基于將無線信號(hào)傳送 到Wi-Fi模塊或者從Wi-Fi模塊接收無線信號(hào)的無線接入點(diǎn)(AP)有關(guān)的信息獲取移動(dòng)終 端的位置。
[0072] 輸入單元120可以被配置成允許對移動(dòng)終端120的各種類型的輸入。這樣的輸入 的示例包括音頻、圖像、視頻、數(shù)據(jù)、以及用戶輸入。使用一個(gè)或者多個(gè)相機(jī)121經(jīng)常獲得圖 像和視頻輸入。這樣的相機(jī)121可以處理在視頻或者圖像捕獲模式下通過圖像傳感器獲得 的靜止圖片或者視頻的圖像幀。被處理的圖像幀能夠被顯示在顯示單元151上或者被存儲(chǔ) 在存儲(chǔ)器170中。在一些情況下,相機(jī)121可以以矩陣配置排列以允許具有多個(gè)角度或者 焦點(diǎn)的多個(gè)圖像被輸入到移動(dòng)終端100。作為另一示例,相機(jī)121可以位于立體排列以獲取 用于實(shí)現(xiàn)立體圖像的左圖像和右圖像。
[0073] 麥克風(fēng)122通常被實(shí)現(xiàn)以允許對移動(dòng)終端100的音頻輸入。根據(jù)在移動(dòng)終端100 中執(zhí)行的功能以各種方式能夠處理音頻輸入。如有必要,麥克風(fēng)122可以包括各種消噪算 法以去除在接收外部音頻的過程中產(chǎn)生的不想要的噪聲。
[0074] 用戶輸入單元(未示出)是允許用戶輸入的組件。這樣的用戶輸入可以使控制器 180能夠控制移動(dòng)終端100的操作。用戶輸入單元可以包括機(jī)械輸入元件中的一個(gè)或者多 個(gè)(例如,鍵、位于移動(dòng)終端1〇〇的前和/或后表面或者側(cè)表面上的按鈕、圓頂開關(guān)、轉(zhuǎn)向 輪、轉(zhuǎn)向開關(guān)等)、或者觸摸靈敏的輸入等。作為一個(gè)示例,觸摸靈敏的輸入可以是通過軟件 處理被顯示在觸摸屏上的虛擬鍵或者軟鍵、或者位于在除了觸摸屏之外的位置處的移動(dòng)終 端上的觸摸鍵。另一方面,虛擬鍵或者可視鍵可以以例如,圖形、文本、圖標(biāo)、視頻、或者其組 合的各種形狀顯示在觸摸屏上。
[0075] 感測單元140通常被配置成感測移動(dòng)終端的內(nèi)部信息、移動(dòng)終端的周圍環(huán)境信 息、用戶信息等中的一個(gè)或者多個(gè)??刂破?80通常與感測單元140協(xié)作以基于通過感測 單元140提供的感測控制移動(dòng)終端100的操作或執(zhí)行與被安裝在移動(dòng)終端中的應(yīng)用相關(guān)聯(lián) 的數(shù)據(jù)處理、功能或者操作。使用任何種類的傳感器可以實(shí)現(xiàn)感測單元140,現(xiàn)在將會(huì)更加 詳細(xì)地描述其中的一些。
[0076] 接近傳感器141可以包括在沒有機(jī)械接觸的情況下通過使用磁場、紅外線等感測 接近表面的對象、或者位于表面附近的對象的存在或者不存在的傳感器。接近傳感器141 可以被布置在通過觸摸屏覆蓋的移動(dòng)終端的內(nèi)部區(qū)域處,或者觸摸屏附近。
[0077] 例如,接近傳感器141可以包括任何透射型光電傳感器、直接反射型光電傳感器、 鏡反射型光電傳感器、高頻振蕩接近傳感器、電容型接近傳感器、磁型接近傳感器、紅外線 接近傳感器等。當(dāng)觸摸屏被實(shí)現(xiàn)為電容型時(shí),接近傳感器141能夠通過電磁場響應(yīng)于具有 導(dǎo)電性的對象的接近的變化來感測指示器相對于觸摸屏的接近。在這樣的情況下,觸摸屏 (觸摸傳感器)也可以被分類成接近傳感器。
[0078] 術(shù)語"接近觸摸"將會(huì)在此被經(jīng)常引用以表示其中指示器被定位接近觸摸屏而沒 有接觸觸摸屏的場景。術(shù)語"接觸觸摸"將會(huì)在此被經(jīng)常引用以表示其中指示器物理接觸 觸摸屏的場景。對于與指示器相對于觸摸屏的接近觸摸相對應(yīng)的位置,這樣的位置將會(huì)對 應(yīng)于其中指示器垂直于觸摸屏的位置。接近傳感器141可以感測接近觸摸和接近觸摸模式 (例如,距離、方向、速度、時(shí)間、位置、運(yùn)動(dòng)狀態(tài)等)。
[0079] 通常,控制器180處理與通過接近傳感器141感測到的接近觸摸和接近觸摸模式 相對應(yīng)的數(shù)據(jù),并且使在觸摸屏上能夠輸出可視信息。另外,根據(jù)是否相對于觸摸屏上的點(diǎn) 的觸摸是接近觸摸或者接觸觸摸,控制器180能夠控制移動(dòng)終端100執(zhí)行不同的操作或者 處理不同的數(shù)據(jù)。
[0080] 使用任何各種觸摸方法,觸摸傳感器能夠感測被施加到諸如顯示單元151的觸摸 屏的觸摸。這樣的觸摸方法的示例包括電阻型、電容型、紅外型、以及磁場型等。
[0081] 作為一個(gè)示例,觸摸傳感器可以被配置成將被施加到顯示單元151的特定部分的 壓力的變化轉(zhuǎn)換成電輸入信號(hào),或者將在顯示單元151的特定部分處出現(xiàn)的電容轉(zhuǎn)換成電 輸入信號(hào)。觸摸傳感器也可以被配置成不僅感測被觸摸的位置和被觸摸的區(qū)域,而且感測 觸摸壓力和/或觸摸電容。觸摸對象通常被用于將觸摸輸入施加到觸摸傳感器。典型的觸 摸對象的示例包括手指、觸摸筆、觸筆、指示器等。
[0082] 當(dāng)通過觸摸傳感器感測觸摸輸入時(shí),相應(yīng)的信號(hào)可以被傳送到觸摸控制器。觸摸 控制器可以處理接收到的信號(hào),并且然后將相應(yīng)的數(shù)據(jù)傳送到控制器180。因此,控制器 180可以感測已經(jīng)觸摸顯示單元151的哪一個(gè)區(qū)域。在此,觸摸控制器可以是與控制器180 分離的組件、控制器180、或者其組合。
[0083] 在一些實(shí)施例中,控制器180可以根據(jù)觸摸了觸摸屏或者除了觸摸屏之外被設(shè)置 的觸摸鍵的一種觸摸對象執(zhí)行相同或者不同的控制。例如,基于移動(dòng)終端100的當(dāng)前操作 狀態(tài)或者當(dāng)前執(zhí)行的應(yīng)用,可以決定根據(jù)提供觸摸輸入的對象是否執(zhí)行相同或者不同的控 制。
[0084] 觸摸傳感器和接近傳感器可以被單獨(dú)地或者組合實(shí)現(xiàn),以感測各種類型的觸摸。 這樣的觸摸包括短(或者輕擊)觸摸、長觸摸、多觸摸、拖動(dòng)觸摸、輕彈觸摸、捏縮觸摸、捏放 觸摸、刷動(dòng)觸摸、懸停觸摸等。
[0085] 如有必要,超聲傳感器可以被實(shí)現(xiàn)以使用超聲波識(shí)別與觸摸對象有關(guān)的位置信 息。例如,控制器180可以基于通過照明傳感器和多個(gè)超聲傳感器感測到的信息計(jì)算波生 成源的位置。因?yàn)楣獗瘸暡斓枚?,所以光到達(dá)光學(xué)傳感器的時(shí)間遠(yuǎn)遠(yuǎn)比超聲波到達(dá)超 聲傳感器的時(shí)間短。使用此事實(shí)可以計(jì)算波生成源的位置。例如,可以基于光作為參考信 號(hào)使用與超聲波到達(dá)傳感器的時(shí)間的時(shí)間差計(jì)算波生成源的位置。
[0086] 相機(jī)121通常包括至少一個(gè)相機(jī)傳感器(CXD、CMOS等)、光傳感器(或者圖像傳 感器)、以及激光傳感器。
[0087] 實(shí)現(xiàn)具有激光傳感器的相機(jī)121可以允許相對于3D立體圖像的物理對象的觸摸 的檢測。光傳感器可以被層壓在顯示裝置上,或者與移動(dòng)終端重疊。光傳感器可以被配置 成掃描接近觸摸屏的物理對象的移動(dòng)。更加詳細(xì)地,光傳感器可以包括在行和列處的光電 二極管和晶體管以使用根據(jù)被施加的光的數(shù)量改變的電信號(hào)掃描在光傳感器處接收到的 內(nèi)容。即,光傳感器可以根據(jù)光的變化計(jì)算物理對象的坐標(biāo)從而獲得物理對象的位置信息。
[0088] 顯示單元151通常被配置成輸出在移動(dòng)終端100中處理的信息。例如,顯示單元 151可以顯示在移動(dòng)終端100處執(zhí)行的應(yīng)用的執(zhí)行屏幕信息或者響應(yīng)于屏幕執(zhí)行信息的用 戶界面(UI)和圖形用戶界面(GUI)信息。
[0089] 在顯示單元151被配置成眼鏡式、頭戴式顯示器(HMD)或者透明顯示器的情況下, 被輸出到顯示單元151的圖像可以通過一般視圖以重疊的方式被顯示。在這樣的情況下, 顯示單元151可以進(jìn)一步包括增強(qiáng)現(xiàn)實(shí)(AR)輸出單元152,該增強(qiáng)顯示(AR)輸出單元152 被配置成使用這樣的顯示器的特性以與真實(shí)圖像或者背景重疊的方式將虛擬圖像顯示為 單個(gè)圖像來提供增強(qiáng)現(xiàn)實(shí)(AR)。
[0090] 在一些實(shí)施例中,顯示單元151可以被實(shí)現(xiàn)為用于顯示立體圖像的立體顯示單 元。典型的立體顯示單元可以采用諸如立體方案(眼鏡方案)、自動(dòng)立體方案(無眼鏡方 案)、投影方案(全息方案)等的立體顯示方案。
[0091] 音頻輸出模塊153通常被配置成輸出音頻數(shù)據(jù)??梢詮娜魏未罅康牟煌膩碓传@ 得這樣的音頻數(shù)據(jù),使得可以從無線通信單元110接收音頻數(shù)據(jù)或者可以已經(jīng)將其存儲(chǔ)在 存儲(chǔ)器170中。可以在諸如信號(hào)接收模式、呼叫模式、記錄模式、語音識(shí)別模式、廣播接收模 式等的模式期間輸出音頻數(shù)據(jù)。音頻輸出模塊153能夠提供與由移動(dòng)終端100執(zhí)行的特定 功能(例如,呼叫信號(hào)接收聲音、消息接收聲音等)有關(guān)的音頻輸出。音頻輸出模塊153也 可以被實(shí)現(xiàn)為接收器、揚(yáng)聲器、蜂鳴器等。
[0092] 觸覺模塊154能夠被配置成產(chǎn)生用戶能夠感覺、感知、或者以其他方式體驗(yàn)的各 種觸覺效果。通過觸覺模塊153產(chǎn)生的觸覺效果的典型示例是振動(dòng)。能夠通過用戶選擇或 者通過控制器進(jìn)行設(shè)置來控制通過觸覺模塊155產(chǎn)生的振動(dòng)的強(qiáng)度、模式等。例如,觸覺模 塊153可以以組合的方式或者順序的方式輸出不同的振動(dòng)。
[0093] 除了振動(dòng)之外,觸覺模塊153能夠生成各種其他觸覺效果,包括通過諸如垂直移 動(dòng)以接觸皮膚的針排列的刺激的效果、通過噴孔或者吸入口的空氣的噴射力或者吸力、對 皮膚的觸摸、電極的接觸、靜電力、通過使用能夠吸收或者產(chǎn)生熱的元件再現(xiàn)冷和暖的感覺 的效果等。
[0094] 觸覺模塊153也能夠被實(shí)現(xiàn)以允許用戶通過諸如用戶的手指或者手臂的肌肉感 覺來感覺觸覺效果,以及通過直接接觸傳遞觸覺效果。根據(jù)移動(dòng)終端100的特定配置也可 以設(shè)置兩個(gè)或者更多個(gè)觸覺模塊153。
[0095] 光學(xué)輸出模塊155能夠使用光源的光輸出用于指事件產(chǎn)生的信號(hào)。在移動(dòng)終端 100中產(chǎn)生的事件的示例可以包括消息接收、呼叫信號(hào)接收、未接來電、報(bào)警、日程表通知、 電子郵件接收、通過應(yīng)用的信息接收等。
[0096] 也可以以移動(dòng)終端發(fā)射單色光或者具有多種顏色的光的方式實(shí)現(xiàn)通過光學(xué)輸出 模塊155輸出的信號(hào)。例如,當(dāng)移動(dòng)終端感測用戶已經(jīng)檢查了產(chǎn)生的事件時(shí)信號(hào)輸出可以 被結(jié)束。
[0097] 接口單元160用作用于要連接到移動(dòng)終端100的外部設(shè)備的接口。例如,接口單 元160能夠接收從外部設(shè)備傳送的數(shù)據(jù),接收電力以傳送到移動(dòng)終端100內(nèi)的元件和組件, 或者將移動(dòng)終端1〇〇的內(nèi)部數(shù)據(jù)傳送到這樣的外部設(shè)備。接口單元160可以包括有線或者 無線頭戴式受話器端口、外部電源端口、有線或者無線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于連接具 有標(biāo)識(shí)模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機(jī)端口等。
[0098] 標(biāo)識(shí)模塊可以是存儲(chǔ)用于認(rèn)證使用移動(dòng)終端100的權(quán)限的各種信息的芯片并且 可以包括用戶標(biāo)識(shí)模塊OHM)、訂戶標(biāo)識(shí)模塊(S頂)、通用訂戶標(biāo)識(shí)模塊(US頂)等。另外, 具有標(biāo)識(shí)模塊(在此也被稱為"標(biāo)識(shí)裝置")的裝置可以采用智能卡的形式。因此,標(biāo)識(shí)裝 置經(jīng)由接口單元160能夠與終端100相連接。
[0099] 當(dāng)移動(dòng)終端100與外部托架相連接時(shí),接口單元160能夠用作允許電力從托架供 應(yīng)到移動(dòng)終端1〇〇的通道或者可以用作允許用戶從托架輸入的各種命令信號(hào)傳遞到移動(dòng) 終端的通道。從托架輸入的各種命令信號(hào)或者電力可以作為用于識(shí)別移動(dòng)終端被正確地安 裝在托架上的信號(hào)操作。
[0100] 存儲(chǔ)器170能夠存儲(chǔ)程序以支持移動(dòng)終端180的操作并且存儲(chǔ)輸入/輸出數(shù)據(jù) (例如,電話簿、消息、靜止圖像、視頻等)。存儲(chǔ)器170可以存儲(chǔ)與響應(yīng)于觸摸屏上的觸摸 輸入輸出的各種模式的振動(dòng)和音頻有關(guān)的數(shù)據(jù)。
[0101] 存儲(chǔ)器170可以包括一種或者多種類型的存儲(chǔ)介質(zhì),包括閃存、硬盤、固定盤、硅 盤、多媒體卡式、卡型存儲(chǔ)器(例如,SD或DX存儲(chǔ)器等)、隨機(jī)存取存儲(chǔ)器(RAM)、靜態(tài)隨 機(jī)存取存儲(chǔ)器(SRAM)、只讀存儲(chǔ)器(ROM)、電可擦除可編程只讀存儲(chǔ)器(EEPROM)、可編程只 讀存儲(chǔ)器(PROM)、磁存儲(chǔ)器、磁盤、光盤等。也可以關(guān)于在諸如互聯(lián)網(wǎng)的網(wǎng)絡(luò)上執(zhí)行存儲(chǔ)器 170的存儲(chǔ)功能的網(wǎng)絡(luò)存儲(chǔ)裝置操作移動(dòng)終端100。
[0102] 控制器180通??梢钥刂埔苿?dòng)終端100的一般操作。例如,當(dāng)移動(dòng)終端的狀態(tài)滿 足預(yù)設(shè)條件時(shí)控制器180可以設(shè)置或者釋放用于限制用戶輸入與應(yīng)用有關(guān)的控制命令的 鎖定狀態(tài)。
[0103] 控制器180也能夠執(zhí)行與語音呼叫、數(shù)據(jù)通信、視頻呼叫等相關(guān)聯(lián)的控制和處理, 或者執(zhí)行模式識(shí)別處理以將在觸摸屏上執(zhí)行的手寫輸入或者圖片繪制輸入分別識(shí)別為字 符或者圖像。另外,控制器180能夠控制這些組件中的一個(gè)或者組合以便于實(shí)現(xiàn)在此公開 的各種示例性實(shí)施例。
[0104] 電源單元190接收外部電力或者提供內(nèi)部電力并且供應(yīng)對于操作被包括在移動(dòng) 終端100中的各自的元件和組件所需的適當(dāng)?shù)碾娏?。電源單?90可以包括電池,該電池 通常是可充電的或者可拆卸地耦合到終端主體,用于充電。
[0105] 電源單元190可以包括連接端口。連接端口可以被配置為接口單元160的一個(gè)示 例,用于供應(yīng)電力以對電池再充電的外部充電器被電氣地連接到該接口單元160。
[0106] 作為另一示例,電源單元190可以被配置成在沒有使用連接端口的情況下以無線 的方式對電池再充電。在本示例中,使用以磁感應(yīng)為基礎(chǔ)的感應(yīng)耦合方法或者以電磁諧振 為基礎(chǔ)的電磁諧振耦合方法,電源單元190能夠接收從外部無線電力發(fā)射器傳遞的電力。
[0107] 可以使用例如軟件、硬件、或者其任何組合,以計(jì)算機(jī)可讀介質(zhì)、機(jī)器可讀介質(zhì)、或 者類似介質(zhì)實(shí)現(xiàn)在此描述的各種實(shí)施例。
[0108] 另一方面,根據(jù)本發(fā)明的移動(dòng)終端100的感測單元140包括輕擊感測單元144,其 感測用戶施加到主體的輕擊或者輕擊姿勢。
[0109] 在這一點(diǎn)上,輕擊感測單元144感測被施加到移動(dòng)終端100的主體或者對象的姿 勢。更加具體地,該輕擊被構(gòu)造以意指在移動(dòng)終端1〇〇的主體或者對象上輕輕地?fù)舸蛑T如 手指的輕擊工具的操作,或者使輕擊工具輕輕地接觸移動(dòng)終端100的主體或者對象的操 作。
[0110] 另一方面,應(yīng)用關(guān)于輕擊的輕擊工具是指利用其外力被施加到移動(dòng)終端100的主 體和對象的物體,例如,諸如觸筆、鋼筆、尖端、或者拳頭。另一方面,根據(jù)本發(fā)明,輕擊工具 沒有必要被限于觸摸輸入被施加到移動(dòng)終端100的武器,利用其外力能夠被施加到移動(dòng)終 端100的主體或者對象的所有類型的物體夠被用作輕擊工具。
[0111] 另一方面,對其施加輕擊姿勢的對象是移動(dòng)終端100的主體和在其上放置移動(dòng)終 端100的對象之中的至少一個(gè)。
[0112] 另一方面,根據(jù)本發(fā)明,通過被包括在輕擊感測單元144中的加速度傳感器和觸 摸傳感器之中的至少一個(gè)感測輕擊或者輕擊姿勢。在這一點(diǎn)上,加速度傳感器是能夠測量 被施加到移動(dòng)終端100的主體的諸如加速、振動(dòng)、以及沖擊的動(dòng)力的傳感器。
[0113] 即,通過感測由于輕擊姿勢出現(xiàn)的移動(dòng)終端100的主體的移動(dòng)(振動(dòng)),加速度 傳感器感測是否輕擊被施加到對象。因此,加速度傳感器感測在移動(dòng)終端100的主體上的 輕擊或者感測在對象上的輕擊,該對象被定位為靠近移動(dòng)終端100的主體以至于移動(dòng)終端 100的主體的移動(dòng)或者振動(dòng)能夠被感測到。
[0114] 以這樣的方式,只要加速度傳感器能夠感測移動(dòng)終端100的主體的移動(dòng)或者振 動(dòng),加速度傳感器就能夠感測不僅被應(yīng)用于移動(dòng)終端100的主體,而且被施加于除了移動(dòng) 終端100的主體之外的區(qū)域的輕擊。
[0115] 在根據(jù)本發(fā)明的移動(dòng)終端中,為了感測移動(dòng)終端100的主體上的輕擊,加速度傳 感器和觸摸傳感器之中的僅一個(gè)被使用,加速度傳感器和觸摸傳感器被順序地使用,或者 加速度傳感器和觸摸傳感器被同時(shí)使用。另一方面,其中僅加速度傳感器被用于感測輕擊 的模式被稱為第一模式,其中觸摸傳感器被用于感測輕擊的模式被稱為第二模式,并且其 中加速度傳感器和觸摸傳感器都(同時(shí)或者順序地)被利用以感測輕擊的模式被稱為第三 模式或者混合模式。
[0116] 另一方面,在通過觸摸傳感器感測輕擊的情況下,能夠更加精確地識(shí)別其中輕擊 被感測到的位置。
[0117] 另一方面,在根據(jù)本發(fā)明的移動(dòng)終端100中,為了通過加速度傳感器或者觸摸傳 感器感測輕擊,移動(dòng)終端100的顯示單元151在最小量的電流或者電功率被消耗的特定模 式下,甚至在禁用的狀態(tài)下操作。這樣的特定模式被稱為"瞌睡模式"。
[0118] 例如,在具有其中觸摸傳感器以分層的方式與顯示單元151組合的移動(dòng)終端100 中,在瞌睡模式下,用于將屏幕輸出到顯示單元151的發(fā)光元件被切斷并且用于感測在顯 示單元151上的輕擊的觸摸傳感器被接通。另外,瞌睡模式可以是其中顯示單元151被切 斷并且加速度傳感器被接通的模式。另外,瞌睡模式可以是其中顯示單元151被切斷并且 觸摸傳感器和加速度傳感器都被接通的模式。
[0119] 因此,在瞌睡模式下,即,在用于顯示單元151的照明被切斷,或者顯示單元151被 切斷的狀態(tài)下(在顯示單元151禁用的狀態(tài)下),在用戶將輕擊施加到顯示單元151上的至 少一個(gè)點(diǎn)或者將輕擊施加到移動(dòng)終端100的主體上的特定點(diǎn)的情況下,觸摸傳感器或者加 速度傳感器之中的至少一個(gè)感測用戶施加輕擊。
[0120] 另外,僅在參考時(shí)間內(nèi)施加連續(xù)的至少兩個(gè)或者多個(gè)輕擊的情況下,輕擊感測單 元144確定感測到用于控制移動(dòng)終端100的"輕擊"。例如,在利用其外力能夠被施加到顯 示單元151的輕擊工具的情況下,向顯示單元151施加一次輕擊,輕擊感測單元144將一次 輕擊視為觸摸輸入。即,在這樣的情況下,控制器180控制根據(jù)與一次輕擊相對應(yīng)的觸摸輸 入的功能(例如,選擇被輸出到施加觸摸輸入的點(diǎn)的圖標(biāo)的功能),而不是與一次輕擊相對 應(yīng)的功能。
[0121] 因此,僅在參考時(shí)間內(nèi)輕擊感測單元144感測施加連續(xù)的至少兩個(gè)輕擊或者更多 個(gè)(或者多個(gè)輕擊)的情況下,控制器180確定用于控制至少一個(gè)功能或者多個(gè)的"輕擊" 被感測。
[0122] 即,輕擊的感測意指在參考時(shí)間內(nèi)感測連續(xù)的至少兩個(gè)輕擊姿勢或者多個(gè)。因此, 在下文中"輕擊"的感測意指利用諸如用戶的手指、或者觸摸筆的對象,大體上,多個(gè)輕擊被 充分地施加到移動(dòng)終端100的主體。
[0123] 此外,控制器180可以不僅確定是否在參考時(shí)間內(nèi)感測輕擊,而且是否感測到利 用不同的手指施加的輕擊或者利用一個(gè)手指施加的輕擊。例如,在輕擊被感測為被施加到 顯示單元151的情況下,控制器180通過識(shí)別在施加輕擊的顯示單元151的一部分上的指 紋來確定是否利用一個(gè)手指或者或利用不同的手指施加輕擊。另外,控制器180通過在輕 擊感測單元144中提供的觸摸傳感器和加速度傳感器中的至少一個(gè)識(shí)別其中感測輕擊的 顯示單元151上的位置,或者由于輕擊產(chǎn)生的加速度。由此,控制器410確定是否利用一個(gè) 手指或者利用不同的手指施加輕擊。
[0124] 此外,控制器180附加地考慮施加輕擊的角度和在施加輕擊的點(diǎn)之間的距離或者 識(shí)別指紋的方向,以便于確定是否利用一個(gè)手指、兩只手或者至少兩個(gè)手指施加輕擊。
[0125] 另一方面,輕擊的感測意指在參考時(shí)間內(nèi)感測連續(xù)的多個(gè)輕擊或者輕擊。在這一 點(diǎn)上,參考時(shí)間可以是非常短的,并且例如,是處于300ms至2s的范圍內(nèi)。
[0126] 因此,當(dāng)輕擊感測單元144感測在第一次輕擊被施加到移動(dòng)終端100的主體時(shí),輕 擊感測單元144感測是否在第一次輕擊被施加之后在參考時(shí)間內(nèi)第二次施加擊。然后,在 參考時(shí)間內(nèi)感測下一個(gè)輕擊的情況下,輕擊感測單元144或者控制器180確定感測到用于 控制根據(jù)本發(fā)明的實(shí)施例的移動(dòng)終端的特定功能的輕擊。以這樣的方式,僅在感測到第一 輕擊之后預(yù)定時(shí)間段內(nèi)感測到第二輕擊的情況下,控制器180將第一和第二輕擊視為"有 效的輕擊"。因此,控制器確定是否用戶施加輕擊以便于控制移動(dòng)終端100或者錯(cuò)誤地施加 輕擊。
[0127] 另外,存在控制器180將輕擊視為"有效請求"的各種方法。例如,當(dāng)在其數(shù)目是 第一參考數(shù)目或者更大的第一輕擊被感測為被施加之后在預(yù)定時(shí)間段內(nèi)其數(shù)目是第二參 考數(shù)目或者更大的第二輕擊被感測為被施加到移動(dòng)終端100的主體時(shí),控制器180可以將 第一和第二輕擊視為"有效輕擊"。在這一點(diǎn)上,第一參考次數(shù)和第二參考次數(shù)可以是相同 的或者不同的。例如,第一參考數(shù)目可以是1,并且第二參考數(shù)目可以是2。作為另一示例, 第一參考數(shù)目和第二參考數(shù)目可以都是1。
[0128] 另外,僅在輕擊被施加到"預(yù)定區(qū)域"中的情況下,控制器180確定"輕擊"被感測。 艮P,當(dāng)?shù)谝淮屋p擊被感測為施加到移動(dòng)終端100的主體時(shí),控制器180從第一次感測到輕擊 的點(diǎn)計(jì)算預(yù)定區(qū)域。然后,在第一次感測輕擊之后在參考時(shí)間內(nèi)其數(shù)目是第一參考數(shù)目或 者第二參考數(shù)目的輕擊,或者其數(shù)目等于或者大于第一參考數(shù)目或者第二參考數(shù)目的輕擊 被感測為被施加到"預(yù)定區(qū)域"的情況下,控制器180確定第一輕擊或者第二輕擊被施加。
[0129] 另一方面,當(dāng)然,可以根據(jù)實(shí)施例以各種方式改變參考時(shí)間和預(yù)定區(qū)域。
[0130] 另一方面,當(dāng)然,不僅根據(jù)參考時(shí)間和預(yù)定區(qū)域,而且根據(jù)其中感測到第一和第二 輕擊中的每一個(gè)的位置,第一輕擊和第二輕擊可以被視為相互獨(dú)立的輕擊。即,如果在距其 中第一輕擊的位置預(yù)定的距離或者更多的位置中感測到第二輕擊,則控制器180確定第一 輕擊和第二輕擊被施加。然后,在基于以該方式感測的位置,第一和第二輕擊被識(shí)別的情況 下,可以同時(shí)感測第一和第二輕擊。
[0131] 另外,如果第一輕擊和第二輕擊均由多個(gè)觸摸組成,即,如果輕擊作為第一輕擊和 第二輕擊被施加多次,則當(dāng)前,同時(shí)感測組成第一輕擊和第二輕擊中的每一個(gè)的多個(gè)觸摸。 例如,在感測組成第一輕擊的初始觸摸并且同時(shí)在位于距其中感測到組成第一輕擊的初始 觸摸的位置預(yù)定的距離或者更多的位置中感測到組成第二輕擊的初始觸摸的情況下,控制 器180確定組成第一輕擊和第二輕擊中的每一個(gè)的初始觸摸被感測。然后,控制器180確 定附加的觸摸輸入被感測為被施加到各個(gè)位置。在各個(gè)位置中感測其數(shù)目是第一參考數(shù)目 或者第二參考數(shù)目的觸摸的情況下,控制器180確定第一輕擊和第二輕擊被施加。
[0132] 另一方面,當(dāng)輕擊感測單元144感測多個(gè)輕擊被施加到移動(dòng)終端100的主體時(shí),控 制器180基于感測到的多個(gè)觸摸控制在移動(dòng)終端100上能夠執(zhí)彳丁的功能之中的至少個(gè)。
[0133] 例如,在多個(gè)輕擊的應(yīng)用滿足預(yù)定條件的情況下,控制器180控制在移動(dòng)終端100 上能夠執(zhí)行的功能之中的至少一個(gè)。作為一個(gè)示例,取決于是否用戶僅利用他的/她的一 個(gè)手指或者手,或者利用至少他/她的手指或者兩只手施加多個(gè)輕擊,控制器180可以控制 不同的功能。另外,可以基于移動(dòng)終端100的當(dāng)前操作狀態(tài)中和在移動(dòng)終端100的當(dāng)前環(huán) 境中的多個(gè)輕擊控制在移動(dòng)終端100上能夠執(zhí)行的功能之中的至少一個(gè)。
[0134] 在這一點(diǎn)上,在移動(dòng)終端100上能夠執(zhí)彳丁的功能意指在移動(dòng)終端100上能夠執(zhí)打 或者運(yùn)行的所有類型的功能。例如,能夠執(zhí)行的功能之中的一個(gè)可以是執(zhí)行被安裝在移動(dòng) 終端100中的程序的功能。例如,表達(dá)"執(zhí)行任意功能"意指在移動(dòng)終端100上執(zhí)行或者運(yùn) 行的任意的應(yīng)用。
[0135] 作為另一示例,在移動(dòng)終端100上能夠執(zhí)行的功能可以是對于移動(dòng)終端100的基 本驅(qū)動(dòng)所必需的功能。例如,作為對于基本功能所必需的功能,存在接通和切斷被設(shè)置在顯 示單元151中的相機(jī)121或者麥克風(fēng)122的功能、將移動(dòng)終端100從解鎖狀態(tài)切換到鎖定 狀態(tài)或者從鎖定狀態(tài)切換到解鎖狀態(tài)的功能、提供關(guān)于通信網(wǎng)絡(luò)的設(shè)置的功能、改變關(guān)于 移動(dòng)終端100上的設(shè)置的信息的功能等。
[0136] 最近的眼鏡式移動(dòng)終端被配置成可佩戴在人體上的可佩戴的裝置,超出用戶使用 他的或者她的手抓握眼鏡式移動(dòng)終端的常規(guī)技術(shù)。這樣的可佩戴裝置的示例是智能手表、 智能眼鏡、頭戴式顯示器(HMD)等。在下文中,將會(huì)解釋被配置成可佩戴的裝置的移動(dòng)終 端。
[0137] 在一些實(shí)施例中,其他移動(dòng)終端(可以被類似地配置成移動(dòng)終端100)可以是可佩 戴的裝置,例如,智能手表、智能眼鏡或者頭戴式顯示器(HMD),能夠與移動(dòng)終端100交換數(shù) 據(jù)(或者否則與移動(dòng)終端1〇〇協(xié)作)。短程通信模塊114可以感測或者識(shí)別可佩戴裝置, 并且允許在可佩戴裝置和移動(dòng)終端100之間的通信。另外,當(dāng)感測到的可佩戴裝置是被授 權(quán)與移動(dòng)終端100通信的裝置時(shí),控制器180例如可以經(jīng)由短程通信模塊114將在移動(dòng)終 端100中處理的數(shù)據(jù)傳輸?shù)娇膳宕餮b置。因此,可佩戴裝置的用戶可以在可佩戴裝置上使 用移動(dòng)終端100中處理的數(shù)據(jù)。例如,當(dāng)在移動(dòng)終端100中接收到呼叫時(shí),用戶可以使用可 佩戴裝置應(yīng)答呼叫。而且,當(dāng)在移動(dòng)終端100中接收消息時(shí),用戶能夠使用可佩戴裝置檢查 接收到的消息。
[0138] 圖2是圖示根據(jù)另一示例性實(shí)施例的眼鏡式移動(dòng)終端200的一個(gè)示例的透視圖。
[0139] 眼鏡式移動(dòng)終端200能夠被佩戴在人體的頭部并且被提供有框架(殼體、外罩 等)??蚣芸梢允怯扇菀着宕鞯娜嵝圆牧现瞥伞R苿?dòng)終端200的框架被示出,其具有能夠是 由相同或者不同的材料制成的第一框架201和第二框架202。通常,移動(dòng)終端200可以被配 置成包括與圖1的移動(dòng)終端的相同或者相似的特征。
[0140] 框架可以被支撐在頭部并且限定用于安裝各種組件的空間。如圖所示的,諸如控 制模塊280、音頻輸出模塊252等的電子組件可以被安裝到框架部分。而且,用于覆蓋左眼 和右眼中的任意一個(gè)或者這兩者的鏡片203可以被可拆卸地耦合到框架部分。
[0141] 控制模塊280包括被布置在移動(dòng)終端200中的各種電子組件??刂颇K280可以 被理解為與前述的控制器180相對應(yīng)的組件。圖2圖示控制模塊280被安裝在頭的一側(cè)上 的框架部分中,但是其他位置是可能的。
[0142] 顯示單元251可以被實(shí)現(xiàn)為頭戴式顯示器(HMD)。HMD指的是一種顯示技術(shù),通過 該顯示技術(shù)顯示器被安裝在頭部以在用戶的眼睛的前面直接地示出圖像。為了當(dāng)用戶佩戴 眼鏡式移動(dòng)終端200時(shí)在用戶的眼睛的前面直接地提供圖像,顯示單元251可以位于對應(yīng) 于左眼和右眼中的任意一個(gè)或者這兩者。圖2圖示顯示單元251位于與右眼相對應(yīng)的一部 分上以輸出通過用戶的右眼可觀看的圖像。
[0143] 使用棱鏡顯示單元251可以將圖像投射到用戶的眼睛。而且,棱鏡可以由光學(xué)透 明的材料形成使得用戶能夠在用戶的前面觀看被投射的圖像和一般視野(用戶通過眼睛 觀看的范圍)這兩者。
[0144] 以這樣的方式,通過顯示單元251輸出的圖像可以被觀看同時(shí)與一般視野重疊。 移動(dòng)終端200可以使用顯示器通過將虛擬圖像重疊在現(xiàn)實(shí)圖像或者背景上提供增強(qiáng)現(xiàn)實(shí) (AR) 〇
[0145] 相機(jī)221可以位于與左眼和右眼中的任意一個(gè)或者這兩者相鄰以捕獲圖像。因?yàn)?相機(jī)221位于與眼睛相鄰,所以相機(jī)221能夠獲取用戶當(dāng)前觀看的場景。相機(jī)221可以被 定位移動(dòng)終端的至多任何位置處。在一些實(shí)施例中,多個(gè)相機(jī)221可以被利用。這樣的多 個(gè)相機(jī)221可以被用于獲取立體圖像。
[0146] 眼鏡式移動(dòng)終端200可以包括用戶輸入單元223a和223b,通過用戶能夠操作其 中的每一個(gè)以提供輸入。用戶輸入單元223a和223b可以采用經(jīng)由觸覺輸入允許輸入的技 術(shù)。典型的觸覺輸入包括觸摸、推動(dòng)等。用戶輸入單元223a和223b被示出,當(dāng)它們分別位 于框架部分和控制模塊280上時(shí)該用戶輸入單元223a和223b以推動(dòng)方式和觸摸模式是可 操作的。
[0147] 必要時(shí),移動(dòng)終端200可以包括:麥克風(fēng),該麥克風(fēng)將輸入聲音處理成電音頻數(shù) 據(jù);以及音頻輸出模塊252,該音頻輸出模塊252用于輸出音頻。音頻輸出模塊252可以被 配置成以一般的音頻輸出方式或者骨傳導(dǎo)方式產(chǎn)生音頻。當(dāng)以骨傳導(dǎo)方式實(shí)現(xiàn)音頻輸出模 塊252時(shí),當(dāng)用戶佩戴移動(dòng)終端200時(shí)音頻輸出模塊252可以被緊密地貼附到頭部并且振 動(dòng)用戶的頭顱以傳輸聲音。
[0148] 為了方便描述在下文中眼鏡式移動(dòng)終端被稱為"眼鏡式終端"。對于該描述,根據(jù) 本發(fā)明的移動(dòng)終端100在下文中被假定為是以眼鏡終端的形式。
[0149] 現(xiàn)在更加詳細(xì)地描述通過不同地描述的移動(dòng)終端可操作的通信系統(tǒng)。
[0150] 圖3和圖4是其中眼鏡式終端100能夠操作的通信系統(tǒng)的圖。
[0151] 參考圖3,這樣的通信系統(tǒng)可以被配置成利用不同的空中接口和/或物理層中的 任意一個(gè)。通過通信系統(tǒng)利用的這樣的空中接口的示例包括:頻分多址(FDMA)、時(shí)分多址 (TDMA)、碼分多址(CDMA)、通用移動(dòng)電信系統(tǒng)(UMTS)(包括長期演進(jìn)(LTE)、LTE-A(長期演 進(jìn)高級(jí)))、全球移動(dòng)通信系統(tǒng)(GSM)等。
[0152] 僅通過非限制性示例,進(jìn)一步的描述將會(huì)涉及CDMA通信系統(tǒng),但是這樣的教導(dǎo)同 等地應(yīng)用于包括CDMA無線通信系統(tǒng)以及0FDM(正交頻分復(fù)用)無線通信系統(tǒng)的其他系統(tǒng) 類型。
[0153] 如在圖3中所示,CDMA無線通信系統(tǒng)通常包括一個(gè)或者多個(gè)移動(dòng)終端(MT或者用 戶設(shè)備,UE) 100、一個(gè)或者多個(gè)基站(BS、節(jié)點(diǎn)B、或者演進(jìn)的節(jié)點(diǎn)B) 370、一個(gè)或者多個(gè)基站 控制器(BSC) 375、以及移動(dòng)交換中心(MSC) 380。MSC 380被配置成與常規(guī)的公共交換電話 網(wǎng)絡(luò)(PSTN) 390和BSC 375對接。BSC 375經(jīng)由回程線路被耦合到基站370??梢愿鶕?jù)包 括例如El/Tl、ATM、IP、PPP、幀中繼、HDSL、ADSL、或者xDSL的數(shù)個(gè)已知的接口中的任何一 個(gè)來配置回程線路。因此,CDMA無線通信系統(tǒng)中能夠包括多個(gè)BSC 375。
[0154] 各個(gè)基站370可以包括一個(gè)或者多個(gè)扇區(qū),每個(gè)扇區(qū)具有全向天線或者在放射狀 地遠(yuǎn)離基站370的特定方向中指向的天線??商孢x地,每個(gè)扇區(qū)可以包括兩個(gè)或者更多個(gè) 不同的天線。各個(gè)基站370可以被配置成支持多種頻率分配,每個(gè)頻率分配具有特定的頻 譜(例如,1. 25MHz、5MHz 等)。
[0155] 扇區(qū)和頻率分配的交叉可以被稱為CDMA信道?;?70也可以被稱為基站收發(fā) 器子系統(tǒng)(BTS)。在一些情況下,術(shù)語"基站"可以用于統(tǒng)稱為BSC 375,以及一個(gè)或多個(gè)基 站370?;疽部梢员槐硎緸?小區(qū)站點(diǎn)"??商孢x地,給定的基站370的單個(gè)扇區(qū)可以被 稱為小區(qū)站點(diǎn)。
[0156] 如在圖3中所示,廣播發(fā)送器(BT)395將廣播信號(hào)傳送到在系統(tǒng)內(nèi)操作的移動(dòng)終 端100。圖1的廣播接收模塊111通常被配置在移動(dòng)終端100內(nèi)部以接收由BT 395傳送的 廣播信號(hào)。
[0157] 參考圖3,用于定位移動(dòng)終端100的位置的全球定位系統(tǒng)(GPS)衛(wèi)星300可以與 CDMA無線通信系統(tǒng)協(xié)作??梢砸员葍蓚€(gè)衛(wèi)星更多或者更少的衛(wèi)星獲得有用的位置信息。要 了解的是,可以可替選地實(shí)現(xiàn)其他類型的位置檢測技術(shù)(即,除了或者替代GPS定位技術(shù)可 以使用的定位技術(shù))。必要時(shí),GPS衛(wèi)星中的至少一個(gè)可以被可替選地或者另外配置成提供 衛(wèi)星DMB傳輸。
[0158] 位置信息模塊115通常被配置成檢測、計(jì)算、或者以其他方式識(shí)別移動(dòng)終端的位 置。作為示例,位置信息模塊115可以包括全球定位系統(tǒng)(GPS)模塊、Wi-Fi模塊、或者這 兩者。如有必要,位置信息模塊115可以可替選地或者另外用作無線通信單元110的其他 模塊中的任意一個(gè)以獲得與移動(dòng)終端的位置有關(guān)的數(shù)據(jù)。
[0159] 將會(huì)參考圖4解釋使用WiFi定位系統(tǒng)定位眼鏡式移動(dòng)終端的方法。
[0160] Wi-Fi定位系統(tǒng)(WPS)指的是使用Wi-Fi基于無線局域網(wǎng)(WLAN)的位置確定技術(shù) 作為用于跟蹤移動(dòng)終端100的位置的技術(shù)。此技術(shù)通常包括移動(dòng)終端100中的Wi-Fi模塊 和用于與Wi-Fi模塊通信的無線接入點(diǎn)420的使用。
[0161] Wi-Fi定位系統(tǒng)可以包括Wi-Fi位置確定服務(wù)器410、眼鏡式移動(dòng)終端100、被連接 到眼鏡式移動(dòng)終端100的無線接入點(diǎn)(AP) 420、以及存儲(chǔ)有無線AP信息的數(shù)據(jù)庫430。
[0162] 被連接到無線AP的移動(dòng)終端可以將位置信息請求消息傳送到Wi-Fi位置確定服 務(wù)器410。Wi-Fi位置確定服務(wù)器410基于移動(dòng)終端100的位置信息請求消息(或者信號(hào)) 提取被連接到移動(dòng)終端100的無線AP 420的信息。無線AP的信息可以通過移動(dòng)終端100 被傳送到Wi-Fi位置確定服務(wù)器,或者可以從無線AP 420被傳送到Wi-Fi位置確定服務(wù)器 410。
[0163] 基于移動(dòng)終端100的位置信息請求消息提取的無線AP的信息可以包括媒介訪 問控制(MAC)地址、服務(wù)集識(shí)別(SSID)、接收信號(hào)強(qiáng)度指示符(RSSI)、參考信號(hào)接收功率 (RSRP)、參考信號(hào)接收指量(RSRQ)、信道信息、隱私、網(wǎng)絡(luò)類型、信號(hào)強(qiáng)度、噪聲強(qiáng)度等中的 一個(gè)或者多個(gè)。
[0164] Wi-Fi位置確定服務(wù)器410可以接收被連接到如上所述的移動(dòng)終端100的無線AP 420的信息,并且可以使用接收到的無線AP 420的信息和被包括在數(shù)據(jù)庫中的信息提取 (或者分析)移動(dòng)終端1〇〇的位置信息。例如,Wi-Fi位置確定服務(wù)器410可以從預(yù)先建立 的數(shù)據(jù)庫430中提取與被連接到移動(dòng)終端的無線AP相對應(yīng)的無線AP信息。
[0165] 參考圖4,眼鏡式移動(dòng)終端100能夠通過被連接到第一至第三無線AP 420獲取位 置信息。被要求獲取移動(dòng)終端1〇〇的位置信息的無線AP的數(shù)目可以根據(jù)在移動(dòng)終端100 被定位的無線通信環(huán)境而不同地改變。眼鏡式移動(dòng)終端100能夠通過被連接到至少一個(gè)無 線AP獲取位置信息。
[0166] 被存儲(chǔ)在數(shù)據(jù)庫430中的任何無線AP的信息可以是諸如MAC地址、SSID、RSSI、信 道信息、隱式、網(wǎng)絡(luò)類型、緯度和經(jīng)度坐標(biāo)、無線AP所位于的建筑物、樓層、詳細(xì)的室內(nèi)位置 信息(GPS坐標(biāo)可用)、AP擁有者的地址、電話號(hào)碼等的信息。為了在位置確定過程期間去 除使用移動(dòng)AP或者非法的MAC地址提供的無線AP,Wi-Fi位置確定服務(wù)器可以僅提取預(yù)定 數(shù)目的無線AP信息,以便于高的RSSI。
[0167] 如上所述,數(shù)據(jù)庫430包括任何無線AP的信息和對應(yīng)于無線AP的信息。
[0168] 因此,Wi-Fi位置確定服務(wù)器410可以搜索被連接到移動(dòng)終端100的無線AP 420 的信息。并且Wi-Fi位置確定服務(wù)器410可以使用從數(shù)據(jù)庫430中提取的至少一個(gè)無線AP 信息提取(分析)移動(dòng)終端100的位置信息。
[0169] 除了這些定位位置方法之外,各種算法可以被用于提取(分析)移動(dòng)終端的位置 信息。這樣的被提取的位置信息可以通過Wi-Fi位置確定服務(wù)器410被發(fā)送到移動(dòng)終端 100,從而獲取移動(dòng)終端100的位置信息。
[0170] 圖5是用于根據(jù)本發(fā)明的一個(gè)實(shí)施例的描述控制眼鏡式移動(dòng)終端的方法的流程 圖。
[0171] 參考圖5,基于用戶注視的方向和用戶的注視已經(jīng)固定的時(shí)間段,根據(jù)本發(fā)明的眼 鏡式終端的控制器180收集與用戶注視的某物相關(guān)的信息(S500)。
[0172] 在步驟S500中,控制器180感測是否在預(yù)定參考時(shí)間段或者更長的時(shí)間段內(nèi)用戶 的注視被固定在一個(gè)方向上。例如,控制器180使用慣性傳感器、重力傳感器、羅盤傳感器 等感測眼鏡式終端200面向的方向是否被改變。然后,在預(yù)定參考時(shí)間段或者更長的時(shí)間 段內(nèi)眼鏡式終端200面向的方向沒有被改變的情況下,控制器180確定用戶的注視被固定 在特定的方向上。然后,控制器180收集與被確定為與用戶注視的某物相對應(yīng)的位置相關(guān) 的信息。
[0173] 在這一點(diǎn)上,可以收集多條各種信息。例如,控制器180將通過相機(jī)221接收的諸 如運(yùn)動(dòng)圖像或者靜態(tài)圖像的圖像存儲(chǔ)為圖片信息,并且通過分析被存儲(chǔ)的圖片信息收集多 條各種信息。
[0174] 例如,控制器180檢測靜態(tài)圖像或者運(yùn)動(dòng)圖像的可識(shí)別的部分,并且以文本格式 存儲(chǔ)被檢測的部分的結(jié)果。另外,可以將識(shí)別的結(jié)果分類成與預(yù)先存儲(chǔ)的靜態(tài)圖像或者動(dòng) 態(tài)圖像相關(guān)的屬性信息并且可以存儲(chǔ)分類的結(jié)果。即,在識(shí)別在靜態(tài)圖像或者動(dòng)態(tài)圖像中 的單詞"電話"或者電話符號(hào)""并且其后識(shí)別7位或者9位號(hào)碼的情況下,控制器180將 號(hào)碼視為與靜態(tài)圖像或者運(yùn)動(dòng)圖像相關(guān)的電話信息。另外,控制器180可以從靜態(tài)圖像或 者運(yùn)動(dòng)圖像識(shí)別可識(shí)別文本的圖像的大小,并且可以基于被分析的大小,將文本識(shí)別的結(jié) 果視為與用戶注視的某物相對應(yīng)的地點(diǎn)相關(guān)的公司名稱。另外,無論何時(shí)如有必要,控制器 180可以進(jìn)一步不僅收集文本信息,而且收集聲音信息。
[0175] 另一方面,當(dāng)然,相機(jī)221可以不需要總是保持通電的狀態(tài)。例如,在被固定的用 戶的注視滿足預(yù)定條件的情況下,即,在用戶的注視已經(jīng)固定參考時(shí)間段或者更長的時(shí)間 段的情況下,或者基于用戶的選擇,控制器180可以確定相機(jī)221的操作狀態(tài)(相機(jī)被接通 或者被切斷的狀態(tài))。
[0176] 在這一點(diǎn)上,用戶能夠以各種方式做出選擇。例如,在施加預(yù)定特定的鍵(按鈕) 輸入的情況下,控制器180可以操作相機(jī)221。此外,基于被施加到眼鏡式終端200的主體 的多個(gè)輕擊,即,基于施加輕擊的次數(shù),或者基于多個(gè)輕擊被施加到的區(qū)域,控制器180可 以操作相機(jī)221??商孢x地,在用戶做出預(yù)定姿勢的情況下(例如,諸如當(dāng)用戶來回?fù)u動(dòng)他 的/她的頭預(yù)定次數(shù)時(shí)),控制器180通過感測單元140的傳感器感測姿勢并且操作相機(jī) 221。
[0177] 可替選地,控制器180可以通過肌電圖傳感器等感測由于在用戶的面部肌肉中的 變化而感測到的非常小量的電流,并且根據(jù)感測結(jié)果操作相機(jī)221。在這樣的情況下,基于 在用戶的面部表情中的變化確定是否操作相機(jī)221。
[0178] 然后,在操作相機(jī)221的情況下,當(dāng)然,控制器180可以指示該情況,使得用戶能夠 識(shí)別相機(jī)221處于操作中。例如,控制器180通過諸如蜂鳴的預(yù)定聲音信號(hào)、預(yù)定語音信 號(hào)、或者預(yù)定觸覺振動(dòng)警告用戶相機(jī)221處于操作中??商孢x地,控制器180通過在顯示單 元251上顯示預(yù)定圖形對象警告用戶相機(jī)221當(dāng)前處于操作中,并且警告用戶關(guān)于用戶的 注視固定到的方向的信息被收集。
[0179] 另一方面,當(dāng)然,可以使用除了使用相機(jī)221的方法之外的方法收集與用戶注視 的某物相關(guān)的多條信息。例如,控制器180使用重力傳感器、羅盤傳感器等識(shí)別眼鏡式終端 200當(dāng)前面向的方向。然后,控制器180識(shí)別當(dāng)前的位置,并且基于與用戶的當(dāng)前位置相對 應(yīng)的地圖信息并且基于所識(shí)別的眼鏡式終端200面向的方向,獲得與用戶當(dāng)前注視的某物 相對應(yīng)的地點(diǎn)相關(guān)的信息。然后,控制器180可以進(jìn)一步執(zhí)行與被獲得的位置信息相關(guān)的 附加信息的搜尋。為了進(jìn)行搜索,控制器180使用被存儲(chǔ)在存儲(chǔ)器170或者通過無線通信 單元110連接的網(wǎng)站中的軟件應(yīng)用。
[0180] 以這樣的方式,控制器180獲得與對應(yīng)于用戶當(dāng)前注視的某物的地點(diǎn)相關(guān)的多條 各種信息。在這一點(diǎn)上,被獲得的多條信息可以包括關(guān)于相應(yīng)的地點(diǎn)等的圖像信息,并且包 括與用戶注視的某物相對應(yīng)的地點(diǎn)相關(guān)的公司名稱或者電話信息等。另外,控制器180可 以進(jìn)一步獲得諸如被網(wǎng)民創(chuàng)建的評(píng)價(jià)意見的多條各種信息。
[0181] 然后,控制器180可以根據(jù)它們的屬性對以這樣的方式收集的多條信息進(jìn)行分 類,并且可以存儲(chǔ)分類的結(jié)果。例如,控制器180根據(jù)它們被收集的時(shí)間和地點(diǎn)對多條收集 的信息進(jìn)行分類,并且存儲(chǔ)分類的結(jié)果。然后,控制器180生成像關(guān)于收集多條信息的時(shí)間 和地點(diǎn)的多條信息一樣的多條信息作為多條屬性信息,用作多條收集的信息進(jìn)行分類所針 對的參考。
[0182] 多條各種信息可用于屬性信息。如上所描述,關(guān)于多條信息的時(shí)間或者地點(diǎn)的多 條信息可用于屬性信息。可替選地,從多條收集的信息提取的多條信息或者通過分析多條 收集的信息獲得的多條信息可用于屬性信息。例如,在收集圖片信息的情況下,控制器180 可以在收集的信息上執(zhí)行文本識(shí)別,并且可以將文本識(shí)別的結(jié)果的至少一個(gè)部分生成為屬 性信息??商孢x地,控制器180可以根據(jù)用戶的當(dāng)前位置的地圖信息和與用戶的注視已經(jīng) 固定參考時(shí)間段或者更長的時(shí)間段的某物相對應(yīng)的地點(diǎn)上的搜索結(jié)果的至少一個(gè)部分生 成地圖信息作為屬性信息。
[0183] 因此,控制器180根據(jù)收集它們的時(shí)間或者地點(diǎn)等對多條收集的信息進(jìn)行分類。 在用戶選擇屬性信息(例如,特定的時(shí)間、特定的地點(diǎn)、特定的公司名稱等)的情況下,控制 器180有序地排列與被選擇的屬性信息相同的屬性信息相關(guān)的多條信息用于在顯示單元 251上顯示。
[0184] 另一方面,根據(jù)用戶的請求任何時(shí)候提供多條收集的信息。例如,用戶能夠通過輸 入語音、或者例如通過使用諸如可佩戴的智能手表的各種輸入設(shè)備發(fā)出提供收集的多條信 息的請求(S502)。
[0185] 作為一個(gè)示例,控制器180識(shí)別通過麥克風(fēng)122接收的語音信號(hào),并且在步驟S500 中收集的多條信息之中搜尋與識(shí)別的結(jié)果相對應(yīng)的信息。在這一點(diǎn)上,當(dāng)然,麥克風(fēng)122可 以不需要始終被操作,并且可以根據(jù)用戶的選擇被操作。
[0186] 例如,在施加預(yù)定特定的鍵(按鈕)的情況下,控制器180操作麥克風(fēng)122??商?選地,基于被施加到眼鏡式終端200的主體的多個(gè)輕擊,即,基于施加輕擊的次數(shù),或者基 于多個(gè)輕擊被施加到的區(qū)域,控制器180可以操作麥克風(fēng)122。可替選地,在用戶做出預(yù)定 姿勢的情況下(例如,諸如當(dāng)用戶來回?fù)u動(dòng)他的/她的頭預(yù)定次數(shù)時(shí)),控制器180通過感 測單元140的傳感器感測姿勢并且操作麥克風(fēng)122。
[0187] 可替選地,控制器180可以通過肌電傳感器等感測由于在用戶的面部肌肉中的變 化而感測到的非常小量的電流,并且根據(jù)感測結(jié)果操作麥克風(fēng)122。在這樣的情況下,基于 在用戶的面部表情中的變化確定是否操作麥克風(fēng)122。
[0188] 另外,在操作麥克風(fēng)122的情況下,當(dāng)然,控制器180可以指示該情況使得用戶能 夠識(shí)別麥克風(fēng)122處于操作中。例如,控制器180通過諸如蜂鳴的預(yù)定聲音信號(hào)、預(yù)定語音 信號(hào)、或者預(yù)定觸覺振動(dòng)警告用戶麥克風(fēng)122處于操作中??商孢x地,控制器180通過在顯 示單元251上顯示預(yù)定圖形對象警告用戶麥克風(fēng)122當(dāng)前處于操作中并且用戶麥克風(fēng)122 準(zhǔn)備從用戶接收語音信號(hào)。
[0189] 然后,當(dāng)請求搜索多條收集的信息時(shí),控制器180使用被用戶輸入的關(guān)鍵字,即, 使用作為語音信號(hào)輸入或者通過能夠被連接到眼鏡式終端200的不同的設(shè)備輸入的信息, 從多條收集的信息搜尋至少一條信息。
[0190] 例如,用戶能夠直接地輸入諸如"今天上午8點(diǎn)"或者"在今天上午8點(diǎn)和9點(diǎn)之 間"的被具體地指定的時(shí)間??商孢x地,用戶能夠直接地輸入諸如"Edan街"的被具體指定 的地點(diǎn)的名稱。在這樣的情況下,基于被用戶輸入的關(guān)鍵字信息,控制器180從多條收集的 信息中搜尋與關(guān)鍵字匹配的多條信息。
[0191] 另一方面,如上所描述,根據(jù)本發(fā)明的眼鏡式終端200通過各種方法(例如,基于 GPS或者基于WiFi的無線電確定等)識(shí)別它的位置。使用這樣的方法,控制器180可以識(shí) 別用戶在特定的時(shí)間段內(nèi)移動(dòng)所沿著的路徑,即從家到工作地點(diǎn)的路徑或者從工作地點(diǎn)到 家的路徑,并且可以根據(jù)被識(shí)別的路徑對多條收集的信息進(jìn)行分類,并且可以存儲(chǔ)分類的 結(jié)果。
[0192] 在這樣的情況下,當(dāng)用戶指定被識(shí)別的路徑和特定的時(shí)間段時(shí),控制器180搜索 在指定的時(shí)間段內(nèi)沿著被識(shí)別的路徑已經(jīng)收集的多條信息。即,例如,在用戶將諸如"今天 上午,去工作地點(diǎn)的路徑"的關(guān)鍵字作為語音信號(hào)輸入的情況下,控制器180檢查當(dāng)前的日 期,即"今天"的日期,并且搜尋在被識(shí)別的路徑之中與"去工作地點(diǎn)的路徑"相對應(yīng)的移動(dòng) 路徑、在被檢查的日期,即,"今天",對于用戶沿著路徑("去工作地點(diǎn)的路徑")移動(dòng)的時(shí)間 已收集的多條信息等。
[0193] 然后,響應(yīng)于通過用戶的關(guān)鍵字的輸入,控制器180在顯示單元251上有序地顯示 發(fā)現(xiàn)的多條信息(S504)?;谂帕械念A(yù)定順序,控制器180有序排列發(fā)現(xiàn)的多條信息,以便 于用戶從多條有序排列的信息之中選擇任何一條信息。例如,控制器180可以基于用戶的 注視已經(jīng)固定的時(shí)間段,即,用戶朝向某物已經(jīng)注視的時(shí)間段,排列發(fā)現(xiàn)的多條信息,或者 可以按從第一被存儲(chǔ)的信息到最后被存儲(chǔ)的信息的時(shí)間順序或者反之亦然有序地排列發(fā) 現(xiàn)的多條信息。
[0194] 在這一點(diǎn)上,用戶能夠使用各種方法選擇特定的信息。例如,使用通過例如,諸如 智能手表的預(yù)定的不同的設(shè)備可用的選擇信息,或者使用通過麥克風(fēng)122識(shí)別的語音信 號(hào),控制器180能夠選擇特定的信息。另外,在用戶做出預(yù)定姿勢,例如,在用戶在特定的方 向上轉(zhuǎn)動(dòng)他的/她的頭或者在特定的信息中向后彎曲他的/她的頭的姿勢的情況下,控制 器180可以識(shí)別這樣的姿勢并且可以選擇與姿勢相對應(yīng)的特定的信息。另外,基于根據(jù)在 用戶的面部表情中的變化感測在用戶的面部肌肉中的肌電變化的結(jié)果,控制器180可以選 擇特定的信息。
[0195] 然后,在顯示單元251上,在特寫的狀態(tài)中顯示被用戶選擇的信息。因此,用戶能 夠檢查與他/她輸入的按鍵字相匹配的信息。另一方面,將多條收集的信息以隨著它們的 類型,諸如靜態(tài)圖像、運(yùn)動(dòng)圖像、文本信息、以及語音信息,而變化的格式存儲(chǔ)為數(shù)據(jù)項(xiàng)?;?于多條收集的信息的類型,控制器180使用戶能夠通過適當(dāng)?shù)膽?yīng)用檢查信息。
[0196] 另一方面,在這一點(diǎn)上,當(dāng)然,與由用戶輸入的關(guān)鍵字相匹配的多條信息可以包括 其他多條信息以及靜態(tài)圖像信息。即,如上所描述,多條收集的信息不僅可以包括靜態(tài)信 息,而且包括諸如運(yùn)動(dòng)圖像的圖片信息,并且可以通過分析圖片信息收集多條各種信息。因 此,控制器180不僅搜尋諸如靜態(tài)圖像或者運(yùn)動(dòng)圖像的圖片信息而且搜尋作為分析圖片信 息的結(jié)果獲得的、或者作為搜尋與由用戶輸入的關(guān)鍵字相匹配的信息的結(jié)果獲得的多條信 息。然后,控制器180給用戶提供被發(fā)現(xiàn)的信息。因此,如果用戶輸入特定的地點(diǎn)名稱和諸 如"今天、去工作地點(diǎn)的路徑、'米斯特披薩'、電話號(hào)碼"的作為關(guān)鍵字的特定的信息,當(dāng)然, 控制器180不僅可以給用戶提供圖片信息,而且可以給用戶提供與輸入的關(guān)鍵字相對應(yīng)的 電話信息。
[0197] 另一方面,控制器180不僅可以給用戶提供被用戶選擇的信息,而且可以給用戶 提供多條各種信息。例如,控制器180提供除上述的多條信息之外的與用戶的當(dāng)前位置相 關(guān)的信息。
[0198] 可替選地,控制器180可以基于在被用戶輸入的關(guān)鍵字之中的至少一個(gè)搜尋很多 條信息,以便于給用戶提供附加的信息。
[0199] 作為一個(gè)示例,在用戶輸入"今天、上午、去工作地點(diǎn)的路徑、披薩"作為關(guān)鍵字的 情況下,控制器180從來自用戶的輸入識(shí)別四個(gè)關(guān)鍵字"今天"、"上午"、"去工作地點(diǎn)的路 徑"、"披薩"。然后,控制器180在多條收集的信息中搜尋與四個(gè)關(guān)鍵字相匹配的信息。然 后,在找到與關(guān)鍵字相匹配的信息的狀態(tài)中,基于用戶的選擇,控制器180可以提供關(guān)于在 關(guān)鍵字之中的至少一個(gè)相關(guān)的附加的信息。
[0200] 然后,在用戶進(jìn)一步從輸入的關(guān)鍵字之中選擇"披薩"的情況下,控制器180在多 條收集的信息中進(jìn)一步搜尋與被用戶選擇的關(guān)鍵字"披薩"相對應(yīng)的信息,并且可以在顯示 單元251上顯示搜尋的結(jié)果和當(dāng)前找到的多條信息。可替選地,控制器180可以識(shí)別用戶 的當(dāng)前位置,并且可以在用戶的當(dāng)前位置周圍的區(qū)域搜尋與被選擇的關(guān)鍵字"披薩"相對應(yīng) 的地點(diǎn)并且可以在顯示單元251上顯示搜尋的結(jié)果。
[0201] 此外,基于用戶選擇,控制器180可以提供與特定地點(diǎn)周圍的區(qū)域相關(guān)的信息作 為附加的信息。
[0202] 例如,在步驟S500中用戶注視已經(jīng)固定了參考時(shí)間段或者更長的時(shí)間段的情況 下,基于與用戶的當(dāng)前位置相對應(yīng)的地圖信息,通過進(jìn)行搜索,控制器180收集與用戶注視 的某物相對應(yīng)的地點(diǎn)和在該地點(diǎn)周圍的區(qū)域相關(guān)的信息??商孢x地,在步驟S500中用戶的 注視已經(jīng)固定了參考時(shí)間段或者更長的時(shí)間段的情況下,控制器180在預(yù)定時(shí)間段內(nèi)收集 圖片信息并且從在預(yù)定時(shí)間段內(nèi)收集的多條信息中提取與用戶注視的某物相對應(yīng)的地點(diǎn) 和在該地點(diǎn)周圍的區(qū)域相關(guān)的多條信息。
[0203] 例如,控制器180對在預(yù)定時(shí)間段內(nèi)已經(jīng)收集的多條信息執(zhí)行文本識(shí)別以便于提 取這樣的多條信息。然后,基于用戶選擇,控制器180提供通過搜索或者通過文本識(shí)別獲得 的信息作為附加信息。
[0204] 另一方面,如上所描述,控制器180可以根據(jù)它們的屬性對多條收集的信息進(jìn)行 分類,并且可以存儲(chǔ)分類結(jié)果。在這樣的情況下,當(dāng)由用戶從多條收集的信息之中選擇任何 一條收集的信息時(shí),控制器180進(jìn)一步在其上顯示被選擇的信息的顯示單元251的一個(gè)區(qū) 域上顯示當(dāng)前被選擇的信息的關(guān)聯(lián)信息。
[0205] 然后,基于預(yù)定姿勢或者觸摸輸入,或者基于語音輸入,控制器180以用戶能夠從 當(dāng)前被選擇的信息的關(guān)聯(lián)信息之中選擇任何一個(gè)這樣的方式執(zhí)行控制。在這樣的情況下, 控制器180可以基于被選擇的關(guān)聯(lián)信息進(jìn)行新的搜尋并且可以給用戶提供進(jìn)行新的搜尋 的結(jié)果。
[0206] 另一方面,圖6是用于描述在圖5中圖示的操作過程之中的操作過程的圖,其在將 收集通過相機(jī)接收的圖片信息作為與用戶注視的某物相對應(yīng)的地點(diǎn)相關(guān)的信息的情況下 被執(zhí)行。在這一點(diǎn)上,在根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端200的情況下,當(dāng)然,相機(jī)可以 保持持續(xù)被操作的狀態(tài)。然而,當(dāng)以這樣的方式操作相機(jī)221時(shí),因?yàn)橄牟槐匾墓β剩?優(yōu)選的是,控制器180應(yīng)受限地操作相機(jī)221。
[0207] 因此,下面描述其中受限地操作相機(jī)221以便于防止不必要的功率消耗的情況。
[0208] 參考圖6,根據(jù)本發(fā)明的眼鏡式終端200的控制器180在預(yù)定條件下操作相機(jī) 221 (S600)。然后,在步驟S600中操作相機(jī)221的情況下,控制器180存儲(chǔ)從相機(jī)221輸入 的至少一條圖片信息(S602)。
[0209] 在這一點(diǎn)上,多條圖片信息不僅可以包括靜態(tài)圖像而且可以包括運(yùn)動(dòng)圖像?;?用戶的當(dāng)前狀態(tài),或者在預(yù)定條件下,控制器180以靜態(tài)圖像或者運(yùn)動(dòng)圖像的格式存儲(chǔ)通 過相機(jī)221接收的圖像。
[0210] 例如,控制器180感測用戶的位置移動(dòng)的速度,并且基于用戶的位置的移動(dòng)速度, 確定是否以靜態(tài)圖像的格式或者以運(yùn)動(dòng)圖像的格式收集圖像。這是因?yàn)樵谟脩舻囊苿?dòng)速 度處于預(yù)定水平或者以上的狀態(tài)中存儲(chǔ)靜態(tài)圖像的情況下,由于用戶的移動(dòng)速度導(dǎo)致靜態(tài) 圖像模糊不清。因此,在用戶的移動(dòng)速度處于預(yù)定水平或者以上的情況下,控制器180可以 以在運(yùn)動(dòng)了一段時(shí)間的運(yùn)動(dòng)圖像的格式收集圖像。在用戶的移動(dòng)速度低于預(yù)定水平的情況 下,可以以靜態(tài)圖像的格式收集圖像。
[0211] 另一方面,在以這樣的方式以不同的形式收集的多條信息的情況下,將會(huì)存儲(chǔ)多 條信息的時(shí)間段相互不同。例如,因?yàn)橐赃\(yùn)動(dòng)圖像的格式存儲(chǔ)的信息具有比以靜態(tài)圖像的 格式存儲(chǔ)的信息更大的大小,所以將會(huì)存儲(chǔ)的以運(yùn)動(dòng)圖像的格式存儲(chǔ)的信息的時(shí)間段與以 靜態(tài)圖像的格式存儲(chǔ)的信息相比較相對較長。另外,在存儲(chǔ)器170中存儲(chǔ)的數(shù)據(jù)量處于預(yù) 定水平或者更高的水平的情況下,可以優(yōu)選地刪除以運(yùn)動(dòng)圖像的格式收集的信息而不是以 靜態(tài)圖像的格式收集的信息。
[0212] 另一方面,被用于以靜態(tài)圖像或者運(yùn)動(dòng)圖像的格式收集與對應(yīng)于用戶注視的某物 的地點(diǎn)相關(guān)的信息的相機(jī)是具有預(yù)定像素?cái)?shù)或者更低的像素的相機(jī)??商孢x地,相機(jī)或者 是存儲(chǔ)作為黑白圖像,即,黑白的靜態(tài)圖像或者黑白的運(yùn)動(dòng)圖像捕獲圖像的單獨(dú)的相機(jī)。在 這樣的情況下,控制器180收集與用戶注視朝向的某物相對應(yīng)的地點(diǎn)相關(guān)的信息作為低分 辨率圖片信息或者黑白圖像,并且因此最小化數(shù)據(jù)量。另外,替代以這樣的方式使用單獨(dú)的 相機(jī),當(dāng)收集與用戶注視朝向的某物相對應(yīng)的地點(diǎn)相關(guān)的信息時(shí),當(dāng)然,控制器180可以以 存儲(chǔ)被捕獲為具有預(yù)定像素或者更低的像素或者被捕獲為黑白圖像的圖像這樣的方式控 制相機(jī)221。
[0213] 另一方面,在步驟S600中用于操作相機(jī)221的預(yù)定條件是用戶做預(yù)定姿勢、用戶 將觸摸施加到在眼鏡式終端200的特定的點(diǎn)上、或者是用戶將多個(gè)輕擊施加到眼鏡式終端 200的主體上??商孢x地,可以基于在用戶的面部肌肉中的肌電變化滿足預(yù)定條件。即,在 用戶有意識(shí)地選擇相機(jī)221的操作的情況下,控制器180基于用戶的選擇操作相機(jī)221。然 后,基于是否用戶的注視的方向已經(jīng)固定了預(yù)定參考時(shí)間段或者更長的時(shí)間段,控制器180 存儲(chǔ)通過相機(jī)221的鏡頭捕獲的圖像作為關(guān)于用戶注視朝向的某物相關(guān)的信息。
[0214] 此外,當(dāng)滿足特定的條件時(shí),根據(jù)本發(fā)明的眼鏡式終端200可以自動(dòng)地操作相機(jī) 221以存儲(chǔ)圖片信息。例如,在預(yù)定條件是在預(yù)定參考時(shí)間段或者更長的時(shí)間段內(nèi)眼鏡式終 端200的前側(cè)面向的方向沒有被改變的情況下,當(dāng)用戶的注視已經(jīng)固定了預(yù)定時(shí)間段時(shí), 控制器180可以操作相機(jī)221,并且同時(shí),可以存儲(chǔ)通過相機(jī)221的鏡頭捕獲的圖像作為關(guān) 于用戶注視朝向的某物的信息。
[0215] 在這樣的情況下,根據(jù)本發(fā)明的眼鏡式終端200自動(dòng)地收集與用戶注視朝向的某 物相關(guān)的信息。因此,即使用戶沒有有意識(shí)地開始收集信息,根據(jù)本發(fā)明的眼鏡式終端200 也可以基于用戶的無意識(shí)的動(dòng)作等收集信息。
[0216] 另一方面,當(dāng)在步驟S602中存儲(chǔ)與用戶注視朝向的某物相關(guān)的圖片信息時(shí),控制 器180提取與存儲(chǔ)的圖片圖像相關(guān)的多條各種信息作為屬性信息(S604)。例如,控制器180 提取諸如"今天(4/27),去工作地點(diǎn)的路徑"的與時(shí)間和/或收集圖片信息的地點(diǎn)相關(guān)的信 息作為屬性信息。
[0217] 另外,當(dāng)然,控制器180可以提取分析被存儲(chǔ)的圖片信息的結(jié)果作為屬性信息。例 如,控制器180檢測被存儲(chǔ)的圖片信息的可識(shí)別的部分,并且對被檢測的部分執(zhí)行文本識(shí) 另IJ。然后,控制器180提取識(shí)別的結(jié)果作為與對應(yīng)的圖片圖像相關(guān)的屬性信息。
[0218] 例如,控制器180從被存儲(chǔ)的圖片信息識(shí)別在特定的餐館的招牌上示出的文本、 圖像等。在這樣的情況下,控制器180提取識(shí)別文本、圖像等的結(jié)果作為與在其上執(zhí)行識(shí)別 的圖片信息相關(guān)的信息,即,作為屬性信息。作為一個(gè)示例,在將諸如"披薩天堂"的文本視 為分析圖片信息的結(jié)果的情況下,控制器180從包括食物名"披薩"的被識(shí)別的文本進(jìn)行識(shí) 另IJ。在這樣的情況下,控制器180從包括文本的圖片信息提取屬性信息"披薩"。可替選地, 在作為識(shí)別的結(jié)果,識(shí)別單詞"電話"或者識(shí)別電話符號(hào)"并且識(shí)別其后的多位號(hào)碼的 情況下,控制器180提取號(hào)碼作為與運(yùn)動(dòng)圖像或者靜態(tài)圖像相關(guān)的屬性信息,即,作為"電 話號(hào)碼"。
[0219] 另一方面,當(dāng)在步驟S604中提取屬性信息時(shí),控制器180基于被提取的屬性信息 對被存儲(chǔ)的圖片信息進(jìn)行分類并且存儲(chǔ)分類的結(jié)果(S606)。例如,在包括文本的圖片信息 的屬性信息是"披薩"的情況下,控制器180將包括文本的圖片信息分類成通用詞語,即,分 類為"食物",或"餐館",并且存儲(chǔ)分類的結(jié)果。參考圖10A至10C詳細(xì)地描述以這樣的方 式收集的信息的示例。
[0220] 另一方面,當(dāng)然,可以使用與用戶的當(dāng)前位置相關(guān)的信息以便于收集用戶注視朝 向的某物相關(guān)的信息。例如,在確定用戶開始收集信息的情況下,控制器180可以識(shí)別當(dāng)前 的位置,并且可以使用與被識(shí)別的當(dāng)前位置和用戶注視的當(dāng)前方向相關(guān)的地圖信息收集與 用戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間段的某物相關(guān)的信息。
[0221] 圖7圖示根據(jù)本發(fā)明的實(shí)施例的通過眼鏡式終端200的控制器180的操作過程。
[0222] 參考圖7,控制器180在預(yù)定條件下感測當(dāng)前位置,并且利用被感測的當(dāng)前位置作 為參考,檢測用戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間段的方向(S700)。
[0223] 在這一點(diǎn)上,預(yù)定條件意指開始收集信息的條件。即,例如,在用戶在特定的方向 上注視而沒有改變注視的方向的情況下,控制器180確定滿足預(yù)定條件并且檢測當(dāng)前位置 和用戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間段的方向??商孢x地,預(yù)定條件可以 是用戶做預(yù)定姿勢、可以是用戶將觸摸施加到在眼鏡式終端200上的特定的點(diǎn)、或者可以 是用戶將多個(gè)輕擊施加到眼鏡式終端200的主體??商孢x地,可以基于在用戶的面部肌肉 中的肌電變化滿足預(yù)定條件。
[0224] 另一方面,在滿足預(yù)定條件的情況下,控制器180識(shí)別開始收集與用戶注視朝向 的某物相關(guān)的信息,并且收集與用戶的注視的方向相對應(yīng)的地點(diǎn)相關(guān)的信息(S702)。例如, 基于與當(dāng)前被識(shí)別的位置相對應(yīng)的地圖信息,控制器180檢測位于用戶的注視的方向的地 點(diǎn)并且對被檢測的地點(diǎn)進(jìn)行搜索。例如,為了進(jìn)行搜索,控制器180使用預(yù)定網(wǎng)站等,在這 樣的情況下通過網(wǎng)站收集的多條各種信息是與用戶注視朝向的某物相關(guān)的多條信息。
[0225] 例如,在步驟S702中收集的多條信息是多條各種信息。即,控制器180收集關(guān)于 哪個(gè)商店位于與用戶注視朝向的某物相對應(yīng)的地點(diǎn)的信息或者關(guān)于商店具有哪些業(yè)務(wù)范 圍的信息,并且收集與商店的名稱和電話號(hào)碼相關(guān)的多條信息。另外,如果用戶注視朝向在 各層具有多個(gè)商店的購物中心,則控制器180可以收集關(guān)于多個(gè)商店的每一個(gè)的信息???替選地,基于在用戶的當(dāng)前位置和相應(yīng)的商店之間的距離并且基于相對于水平線用戶向上 注視的角度,控制器180可以僅選擇地收集關(guān)于在特定的層上的商店的多條信息。
[0226] 另一方面,控制器180對以這樣的方式收集的多條信息進(jìn)行分類,并且生成代表 性的信息(S704)。例如,作為收集多條信息的結(jié)果,控制器180不僅獲得關(guān)于諸如商店名 稱、業(yè)務(wù)范圍、以及電話號(hào)碼的位于相應(yīng)的地點(diǎn)的相應(yīng)的商店的多條信息,而且獲得諸如被 網(wǎng)民創(chuàng)建的評(píng)價(jià)意見的多條信息,作為關(guān)于與用戶注視朝向的某物相對應(yīng)的地點(diǎn)的多條信 息。根據(jù)它們的屬性,即,商店名稱(例如,"披薩天堂")、電話號(hào)碼、以及業(yè)務(wù)類型(例如, "餐館"),控制器180對以這樣的方式獲得的多條信息進(jìn)行分類,從多條收集的信息之中選 擇代表性的信息并且將被分類的多條信息和代表性的信息存儲(chǔ)為與用戶注視朝向的某物 相關(guān)的多條信息。在這一點(diǎn)上,控制器180生成關(guān)于商店的名稱的信息作為代表性的信息。 可替選地,在關(guān)于相應(yīng)的商店的圖像信息存在于多條收集的信息中的情況下,控制器180 可以生成圖像信息作為代表性的信息,或者可以生成關(guān)于商店的名稱的信息和圖像信息作 為代表性的信息。
[0227] 然后,當(dāng)生成代表性的圖像時(shí),控制器180將其他多條收集的信息存儲(chǔ)為與代表 性的信息相關(guān)的屬性信息(S706)。例如,控制器180將收集的電話信息和業(yè)務(wù)類型信息存 儲(chǔ)為與生成的代表性的信息相關(guān)的屬性信息。然后,控制器180根據(jù)屬性信息對代表性的 信息進(jìn)行分類。例如,在與代表性的信息相關(guān)的屬性信息是"餐館"的情況下,將代表性的 信息分類為"餐館"并且存儲(chǔ)分類的結(jié)果。
[0228] 另一方面,多條收集的信息不僅可以包括與在用戶注視朝向的某物相對應(yīng)的地點(diǎn) 中的商店相關(guān)的信息,而且可以包括關(guān)于收集信息的時(shí)間和/或地點(diǎn)的信息。在這樣的情 況下,也將關(guān)于收集信息的時(shí)間和/或地點(diǎn)的信息存儲(chǔ)為與代表性的信息相關(guān)的屬性信 息。然后在步驟S706中,將代表性的信息用作分類的參考。
[0229] 參考圖11A (a)、圖11B和圖11B (a)更加詳細(xì)地描述以這樣的方式,控制器180基 于當(dāng)前位置和用戶注視的方向收集關(guān)于特定的地點(diǎn)的信息的示例。
[0230] 另一方面,基于在用戶的運(yùn)動(dòng)狀態(tài)中的變化,根據(jù)本發(fā)明的眼鏡式終端200設(shè)置 信息收集方法或者將收集的信息分類為特定的信息并且存儲(chǔ)分類的結(jié)果。例如,如上所述, 在用戶的移動(dòng)速度是預(yù)定速度或者更高的速度的情況下,控制器180將信息收集為運(yùn)動(dòng)圖 像而不是靜態(tài)圖像,并且存儲(chǔ)收集的信息??商孢x地,基于用戶的位置或者基于用戶的移動(dòng) 速度的變化,控制器180可以確定用戶是否從預(yù)定車輛下車。然后,根據(jù)確定的結(jié)果,控制 器180可以將收集的信息分類為停車信息并且可以存儲(chǔ)分類的結(jié)果。
[0231] 圖8圖示根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端200基于用戶的運(yùn)動(dòng)狀態(tài)的變化對收 集的信息進(jìn)行分類,并且存儲(chǔ)分類的結(jié)果的過程的示例。
[0232] 參考圖8,根據(jù)本發(fā)明的眼鏡式終端200的控制器180感測用戶的運(yùn)動(dòng)狀態(tài)的變 化(S800)?;谕ㄟ^加速度傳感器或者慣性傳感器感測的結(jié)果或者基于是否作為識(shí)別用戶 的位置用戶的位置的移動(dòng)速度處于預(yù)定水平或者更高的水平,控制器180確定用戶是否在 車輛內(nèi)或者外。可替選地,在預(yù)定車輛的情況下,控制器180使用被安裝在預(yù)定車輛中的近 場通信(NFC)標(biāo)簽或者射頻(RF)芯片檢查在用戶的位置和預(yù)定車輛之間的距離上的變化。 基于檢查的結(jié)果,當(dāng)然,控制器180可以確定用戶是否上了預(yù)定車輛或者從預(yù)定車輛下車。
[0233] 基于用戶的運(yùn)動(dòng)狀態(tài)的變化或者基于用戶的位置的變化,根據(jù)本發(fā)明的眼鏡式終 端200設(shè)置信息收集方法(S802)。例如,如上所描述,基于用戶的移動(dòng)速度,控制器180以 運(yùn)動(dòng)圖像或者靜態(tài)圖像的格式收集信息??商孢x地,基于用戶是否從預(yù)定車輛下來,控制器 180可以以預(yù)定方法(例如,用收集停車信息的方法)收集要被收集的信息。
[0234] 此外,當(dāng)然,控制器180可以直接地選擇特定的信息收集方法。例如,用戶能夠通 過將預(yù)定姿勢或者多個(gè)輕擊施加到眼鏡式終端200的主體選擇特定的信息收集方法,或者 能夠使用被連接到眼鏡式終端200的不同的設(shè)備,或者使用語音信號(hào)選擇特定的信息收集 方法。
[0235] 可以預(yù)定各種信息收集方法。例如,預(yù)定信息收集方法包括停車信息收集方法。停 車信息收集方法是一種方法,其中在用戶在參考時(shí)間段或者更長的時(shí)間段內(nèi)在特定的方向 上固定他的/她的注視的情況下,除了通過相機(jī)221獲得的靜態(tài)圖像信息或者運(yùn)動(dòng)圖像信 息,進(jìn)一步收集關(guān)于用戶沿著其移動(dòng)的路徑的多條信息,即,移動(dòng)方向和速度,以及用戶移 動(dòng)的距離的方法。用戶通過選擇將被收集的信息的類型(例如,在收集停車信息的情況下 的圖片信息和關(guān)于用戶的移動(dòng)方向、用戶的移動(dòng)速度、以及用戶移動(dòng)的距離的信息)事先 設(shè)置這樣的信息收集方法。
[0236] 另一方面,當(dāng)在步驟S802中,基于用戶的運(yùn)動(dòng)狀態(tài)的變化設(shè)置信息收集方法,控 制器180基于預(yù)定條件,收集與用戶的注視朝向的某物相關(guān)的信息(S804)。在這一點(diǎn)上,預(yù) 定條件是為了開始收集信息的條件。
[0237] 即,如上所描述,預(yù)定條件是用戶在預(yù)定時(shí)間段或者更長的時(shí)間段內(nèi)在特定的方 向上固定他的/她的注視、是用戶做特定姿勢(例如,用戶上下?lián)u動(dòng)他的/她的頭的姿勢或 者做特定的面部表情)、或者是用戶將觸摸施加到在眼鏡式終端200上的預(yù)定點(diǎn)??商孢x 地,預(yù)定條件可以是將預(yù)定多個(gè)輕擊施加到眼鏡式終端200的主體的條件。
[0238] 當(dāng)滿足預(yù)定條件時(shí),在步驟S802中,控制器180根據(jù)預(yù)定信息收集方法收集與用 戶注視朝向的某物相關(guān)的信息。即,在用戶的移動(dòng)速度處于預(yù)定速度或者更高的速度的情 況下,信息收集方法使用運(yùn)動(dòng)圖像的格式。因此,在步驟S804中,以運(yùn)動(dòng)圖像的格式存儲(chǔ)通 過相機(jī)221捕獲的圖像。
[0239] 另一方面,當(dāng)然,控制器180不僅可以存儲(chǔ)在步驟S804中收集的多條信息,而且 可以存儲(chǔ)通過分析多條收集的信息獲得的多條信息。例如,控制器180對多條收集的信息 執(zhí)行文本或者圖像識(shí)別,并且可以進(jìn)一步將識(shí)別的結(jié)果存儲(chǔ)為與多條收集的信息相關(guān)的信 肩、。
[0240] 另外,在當(dāng)前設(shè)置的信息收集方法是為了收集停車信息的情況下,除了通過相機(jī) 221收集的信息之外,控制器180進(jìn)一步收集關(guān)于用戶沿著其移動(dòng)的路徑的信息,并且存儲(chǔ) 收集的信息。
[0241] 在這一點(diǎn)上,以預(yù)定時(shí)間單位存儲(chǔ)關(guān)于用戶沿著其移動(dòng)的路徑的信息,并且包括 用戶的移動(dòng)方向和用戶的移動(dòng)速度。當(dāng)收集關(guān)于移動(dòng)路徑的信息時(shí),控制器180可以將收 集的信息與通過相機(jī)221收集的圖片信息相關(guān)聯(lián),并且可以存儲(chǔ)關(guān)聯(lián)的結(jié)果。例如,當(dāng)收集 圖片信息時(shí),控制器180將關(guān)于在與收集圖片信息的時(shí)間相對應(yīng)的時(shí)間收集的用戶沿著其 移動(dòng)的路徑的信息與收集圖片信息的時(shí)間相關(guān)聯(lián)。
[0242] 另一方面,在步驟S804中,根據(jù)用戶的移動(dòng)速度對收集的信息進(jìn)行分類,并且存 儲(chǔ)分類的結(jié)果(S806)。因此,在作為在步驟S800中確定的結(jié)果,用戶的移動(dòng)速度處于預(yù)定 水平或者更高的水平的情況下,控制器180確定用戶在車輛內(nèi),并且在步驟S804中以運(yùn)動(dòng) 圖像的格式收集信息。然后,在步驟S806中,將以運(yùn)動(dòng)圖像的格式收集的多條信息分類為 在用戶在車輛內(nèi)的狀態(tài)中收集的多條信息并且存儲(chǔ)分類的結(jié)果。另一方面,在用戶從車輛 下來的情況下,對以與此相似的方式收集的多條信息進(jìn)行分類并且存儲(chǔ)分類的結(jié)果。例如, 在步驟S800中確定用戶從預(yù)定車輛下來的情況下,控制器180在步驟S804中收集多條信 息作為停車信息,并且將多條收集的信息進(jìn)行分類作為停車信息并且在步驟S806中存儲(chǔ) 分類的結(jié)果。
[0243] 然后,基于分類的結(jié)果,控制器180可以設(shè)置不同的刪除條件(S806)。例如,當(dāng)用 戶處于車輛中時(shí)收集的多條信息將是關(guān)于用戶的生活范圍(例如,包圍用戶的居所或者用 戶的工作地點(diǎn)的區(qū)域)的多條信息的可能性被確定為低。這時(shí)因?yàn)楫?dāng)車輛被駕駛到目的地 時(shí)獲得多條收集的信息。反之,當(dāng)用戶處于車輛外時(shí)收集的多條信息將是在用戶的生活范 圍的多條信息的可能性被確定是高的。因此,當(dāng)用戶不處于車輛中時(shí)多條收集的信息將被 存儲(chǔ)的時(shí)間段被設(shè)置為比當(dāng)用戶處于車輛中時(shí)收集的多條信息將被存儲(chǔ)的時(shí)間段更長。
[0244] 可替選地,在多條收集的信息是多條停車信息的情況下,基于用戶的位置或者基 于在移動(dòng)速度中的變化,控制器180可以立即刪除多條收集的信息。例如,當(dāng)然,在感測 用戶再次處于預(yù)定車輛中的情況下(例如,在用戶再次被定位在距被安裝在預(yù)定車輛內(nèi)的 NFC標(biāo)簽或者RF芯片預(yù)定的距離內(nèi)或者更低的距離內(nèi)的情況下)或者在作為感測用戶的位 置的移動(dòng)速度的結(jié)果用戶的位置的移動(dòng)速度處于預(yù)定水平或者更高的水平的情況下,控制 器180可以確定用戶再次處于預(yù)定車輛中并且可以刪除停車信息。
[0245] 圖9圖示在圖5中的操作過程之中,顯示在用戶的請求下找到的信息的操作過程。
[0246] 參考圖9,根據(jù)本發(fā)明的眼鏡式終端200的控制器180根據(jù)用戶的請求在顯示單元 251上顯示在多條已經(jīng)收集的信息之中找到的多條信息(S900)。
[0247] 在這一點(diǎn)上,用戶通過將語音信號(hào)輸入到麥克風(fēng)122發(fā)出請求,或者通過能夠被 連接到根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端200的不同的設(shè)備輸入請求。在將多個(gè)輕擊施加 到眼鏡式終端200的主體或者確定預(yù)定姿勢被感測的情況下,或者在將觸摸輸入施加到在 眼鏡式終端200上特定的點(diǎn)的情況下,控制器180操作麥克風(fēng)122或者能夠被連接到眼鏡 式終端200的不同的設(shè)備以接收用戶的請求。
[0248] 例如,當(dāng)假定用戶使用語音信號(hào)發(fā)出收集信息的請求時(shí),用戶使用他的/她的語 音輸入用于他/她想要搜尋的多條信息的關(guān)鍵字。然后,控制器180在多條收集的信息中 搜尋與輸入的關(guān)鍵字相對應(yīng)的信息。
[0249] 在這一點(diǎn)上,與關(guān)鍵字相匹配的多條信息是與多條收集的信息相關(guān)的多條各種屬 性信息。即,與收集信息的時(shí)間或者地點(diǎn)相關(guān)的信息(例如,屬性信息)是與關(guān)鍵字相匹配 的信息。因此,在用戶將諸如特定的時(shí)間(例如,"今天,上午,去工作地點(diǎn)的路徑")或者特 定的地點(diǎn)(例如,"Edan街")的關(guān)鍵字輸入到麥克風(fēng)122的情況下,控制器180在多條已 經(jīng)收集的信息中搜索與輸入的關(guān)鍵字相匹配的多條信息,并且在顯示單元251上顯示找到 的多條信息。
[0250] 此外,當(dāng)然,與關(guān)鍵字相匹配的多條信息可以包括通過分析多條收集的信息獲得 的文本信息、圖像信息等。例如,在多條已經(jīng)收集的信息之中的任何一條信息中識(shí)別文本 "披薩天堂"的情況下,當(dāng)用戶輸入關(guān)鍵字"披薩"時(shí),控制器180使用與輸入的關(guān)鍵字相匹 配的信息檢測被識(shí)別的文本信息"披薩天堂"。然后,控制器180在顯示單元251上顯示在 多條已經(jīng)收集的信息之中與被檢測的文本信息"披薩天堂"相對應(yīng)的信息。
[0251] 在這一點(diǎn)上,控制器180以各種形式顯示找到的信息。例如,控制器180以包括縮 略圖圖像的列表形式顯示找到的多條信息??商孢x地,控制器180可以使用地圖信息顯示 找到的多條信息。另外,為了顯示,控制器180有序地排列根據(jù)預(yù)定條件找到的多條信息。 例如,為了顯示,控制器180以從第一被存儲(chǔ)的信息到最后被存儲(chǔ)的信息的時(shí)間順序有序 地排列找到的多條信息,或者為了顯示,反之亦然??商孢x地,控制器180感測用戶的當(dāng)前 位置,并且以從距用戶的當(dāng)前位置最遠(yuǎn)處收集的信息到距用戶的當(dāng)前位置最近處收集的信 息的順序有序地排列多條收集的信息,或者為了顯示,反之亦然。
[0252] 此外,為了顯示,控制器180根據(jù)預(yù)定的優(yōu)先順序有序地排列找到的信息項(xiàng)目。在 這一點(diǎn)上,預(yù)定的優(yōu)先順序可以基于對多條收集的信息執(zhí)行文本識(shí)別的結(jié)果(例如,增加 識(shí)別精確度順序或者字母順序),并且可以基于當(dāng)收集信息時(shí)用戶的注視已經(jīng)固定的時(shí)間 段確定。即,控制器180進(jìn)一步收集關(guān)于當(dāng)收集信息時(shí)用戶的注視固定的時(shí)間的信息。為 了顯示,根據(jù)用戶的注視已經(jīng)固定的時(shí)間段,控制器180有序地排列通過在用戶的請求下 進(jìn)行搜索找到的多條信息。
[0253] 另一方面,當(dāng)找到與被用戶輸入的關(guān)鍵字相對應(yīng)的多條信息時(shí),控制器180根據(jù) 用戶的選擇從找到的多條信息之中選擇已經(jīng)收集的信息中的任意一個(gè)(S902)。例如,控制 器180感測用戶做出的預(yù)定姿勢,并且基于被感測的姿勢從找到的多條信息之中選擇找到 的任何一條信息。在這樣的情況下,在顯示單元251上,在特寫的狀態(tài)中,顯示被用戶選擇 的任何一條信息。在這一點(diǎn)上,參考圖13A(a)至圖13A(f)更加詳細(xì)地描述基于用戶做出 的姿勢,從找到的多條信息之中選擇任何一條找到的信息的示例。
[0254] 另一方面,在步驟S902中選擇的多條信息包括多條各種屬性信息。例如,控制器 180在顯示單元251上進(jìn)一步顯示關(guān)于收集被選擇的信息的時(shí)間或者地點(diǎn)的信息。可替選 地,控制器180可以在顯示單元251上進(jìn)一步顯示從當(dāng)前被選擇的信息提取的屬性信息,如 在被選擇的信息中識(shí)別的文本、圖像等(S904)。
[0255] 另一方面,當(dāng)在顯示單元251上顯示多條屬性信息時(shí),用戶能夠從同在特寫狀態(tài) 中的信息一起被顯示的多條屬性信息之中選擇任何一條屬性信息,并且基于被選擇的屬性 信息對多條信息進(jìn)行搜尋。然后,找到的多條信息被有序地顯示,并且在顯示單元251上顯 示被有序顯示的找到的多條信息(S906)。
[0256] 例如,用戶能夠通過預(yù)定姿勢等從與當(dāng)前被選擇的信息相關(guān)的多條屬性信息之中 選擇任何一條屬性信息。在這樣的情況下,基于感測的被用戶做出的姿勢,控制器180搜尋 具有與被選擇的屬性信息相同的屬性的信息或者搜尋具有與被選擇的屬性信息相似的屬 性的信息,并且在顯示單元251上顯示搜尋的結(jié)果。
[0257] 參考圖13B(a)至圖13B(f)更加詳細(xì)地描述基于以這樣的方式感測的姿勢,在多 條已經(jīng)收集的信息中搜尋相同的或者相似的屬性信息的示例。
[0258] 另一方面,基于用戶在步驟S906中選擇的屬性信息,控制器180確定是否找到新 的多條信息作為搜尋的結(jié)果(S908)。然后,在作為在步驟S908中確定的結(jié)果確定找到新的 多條信息的情況下,控制器180返回到步驟S902,并且從找到的多條信息之中根據(jù)用戶的 選擇來選擇任意一條找到的信息。然后,控制器180在步驟S904、S906、S908中重復(fù)地執(zhí)行 過程。
[0259] 然而,在作為在步驟S908中確定的結(jié)果未找到新的多條信息的情況下,即,在用 戶沒有選擇特定的屬性信息的情況下,控制器180確定用戶是否選擇停止顯示找到的多條 信息的選項(xiàng)(S910)。然后,在作為在步驟S910中確定的結(jié)果用戶沒有選擇停止顯示的選項(xiàng) 的情況下,控制器180返回到步驟S906并且確定用戶從當(dāng)前在特寫狀態(tài)中顯示的多條信息 之中選擇任何一條信息。
[0260] 然而,當(dāng)作為在步驟S910中確定的結(jié)果,用戶選擇停止顯示的選項(xiàng)時(shí),控制器180 停止顯示在顯示單元251上找回的多條信息。
[0261] 上面描述根據(jù)本發(fā)明的眼鏡式終端200的控制器180收集與用戶注視朝向的某物 相關(guān)的信息,并且在用戶的請求下顯示通過搜尋多條收集的信息獲得的多條信息的操作過 程。
[0262] 下面更加詳細(xì)地描述示例,其中,在根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端200中,根 據(jù)上述的通過控制器180的操作過程,與用戶注視朝向的某物相關(guān)的信息被收集,并且根 據(jù)用戶的選擇,被顯示在顯示單元251上。
[0263] 圖10A至圖10C圖示在根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端200中從相機(jī)221收集 與用戶注視朝向的某物相關(guān)的信息的示例。
[0264] 如上面所述,在用戶的注視已經(jīng)固定了預(yù)定參考時(shí)間段或者更長的時(shí)間段的情況 下,控制器180自動(dòng)地操作相機(jī)??商孢x地,在用戶做預(yù)定姿勢的情況下,或者在用戶將預(yù) 定次數(shù)或者更多次數(shù)的輕擊施加到主體或者將觸摸輸入施加到特定的點(diǎn)上的情況下,控制 器180可以操作相機(jī)221。在這樣的情況下,如在圖10A中所圖示,控制器180在顯示單元 251上顯示指示相機(jī)221處于被操作的狀態(tài)中的圖形對象100,以便于用戶識(shí)別相機(jī)221當(dāng) 前處于操作中。
[0265] 當(dāng)以這樣的方式操作相機(jī)221時(shí),自動(dòng)地、或者基于用戶的選擇,諸如當(dāng)做預(yù)定姿 勢時(shí)或者當(dāng)將多個(gè)輕擊施加到眼鏡式終端200的主體時(shí),控制器180以靜態(tài)圖像或者運(yùn)動(dòng) 圖像的格式存儲(chǔ)通過相機(jī)221捕獲的圖像。然后,被存儲(chǔ)的信息被收集為與用戶注視朝向 的某物相關(guān)的信息。另外,在相機(jī)221處于操作中狀態(tài)中,用戶施加相同的輸入,即,做預(yù)定 姿勢,或者將預(yù)定次數(shù)或者更多次數(shù)的輕擊施加到主體、或者將觸摸輸入施加到預(yù)定點(diǎn)的 情況下,控制器180可以切斷相機(jī)221以便于相機(jī)221返回到其先前的狀態(tài)。當(dāng)以這樣的 方式切斷相機(jī)時(shí),圖形對象100可以不被顯示在顯示單元251上。
[0266] 另一方面,如上所描述,控制器180使用文本識(shí)別等從被存儲(chǔ)的靜態(tài)圖像和運(yùn)動(dòng) 圖像進(jìn)一步提取屬性信息。例如,如在圖10B中所圖示,在文本可識(shí)別的部分1002和1004 被包括在收集的信息中的情況下,控制器180對此進(jìn)行識(shí)別,并且將識(shí)別的結(jié)果存儲(chǔ)為與 收集的信息相關(guān)的屬性信息。在這樣的情況下,當(dāng)在用戶的請求下在顯示單元251上顯示 收集的信息時(shí),控制器180將提取的信息與收集的信息一起顯示。
[0267] 圖10C圖示此的示例。
[0268] 圖10C圖示與基于在圖10A中的用戶的選擇收集的信息1012相關(guān)的屬性信息 1010的示例,和與收集的信息1012相關(guān)的屬性信息1010的示例。如在圖10C中所圖示,收 集的信息1012是通過相機(jī)221捕獲的圖片信息,并且屬性信息是包括收集信息的時(shí)間("4 月27日上午08:00"和地點(diǎn)("Edan街"))的信息和從收集的圖片信息1012提取的信息, 艮P,文本識(shí)別的結(jié)果("米斯特披薩")。
[0269] 另一方面,圖llA(a)和圖llA(b)和圖llB(a)和圖llB(b)圖示在根據(jù)本發(fā)明的 眼鏡式終端中使用關(guān)于用戶的位置的信息收集與用戶注視朝向的某物相關(guān)的信息的示例。
[0270] 在用戶的注視已經(jīng)固定了參考時(shí)間段或者更長的時(shí)間段、或者用戶將預(yù)定次數(shù)或 者更多次數(shù)的輕擊施加到主體、或者將觸摸輸入施加到預(yù)定點(diǎn)的情況下,控制器180開始 收集信息。在這樣的情況下,當(dāng)然,控制器180可以在顯示單元251上顯示指示當(dāng)前收集信 息的狀態(tài)的圖形對象,以便于用戶識(shí)別當(dāng)前收集信息的狀態(tài)。
[0271] 然后,當(dāng)開始收集信息時(shí),如在圖llA(a)中所圖示,控制器180感測用戶的當(dāng)前位 置。然后,控制器180感測用戶的注視的方向1102。然后,控制器180使用與用戶的當(dāng)前位 置相關(guān)的地圖信息檢測用戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間段的地點(diǎn)1110, 如在圖llA(b)中所圖示。
[0272] 在這一點(diǎn)上,控制器180優(yōu)選地存儲(chǔ)用戶沿著其移動(dòng)的路徑1100、用戶注視的方 向1102、用戶朝著特定方向注視的時(shí)間段、以及用戶朝著特定方向注視的時(shí)間。然后,在稍 后能夠?qū)⒀坨R式終端200連接到預(yù)定網(wǎng)站或者服務(wù)器的情況下,當(dāng)然,控制器180可以從網(wǎng) 站或者服務(wù)器使用諸如用戶沿著其移動(dòng)的路徑1100、用戶注視的方向1102、用戶朝著特定 的方向注視的時(shí)間段、以及用戶朝著特定的方向注視的時(shí)間的被存儲(chǔ)的數(shù)據(jù)檢測用戶的注 視固定了預(yù)定時(shí)間段或者更長的時(shí)間段的地點(diǎn)1110。
[0273] 另一方面,當(dāng)檢測用戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間段的地點(diǎn) 1110時(shí),控制器搜尋與地點(diǎn)1110相關(guān)的信息。例如,控制器180通過關(guān)于其中用戶當(dāng)前停 留的區(qū)域的地圖信息檢測關(guān)于與用戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間段的 某物相對應(yīng)的地點(diǎn)1110的地址信息,并且使用被檢測的地址信息檢測關(guān)于哪個(gè)站位于地 點(diǎn)1110的信息、關(guān)于地點(diǎn)1110的名稱的信息等。圖11B(a)圖示此的示例。
[0274] 另一方面,如在圖llB(a)中所圖示,當(dāng)作為搜尋的結(jié)果找到與用戶的注視已經(jīng)固 定了預(yù)定時(shí)間段或者更長的時(shí)間段的某物相對應(yīng)的地點(diǎn)1110相關(guān)的多條信息時(shí),控制器 180將找到的多條信息存儲(chǔ)為與地點(diǎn)1110相關(guān)的信息。在這一點(diǎn)上,控制器180從找到的 多條信息之中選擇代表性的信息。例如,關(guān)于地點(diǎn)1110的圖像信息和/或關(guān)于地點(diǎn)1110 的站名信息是多條代表性的信息。
[0275] 因此,如在圖llB(a)中所圖示,在找到的多條信息之中存在相關(guān)的信息的情況 下,控制器180選擇相關(guān)的圖像("Mr_PIZZA. jpg")作為代表性的圖像,將被選擇的相關(guān)的 圖像存儲(chǔ)為基于在預(yù)定時(shí)間段或者更長的時(shí)間段內(nèi)已經(jīng)被固定的用戶的注視收集的信息, 并且將多條收集的信息存儲(chǔ)為相關(guān)的屬性信息。
[0276] 圖llB(b)圖示此的示例。圖示在用戶的請求下,作為基于關(guān)于用戶的位置和用戶 的注視的方向的信息搜尋的結(jié)果找到的與地點(diǎn)相關(guān)的圖像信息("Mr_PIZZA. jpg")1120, 將找到的多條信息顯示為屬性信息(1122)的示例。
[0277] 另一方面,圖 12A(a)和 12A(b),至 12B(a)和 12B(b),以及 12C(a)和 12C(b)是圖 示在根據(jù)本發(fā)明的眼鏡式終端中在用戶的請求下顯示在多條收集的信息之中的至少一條 信息的示例的圖。
[0278] 首先,圖12(a)圖示在用戶的請求下,以包括縮略圖圖像的列表形式顯示找到的 信息的示例。例如,在例如輸入諸如"今天,上午,去工作地點(diǎn)的路徑"的特定的關(guān)鍵字的情 況下,控制器180在多條已經(jīng)收集的信息之中搜尋與關(guān)鍵字相匹配的多條信息1200、1202、 以及1204并且顯示搜尋的結(jié)果,如在圖12A(a)中所圖示。
[0279] 在這樣的情況下,如上所述,為了在顯示器251上進(jìn)行顯示,控制器180基于用戶 朝著特定的方向注視的時(shí)間段、距用戶的當(dāng)前位置的距離、收集信息的時(shí)間等有序地排列 找到的多條信息1200、1202、以及1204。圖12A (a)圖示此的示例。
[0280] 另一方面,根據(jù)本發(fā)明的眼鏡式終端200可以以除了列表形式之外的形式顯示多 條收集的信息。例如,如在圖12A(b)中所圖示,控制器180在關(guān)于用戶當(dāng)前停留的區(qū)域的 地圖信息上顯示多條收集的信息1210、1212、以及1214。在這樣的情況下,如在圖12A(b) 中所圖示,在顯示單元251上優(yōu)選地顯示關(guān)于位于距用戶的當(dāng)前位置1214預(yù)定的距離內(nèi)的 地點(diǎn)的多條信息。然后,根據(jù)用戶的選擇,在顯示單元251上顯示關(guān)于位于距當(dāng)前位置較遠(yuǎn) 的地點(diǎn)的多條信息。
[0281] 另一方面,如在圖12A (a)和12A(b)中所圖示,在用戶的請求下顯示多條收集的信 息的情況下,在顯示單元251上進(jìn)一步顯示識(shí)別用戶的請求等的結(jié)果??刂破?80可以在顯 示單元251上顯示搜尋關(guān)鍵字,例如," 14. 04. 27,去工作地點(diǎn)的路徑,上午08:00"。因此,用 戶能夠檢查他/她輸入的請求是否被正確地識(shí)別,和被用于搜尋當(dāng)前顯示在顯示單元251 上的多條信息的搜尋關(guān)鍵字。
[0282] 另一方面,如上所描述,根據(jù)本發(fā)明的眼鏡式終端200可以進(jìn)一步提供關(guān)于用戶 的當(dāng)前位置的附加信息。圖12B(a)和圖12B(b)圖示此的示例。圖示在用戶的請求下,使 用地圖信息或者包括縮略圖圖像的列表形式提供找到的信息的示例。
[0283] 首先,如在圖12B(b)中所圖示,在使用地圖信息提供找到的信息的情況下,控制 器180提供從用戶的當(dāng)前位置到找到的多條信息1222、1224、以及1226中的每個(gè)的距離 "DIST"、和移向找到的多條信息1222、1224、以及1226中的每個(gè)花費(fèi)的時(shí)間"HME"。在這 一點(diǎn)上,控制器180基于被用戶設(shè)置的移動(dòng)手段(例如,步行或者騎自行車)測量到達(dá)找到 的多條信息1222、1224、以及1226中的每個(gè)花費(fèi)的時(shí)間。在改變移動(dòng)手段的情況下,到達(dá)找 到的信息花費(fèi)的時(shí)間經(jīng)歷變化。
[0284] 另一方面,圖12B(b)圖示在以包括縮略圖圖像的列表形式提供找到的信息的 情況下,提供關(guān)于距用戶的當(dāng)前位置的距離"DIST"和關(guān)于到達(dá)找到的信息花費(fèi)的時(shí)間 "HME"的多條信息的示例。在這樣的情況下,如在圖12B(b)中所圖示,控制器180可以根 據(jù)預(yù)定的優(yōu)先順序有序地排列多條收集的信息1230、1232、以及1234并且可以在找到的多 條信息1230、1232、以及1234之中的至少一個(gè)上顯示關(guān)于距用戶的當(dāng)前位置的距離和關(guān)于 到達(dá)找到的多條信息的花費(fèi)的時(shí)間的多條信息。
[0285] 另一方面,在用戶的請求下,根據(jù)本發(fā)明的眼鏡式終端200可以與找到的信息一 起提供關(guān)于用戶的注視已經(jīng)固定的時(shí)間段和關(guān)于用戶拜訪相應(yīng)的地點(diǎn)的次數(shù)的多條信息。
[0286] 圖12C(a)和圖12C(b)圖示此的示例。
[0287] 首先,圖12C(a)圖示在使用地圖信息在顯示單元251中顯示找到的多條信息的情 況下,顯示找到的多條信息的示例。在這樣的情況下,與在地圖信息上找到的多條信息的位 置一起顯示與用戶已經(jīng)朝著與相應(yīng)的地點(diǎn)相關(guān)的某物注視的時(shí)間段"GAZING"的信息。另 外,如在圖12(a)中所圖示,在用戶拜訪("VISIT")相應(yīng)的地點(diǎn)的情況下,用戶的拜訪的記 錄也被包括在找到的信息中。在這一點(diǎn)上,通過感測用戶的位置,或者通過用戶的選擇檢查 關(guān)于用戶的拜訪的信息??商孢x地,使用被安裝在相應(yīng)的地點(diǎn)的RF芯片或者NFC芯片的使 用記錄,或者通過在相應(yīng)的地點(diǎn)中用戶的信用卡的支付記錄檢查用戶的拜訪的信息。
[0288] 另一方面,如在圖12C(a)中所圖示,在不僅通過地圖信息的使用,而且以包括 縮略圖圖像的列表的格式提供找到的多條信息的情況下,進(jìn)一步顯示這些多條信息。例 如,如在圖12C(b)中所圖示,在以列表形式顯示找到的多條信息的情況下,在縮略圖圖像 1250、1252、以及1254的附近顯示關(guān)于用戶朝著與相應(yīng)的地點(diǎn)相關(guān)的某物注視的時(shí)間段 "GAZING"和/或關(guān)于對相應(yīng)的地點(diǎn)的用戶的拜訪("VISIT")記錄的多條信息。
[0289] 另一方面,在根據(jù)本發(fā)明的實(shí)施例的眼鏡式終端中,用戶能夠以各種方法開始收 集信息或者停止收集信息或者能夠輸入關(guān)鍵字以從找到的多條信息之中選擇任何一條信 息。另外,用戶能夠從找到的多條信息之中選擇至少一條信息。如上所描述,各種方法在此 涉及由用戶做的預(yù)定姿勢、與在用戶的面部表情中的變化相關(guān)聯(lián)的肌電變化、在眼鏡式終 端200的主體上的多個(gè)輕擊、到特定的點(diǎn)的觸摸輸入等。
[0290] 圖13A(a)至圖13A(f)和圖13B(a)至圖13B(f)圖示在根據(jù)本發(fā)明的眼鏡式終端 中,基于由用戶做的姿勢搜尋多條已經(jīng)收集的信息的示例。
[0291] 例如,如在圖13A(a)中所圖示,在用戶通過預(yù)定角度或者更大的角度來回?fù)u動(dòng)他 的/她的頭的情況下,控制器180將此確定為用于在多條已經(jīng)收集的信息之中搜尋特定的 信息的用戶輸入。在這樣的情況下,控制器180操作輸入用戶的語音的麥克風(fēng)122。在這樣 的情況下,控制器180使用預(yù)定圖形對象1300指示麥克風(fēng)122處于操作中。
[0292] 然后,在用戶再次做此姿勢(其中用戶通過預(yù)定角度或者更大的角度來回?fù)u動(dòng)他 的/她的頭的姿勢)的情況下,控制器180將此確定為用于停止語音輸入的用戶輸入,并且 將麥克風(fēng)122切回到切斷狀態(tài)。然后,在這樣的情況下,控制器180可以在顯示單元251上 顯示用于使圖形對象1300從顯示單元251顯示或者用于指示麥克風(fēng)122處于切換狀態(tài)的 預(yù)定的不同的圖形對象。
[0293] 另一方面,在麥克風(fēng)122處于操作中的情況下,控制器180使用戶的語音信號(hào)能作 為用于搜尋特定的信息的關(guān)鍵字被輸入到麥克風(fēng)122。然后,控制器180在多條已經(jīng)收集的 信息中搜尋與輸入的關(guān)鍵字信息相匹配的多條信息,并且在顯示單元251上顯示找到的多 條信息。在這樣的情況下,用戶從多條顯示的信息之中選擇任何一條顯示的信息。也通過 由用戶做的姿勢做這個(gè)選擇。
[0294] 例如,如在圖13A(c)中所圖示,用戶能夠做出他/她以預(yù)定角度或者更大的角度 從一邊到另一邊搖動(dòng)他的/她的頭的姿勢。在這樣的情況下,控制器180基于用戶搖動(dòng)他 的/她的頭的方向從找到的多條信息之中選擇任何一條信息。例如,在用戶向左移動(dòng)他的 /她的頭的情況下,控制器180臨時(shí)地選擇被定位到當(dāng)前從找到的多條信息之中臨時(shí)選擇 的任何一條信息1302的左邊的信息。在這樣的情況下,如在圖13A(d)中所圖示,以區(qū)分自 身與多條不同的信息的方式(即,以更大的大小的縮略圖圖像的形式)顯示臨時(shí)被選擇的 信息。另外,在這一點(diǎn)上,在用戶在特定的方向上多次搖動(dòng)他的/她的頭的情況下,控制器 180顯示被定位在用戶搖動(dòng)他的/她的頭的方向中的多條信息,其數(shù)量對應(yīng)于用戶搖動(dòng)他 的/她的頭的次數(shù)。
[0295] 另一方面,用戶能夠選擇當(dāng)前被臨時(shí)地選擇的信息并且在特寫的狀態(tài)在顯示單元 251上顯示被選擇的信息,例如,如在圖13A(e)中所圖示,在用戶做特定的面部表情的情況 下,控制器180感測在用戶的面部肌肉中的肌電變化或者在用戶的眼睛的形狀中的變化。 在這樣的情況下,控制器180將當(dāng)前臨時(shí)選擇的信息確定為由用戶選擇的特寫視圖中的信 息。圖13A(f)圖示在這樣的情況下,以特寫的狀態(tài)顯示該信息的示例。
[0296] 另一方面,在這樣的方式被顯示在特寫的狀態(tài)中的信息上顯示與當(dāng)前選擇的信息 相關(guān)的多條屬性信息。在這樣的情況下,用戶從多條屬性信息之中選擇任何一條屬性信息, 并且在多條已收集的信息中搜尋具有相同屬性信息的多條信息。然后,在顯示單元251上 顯示搜尋的結(jié)果。
[0297] 圖13B(a)至圖13B(f)圖示此的示例。
[0298] 如上所描述,當(dāng)在顯示單元251上以特寫狀態(tài)顯示特定的信息時(shí),使用各種方法, 控制器180從被顯示在處于特寫狀態(tài)中的信息上的多條屬性信息之中選擇任何一條屬性 信息。各種方法在此涉及由用戶做的預(yù)定姿勢、根據(jù)在用戶的面部表情中的變化的肌電變 化、在眼鏡式終端200的主體上的多個(gè)輕擊、到特定點(diǎn)的觸摸輸入等。
[0299] 例如,如在圖13B(a)中所圖示,在用戶在特定的方向上向后彎曲他的/她的頭的 情況下,控制器180將此確定為用于從與當(dāng)前處在特寫狀態(tài)中的信息相關(guān)的多條屬性信息 之中選擇任何一條屬性信息的用戶輸入。因此,如在圖13B(a)至圖13B(c)中所述,在用 戶在特定的方向上向后彎曲他的/她的頭的情況下,基于用戶向后彎曲他的/她的頭的方 向,控制器180從與當(dāng)前處在特寫狀態(tài)中的信息相關(guān)的多條屬性信息之中選擇任何一條屬 性信息。圖13B(b)和圖13B(d)圖示此的示例。圖示被用戶選擇的屬性信息從收集時(shí)間 1310 "3. 27上午08:00"變成收集地點(diǎn)"Edan街"的示例。
[0300] 如在圖13B(d)中所述,當(dāng)通過由用戶做的姿勢選擇特定的屬性信息時(shí),用戶能夠 基于當(dāng)前被選擇的屬性信息進(jìn)行搜尋。例如,如在圖13B(e)中所圖示,在用戶做特定的面 部表情的情況下,控制器180感測在用戶的面部肌肉中的肌電變化或者在用戶的眼睛的形 狀上的變化。在這樣的情況下,控制器180確定用戶選擇基于當(dāng)前被選擇的屬性信息的 搜尋。因此,控制器180搜尋已經(jīng)被用戶選擇的屬性信息的多條信息,即,具有與如在圖 13B(d)中所圖示的收集地點(diǎn)"Edan街"相同的屬性信息的多條信息,并且在顯示單元251 上顯示搜尋的結(jié)果。圖14B(f)圖示在顯示單元251上顯示在多條已收集的信息中搜尋具 有屬性信息"Edan街"的多條信息的結(jié)果的示例。
[0301] 另一方面,上面描述頭的移動(dòng)被感測并且被使用以便于從多條收集的信息之中選 擇特定的信息或者特定的屬性信息的情況。然而,除頭的移動(dòng)之外,當(dāng)然,瞳孔的移動(dòng)或者 搖晃預(yù)定的身體部分,例如,手邊等的姿勢是可能的。
[0302] 另外,在從多條收集的信息之中選擇特定的信息或者特定的屬性信息的情況下, 當(dāng)然,可以使用被感測為施加到眼鏡式終端200的主體的特定部分的觸摸輸入。例如,當(dāng)在 與用戶的左眼相對應(yīng)的鏡片的鄰近處施加用戶的觸摸時(shí),基于施加的觸摸輸入的次數(shù),控 制器180確定被定位到找到的信息的左邊的信息或者屬性信息或者當(dāng)前臨時(shí)選擇的屬性 信息被用戶臨時(shí)地選擇。同樣地,當(dāng)將用戶的觸摸輸入施加在與用戶的右眼相對應(yīng)的鏡片 的鄰近處時(shí),控制器180確定被定位到找到的信息的右邊的信息或者屬性信息或者當(dāng)前臨 時(shí)地被選擇的屬性信息被用戶臨時(shí)地選擇。另外,當(dāng)將用戶的觸摸輸入感測為被施加在眼 鏡式終端200的主體的中心的鄰近處時(shí),可以確定找到的信息或者當(dāng)前被臨時(shí)選擇的屬性 信息被用戶選擇,用于特寫視圖或者用于根據(jù)相應(yīng)的屬性信息的搜尋。
[0303] 如上所描述,根據(jù)本發(fā)明的眼鏡式終端200自動(dòng)地或者基于用戶的選擇收集與用 戶的注視的方向相關(guān)的信息,并且在用戶的請求下給用戶提供收集的信息。在這一點(diǎn)上,多 條收集的信息包括諸如靜態(tài)圖像或者運(yùn)動(dòng)圖像的圖片信息。進(jìn)一步收集通過分析多條收集 的信息獲得的諸如文本或者圖像識(shí)別的結(jié)果的信息。另外,當(dāng)然,無論何時(shí)如有必要可以收 集聲音信息等。
[0304] 然后,使用麥克風(fēng)122等,能夠給用戶提供多條收集的信息之中的至少一條信息。 然后,如在圖10A至圖13B(f)中所圖示,在這一點(diǎn)上提供的多條信息例如是以包括縮略圖 圖像的列表形式或者以在地圖圖像上顯示的文本圖像的形式。然后,以這樣的方式,當(dāng)用戶 從找到的多條信息之中選擇任意一條找到的信息時(shí),控制器180提供更多詳細(xì)的相應(yīng)的信 息。例如,在收集的信息是運(yùn)動(dòng)圖像信息的情況下,控制器180可以使用與收集的信息相對 應(yīng)的應(yīng)用在顯示單元251上以運(yùn)動(dòng)圖像的形式顯示收集的信息。此外,在收集的信息是靜 態(tài)圖像信息的情況下,控制器180在顯示單元251上以特寫的狀態(tài)顯示靜態(tài)圖像信息。
[0305] 以這樣的方式,在從找到的多條信息之中選擇任何一條找到的信息的情況下,控 制器180以適當(dāng)?shù)男问浇o用戶提供相應(yīng)的信息。以這樣的方式,控制器180根據(jù)收集的信 息的類型確定適合于提供信息的形式,并且提供更合適的信息。例如,在使用關(guān)于用戶的位 置和地圖信息而不是相機(jī)221的信息收集的信息的情況下,控制器180可以提供通過搜索 收集的多條信息之中的文本信息而不是圖像或者運(yùn)動(dòng)圖像。
[0306] 另外,控制器180可以基于用戶的選擇提供多條各種附加信息。例如,控制器180 可以感測用戶迆位置,并且因此可以提供用戶的當(dāng)前位置和與找到的信息相關(guān)的信息(例 如,到找到的信息的距離、到找到的信息花費(fèi)的時(shí)間等)??商孢x地,控制器180可以提供與 找到的信息相關(guān)的多條各種屬性信息(收集時(shí)間和收集地點(diǎn)、或者諸如作為文本識(shí)別的結(jié) 果的多條分析信息)。
[0307] 另一方面,控制器180在收集信息中進(jìn)一步考慮用戶的運(yùn)動(dòng)狀態(tài)的變化。例如,基 于用戶的運(yùn)動(dòng)狀態(tài)的變化,控制器180確定用戶是否位于在車輛內(nèi)或者外。然后,基于此, 控制器180將當(dāng)前收集的信息分類為停車信息。在用戶的情況下,控制器180基于提供停 車信息的方法提供多條收集的信息。
[0308] 圖14A(a)和圖14A(b)、圖14B(a)和圖14B(b)圖示收集停車信息并且在根據(jù)本發(fā) 明的眼鏡式終端200中提供停車信息的示例。
[0309] 如上所描述,根據(jù)本發(fā)明的眼鏡式終端200基于用戶的選擇確定用戶的運(yùn)動(dòng)狀 態(tài),并且將當(dāng)前收集的信息分類為停車信息并且存儲(chǔ)分類的結(jié)果。在這樣的情況下,基于用 戶選擇,諸如當(dāng)將多個(gè)輕擊施加到眼鏡式終端200的主體時(shí)、當(dāng)將觸摸輸入施加到預(yù)定的 特定的部分時(shí)、或者當(dāng)做預(yù)定姿勢時(shí),通過操作相機(jī)221,控制器180收集與用戶注視朝著 的某物相關(guān)的信息。
[0310] 圖14A(a)和圖14A(b)圖示在這樣的情況下收集信息的示例。例如,在用戶將車輛 停在室內(nèi)停車場并且從車輛下來的情況下,控制器180,如在圖14A(a)中所圖示,基于用戶 的選擇、用戶的注視已經(jīng)固定的時(shí)間段等,收集與用戶的注視的方向相關(guān)的至少一條信息。 然后,控制器180進(jìn)一步執(zhí)行收集的信息的分析(例如,文本識(shí)別或者圖像識(shí)別)并且將分 析結(jié)果存儲(chǔ)為與收集的信息相關(guān)的屬性信息。
[0311] 因此,如在圖14A(a)中所圖示,在包括指示停車場的文本"停車" 1402或者圖像 "?"1402的情況下,通過識(shí)別這樣的文本或者這樣的圖像獲得信息,例如,將諸如"?"威 者"停車"的信息存儲(chǔ)為屬性信息。
[0312] 可替選地,控制器180不僅進(jìn)一步考慮用戶的運(yùn)動(dòng)狀態(tài),而且考慮在將收集的信 息分類為停車信息并且存儲(chǔ)分類的結(jié)果時(shí)的周圍環(huán)境。例如,在用戶的位置被移動(dòng)的速度 突然變慢或者預(yù)定車輛到站并且用戶移動(dòng)給定的距離或者從預(yù)定車輛離開的情況下,控制 器180確定用戶從預(yù)定車輛下來。在這樣的情況下,基于用戶的選擇(例如,諸如當(dāng)將多個(gè) 輕擊施加到主體時(shí)),控制器180可以操作相機(jī)221并且可以基于通過相機(jī)捕獲的圖像收集 通過相機(jī)221收集的信息作為停車信息。
[0313] 例如,如在圖14A(a)中所圖示,在通過相機(jī)221捕獲指示用戶的當(dāng)前位置在停車 場的文本"停車"1402或者圖像" A "的情況下,控制器180識(shí)別用戶當(dāng)前在停車場內(nèi)。然 后,在用戶從車輛下來并且當(dāng)前在停車場內(nèi)的情況下,控制器180可以基于用戶的選擇、用 戶的注視已經(jīng)固定的時(shí)間段等收集與用戶的注視方向相關(guān)的圖片信息作為停車信息。
[0314] 另一方面,在用戶發(fā)出停車信息的情況下,控制器180在顯示單元251上顯示被分 類為停車信息的信息。另外,在通過相機(jī)221捕獲的圖像之中存在與已收集的停車信息相 匹配的圖像的情況下,控制器180以將被匹配的圖像與其他多條停車信息區(qū)別的方式顯示 被匹配的圖像。
[0315] 因此,如在圖14A(b)中所圖示,在作為分析通過相機(jī)221捕獲的圖像的結(jié)果,文本 "A38B"1420被識(shí)別的情況下,控制器180以將信息1422與其他多條信息區(qū)分的方式,顯示 在已經(jīng)被收集為停車信息的多條信息之中的與文本"A38B"相匹配的信息1422。在這樣的 情況下,用戶能夠識(shí)別他/她注視朝著的某物對應(yīng)于在多條已經(jīng)收集的停車信息之中的任 何一條停車信息,并且因此能夠使用收集的信息,以更容易的方式,找到停放他的/她的車 輛的地點(diǎn)。
[0316] 另一方面,當(dāng)然,收集的信息可以進(jìn)一步包括關(guān)于沿著其用戶移動(dòng)的移動(dòng)路徑的 信息。圖14B(a)和圖14B(b)圖示在根據(jù)本發(fā)明的眼鏡式終端200中提供停車信息的示例。
[0317] 例如,如在圖14B(a)中所圖示,在作為分析通過相機(jī)221捕獲的圖像的結(jié)果,文本 "A38B"1442被識(shí)別的情況下,控制器180以將信息1422與其他多條信息區(qū)分的方式,顯示 在已收集為停車信息的多條信息之中的與文本"A38B"相匹配的信息1440。另外,可以將被 匹配的關(guān)于在收集信息1440時(shí)用戶沿著其移動(dòng)的路徑的信息進(jìn)一步顯示為使用增強(qiáng)現(xiàn)實(shí) 的圖形對象1446。在這一點(diǎn)上,如在圖14B (a)和圖14B(b)中所圖示,控制器180可以以與 用戶在過去沿著其移動(dòng)的路徑相反的方向上顯示圖形對象1446。這是因?yàn)橛脩粞刂窂酵?回移動(dòng)以便于找到停放他的/她的車輛的地點(diǎn)。
[0318] 如在圖14B(b)中所圖示,控制器180檢查在隨著用戶移動(dòng)捕獲的新圖像中是否存 在可識(shí)別的信息,并且以將已收集的信息與其他多條信息區(qū)分的方式顯示對應(yīng)于被檢測的 信息的已經(jīng)收集的信息。因此,如在圖14B(b)中所圖示,當(dāng)在通過相機(jī)捕獲的圖像中識(shí)別 文本"A39B" 1444時(shí),顯示與被識(shí)別的文本"A39B"相對應(yīng)的已收集的信息1448。因此,用 戶能夠直觀地識(shí)別他/她沿著在他/她在停放他的/她的車輛之后沿著其移動(dòng)的路徑往回 移動(dòng)。
[0319] 在這一點(diǎn)上,使用關(guān)于其中用戶當(dāng)前停留的建筑物的地圖信息,基于停放預(yù)定車 輛的位置并且基于用戶的當(dāng)前位置,生成關(guān)于用戶沿著其移動(dòng)的路徑的信息。在這一點(diǎn)上, 關(guān)于其中用戶當(dāng)前停留的建筑物的地圖信息是被存儲(chǔ)在存儲(chǔ)器170的或者從預(yù)定網(wǎng)站或 者外部服務(wù)器下載的一條信息。
[0320] 另一方面,當(dāng)然,可以通過各種方法收集關(guān)于用戶移動(dòng)所沿著的路徑的信息。例 如,當(dāng)收集停車信息時(shí),控制器180使用慣性傳感器、重力傳感器、羅盤傳感器等在收集停 車信息的時(shí)收集與用戶的移動(dòng)方向和用戶的移動(dòng)速度相關(guān)的信息。然后,基于收集的信息 生成用于顯示用戶移動(dòng)所沿著的路徑的圖形對象1446并且將其顯示在顯示單元251上。
[0321] 因此,不管用戶的注視的當(dāng)前位置,圖形對象1446被顯示在顯示單元251上。此 外,圖形對象1446被顯示在顯示單元251上,根據(jù)用戶的運(yùn)動(dòng)狀態(tài)而變化。因此,用戶能夠 使用圖形對象1446檢查在停放他的/她的車輛之后他/她立即移動(dòng)所沿著的路徑,并且因 此更加容易地找到停放他的/她的車輛的地點(diǎn)。
[0322] 另一方面,上面描述了本發(fā)明的特定的實(shí)施例,但是在沒有離開本發(fā)明的范圍的 情況下對特定的實(shí)施例的各種修改是可能的。具體地,根據(jù)本發(fā)明的實(shí)施例,描述了僅在用 戶的注視已經(jīng)固定了預(yù)定時(shí)間段或者更長的時(shí)間的情況,但是,當(dāng)然,用戶的注視朝著特定 的方向的預(yù)定次數(shù)的情況可以是用于收集信息的條件。
[0323] 此外,上面描述了通過被施加到主體的多次輕擊或者通過姿勢接通或者切斷麥克 風(fēng)或者相機(jī)的情況,但是當(dāng)然,可以始終接通麥克風(fēng)或者相機(jī)。
[0324] 如下描述了根據(jù)本發(fā)明的眼鏡式終端的作用和控制給眼鏡式終端的方法。
[0325] 根據(jù)本發(fā)明的實(shí)施例中的至少一個(gè),基于用戶的注視已經(jīng)固定的時(shí)間段收集與用 戶朝著其注視的某物相關(guān)的信息。這提供能夠識(shí)別用戶感興趣的地點(diǎn)并且能夠在沒有經(jīng)歷 單獨(dú)的收集信息的過程的情況下將關(guān)于被識(shí)別的地點(diǎn)的信息提供給用戶的優(yōu)點(diǎn)。
[0326] 另外,根據(jù)本發(fā)明的實(shí)施例中的至少一個(gè),進(jìn)一步提供被識(shí)別的地點(diǎn)和與用戶的 當(dāng)前位置相關(guān)的信息,以及與被識(shí)別的地點(diǎn)相關(guān)的信息。這提供用戶能夠以更加容易的方 式找到期待的地點(diǎn)的優(yōu)點(diǎn)。
[0327] 通過執(zhí)行本文呈現(xiàn)的各種方法的處理器使用在其上存儲(chǔ)有用于執(zhí)行的指令的機(jī) 器可讀介質(zhì)可以實(shí)現(xiàn)各種實(shí)施例??赡艿臋C(jī)器可讀介質(zhì)的示例包括在此陳述的HDD(硬盤 驅(qū)動(dòng))、SSD (固態(tài)盤)、SDD (硅盤驅(qū)動(dòng))、ROM、RAM、⑶-ROM、磁帶、軟盤、以及光數(shù)據(jù)存儲(chǔ)裝 置、其他類型的存儲(chǔ)介質(zhì)、和其組合。如有必要,以載波(例如,互聯(lián)網(wǎng)上的傳輸)的形式可 以實(shí)現(xiàn)機(jī)器可讀介質(zhì)。處理器可以包括移動(dòng)終端的控制器180。
[0328] 前述實(shí)施例和優(yōu)點(diǎn)僅是示例性的并且不被視為對本公開的限制。本教導(dǎo)能夠被容 易地應(yīng)用于其他類型的裝置。此描述旨在是說明性的,并且沒有限制權(quán)利要求的范圍。許 多替代、變型以及變體對于本領(lǐng)域的技術(shù)人員來說將會(huì)是顯然的??梢砸愿鞣N方式組合在 此描述的示例性實(shí)施例的特征、結(jié)構(gòu)、方法以及其他特性以獲得其他和/或替代的示例性 實(shí)施例。
[0329] 由于在沒有脫離本特征的特性的情況下可以以多種形式實(shí)現(xiàn)本特征,所以也應(yīng)理 解的是,上述實(shí)施例不受前面描述的任何細(xì)節(jié)的限制,除非另有規(guī)定,否則應(yīng)在所附的權(quán)利 要求中限定的范圍內(nèi)被廣泛地解釋,并且因此旨在由所附的權(quán)利要求涵蓋落入權(quán)利要求的 范圍和界限或者該范圍和界限的等同物內(nèi)的所有變化和變型。
【主權(quán)項(xiàng)】
1. 一種用戶可佩戴的眼鏡式終端,包括: 顯示器; 傳感器,所述傳感器被配置成生成與所述終端的定位有關(guān)的數(shù)據(jù);以及 控制器,所述控制器被配置成: 獲得與在佩戴所述終端的用戶的注視方向中存在的對象有關(guān)的信息,根據(jù)來自于所述 傳感器的數(shù)據(jù)來確定所述注視方向;以及 使所述顯示器顯示所述信息。2. 根據(jù)權(quán)利要求1所述的終端,其中,所述控制器進(jìn)一步被配置成使屬性信息存儲(chǔ)在 存儲(chǔ)器中,所述屬性信息包括獲得與所述對象有關(guān)的信息的時(shí)間和位置。3. 根據(jù)權(quán)利要求2所述的終端,其中: 所述控制器進(jìn)一步被配置成識(shí)別在與所述對象有關(guān)的信息中存在的文本信息;以及 所述屬性信息進(jìn)一步包括識(shí)別的文本信息。4. 根據(jù)權(quán)利要求2所述的終端,其中,所述屬性信息進(jìn)一步包括多個(gè)信息,以及響應(yīng)于 從所述多個(gè)信息中選擇特定屬性信息,所述控制器進(jìn)一步被配置成: 基于選擇的特定屬性信息,從與所述對象有關(guān)的信息中搜尋相應(yīng)的信息;或者 基于所述選擇的特定屬性信息來排列所述顯示器上顯示的信息的順序。5. 根據(jù)權(quán)利要求1所述的終端,進(jìn)一步包括相機(jī),所述相機(jī)被配置成捕獲所述對象。6. 根據(jù)權(quán)利要求1所述的終端,進(jìn)一步包括位置信息單元,所述位置信息單元被配置 成識(shí)別所述終端的當(dāng)前位置, 其中: 所述控制器進(jìn)一步被配置成基于識(shí)別的當(dāng)前位置來獲得位置信息;以及 獲得的位置信息與所述對象存在的地點(diǎn)相關(guān)聯(lián)。7. 根據(jù)權(quán)利要求1所述的終端,其中,所述控制器進(jìn)一步被配置成: 獲得與所述終端被移動(dòng)所沿著的路徑有關(guān)的信息;以及 響應(yīng)于用戶輸入,使所述顯示器在所述顯示器上顯示的路徑的附近顯示與所述對象有 關(guān)的信息。8. 根據(jù)權(quán)利要求1所述的終端,其中: 所述傳感器進(jìn)一步被配置成至少感測被施加到所述終端的一部分的多個(gè)輕擊、用戶輸 入的預(yù)定姿勢、或者在所述用戶的面部肌肉中的肌電圖變化;以及 所述控制器進(jìn)一步被配置成基于通過所述傳感器的感測來識(shí)別用戶輸入。9. 根據(jù)權(quán)利要求8所述的終端,其中,所述控制器進(jìn)一步被配置成響應(yīng)于識(shí)別的用戶 輸入來發(fā)起或者終止獲得與所述對象有關(guān)的信息。10. 根據(jù)權(quán)利要求9所述的終端,其中,所述控制器進(jìn)一步被配置成:當(dāng)獲得與所述對 象有關(guān)的信息被發(fā)起或者終止時(shí),使所述顯示器顯示至少一個(gè)指示符。11. 根據(jù)權(quán)利要求1所述的終端,進(jìn)一步包括: 位置信息單元,所述位置信息單元被配置成獲得包括所述終端的當(dāng)前位置的位置信 息, 其中,所述控制器進(jìn)一步被配置成:響應(yīng)于從獲得的位置信息中選擇特定位置,使所述 顯示器顯示獲得的位置信息之中的與所述當(dāng)前位置有關(guān)的信息和與特定位置有關(guān)的附加 信息。12. 根據(jù)權(quán)利要求1所述的終端,其中,所述控制器進(jìn)一步被配置成: 識(shí)別與所述對象有關(guān)的獲得的信息作為包括停放車輛的位置的停車信息;以及 響應(yīng)于用戶輸入,使所述顯示器顯示所述停車信息中包括的多個(gè)部分之中的停車信息 的至少一部分。13. 根據(jù)權(quán)利要求12所述的終端,其中,所述控制器進(jìn)一步被配置成: 至少基于所述終端的移動(dòng)速度的變化或者在所述終端和所述車輛的位置之間的距離 的變化來確定是否用戶在所述車輛外;以及 基于是否所述用戶在所述車輛外來識(shí)別所述停車信息。14. 根據(jù)權(quán)利要求12所述的終端,進(jìn)一步包括: 相機(jī),所述相機(jī)被配置成捕獲停放所述車輛的位置的視覺信息, 其中,所述控制器進(jìn)一步被配置成: 使捕獲的視覺信息與多個(gè)預(yù)先存儲(chǔ)的停車信息中的至少一個(gè)相匹配;以及 使所述顯示器與所述多個(gè)預(yù)先存儲(chǔ)的停車信息之中的其他預(yù)先存儲(chǔ)的停車信息相區(qū) 分地顯示匹配的至少一個(gè)預(yù)先存儲(chǔ)的停車信息。15. 根據(jù)權(quán)利要求14所述的終端,其中,所述控制器進(jìn)一步被配置成至少響應(yīng)于被施 加到所述終端的一部分的多個(gè)輕擊、由用戶輸入的預(yù)定姿勢、或者在所述用戶的面部肌肉 中的肌電圖變化,發(fā)起或者終止所述相機(jī)的操作。16. 根據(jù)權(quán)利要求12所述的終端,其中,所述控制器進(jìn)一步被配置成: 確定與所述終端移動(dòng)所沿著的路徑有關(guān)的信息;以及 響應(yīng)于用戶輸入,除了所述停車信息之外,使所述顯示器顯示與所述路徑有關(guān)的信息。17. 根據(jù)權(quán)利要求16所述的終端,其中,所述控制器進(jìn)一步被配置成使所述顯示器將 所述路徑顯示為以增強(qiáng)現(xiàn)實(shí)呈現(xiàn)的圖形對象。18. -種控制眼鏡式終端的方法,所述眼鏡式終端包括顯示器和傳感器,所述傳感器被 配置成生成與所述終端的定位有關(guān)的數(shù)據(jù),所述方法包括: 獲得與在佩戴所述終端的用戶的注視方向中存在的對象有關(guān)的信息,根據(jù)來自于所述 傳感器的數(shù)據(jù)來確定所述注視方向;以及 顯不獲得的?目息。19. 根據(jù)權(quán)利要求18所述的方法,其中: 所述終端進(jìn)一步包括相機(jī); 所述方法進(jìn)一步包括:響應(yīng)于至少包括被施加到所述終端的一部分的多個(gè)輕擊或者由 用戶產(chǎn)生的預(yù)定姿勢的用戶輸入來操作所述相機(jī);以及 獲得所述信息包括將經(jīng)由所述相機(jī)捕獲的圖像存儲(chǔ)為至少靜態(tài)圖像或者運(yùn)動(dòng)圖像。20. 根據(jù)權(quán)利要求18所述的方法,其中,獲得所述信息包括: 相對于獲得的信息來執(zhí)行文本識(shí)別; 基于所述文本識(shí)別的結(jié)果來生成要與預(yù)先存儲(chǔ)的信息相比較的屬性信息; 基于所述產(chǎn)生的屬性信息來分類所述預(yù)先存儲(chǔ)的信息;以及 存儲(chǔ)分類的信息。
【文檔編號(hào)】G02B27/01GK105892051SQ201510165820
【公開日】2016年8月24日
【申請日】2015年4月9日
【發(fā)明人】張?jiān)? 金泰星, 李晶允
【申請人】Lg電子株式會(huì)社