析 技術(shù)中的任何一種來識(shí)別和/或表征感興趣對(duì)象210。在一些實(shí)施方案中,由信息助理100 獲取的數(shù)據(jù)被傳輸?shù)竭h(yuǎn)程服務(wù)器并且在遠(yuǎn)程分析。分析的結(jié)果隨后被傳輸回到信息助理 100并且提供給用戶。
[0041] 在各種實(shí)施方案中,一旦將感興趣對(duì)象210被識(shí)別為特定對(duì)象(例如,金門大橋) 或一般對(duì)象(例如,橡樹或法式炸薯?xiàng)l),信息助理100將查找與所識(shí)別對(duì)象相關(guān)聯(lián)的信息。 信息助理100可以從本地來源(例如,本地知識(shí)庫、Wikipedia?的本地副本等)和/或從 遠(yuǎn)程服務(wù)器(例如,Wikipedia?、Google?、Wolfram Alpha?等)獲取這類信息。另 外,信息助理100可以基于所識(shí)別對(duì)象的類型來訪問特定數(shù)據(jù)庫。例如并且無限制地,如果 感興趣對(duì)象210為葉子或樹,那么信息助理100可以訪問已知葉子、植物和樹的數(shù)據(jù)庫(例 如,Leaf Snap?)。
[0042] 在一些實(shí)施方案中,信息助理可以獲悉感興趣對(duì)象210位于用戶的環(huán)境中的哪 里,并且將來記住那些對(duì)象的位置,以便允許用于原始用戶或另一用戶的更有效辨別。例如 并且無限制地,如果信息助理100是針對(duì)室內(nèi)情境(setting)加以實(shí)現(xiàn),那么信息助理100 可以獲悉用戶的家具位于哪里,并且在初始訓(xùn)練階段之后,可以基于所存儲(chǔ)的位置來辨別 家具。
[0043] 如果信息助理100沒有辨別出感興趣對(duì)象210,那么用戶可以訓(xùn)練信息助理100來 辨別感興趣對(duì)象210。這個(gè)信息則可以在本地存儲(chǔ)或遠(yuǎn)程存儲(chǔ)(例如,存儲(chǔ)在云存儲(chǔ)裝置 中),以便使得信息能夠在以后由用戶和/或由信息助理1〇〇的其他用戶訪問。因此,信息 助理100可以從其他用戶通過遠(yuǎn)程服務(wù)器與信息助理100的交互來獲悉,從而使得信息助 理100能夠利用社群的"集體智慧"。
[0044] 圖3示出了根據(jù)各種實(shí)施方案的可以將圖1的信息助理100的不同組件附接到用 戶的位置。如圖所示,信息助理1〇〇的一個(gè)或多個(gè)組件可以附接到用戶的手部/手指310、 手腕312、前臂314,和/或上臂/肩部316。例如并且無限制地,可以將信息助理100的設(shè) 備主體104附接到用戶的前臂314 (如圖2A所示),使得用戶能夠使信息助理100指向感興 趣對(duì)象210的方向。然而,在相同實(shí)施方案或其它實(shí)施方案中,可以將攝像機(jī)120、麥克風(fēng) 114和/或I/O設(shè)備(例如,RF傳感器、光譜儀、傳感器陣列、層析成像傳感器等)中的任何 設(shè)備耦接到用戶的手部/手指310、手腕312,和/或上臂/肩部316。在一些實(shí)施方案中, 一個(gè)或多個(gè)I/O設(shè)備耦接到用戶的指甲,并且任選地使用身體的電場(chǎng)作為電源和/或通信 信道。在其它實(shí)施方案中,I/O設(shè)備可包括在放置于用戶的手指上的套環(huán)中,如用于執(zhí)行接 近傳感。
[0045] 在一些實(shí)施方案中,可以將攝像機(jī)120、麥克風(fēng)114和/或I/O設(shè)備耦接到用戶的 手部/手指310,以便使得用戶能夠以靠近感興趣對(duì)象210和/或與感興趣對(duì)象210接觸 的方式收集數(shù)據(jù)。例如并且無限制地,用戶可以使用耦接到用戶的手指的I/O設(shè)備(例如, 傳感器陣列、光譜儀、層析成像傳感器)來從用戶想要識(shí)別或表征的食物項(xiàng)目收集數(shù)據(jù)。用 戶隨后可以使用如"這是什么類型的食物? "或"這是素食嗎? "的語音提示來使(例如,觸 發(fā))信息助理100分析正在由用戶靶向的感興趣對(duì)象210。響應(yīng)于方向性姿勢(shì)和觸發(fā)事件, 信息助理100從I/O設(shè)備、攝像機(jī)等獲取數(shù)據(jù),并且使數(shù)據(jù)在本地處理和/或遠(yuǎn)端處理,以 便確定食物的身份和/或特性。一旦處理完成,信息助理100可隨即通過指示例如但不限 于食物的類型、食物中包括的成分和/或食物是否為素食來響應(yīng)。在一些實(shí)施方案中,通過 參考從其他用戶接收的數(shù)據(jù)來執(zhí)行這種類型的詳細(xì)分析,所述其他用戶已從相同或類似類 型的感興趣對(duì)象獲取了數(shù)據(jù)。例如并且無限制地,當(dāng)足夠的用戶從某一類型的食物獲取數(shù) 據(jù)時(shí),與那種類型的食物相關(guān)聯(lián)的數(shù)據(jù)可以被存儲(chǔ)在合作數(shù)據(jù)庫中并且由信息助理100參 考,以便確定用戶已靶向包括與存檔食物項(xiàng)目中包括的那些成分相同或類似的成分的感興 趣對(duì)象210。
[0046] 在相同實(shí)施方案或其它實(shí)施方案中,可以將以上所述的信息助理100的組件中的 任何組件附接到用戶的手腕312和/或上臂/肩部316。例如并且無限制地,可以將攝像 機(jī)120附接到用戶的上臂/肩部316來跟蹤用戶的手臂和正在由用戶靶向(例如,通過手 指指向)的感興趣對(duì)象210的移動(dòng)。另外,可以將一個(gè)I/O設(shè)備附接到用戶的手腕312,可 以將另一I/O設(shè)備附接到用戶的上臂/肩部316,并且I/O設(shè)備相對(duì)于彼此的位置可以用來 檢測(cè)方向性姿勢(shì)和/或觸發(fā)事件,如以下結(jié)合圖4A和圖4B所述。
[0047] 圖4A和圖4B示出了根據(jù)各種實(shí)施方案的基于附接到用戶手臂的I/O設(shè)備來檢測(cè) 方向性姿勢(shì)和/或觸發(fā)事件的技術(shù)。如圖所示,可以將兩個(gè)或更多個(gè)I/O設(shè)備附接到用戶 (例如,用戶的手腕312和用戶的上臂/肩部316)。I/O設(shè)備的相對(duì)位置隨后可以用來檢測(cè) 由用戶做出的方向性姿勢(shì)和/或觸發(fā)事件。例如并且無限制地,可以確定位于用戶的手腕 312上的I/O設(shè)備410相對(duì)于位于用戶的上臂/肩部316上的I/O設(shè)備415的位置,以便確 定用戶指向的方向420。另外,I/O設(shè)備410、415中的一個(gè)或多個(gè)的絕對(duì)位置(例如,地理 位置)可以用來確定由用戶做出的方向性姿勢(shì)。在各種實(shí)施方案中,I/O設(shè)備可包括紅外 傳感器、RF傳感器、可見光傳感器和/或其它類型的傳感器,所述傳感器使用技術(shù)(例如, 三角測(cè)量、三邊測(cè)量等)來確定用戶的肢體相對(duì)于用戶身體的其余部分在二維或三維中的 相對(duì)位置。另外,在一些實(shí)施方案中,可以將I/O設(shè)備安裝在戒指、智能手表、腕帶、指甲等 上。此外,I/O設(shè)備可以使用加速度計(jì)、陀螺儀、電極和其它類型的傳感器,所述傳感器測(cè)量 用戶肢體的加速度和速度和/或用戶肌肉的活動(dòng),以便確定肢體、手部和/或手指的位置 (例如,通過ThalmicLabs?的Myo?來確定)。一旦確定用戶的手部/手指310、手腕312、 前臂314,和/或上臂/肩部316相對(duì)于用戶身體的位置,信息助理就可以生成二維矢量或 三維矢量(例如,方向420),所述二維矢量或三維矢量可以作為方向性姿勢(shì)被傳輸?shù)叫畔?助理100,或另外由信息助理100處理為方向性姿勢(shì)。
[0048] 圖5A和圖5B示出了根據(jù)各種實(shí)施方案的利用圖1的信息助理100來檢測(cè)方向性 姿勢(shì)和/或觸發(fā)事件的技術(shù),所述信息助理實(shí)現(xiàn)于汽車環(huán)境中。如以上所述,信息助理100 的一個(gè)或多個(gè)組件可以與信息助理100的設(shè)備主體104分開。例如并且無限制地,如圖所 示,可以在用戶后方將攝像機(jī)120-1 (或其它類型的I/O設(shè)備)設(shè)置在汽車的車頂上和/或 汽車車廂內(nèi),以便捕獲由用戶做出的方向性姿勢(shì)、觸發(fā)事件,和/或感興趣對(duì)象的圖像。另 外,在一些實(shí)施方案中,將面向用戶的攝像機(jī)120-2 (或其它類型的I/O設(shè)備)耦接到信息 助理100,以便檢測(cè)由用戶做出的方向性姿勢(shì)(例如,手臂指向、眼睛注視方向等)和/或觸 發(fā)事件。攝像機(jī)120-1和攝像機(jī)120-2中的一個(gè)或兩個(gè)可包括以上所述的任何類型的傳感 器,如圖像傳感器、深度傳感器、紅外傳感器等。此外,攝像機(jī)120-1和攝像機(jī)120-2中的一 個(gè)或兩個(gè)可以是能夠向左和向右搖攝并且向上和向下傾斜的云臺(tái)攝像機(jī)。
[0049] 關(guān)于感興趣對(duì)象210(例如,圖5A和圖5B中的樹)的信息可以經(jīng)由位于汽車車廂 中的揚(yáng)聲器112來提供給用戶。此外,盡管在圖5A中未示出,但是一個(gè)或多個(gè)麥克風(fēng)114 可包括在汽車環(huán)境中,以便獲取由用戶說出的語音提示和/或從環(huán)境獲取音頻樣本,從而 輔助分析感興趣對(duì)象210。
[0050] 圖6A至圖6D示出了根據(jù)各種實(shí)施方案的用于確定正在由圖1的信息助理100的 用戶靶向的感興趣對(duì)象210的技術(shù),所述信息助理實(shí)現(xiàn)于汽車環(huán)境中。如圖所示,信息助理 100可包括攝像機(jī)120或其它類型的I/O設(shè)備,所述攝像機(jī)或其它類型的I/O設(shè)備面向用戶 的環(huán)境并且捕獲潛在的感興趣對(duì)象210的圖像。在一些實(shí)施方案中,攝像機(jī)120是廣角攝 像機(jī),所述廣角攝像機(jī)使用至少90°的視角605,并且在一些實(shí)施方案中使用至少120°或 最多360°全景的視角605來捕獲圖像。隨后使用由用戶做出的方向性姿勢(shì)的方向420來 隔離包括在廣角圖像中的感興趣對(duì)象210。
[0051]在各種實(shí)施方案中,方向420用來確定視角605的分角610 (例如,圖6C所示的圍 繞樹的矩形區(qū)域)。隨后,可以處理一個(gè)或多個(gè)廣角圖像以隔離位于分角610內(nèi)的感興趣對(duì) 象210 (例如,產(chǎn)生圖6D所示的圖像)。隨后,分析處理過的圖像(例如,圖6D)(其包括所 隔離的感興趣對(duì)象210)來識(shí)別和/或表征感興趣對(duì)象210。在一些實(shí)施方案中,使用以上 結(jié)合圖1至圖5A所述的技術(shù)中的一種或多種來確定方向性姿勢(shì)的方向420。另外,可以使 用以上結(jié)合圖1至圖5A所述的數(shù)據(jù)分析技術(shù)中的一種或多種來分析感興趣對(duì)象210的處 理過的圖像。
[0052] 圖7示出了根據(jù)各種實(shí)施方案的基于全球定位系統(tǒng)(GPS)設(shè)備來確定正在由用戶 靶向的感興趣對(duì)象210的技術(shù),所述全球定位系統(tǒng)(GPS)設(shè)備耦接到圖1的信息助理100。 如以上所述,信息助理100可包括GPS接收器,所述GPS接收器被配置來檢測(cè)用戶的位置 705。隨后,一旦已經(jīng)確定用戶的位置705和感興趣對(duì)象210相對(duì)于用戶的方向420,就可確 定感興趣對(duì)象的位置710。
[0053] 在一些實(shí)施方案中,一旦確定用戶的位置705,就