基于由移動(dòng)設(shè)備記錄的圖像的內(nèi)容的數(shù)據(jù)訪(fǎng)問(wèn)的制作方法
【專(zhuān)利摘要】本發(fā)明提供了一種基于由移動(dòng)設(shè)備記錄的圖像的內(nèi)容的數(shù)據(jù)訪(fǎng)問(wèn)，其實(shí)施例涉及使用圖像數(shù)據(jù)和情境性數(shù)據(jù)來(lái)基于一個(gè)或多個(gè)先前獲得的圖像確定關(guān)于場(chǎng)景的信息。諸如圖像捕捉的位置之類(lèi)的情境性數(shù)據(jù)可用于確定與情境性數(shù)據(jù)相關(guān)的先前獲得的圖像，和其他位置相關(guān)信息，例如告示牌位置。即使在低分辨率設(shè)備(例如蜂窩電話(huà))的情況下，也可以在先前獲得的圖像和新捕捉的圖像之間比較圖像屬性，例如直方圖或光學(xué)辨識(shí)的字符。在預(yù)定的閾值內(nèi)匹配的屬性指示出匹配的圖像。關(guān)于匹配的先前獲得的圖像的內(nèi)容的信息可被提供回給捕捉了新圖像的用戶(hù)。用戶(hù)簡(jiǎn)檔數(shù)據(jù)可細(xì)化內(nèi)容信息。內(nèi)容信息還可用作搜索字詞，以用于額外的搜索或其他處理。
【專(zhuān)利說(shuō)明】基于由移動(dòng)設(shè)備記錄的圖像的內(nèi)容的數(shù)據(jù)訪(fǎng)問(wèn)
[0001] 分案申請(qǐng)說(shuō)明
[0002] 本申請(qǐng)是申請(qǐng)日為2009年04月20日、題為"基于由移動(dòng)設(shè)備記錄的圖像的內(nèi)容 的數(shù)據(jù)訪(fǎng)問(wèn)"的中國(guó)發(fā)明專(zhuān)利申請(qǐng)No. 200980116509.X(PCT國(guó)際申請(qǐng)PCT/US2009/041146) 的分案申請(qǐng)。
[0003] 相奪申請(qǐng)的奪叉引用
[0004]本申請(qǐng)要求2008年5月15日提交的美國(guó)專(zhuān)利申請(qǐng)No. 12/121，259的優(yōu)先權(quán)，特 此通過(guò)引用將該專(zhuān)利申請(qǐng)全部并入。

【技術(shù)領(lǐng)域】
[0005] 本發(fā)明涉及基于成像訪(fǎng)問(wèn)信息，更具體而言涉及利用具有相似的情境關(guān)連元素 (contextcorrelationelement)(例如鄰近的位置）的多個(gè)圖像來(lái)確定與圖像的內(nèi)容相關(guān) 的信息。

【背景技術(shù)】
[0006] 將信息輸入到移動(dòng)電話(huà)或其他移動(dòng)設(shè)備中是困難的。輸入信息通常涉及在小按鍵 上鍵入以將一小組單詞輸入到搜索窗口中。在鍵入統(tǒng)一資源定位符（URL)和其他特殊數(shù)據(jù) 所需的特殊字符時(shí)，這就更加困難了。取代鍵入，一些移動(dòng)設(shè)備使用戶(hù)可以輸入語(yǔ)音命令。 然而，語(yǔ)音命令的數(shù)目和類(lèi)型通常是非常有限的。這些移動(dòng)設(shè)備根據(jù)語(yǔ)音命令來(lái)解釋特殊 字符也是很困難的。
[0007] 另外，用戶(hù)常常對(duì)與其看到的事物相關(guān)的信息感興趣，這些事物是很難描述成語(yǔ) 音命令或音頻輸入的。許多移動(dòng)設(shè)備現(xiàn)在包括數(shù)字相機(jī)。移動(dòng)設(shè)備用戶(hù)通常可以捕捉圖像， 并且下載該圖像和/或利用消息將該圖像傳輸?shù)搅硪挥?jì)算設(shè)備。這些相機(jī)通常比鍵盤(pán)更便 宜，但也通常具有較低的分辨率，例如三百萬(wàn)像素或更低。這些低分辨率相機(jī)通常不適合于 對(duì)象辨識(shí)。

【專(zhuān)利附圖】

【附圖說(shuō)明】
[0008] 參考以下附圖描述本發(fā)明的非限制性和非窮舉性實(shí)施例。在附圖中，除非另有指 明，否則相似的標(biāo)號(hào)在各圖中始終指代類(lèi)似的部件。
[0009] 為了更好地理解本發(fā)明，現(xiàn)在將參考以下應(yīng)聯(lián)系附圖來(lái)閱讀的"【具體實(shí)施方式】"部 分，附圖中：
[0010] 圖1圖示了本發(fā)明可在其中實(shí)現(xiàn)的示例性系統(tǒng)的一個(gè)實(shí)施例的示圖；
[0011] 圖2示出了示例性移動(dòng)設(shè)備的一個(gè)實(shí)施例的示意圖；
[0012] 圖3圖示了示例性網(wǎng)絡(luò)設(shè)備的一個(gè)實(shí)施例的示意圖；
[0013] 圖4圖示了用于基于所捕捉的圖像來(lái)確定和處理圖像相關(guān)信息的示例性整體邏 輯的流程圖；并且
[0014] 圖5圖示了用于基于所捕捉的圖像來(lái)確定搜索字詞和結(jié)果的示例性邏輯的流程 圖。

【具體實(shí)施方式】
[0015] 現(xiàn)在將在下文中參考附圖更全面地描述本發(fā)明，附圖形成說(shuō)明書(shū)的一部分，并且 以圖示方式示出了可用來(lái)實(shí)現(xiàn)本發(fā)明的具體示例性實(shí)施例。然而，本發(fā)明可以用許多不同 形式來(lái)實(shí)現(xiàn)并且不應(yīng)當(dāng)被解釋為限于這里記載的實(shí)施例；更確切地說(shuō)，提供這些實(shí)施例是 為了使本公開(kāi)詳盡并完整并且會(huì)將本發(fā)明的范圍完全地傳達(dá)給本領(lǐng)域的技術(shù)人員。本發(fā)明 可以實(shí)現(xiàn)為方法或設(shè)備，等等。從而，本發(fā)明可以采取完全硬件的實(shí)施例或者組合軟件和硬 件方面的實(shí)施例的形式。以下詳細(xì)描述因此不應(yīng)當(dāng)從限制意義上來(lái)理解。
[0016] 在整個(gè)說(shuō)明書(shū)和權(quán)利要求中，除非上下文明確地另有規(guī)定，否則以下術(shù)語(yǔ)采取與 這里明確關(guān)聯(lián)的含義。這里使用的短語(yǔ)"在一個(gè)實(shí)施例中"不一定指的是同一實(shí)施例，但也 可以指同一實(shí)施例。另外，這里使用的短語(yǔ)"在另一實(shí)施例中"不一定指的是一不同實(shí)施例， 但它也可指一不同實(shí)施例。因此，如下所述，本發(fā)明的各種實(shí)施例可以很容易被組合，而不 脫離本發(fā)明的范圍或精神。
[0017] 此外，這里使用的術(shù)語(yǔ)"或"是包含性"或"運(yùn)算符，并且等同于術(shù)語(yǔ)"和/或"，除 非上下文明確地另有規(guī)定。術(shù)語(yǔ)"基于"不是排他的并且允許基于沒(méi)有記載的其他因素，除 非上下文明確地另有規(guī)定。此外，在整個(gè)說(shuō)明書(shū)中，"a"、"an"和"the"的含義包括多數(shù)形 式。"在...中"的含義包括"在...中"和"在...上"。
[0018] 簡(jiǎn)言之，本發(fā)明的實(shí)施例涉及使用圖像數(shù)據(jù)和情境性數(shù)據(jù)來(lái)確定關(guān)于場(chǎng)景的信 息。內(nèi)容信息可被直接訪(fǎng)問(wèn)并返回給用戶(hù)，可被用作搜索字詞，用作其他處理的輸入，或者 用于其他目的。所捕捉的圖像數(shù)據(jù)、先前圖像分析數(shù)據(jù)、簡(jiǎn)檔數(shù)據(jù)和從許多用戶(hù)收集到的其 他數(shù)據(jù)被用于更好地確定所捕捉的圖像的主題以及用戶(hù)最可能期望的信息。不是依賴(lài)于高 分辨率圖像和復(fù)雜的圖像處理技術(shù)，而是將與圖像和位置相關(guān)的各種形式的數(shù)據(jù)的集合用 作基于社區(qū)的辨識(shí)。
[0019] 圖像數(shù)據(jù)可包括鄰近同一位置的一個(gè)或多個(gè)圖像。這些圖像可由許多不同的用戶(hù) 利用不同的相機(jī)或其他設(shè)備拍攝。這（一個(gè)或多個(gè)）圖像可包括非文本信息，例如徽標(biāo)、 地標(biāo)等等。作為附加或替換，這（一個(gè)或多個(gè)）圖像可包括文本信息，例如標(biāo)牌、告示牌等 等上的字符串。情境性數(shù)據(jù)可包括拍攝每個(gè)圖像的位置、與拍攝一個(gè)或多個(gè)這種圖像的移 動(dòng)設(shè)備相關(guān)聯(lián)的用戶(hù)簡(jiǎn)檔，等等。作為附加或替換，情境性數(shù)據(jù)可包括關(guān)于該位置的已知信 息，例如商家、建筑物、街道名稱(chēng)、關(guān)于該位置附近的一個(gè)或多個(gè)用戶(hù)執(zhí)行的動(dòng)作的信息，等 等?？梢苑治鰣D像以確定標(biāo)識(shí)出圖像的特性的直方圖。如果圖像分辨率允許，可執(zhí)行某種對(duì) 象辨識(shí)。還可分析圖像以定位和辨識(shí)圖像內(nèi)的字符。可以相對(duì)于同一用戶(hù)和/或其他用戶(hù) 對(duì)其他圖像的分析來(lái)評(píng)估這些圖像分析，以確定圖像的可能內(nèi)容。類(lèi)似地，可以評(píng)估情境性 數(shù)據(jù)以確定或修改圖像的可能內(nèi)容和/或期望的關(guān)于圖像的可能信息。在一個(gè)實(shí)施例中， 可以將所確定或辨識(shí)的關(guān)鍵字、類(lèi)別或其他信息提交給數(shù)據(jù)搜索系統(tǒng)，以取回搜索結(jié)果、來(lái) 自具體辨識(shí)的統(tǒng)一資源定位符（URL)的網(wǎng)頁(yè)、電話(huà)簿信息、廣告或其他結(jié)果。作為附加或替 換，可對(duì)這些結(jié)果進(jìn)行過(guò)濾、區(qū)分優(yōu)先級(jí)、分類(lèi)或其他方式的進(jìn)一步處理。
[0020] 本發(fā)明的實(shí)施例識(shí)別用戶(hù)拍攝的對(duì)象的含義，并且使用此含義作為對(duì)更多信息的 請(qǐng)求。傳統(tǒng)上，圖像評(píng)估是利用圖像辨識(shí)算法、嵌入碼或條碼來(lái)完成的。通常，這些圖像線(xiàn) 索是不可靠的，圖像質(zhì)量太低，并且單是圖像辨識(shí)算法無(wú)法提供期望水平的精確度。在擁 有了足夠的情境性信息的情況下，基于已知的對(duì)象位置、先前搜索的結(jié)果等等，本發(fā)明的實(shí) 施例可以迅速地判定用戶(hù)拍攝了一張告示牌的照片，該告示牌廣告最近的動(dòng)作電影或其他 具體信息。本發(fā)明的實(shí)施例可以向用戶(hù)示出一定制顯示屏，該顯示屏示出關(guān)于圖像的主題 (例如最近的電影）的更多信息。額外信息可包括最鄰近的放映的位置和時(shí)間和/或其他 信息。
[0021] 本發(fā)明的實(shí)施例使用盡可能多的輔助信息來(lái)辨別用戶(hù)在圖像中正看著什么。此額 外信息在這里通常被稱(chēng)為情境或情境性信息。情境一般包括相機(jī)的位置、照片拍攝于何時(shí)、 時(shí)間、其他用戶(hù)在此位置處拍攝照片的概率、其他照片的內(nèi)容（其中一些可能是利用高分 辨率相機(jī)拍攝的）、用戶(hù)先前尋找過(guò)的信息、在給定同一情境的情況下不同用戶(hù)選擇了某一 種信息的可能性、鄰近此位置的對(duì)象的已知位置，等等。
[0022] 可以通過(guò)許多不同的方式來(lái)使用情境。情境可用于使搜索偏向于有可能存在于用 戶(hù)拍攝的照片中的對(duì)象。中央服務(wù)器可從用戶(hù)接收低質(zhì)量圖像，并利用諸如地點(diǎn)敏感型哈 希之類(lèi)的算法執(zhí)行圖像匹配，以找出同一位置中同一對(duì)象的更好質(zhì)量的圖像。因?yàn)榉?wù)器 過(guò)去曾接收更好的圖像，所以服務(wù)器已知分析過(guò)更好的圖像。通過(guò)對(duì)更好圖像的這種先前 分析所獲得的信息可能導(dǎo)致先前的用戶(hù)點(diǎn)擊了所產(chǎn)生的鏈接或者執(zhí)行了被服務(wù)器跟蹤的 其他動(dòng)作。從而，服務(wù)器一般擁有與可能希望的關(guān)于圖像的主題的信息有關(guān)的更多情境性 信息。還可利用概率模型來(lái)對(duì)情境性信息編碼，這提供了關(guān)于圖像的主題的額外情境。例 如，看到Starbucks店面的概率在城市地區(qū)可能較高。作為另一示例，位置和其他情境可用 于辨識(shí)獨(dú)特的社區(qū)信息，例如語(yǔ)言字符。例如，在美國(guó)的少數(shù)位置中最有可能看到中文字 符?；谟脩?hù)的位置，服務(wù)器可以將精力集中于辨識(shí)采取已知在新圖像的地區(qū)中普遍使用 的語(yǔ)言的最有可能的字符。
[0023] 分析圖像的工作也可被分布在網(wǎng)絡(luò)上，就像情境信息可被分布那樣?？衫玫蛷?fù) 雜度算法來(lái)確定圖像的數(shù)字指紋，這種算法可利用最低限度的CPU能力（例如用戶(hù)的移動(dòng) 設(shè)備）來(lái)計(jì)算。數(shù)字指紋和用戶(hù)的位置可被發(fā)送到服務(wù)器，以查明此圖像是否已經(jīng)被服務(wù) 器接收過(guò)。如果該圖像先前曾被服務(wù)器接收，則對(duì)該圖像的分析結(jié)果可被立即返回，從而使 重新分析的成本達(dá)到最低限度，并且通信費(fèi)用也達(dá)到最低限度。在該網(wǎng)絡(luò)事務(wù)進(jìn)行期間，用 戶(hù)的移動(dòng)設(shè)備可以對(duì)圖像進(jìn)行初始的特征提取和壓縮，以為在需要時(shí)將其發(fā)送到服務(wù)器以 便進(jìn)行更詳細(xì)的分析做準(zhǔn)備。該處理可開(kāi)始于簡(jiǎn)單的圖像匹配，進(jìn)而是更精妙的算法，執(zhí)行 光學(xué)字符辨識(shí)（OCR)以確定圖像中的任何文本，請(qǐng)求用戶(hù)輸入關(guān)于圖像的信息，或者進(jìn)行 到其他分析。本發(fā)明的一些實(shí)施例使用盡可能多的情境和圖像信息來(lái)縮窄用戶(hù)信息請(qǐng)求 的范圍并且遞送相關(guān)內(nèi)容。先前跟蹤的用戶(hù)行為信息也可用于確定圖像的最可能內(nèi)容，和 /或用戶(hù)期望的最可能信息。分析可隨著一次按鈕點(diǎn)擊（即，對(duì)相機(jī)快門(mén)的點(diǎn)擊）而發(fā)生。 在以下對(duì)示例性實(shí)施例的論述中提供額外細(xì)節(jié)。
[0024] 示例件橾作環(huán)塏
[0025] 圖1圖示了本發(fā)明可在其中操作的環(huán)境的一個(gè)實(shí)施例。然而，實(shí)現(xiàn)本發(fā)明可能不 需要所有這些組件，并且可以對(duì)組件的布置和類(lèi)型進(jìn)行改變，而不脫離本發(fā)明的精神或范 圍。
[0026] 如圖中所示，系統(tǒng)100包括客戶(hù)端設(shè)備102-104、網(wǎng)絡(luò)105以及服務(wù)器106。網(wǎng)絡(luò) 105與客戶(hù)端設(shè)備102-104中的每一個(gè)和服務(wù)器106通信并且使得客戶(hù)端設(shè)備102-104中 的每一個(gè)和服務(wù)器106之間能夠通信。
[0027] 客戶(hù)端設(shè)備102-104可包括幾乎任何能夠經(jīng)由網(wǎng)絡(luò)（例如，網(wǎng)絡(luò)105)從另一計(jì)算 設(shè)備（例如內(nèi)容服務(wù)器108)接收和向另一計(jì)算設(shè)備發(fā)送消息、相互發(fā)送消息等等的計(jì)算設(shè) 備。這種設(shè)備的集合可包括通常利用無(wú)線(xiàn)通信介質(zhì)連接的設(shè)備，例如蜂窩電話(huà)、智能電話(huà)、 尋呼機(jī)、步話(huà)機(jī)、射頻（RF)設(shè)備、紅外（IR)設(shè)備、CB、組合了一個(gè)或多個(gè)前述設(shè)備的集成電 路、或者幾乎任何移動(dòng)設(shè)備，等等。類(lèi)似地，客戶(hù)端設(shè)備102-104可以是任何能夠利用有線(xiàn) 或無(wú)線(xiàn)通信介質(zhì)連接的設(shè)備，例如個(gè)人數(shù)字助理（PDA)、掌上PC、可佩戴計(jì)算機(jī)以及任何其 他被配備為經(jīng)由有線(xiàn)和/或無(wú)線(xiàn)通信介質(zhì)通信的設(shè)備。這種設(shè)備的集合可包括通常利用有 線(xiàn)通信介質(zhì)連接的設(shè)備，例如個(gè)人計(jì)算機(jī)、微處理器系統(tǒng)、基于微處理器的或可編程的消費(fèi) 類(lèi)電子產(chǎn)品、網(wǎng)絡(luò)PC等等。
[0028] 客戶(hù)端設(shè)備102-104內(nèi)的每個(gè)客戶(hù)端設(shè)備可包括被配置為發(fā)送、接收和顯示網(wǎng)頁(yè) 等等的瀏覽器應(yīng)用。瀏覽器應(yīng)用可被配置為采用幾乎任何基于web的語(yǔ)言來(lái)接收和顯示圖 形、文本、多媒體等等，所述基于web的語(yǔ)言包括但不限于標(biāo)準(zhǔn)通用標(biāo)記語(yǔ)言（SMGL)，比如 超文本標(biāo)記語(yǔ)言（HTML)、可擴(kuò)展標(biāo)記語(yǔ)言（XML)、手持設(shè)備標(biāo)記語(yǔ)言（HDML)，比如無(wú)線(xiàn)標(biāo)記 語(yǔ)言（WML)、WMLScript,JavaScript，等等?？蛻?hù)端設(shè)備102-104還可包括被配置為向采用 另一機(jī)制的另一計(jì)算設(shè)備發(fā)送和/或從該另一設(shè)備接收消息的消息傳遞應(yīng)用，包括但不限 于即時(shí)消息傳遞（頂)、電子郵件、短消息服務(wù)（SMS)、多媒體消息服務(wù)（MMS)、互聯(lián)網(wǎng)中繼聊 天（IRC)、mIRC、Jabber,等等。
[0029] 網(wǎng)絡(luò)105被配置為將一個(gè)計(jì)算設(shè)備耦合到另一計(jì)算設(shè)備以使它們能夠通信。網(wǎng)絡(luò) 105能夠采用用于將信息從一個(gè)電子設(shè)備傳輸至另一電子設(shè)備的任何形式的計(jì)算機(jī)可讀介 質(zhì)。另外，網(wǎng)絡(luò)105可以包括無(wú)線(xiàn)接口，和/或有線(xiàn)接口，例如因特網(wǎng)，以及局域網(wǎng)（LAN)、廣 域網(wǎng)（WAN)、例如通過(guò)通用串行總線(xiàn)（USB)端口的直接連接、其他形式的計(jì)算機(jī)可讀介質(zhì)， 或者它們的任何組合。在LAN的互連集（包括基于不同體系結(jié)構(gòu)和協(xié)議的那些）上，路由 器充當(dāng)LAN之間的鏈路，使得消息能夠從一個(gè)發(fā)送至另一個(gè)。另外，LAN內(nèi)的通信鏈路通 常包括雙絞線(xiàn)對(duì)或同軸線(xiàn)纜，而網(wǎng)絡(luò)之間的通信鏈路可以利用模擬電話(huà)線(xiàn)路、包括T1、T2、 Τ3和Τ4的全部或部分專(zhuān)用數(shù)字線(xiàn)路、數(shù)字信號(hào)級(jí)別3 (DS3)、光載波3 (0C3)、0C12、0C48、異 步傳輸模式（ATM)、綜合業(yè)務(wù)數(shù)字網(wǎng)（ISDN)、數(shù)字用戶(hù)線(xiàn)（DSL)、包括衛(wèi)星鏈路的無(wú)線(xiàn)鏈路 或者本領(lǐng)域技術(shù)人員已知的其他通信鏈路。另外，遠(yuǎn)程計(jì)算機(jī)和其他相關(guān)電子設(shè)備可以經(jīng) 由調(diào)制解調(diào)器或臨時(shí)電話(huà)鏈路被遠(yuǎn)程地連接到LAN或WAN。網(wǎng)絡(luò)105被構(gòu)造為結(jié)合各種通 信協(xié)議和技術(shù)使用，所述通信協(xié)議和技術(shù)包括傳輸控制協(xié)議/互聯(lián)網(wǎng)協(xié)議（TCP/IP)、用戶(hù) 數(shù)據(jù)報(bào)協(xié)議（UDP)、無(wú)線(xiàn)應(yīng)用協(xié)議（WAP)、全球移動(dòng)通信系統(tǒng)（GSM)、碼分多址（CDMA)、時(shí)分 多址（TDMA)、通用分組無(wú)線(xiàn)電服務(wù)（GPRS)、超寬帶（UWB)、IEEE802. 16全球微波接入互通 (WiMax)，等等。實(shí)質(zhì)上，網(wǎng)絡(luò)105包括可用來(lái)在客戶(hù)端設(shè)備102-104和/或服務(wù)器106之 間傳送?目息的任何通/[目方法。
[0030]用于在如上所述的通信鏈路中傳輸信息的介質(zhì)一般包括可被計(jì)算設(shè)備訪(fǎng)問(wèn)的任 何介質(zhì)。計(jì)算機(jī)可讀介質(zhì)可包括計(jì)算機(jī)存儲(chǔ)介質(zhì)、有線(xiàn)和無(wú)線(xiàn)通信介質(zhì)、或其任何組合。此 夕卜，計(jì)算機(jī)可讀介質(zhì)通常包含計(jì)算機(jī)可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊或其他數(shù)據(jù)。這種數(shù)據(jù) 可利用諸如載波、數(shù)據(jù)信號(hào)或其他傳輸機(jī)制之類(lèi)的經(jīng)調(diào)制的數(shù)據(jù)信號(hào)通過(guò)通信介質(zhì)傳輸， 并且包括任何信息遞送介質(zhì)。術(shù)語(yǔ)"經(jīng)調(diào)制的數(shù)據(jù)信號(hào)"和"載波信號(hào)"包括這樣一種信號(hào)， 該信號(hào)的特性中的一個(gè)或多個(gè)以將信息、指令、數(shù)據(jù)等等編碼在該信號(hào)中的方式被設(shè)定或 改變。例如，通信介質(zhì)包括諸如用于聲學(xué)、RF、紅外和其他無(wú)線(xiàn)信號(hào)的液體或空間之類(lèi)的無(wú) 線(xiàn)介質(zhì)，以及諸如雙絞線(xiàn)對(duì)、同軸線(xiàn)纜、光纖、波導(dǎo)之類(lèi)的有線(xiàn)介質(zhì)和其他有線(xiàn)介質(zhì)。
[0031] 服務(wù)器106可包括多個(gè)計(jì)算設(shè)備或單個(gè)計(jì)算設(shè)備。服務(wù)器106可提供圖像分析服 務(wù)，例如確定直方圖、執(zhí)行OCR、將圖像與先前存儲(chǔ)的圖像相比較、確定關(guān)于圖像的信息、執(zhí) 行數(shù)據(jù)庫(kù)操作、執(zhí)行對(duì)額外信息的搜索、存儲(chǔ)關(guān)于圖像的信息、跟蹤用戶(hù)行為，等等。服務(wù)器 106還可提供內(nèi)容和/或其他服務(wù)，例如網(wǎng)站、在線(xiàn)日志（例如，博客）、照片、評(píng)介、諸如消 息傳遞之類(lèi)的在線(xiàn)服務(wù)、搜索、新聞、購(gòu)買(mǎi)、廣告，等等。服務(wù)器106還可提供管理性服務(wù)，例 如網(wǎng)絡(luò)資源（比如網(wǎng)頁(yè)等等）之間的關(guān)系的創(chuàng)建、修改和管理。簡(jiǎn)言之，服務(wù)器106可包括 任何能夠連接到網(wǎng)絡(luò)105的計(jì)算設(shè)備并且可管理對(duì)網(wǎng)絡(luò)用戶(hù)（例如，客戶(hù)端設(shè)備102-104 中的至少一個(gè)的用戶(hù)）的服務(wù)。可充當(dāng)服務(wù)器106的設(shè)備包括專(zhuān)用服務(wù)器設(shè)備、個(gè)人計(jì)算 機(jī)、桌面型計(jì)算機(jī)、多處理器系統(tǒng)、基于微處理器的或可編程的消費(fèi)類(lèi)電子產(chǎn)品、網(wǎng)絡(luò)PC，等 等。服務(wù)器106和/或客戶(hù)端設(shè)備102-104中的任何一個(gè)可以實(shí)現(xiàn)在一個(gè)或多個(gè)計(jì)算設(shè)備 上，例如參考圖2描述的客戶(hù)端。
[0032] 示例件客戶(hù)端設(shè)各
[0033] 圖2示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的用作參考數(shù)據(jù)收集器設(shè)備的示例性客戶(hù)端 設(shè)備200。在一個(gè)實(shí)施例中，客戶(hù)端設(shè)備200是移動(dòng)設(shè)備，例如膝上型計(jì)算機(jī)。移動(dòng)設(shè)備的 另一示例包括被布置為經(jīng)由一個(gè)或多個(gè)無(wú)線(xiàn)通信接口發(fā)送和接收語(yǔ)音通信和諸如SMS消 息之類(lèi)的消息的PDA或蜂窩電話(huà)。移動(dòng)電子設(shè)備常常能夠通過(guò)連接到一個(gè)或多個(gè)無(wú)線(xiàn)網(wǎng) 絡(luò)、連接到單個(gè)無(wú)線(xiàn)網(wǎng)絡(luò)的多個(gè)節(jié)點(diǎn)、經(jīng)由一個(gè)或多個(gè)信道與一個(gè)或多個(gè)網(wǎng)絡(luò)通信、或者以 其他方式參與一個(gè)或多個(gè)通信會(huì)話(huà)，來(lái)進(jìn)行個(gè)人通信。一般地，客戶(hù)端設(shè)備200可包括任何 移動(dòng)或靜止電子設(shè)備。這種設(shè)備包括膝上型電腦、掌上電腦、PDA、手持計(jì)算機(jī)、蜂窩電話(huà)、智 能電話(huà)、尋呼機(jī)、射頻（RF)設(shè)備、紅外（IF)設(shè)備、組合了一個(gè)或多個(gè)前述設(shè)備的集成電路， 等等。客戶(hù)端設(shè)備200還可包括其他電子設(shè)備，例如個(gè)人計(jì)算機(jī)、多處理器系統(tǒng)、基于微處 理器的或可編程的消費(fèi)類(lèi)電子產(chǎn)品、網(wǎng)絡(luò)PC、可佩戴計(jì)算機(jī)，等等。
[0034] 客戶(hù)端設(shè)備200可包括比圖2所示的多得多或更少的組件。然而，所示出的組件 足以公開(kāi)用于實(shí)現(xiàn)本發(fā)明的示例性實(shí)施例。如圖中所示，客戶(hù)端設(shè)備200包括經(jīng)由總線(xiàn)224 與大容量存儲(chǔ)器230通信的處理單元222。
[0035] 大容量存儲(chǔ)器230包括RAM232、R0M234和其他存儲(chǔ)裝置。大容量存儲(chǔ)器230例示 了用于信息存儲(chǔ)的計(jì)算機(jī)存儲(chǔ)介質(zhì)的另一示例，這些信息例如是計(jì)算機(jī)可讀指令、數(shù)據(jù)結(jié) 構(gòu)、程序模塊或其他數(shù)據(jù)。大容量存儲(chǔ)器230存儲(chǔ)用于控制客戶(hù)端設(shè)備200的低級(jí)操作的基 本輸入/輸出系統(tǒng)（"BIOS"）240。大容量存儲(chǔ)器還存儲(chǔ)用于控制客戶(hù)端設(shè)備200的操作 的操作系統(tǒng)241。將會(huì)明白，該組件可以包括：通用操作系統(tǒng)，例如某一版本的Windows?、 UNIX或LINUX?;或者專(zhuān)用移動(dòng)通信操作系統(tǒng)，例如WindowsM〇bile?、Symbian?操作 系統(tǒng),等等。操作系統(tǒng)例如可以包括Java?虛擬機(jī)模塊或與之相接口，Java?虛擬機(jī)模塊經(jīng) 由Java應(yīng)用程序來(lái)使能對(duì)硬件組件和/或操作系統(tǒng)操作的控制。
[0036] 存儲(chǔ)器230還包括一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)單元242,其可以被客戶(hù)端設(shè)備200用來(lái) 存儲(chǔ)程序244和/或其他數(shù)據(jù)等等。程序244可包括計(jì)算機(jī)可執(zhí)行指令，這些指令在被客 戶(hù)端設(shè)備200執(zhí)行時(shí)發(fā)送、接收、渲染和/或以其他方式處理標(biāo)記頁(yè)面，例如HTML頁(yè)面、XML頁(yè)面、WAP頁(yè)面（有時(shí)稱(chēng)為WAP卡），等等。從而，程序244可包括計(jì)算機(jī)可執(zhí)行指令的瀏覽 器程序，其可在操作系統(tǒng)241的控制下運(yùn)行，以使能和管理對(duì)標(biāo)記頁(yè)面和消息（例如，HTTP、 TCP/IP、SMS、麗S、IM、電子郵件和/或其他消息）、音頻、視頻的請(qǐng)求、接收和渲染以及使能 與另一客戶(hù)端設(shè)備的另一用戶(hù)的通訊。應(yīng)用程序的其他示例包括日歷、聯(lián)系人管理器、任務(wù) 管理器、代碼轉(zhuǎn)換器、數(shù)據(jù)庫(kù)程序、字處理程序、電子表格程序、游戲，等等。
[0037] 此外，大容量存儲(chǔ)器230存儲(chǔ)圖像處置模塊246,其可作為在操作系統(tǒng)241控制下 的外部模塊運(yùn)行，作為瀏覽器內(nèi)的插件模塊運(yùn)行，在網(wǎng)頁(yè)內(nèi)運(yùn)行，或者經(jīng)由其他配置運(yùn)行。 圖像處置模塊246可執(zhí)行對(duì)圖像數(shù)據(jù)、情境信息、對(duì)圖像數(shù)據(jù)的用戶(hù)請(qǐng)求和與移動(dòng)設(shè)備獲 取或接收的圖像相關(guān)的其他數(shù)據(jù)的初始處理或完整處理。
[0038] 客戶(hù)端設(shè)備200還包括電源226、一個(gè)或多個(gè)無(wú)線(xiàn)接口 250、音頻接口 252、顯示器 254、鍵區(qū)256、照明器258、可選的數(shù)據(jù)捕捉模塊259、輸入/輸出接口 260、可選的觸覺(jué)接口 262以及可選的全球定位系統(tǒng)（GPS)接收器264。電源226向客戶(hù)端設(shè)備200提供電力?？?以使用可再充電或不可再充電的電池來(lái)提供電力。也可以由諸如AC適配器或給電池補(bǔ)充 電力和/或再充電的座式充電器（powereddockingcradle)之類(lèi)的外部電源提供電力。
[0039] 客戶(hù)端設(shè)備200可以可選地與基站通信或者直接與另一客戶(hù)端設(shè)備通信。無(wú)線(xiàn) 接口 250包括用于將客戶(hù)端設(shè)備200耦合到一個(gè)或多個(gè)無(wú)線(xiàn)網(wǎng)絡(luò)的電路，并且被構(gòu)造為結(jié) 合一個(gè)或多個(gè)通信協(xié)議和技術(shù)使用，所述通信協(xié)議和技術(shù)包括但不限于TCP/IP、UDP、GSM、 CDMA、TDMA、SMS、GPRS、WAP、UWV、IEEE802. 16 (WiMax)，等等。
[0040] 音頻接口 252被布置為產(chǎn)生和接收音頻信號(hào)，例如人類(lèi)語(yǔ)音的聲音、音樂(lè)，等等。 例如，音頻接口 252可耦合到揚(yáng)聲器和麥克風(fēng)（未示出），來(lái)使能與他人的通訊以及/或生 成對(duì)某個(gè)動(dòng)作的音頻確認(rèn)。顯示器254可以是液晶顯示器（LCD)、氣體等離子體、發(fā)光二極 管（LED)或與客戶(hù)端設(shè)備結(jié)合使用的任何其他類(lèi)型的顯示器。顯示器254還可以包括被布 置來(lái)從諸如觸筆或人類(lèi)的手指之類(lèi)的物體接收輸入的觸摸感知屏。
[0041] 鍵區(qū)256可以包括被布置來(lái)從用戶(hù)接收輸入的任何輸入設(shè)備。例如，鍵區(qū)256可 以包括鍵盤(pán)、按鈕數(shù)字撥號(hào)盤(pán)，等等。鍵區(qū)256還可以包括與選擇和執(zhí)行可改變的處理相關(guān) 聯(lián)的命令按鈕。照明器258可以提供狀態(tài)指示和/或提供光。照明器258可以在特定時(shí)段 期間或響應(yīng)于事件而保持活動(dòng)。例如，當(dāng)照明器258活動(dòng)時(shí)，其可以從背后照明鍵區(qū)256上 的按鈕并且在客戶(hù)端設(shè)備被供電期間保持開(kāi)啟。另外，照明器258可以在特定的動(dòng)作（例 如，撥叫另一客戶(hù)端設(shè)備）被執(zhí)行時(shí)以不同的圖案來(lái)從背后照明這些按鈕。照明器258還 可以使得位于移動(dòng)設(shè)備的透明或半透明外殼內(nèi)的光源響應(yīng)于動(dòng)作來(lái)進(jìn)行照明。照明器258 還可用作圖像捕捉的閃光燈。在客戶(hù)端設(shè)備200中可包括數(shù)據(jù)捕捉模塊259,例如相機(jī)?？?戶(hù)端設(shè)備可獲得圖像、視頻、溫度、壓力或其他數(shù)據(jù)。
[0042] 客戶(hù)端設(shè)備200還包括用于與外部設(shè)備（例如，頭戴式耳機(jī)）或圖2中未示出的 其他輸入或輸出設(shè)備進(jìn)行通信的輸入/輸出接口 260。輸入/輸出接口 260可以利用一種 或多種通信技術(shù)，例如USB、紅外、Bluetooth?等等。可選的觸覺(jué)接口 262被布置為向客戶(hù) 端設(shè)備的用戶(hù)提供觸覺(jué)反饋。例如，觸覺(jué)接口可以被用來(lái)在另一客戶(hù)端設(shè)備用戶(hù)呼叫時(shí)以 特定方式振動(dòng)客戶(hù)端設(shè)備200。
[0043] 可選的GPS收發(fā)器264可以確定客戶(hù)端設(shè)備200在地球表面上的物理坐標(biāo)，其通 常將位置以維度和經(jīng)度值的形式輸出。GPS收發(fā)器264還可以采用其他地理定位機(jī)制，包括 但不限于三角測(cè)量、輔助GPS(AGPS)、增強(qiáng)型觀測(cè)時(shí)間差（E-OTD)、蜂窩標(biāo)識(shí)符（Cl)、服務(wù)區(qū) 域標(biāo)識(shí)符（SAI)、增強(qiáng)型定時(shí)提前（ETA)、基站子系統(tǒng)（BSS)等等，來(lái)進(jìn)一步確定客戶(hù)端設(shè)備 200在地球表面上的物理位置。可以理解，在不同的條件下，GPS收發(fā)器264可以為客戶(hù)端 設(shè)備200確定毫米精度的物理位置；而在其他情況中，所確定的物理位置可能不那么精確， 例如精度為米或大得多的距離。
[0044] 示例件網(wǎng)絡(luò)設(shè)各
[0045] 圖3示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的網(wǎng)絡(luò)設(shè)備的一個(gè)實(shí)施例。網(wǎng)絡(luò)設(shè)備300可包 括比所示出的多得多或更少的組件。然而，所示出的組件足以公開(kāi)用于實(shí)現(xiàn)本發(fā)明的示例 性實(shí)施例。網(wǎng)絡(luò)設(shè)備300例如可表示分類(lèi)服務(wù)器106、內(nèi)容服務(wù)器108或圖1的另一客戶(hù)端 設(shè)備。出于示例目的，將把網(wǎng)絡(luò)設(shè)備300作為服務(wù)器設(shè)備來(lái)描述。
[0046] 如圖中所示，網(wǎng)絡(luò)設(shè)備300包括經(jīng)由總線(xiàn)324與大容量存儲(chǔ)器330通信的處理單 元322。大容量存儲(chǔ)器330 -般包括RAM332、R0M334和其他存儲(chǔ)裝置。大容量存儲(chǔ)器330 例示了一類(lèi)計(jì)算機(jī)可讀介質(zhì)，即計(jì)算機(jī)存儲(chǔ)介質(zhì)。計(jì)算機(jī)存儲(chǔ)介質(zhì)可以包括以任何信息存 儲(chǔ)的方法或技術(shù)實(shí)現(xiàn)的易失性、非易失性、可移除和非可移除介質(zhì)，這些信息例如是計(jì)算機(jī) 可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊或其它數(shù)據(jù)。計(jì)算機(jī)存儲(chǔ)介質(zhì)的示例包括EEPR0M、閃存或其 它半導(dǎo)體存儲(chǔ)器技術(shù)、CD-ROM、數(shù)字多功能盤(pán)（DVD)或其它光學(xué)存儲(chǔ)裝置、盒式磁帶、磁帶、 磁盤(pán)存儲(chǔ)裝置或其它磁存儲(chǔ)設(shè)備或可以用來(lái)存儲(chǔ)所期望的信息并且可由計(jì)算設(shè)備訪(fǎng)問(wèn)的 任何其它介質(zhì)。
[0047] 大容量存儲(chǔ)器330存儲(chǔ)用于控制服務(wù)器設(shè)備300的低級(jí)操作的基本輸入/輸出系 統(tǒng)（"BI0S"）340。大容量存儲(chǔ)器還存儲(chǔ)用于控制服務(wù)器設(shè)備300的操作的操作系統(tǒng)341。 將會(huì)明白，該組件可以包括通用操作系統(tǒng)，例如某一版本的Windows、UNIX、LINUX、Solaris 等等。操作系統(tǒng)也可以包括Java虛擬機(jī)模塊或與之相接口，Java虛擬機(jī)模塊經(jīng)由Java應(yīng) 用程序來(lái)使能對(duì)硬件組件和/或操作系統(tǒng)操作的控制。
[0048] 大容量存儲(chǔ)器330還包括一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)單元342,其可被服務(wù)器設(shè)備300用 來(lái)存儲(chǔ)程序344和/或其他數(shù)據(jù)等等。程序344可包括計(jì)算機(jī)可執(zhí)行指令，這些指令可被 服務(wù)器設(shè)備300執(zhí)行以實(shí)現(xiàn)標(biāo)記處置器應(yīng)用，例如用于發(fā)送、接收和以其他方式處理HTTP 通信的HTTP處置器應(yīng)用、用于發(fā)送、接收和以其他方式處理WAP通信的WAP處置器應(yīng)用，等 等。類(lèi)似地，程序344可包括安全套接字層（SSL)處置器應(yīng)用，用于處理安全連接，例如以 安全方式發(fā)起以外部應(yīng)用的通信。應(yīng)用程序的其他示例包括內(nèi)容管理應(yīng)用、消息傳遞應(yīng)用、 日程安排器、日歷、web服務(wù)、代碼轉(zhuǎn)換器、數(shù)據(jù)庫(kù)程序、字處理程序、電子表格程序、游戲，等 等。從而，程序344可處理圖像、音頻、視頻或標(biāo)記頁(yè)面，使能與另一電子設(shè)備的另一用戶(hù)的 通訊，和/或其他服務(wù)。
[0049] 此外，大容量存儲(chǔ)器330存儲(chǔ)圖像處理模塊346。圖像處理模塊346可包括計(jì)算機(jī) 可執(zhí)行指令，這些指令可在操作系統(tǒng)341的控制下運(yùn)行，以分析圖像、比較圖像、確定情境 信息、訪(fǎng)問(wèn)與位置相關(guān)聯(lián)的信息、評(píng)估用戶(hù)行為數(shù)據(jù)、確定搜索字詞、或者執(zhí)行與圖像相關(guān) 的其他處理。在一個(gè)實(shí)施例中，圖像處理模塊346 -般與客戶(hù)端設(shè)備上的圖像處置模塊通 信。大容量存儲(chǔ)器330還可包括搜索模塊348,其可以是圖像處理模塊346的一部分或與圖 像處理模塊346通信。搜索模塊348可包括搜索引擎，該搜索引擎一般執(zhí)行數(shù)據(jù)搜索，例如 內(nèi)容搜索、對(duì)到網(wǎng)絡(luò)資源的鏈接的搜索、數(shù)據(jù)庫(kù)搜索，等等。
[0050] 服務(wù)器設(shè)備300還包括用于與輸入/輸出設(shè)備通信的輸入/輸出接口 360,所述 輸入/輸出設(shè)備例如是鍵盤(pán)、鼠標(biāo)、滾輪、操縱桿、搖臂開(kāi)關(guān)、鍵區(qū)、打印機(jī)、掃描儀和/或圖 3中沒(méi)有具體示出的其他輸入設(shè)備。服務(wù)器設(shè)備300的用戶(hù)可使用輸入/輸出設(shè)備來(lái)與用 戶(hù)接口交互，該用戶(hù)接口可與操作系統(tǒng)341、程序344和/或其他模塊分離或集成。與用戶(hù) 接口的交互包括經(jīng)由顯示器和視頻顯示適配器354的視覺(jué)交互。
[0051] 服務(wù)器設(shè)備300可包括用于計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)的可移除介質(zhì)驅(qū)動(dòng)器352和/或 永久介質(zhì)驅(qū)動(dòng)器354?？梢瞥橘|(zhì)驅(qū)動(dòng)器352可包括光盤(pán)驅(qū)動(dòng)器、軟盤(pán)驅(qū)動(dòng)器和/或磁帶驅(qū) 動(dòng)器中的一種或多種。永久或可移除存儲(chǔ)介質(zhì)可包括以任何信息存儲(chǔ)的方法或技術(shù)實(shí)現(xiàn)的 易失性、非易失性、可移除和非可移除介質(zhì)，這些信息例如是計(jì)算機(jī)可讀指令、數(shù)據(jù)結(jié)構(gòu)、程 序模塊或其它數(shù)據(jù)。計(jì)算機(jī)存儲(chǔ)介質(zhì)的示例包括CD-R0M355、數(shù)字多功能盤(pán)（DVD)或其他光 存儲(chǔ)裝置、盒式磁帶、磁帶、磁盤(pán)存儲(chǔ)裝置或其它磁存儲(chǔ)設(shè)備、RAM、ROM、EEPR0M、閃存或其他 存儲(chǔ)器技術(shù)、或可以用來(lái)存儲(chǔ)所期望的信息并且可由計(jì)算設(shè)備訪(fǎng)問(wèn)的任何其它介質(zhì)。
[0052] 經(jīng)由網(wǎng)絡(luò)通信接口單元350,服務(wù)器設(shè)備300可與廣域網(wǎng)（例如因特網(wǎng)）、局域網(wǎng)、 有線(xiàn)電話(huà)網(wǎng)、蜂窩電話(huà)網(wǎng)或某種其他通信網(wǎng)絡(luò)（例如圖1中的網(wǎng)絡(luò)105)通信。網(wǎng)絡(luò)通信接 口單元350有時(shí)被稱(chēng)為收發(fā)器、收發(fā)設(shè)備、網(wǎng)絡(luò)接口卡（NIC)，等等。
[0053] 示例件邏輯
[0054] 圖4圖示了用于基于圖像數(shù)據(jù)來(lái)處理信息請(qǐng)求的示例性流程圖400。在一個(gè)示例 性實(shí)施例中，信息請(qǐng)求可以是基于從圖像確定的數(shù)據(jù)的額外信息的搜索請(qǐng)求。在操作402， 一個(gè)或多個(gè)數(shù)據(jù)服務(wù)建立情境性關(guān)連數(shù)據(jù)的一個(gè)或多個(gè)數(shù)據(jù)庫(kù)，所述情境性關(guān)連數(shù)據(jù)例如 是位置相關(guān)信息、用戶(hù)相關(guān)信息、時(shí)間相關(guān)數(shù)據(jù)、或者指示出圖像的情境或用于關(guān)連圖像的 其他數(shù)據(jù)。情境關(guān)連信息的示例可包括地理位置數(shù)據(jù)、廣告信息、商家信息、通信節(jié)點(diǎn)信息、 天氣信息、交通信息或其他信息。地理位置數(shù)據(jù)可包括GPS數(shù)據(jù)、郵政編碼、街道名稱(chēng)、街 道地址、建筑物名稱(chēng)、地標(biāo)，等等。廣告信息可包括關(guān)于告示牌、繪制的壁式標(biāo)牌、街道級(jí)標(biāo) 牌、店面標(biāo)牌等等的位置、內(nèi)容和其他信息。商家信息可包括商家名稱(chēng)、地址、電話(huà)號(hào)碼、商 標(biāo)、徽標(biāo)、URL、電子郵件地址、許諾銷(xiāo)售的產(chǎn)品、庫(kù)存信息、價(jià)格，等等。通信節(jié)點(diǎn)信息可包括 蜂窩塔位置、wifi熱點(diǎn)位置、網(wǎng)絡(luò)地址信息、通信能力信息，等等。也可通過(guò)位置相關(guān)信息的 (一個(gè)或多個(gè)）數(shù)據(jù)庫(kù)來(lái)維護(hù)實(shí)時(shí)數(shù)據(jù)。例如，數(shù)據(jù)服務(wù)可提供當(dāng)前天氣狀況、交通狀況、事 件活動(dòng)，等等。
[0055] 類(lèi)似地，在此實(shí)施例中，（一個(gè)或多個(gè)）數(shù)據(jù)服務(wù)在操作404中跟蹤客戶(hù)端的在線(xiàn) 行為。客戶(hù)端用戶(hù)行為一般與行為的位置相關(guān)聯(lián)。在用戶(hù)許可的情況下，該（一個(gè)或多個(gè)） 數(shù)據(jù)服務(wù)可跟蹤消息傳遞、執(zhí)行的搜索、選擇的URL、進(jìn)行的購(gòu)買(mǎi)，等等。該（一個(gè)或多個(gè)） 數(shù)據(jù)服務(wù)還可確定與在線(xiàn)行為相關(guān)的其他參數(shù)。例如，數(shù)據(jù)服務(wù)可基于消息交換而確定若 干個(gè)客戶(hù)端用戶(hù)認(rèn)識(shí)彼此，可以確定客戶(hù)端用戶(hù)可能有的興趣，等等。數(shù)據(jù)服務(wù)還可以確定 構(gòu)成用戶(hù)的社交網(wǎng)絡(luò)的間接關(guān)系。
[0056] 在操作406,客戶(hù)端用戶(hù)利用移動(dòng)客戶(hù)端設(shè)備來(lái)捕捉圖像數(shù)據(jù)。所捕捉的圖像數(shù)據(jù) 一般與一個(gè)或多個(gè)情境關(guān)連數(shù)據(jù)元素相關(guān)聯(lián)，所述情境關(guān)連數(shù)據(jù)元素例如是位置和/或以 上所述的其他數(shù)據(jù)。例如，用戶(hù)可利用蜂窩電話(huà)拍攝告示牌的照片。圖像和/或位置數(shù)據(jù) 可與時(shí)間戳、蜂窩塔位置、wifi網(wǎng)絡(luò)節(jié)點(diǎn)地址或其他數(shù)據(jù)相關(guān)聯(lián)。告示牌可包括商家名稱(chēng)、徽 標(biāo)、電話(huà)號(hào)碼、URL或其他內(nèi)容。客戶(hù)端設(shè)備可在本地執(zhí)行進(jìn)一步的處理，或者可將圖像和 /或位置數(shù)據(jù)傳輸給服務(wù)器。例如，客戶(hù)端設(shè)備可能能夠執(zhí)行某種圖像直方圖分析、圖像指 紋分析，等等?？蛻?hù)端設(shè)備可執(zhí)行這種分析并將結(jié)果傳輸給服務(wù)器。然而，在許多情況下， 諸如蜂窩電話(huà)之類(lèi)的客戶(hù)端設(shè)備將具有有限的圖像處理能力。這種設(shè)備一般將把原始的或 經(jīng)壓縮的圖像數(shù)據(jù)和位置數(shù)據(jù)發(fā)送給服務(wù)器。
[0057]在可選的操作408,服務(wù)器可接收捕捉了圖像的客戶(hù)端的客戶(hù)端標(biāo)識(shí)符，例如電 話(huà)號(hào)碼、移動(dòng)標(biāo)識(shí)號(hào)碼、用戶(hù)標(biāo)識(shí)符，等等。服務(wù)器可以使用客戶(hù)端標(biāo)識(shí)符來(lái)訪(fǎng)問(wèn)先前存儲(chǔ) 的與該客戶(hù)端標(biāo)識(shí)符相關(guān)聯(lián)的信息，例如先前提交的圖像、先前提交的位置、客戶(hù)端設(shè)備能 力、用戶(hù)行為、與該客戶(hù)端標(biāo)識(shí)符相關(guān)的匯總信息，等等。服務(wù)器或客戶(hù)端設(shè)備還可接收與 圖像的位置相關(guān)聯(lián)的其他信息。如上所述，這種信息可以是預(yù)先確立的位置數(shù)據(jù)或者可包 括與位置相關(guān)的實(shí)時(shí)數(shù)據(jù)。例如，服務(wù)器可訪(fǎng)問(wèn)或接收與鄰近圖像捕捉位置的位置相關(guān)聯(lián) 的商家信息。該商家信息可標(biāo)識(shí)出商家及其與圖像捕捉位置的距離。類(lèi)似地，服務(wù)器可以 訪(fǎng)問(wèn)或接收與圖像捕捉位置相關(guān)的其他情境數(shù)據(jù)，例如街道名稱(chēng)、郵政編碼、天氣狀況、交 通狀況，等等。
[0058]在操作410,服務(wù)器或客戶(hù)端設(shè)備分析所捕捉的圖像以確定圖像直方圖。圖像直方 圖一般標(biāo)識(shí)出圖像的顏色參數(shù)和其他特性，以便圖像可以很容易被比較。在每個(gè)人都利用 相同相機(jī)在同一位置拍攝圖片的理想情形中，那么通過(guò)比較相應(yīng)的圖像像素進(jìn)行的簡(jiǎn)單圖 像比較就將給出關(guān)于這些圖像是否是對(duì)同一對(duì)象拍攝的的確切度量。但這種簡(jiǎn)單的度量一 般是不充分的。
[0059]在簡(jiǎn)單的情況中，通過(guò)計(jì)算在圖像中找到的顏色的直方圖來(lái)比較兩個(gè)圖像以尋找 相似點(diǎn)。用于確定兩個(gè)圖像是否相似的量度只是比較（數(shù)十種）不同顏色中的每一種顏色 的像素部分的問(wèn)題。此量度之所以有用是因?yàn)椴徽撓鄼C(jī)如何被旋轉(zhuǎn)它都能起作用，并且往 往不受縮放和變換的影響。例如，它一般對(duì)于確定看到了哪個(gè)告示牌是很有用的，因?yàn)樵诓?同公司之間顏色是獨(dú)特的。對(duì)于確定在所捕捉的圖像中某人站在若干個(gè)灰石型銀行大樓中 的哪一個(gè)前面，它則可能不那么有效。
[0060] 更精妙的方案，例如那些基于顯點(diǎn)（salientpoint)的，一般更健壯。在此方案 中，在圖像上運(yùn)行一操作符，該操作符標(biāo)識(shí)出圖像中尤其明顯的點(diǎn)或者不論朝向如何都突 顯出來(lái)的點(diǎn)。這些點(diǎn)通常是諸如拐角之類(lèi)的圖像特征。一旦識(shí)別出顯點(diǎn)，就通過(guò)包括顏 色、局部紋理和朝向在內(nèi)的任意數(shù)目的度量來(lái)表征它們。一般在如下情況下可判斷兩個(gè) 圖像相似，即，如果每個(gè)圖像中的顯點(diǎn)有很大比例可被匹配并且它們具有正確的對(duì)齊。這 種技術(shù)的不例的更多細(xì)節(jié)在DavidG.Lowe所著的"ObjectRecognitionfromLocal Scale-InvariantFeatures，'中記載。
[0061] 在判定操作412,服務(wù)器可以檢查先前存儲(chǔ)的直方圖（或顯點(diǎn)，等等）是否在預(yù)定 的匹配閾值內(nèi)匹配新接收的圖像的直方圖（或顯點(diǎn)，等等）。在此示例性實(shí)施例中，服務(wù)器 選擇來(lái)自先前接收的圖像的直方圖數(shù)據(jù)，用于與所捕捉的圖像的直方圖結(jié)果相比較。為了 減少比較次數(shù)，服務(wù)器可以基于情境關(guān)連元素來(lái)選擇先前圖像分析數(shù)據(jù)，例如從所捕捉的 圖像的位置起的預(yù)定半徑。在一個(gè)實(shí)施例中，服務(wù)器可以選擇"最佳"先前圖像，或者與當(dāng)前 捕捉的圖像相距一定距離內(nèi)的最高分辨率圖像中排名靠前的若干個(gè)。作為附加或替換，月艮 務(wù)器可以使用其他標(biāo)準(zhǔn)來(lái)對(duì)先前直方圖數(shù)據(jù)進(jìn)行過(guò)濾、優(yōu)先級(jí)區(qū)分或其他方式的選擇。其 他標(biāo)準(zhǔn)可包括從所捕捉的圖像起的一定范圍內(nèi)的直方圖特性、各種數(shù)據(jù)庫(kù)中的圖像的分辨 率、僅限與特定的一組用戶(hù)標(biāo)識(shí)符或移動(dòng)設(shè)備標(biāo)識(shí)符相關(guān)聯(lián)的先前圖像分析數(shù)據(jù)、在從圖 像捕捉位置起的一定數(shù)目的已知街區(qū)內(nèi)的先前圖像分析數(shù)據(jù)，等等。
[0062] 一旦選擇了先前圖像分析數(shù)據(jù)，服務(wù)器就將所選擇的數(shù)據(jù)與對(duì)所捕捉圖像的圖像 分析結(jié)果相比較。另一圖像可具有非常相似的圖像直方圖，即使該另一圖像可能具有不同 的變焦、光線(xiàn)或其他圖像參數(shù)。例如，一個(gè)圖像可從一定的距離、在一天的某個(gè)時(shí)刻捕捉告 示牌。另一圖像可從另一不同距離、在一天的另一不同時(shí)刻捕捉同一告示牌。每個(gè)圖像的 圖像直方圖可被比較，以確定它們是否捕捉同一告示牌?；蛘撸粋€(gè)圖像的一部分可具有與 另一圖像的一部分的直方圖非常相似的直方圖。相似的部分可被檢測(cè)和比較。相似的部分 可對(duì)應(yīng)于徽標(biāo)或其他非字符符號(hào)。每個(gè)直方圖可充當(dāng)用于標(biāo)識(shí)圖像的數(shù)字指紋。相同的或 者從統(tǒng)計(jì)角度而言在預(yù)定閾值內(nèi)相同的直方圖可被認(rèn)為是等同的。這些比較幫助識(shí)別圖像 的內(nèi)容。
[0063] 如果用戶(hù)簡(jiǎn)檔數(shù)據(jù)與所捕捉的圖像和至少一個(gè)先前圖像相關(guān)聯(lián)，則先前用戶(hù)簡(jiǎn)檔 數(shù)據(jù)也可被選擇并與當(dāng)前捕捉的圖像的用戶(hù)簡(jiǎn)檔數(shù)據(jù)相比較。這可幫助解決關(guān)于分辨可能 的徽標(biāo)的不確定性，提供先前商家交互信息，或者提供關(guān)于所捕捉的圖像的其他額外情境 信息。
[0064] 一般地，如果找到了匹配，則服務(wù)器可以訪(fǎng)問(wèn)上述任何一項(xiàng)，或者其他描述性信 息、搜索字詞、或與先前圖像相關(guān)的其他信息、和/或與用于與所捕捉的圖像相關(guān)的情境關(guān) 連數(shù)據(jù)相關(guān)的信息。在一個(gè)實(shí)施例中，情境關(guān)連數(shù)據(jù)是捕捉當(dāng)前和先前圖像的位置。在一 些實(shí)施例中，在操作414,服務(wù)器可以執(zhí)行搜索，執(zhí)行其他處理，和/或立即向客戶(hù)端設(shè)備返 回圖像內(nèi)容信息，例如先前存儲(chǔ)的圖像相關(guān)信息和/或先前存儲(chǔ)的位置相關(guān)信息。圖像內(nèi) 容信息可以?xún)H標(biāo)識(shí)出圖像的內(nèi)容或者可以包括關(guān)于圖像的內(nèi)容的信息。在一些實(shí)施例中， 服務(wù)器可以在此結(jié)束其圖像處理操作，或者可以繼續(xù)進(jìn)行進(jìn)一步處理，如圖所示，以獲得額 外的圖像相關(guān)信息和/或位置相關(guān)信息。
[0065] 與直方圖評(píng)估類(lèi)似，在操作416,服務(wù)器或客戶(hù)端設(shè)備可執(zhí)行光學(xué)字符辨識(shí)（OCR) 分析，以識(shí)別出圖像內(nèi)的字符。在此實(shí)施例中，服務(wù)器以光學(xué)方式辨識(shí)出現(xiàn)在所捕捉的場(chǎng)景 的圖像中的字符。這種圖像一般是照片而不只是簡(jiǎn)單的黑白頁(yè)面，因此諸如用于視頻OCR 的技術(shù)之類(lèi)的更復(fù)雜的技術(shù)是有用的。一個(gè)處理包括兩個(gè)步驟：檢測(cè)和辨識(shí)。檢測(cè)一般識(shí)別 出圖像的下述可能區(qū)域：這種區(qū)域包括具有指示出其可能是文本的統(tǒng)計(jì)行為的紋理。例如， 西方字母具有許多緊鄰的水平和垂直線(xiàn)。一旦識(shí)別出可能區(qū)域，可能具有用于約束可能的 單詞的語(yǔ)言模型的模式辨識(shí)方法就被用于確定最可能的文本。用于OCR的示例性技術(shù)的細(xì) 節(jié)在RomanYampolskiy所著的"FeatureExtractionApproachesForOpticalCharacter Recognition"（其中包括RainerLienhart所著的一章）中記載。
[0066] 在此實(shí)施例的判定操作418中，服務(wù)器選擇來(lái)自先前接收的圖像的OCR數(shù)據(jù)，用于 與所捕捉的圖像的OCR結(jié)果相比較。與直方圖分析類(lèi)似，服務(wù)器可以基于情境關(guān)連數(shù)據(jù)來(lái) 選擇先前圖像分析數(shù)據(jù)，例如從所捕捉的圖像的位置起的預(yù)定半徑。在一個(gè)實(shí)施例中，服務(wù) 器可以選擇"最佳"先前圖像，或者與當(dāng)前捕捉的圖像相距一定距離內(nèi)的最高分辨率圖像中 排名靠前的若干個(gè)。作為附加或替換，服務(wù)器可以使用其他標(biāo)準(zhǔn)來(lái)對(duì)先前OCR數(shù)據(jù)進(jìn)行過(guò) 濾、優(yōu)先級(jí)區(qū)分或其他方式的選擇。其他標(biāo)準(zhǔn)可包括各種數(shù)據(jù)庫(kù)中的圖像的分辨率、與OCR 結(jié)果的單詞相似的單詞的所需最小數(shù)目、僅限與特定的一組用戶(hù)標(biāo)識(shí)符或移動(dòng)設(shè)備標(biāo)識(shí)符 相關(guān)聯(lián)的先前圖像分析數(shù)據(jù)、在從圖像捕捉位置起的一定數(shù)目的已知街區(qū)內(nèi)的先前圖像分 析數(shù)據(jù)，等等。
[0067] 一旦選擇了先前OCR圖像分析數(shù)據(jù)，服務(wù)器就將所選擇的數(shù)據(jù)與對(duì)所捕捉圖像的 圖像分析結(jié)果相比較。所辨識(shí)出的字符可被比較，以確定匹配的單詞、URL、電話(huà)號(hào)碼，等等。 匹配可基于預(yù)定的匹配閾值。例如，為了斷定在所捕捉的圖像和先前獲得的圖像之間存在 匹配，可能需要字符串中的預(yù)定百分比匹配。這些OCR比較可獨(dú)立地幫助識(shí)別圖像的內(nèi)容， 或者可與直方圖比較結(jié)合使用。
[0068] 同樣與直方圖分析類(lèi)似，如果用戶(hù)簡(jiǎn)檔數(shù)據(jù)與所捕捉的圖像和至少一個(gè)先前OCR 圖像相關(guān)聯(lián)，則先前用戶(hù)簡(jiǎn)檔數(shù)據(jù)也可被選擇并與當(dāng)前捕捉的圖像的用戶(hù)簡(jiǎn)檔數(shù)據(jù)相比 較。這可幫助解決關(guān)于部分辨識(shí)的字符或串的不確定性，提供先前商家交互信息，或者提供 關(guān)于所捕捉的圖像的其他額外情境信息。
[0069] 一般地，如果找到了匹配，則服務(wù)器可以訪(fǎng)問(wèn)上述任何一項(xiàng)，或者其他描述性信 息、搜索字詞、或與先前圖像相關(guān)的其他信息、和/或與捕捉當(dāng)前和先前圖像的位置相關(guān)的 信息。在一些實(shí)施例中，在操作420,服務(wù)器可以執(zhí)行搜索，執(zhí)行其他處理，和/或立即向客 戶(hù)端設(shè)備返回圖像內(nèi)容信息，例如先前存儲(chǔ)的圖像相關(guān)信息和/或先前存儲(chǔ)的位置相關(guān)信 息。在一些實(shí)施例中，服務(wù)器可以在此結(jié)束其圖像處理操作，或者可以繼續(xù)進(jìn)行進(jìn)一步處 理，如圖所示，以獲得額外的圖像相關(guān)信息和/或位置相關(guān)信息，確定客戶(hù)端用戶(hù)可能期望 的圖像相關(guān)信息和/或位置相關(guān)信息，執(zhí)行搜索，或執(zhí)行其他操作。
[0070] 在此示例性實(shí)施例中，在操作422,服務(wù)器使用通過(guò)直方圖和OCR分析獲得的信息 來(lái)對(duì)圖像相關(guān)信息和/或位置相關(guān)信息執(zhí)行一個(gè)或多個(gè)可選擇的或自動(dòng)的操作。這種操 作可包括執(zhí)行統(tǒng)計(jì)分析以確定可能的內(nèi)容、搜索字詞或當(dāng)前捕捉的圖像的其他圖像相關(guān)信 息。服務(wù)器可組合從所有信息源收集的信息，例如圖像、位置、來(lái)自數(shù)據(jù)庫(kù)的鄰近興趣點(diǎn)、來(lái) 自這個(gè)和其他用戶(hù)的點(diǎn)進(jìn)數(shù)據(jù)，等等。服務(wù)器還可以判定是否存在沖突的或含糊的信息。月艮 務(wù)器可以訪(fǎng)問(wèn)數(shù)據(jù)服務(wù)、返回鏈接、請(qǐng)求額外用戶(hù)輸入、或者其他操作。在一個(gè)實(shí)施例中，月艮 務(wù)器執(zhí)行搜索，這將參考圖5來(lái)更詳細(xì)描述。
[0071] 在操作424,服務(wù)器存儲(chǔ)位置信息、直方圖信息、OCR信息、操作結(jié)果、或其他數(shù)據(jù)。 所存儲(chǔ)的信息一般被索引到所捕捉的圖像，使得所存儲(chǔ)的信息可用于評(píng)估以后捕捉的圖 像。
[0072] 圖5示出了用于基于所捕捉的圖像來(lái)確定搜索字詞和結(jié)果的示例性邏輯的流程 圖。在一些實(shí)施例中，可通過(guò)當(dāng)前捕捉的圖像和相似圖像數(shù)據(jù)內(nèi)的可能搜索字詞或者基于 當(dāng)前捕捉的圖像和相似圖像數(shù)據(jù)的可能搜索字詞來(lái)識(shí)別圖像內(nèi)容或用戶(hù)期望的信息。這些 字詞可包括所辨識(shí)的字符、匹配的串、匹配的直方圖特性、手工預(yù)填充的字詞、所捕捉的圖 像的位置，等等。所捕捉的圖像的直方圖數(shù)據(jù)可用作其他直方圖數(shù)據(jù)庫(kù)或其他圖像數(shù)據(jù)庫(kù) 的搜索輸入。一些實(shí)施例可使用加權(quán)來(lái)確定主要電話(huà)號(hào)碼、或URL、或商家名稱(chēng)、或者當(dāng)前捕 捉的圖像內(nèi)的或基于當(dāng)前捕捉的圖像的其他優(yōu)選字詞。其他實(shí)施例可使用加權(quán)來(lái)確定主要 科學(xué)字詞（例如實(shí)驗(yàn)室中的那些）或者藝術(shù)字詞（例如博物館中的那些），等等。
[0073] 在此示例性實(shí)施例中，為了基于圖像數(shù)據(jù)確定可能的搜索字詞，在操作502,服務(wù) 器使用情境性的圖像相關(guān)數(shù)據(jù)來(lái)確定更可能的搜索字詞。可基于圖像相關(guān)數(shù)據(jù)來(lái)搜索用戶(hù) 簡(jiǎn)檔數(shù)據(jù)、個(gè)體或匯總行為數(shù)據(jù)、設(shè)備標(biāo)識(shí)符數(shù)據(jù)、或者其他這種數(shù)據(jù)。此情境性數(shù)據(jù)還可 用于對(duì)最終搜索字詞的確定進(jìn)行加權(quán)。例如，與所捕捉的數(shù)據(jù)相關(guān)聯(lián)的用戶(hù)簡(jiǎn)檔數(shù)據(jù)可指 示出捕捉圖像的移動(dòng)設(shè)備的用戶(hù)經(jīng)常搜索電影信息。鄰近同一位置的先前圖像也可與電影 字詞相關(guān)聯(lián)。從而，所辨識(shí)的字符和直方圖數(shù)據(jù)有可能對(duì)應(yīng)于影院告示牌，其列出當(dāng)前放映 的電影。從而，服務(wù)器可確定搜索單詞、短語(yǔ)、演員姓名、影院品牌、或者與電影相關(guān)的其他 字詞。
[0074] 被跟蹤的位置數(shù)據(jù)也可用于確定與搜索字詞相關(guān)的概率模式。位置數(shù)據(jù)一般被與 圖像特征相組合。位置估計(jì)一般包括一個(gè)或多個(gè)概率估計(jì)。例如，估計(jì)可以指示出圖像是 從一定的方向以及某一可能的距離拍攝的概率。這一般形成概率空間中該點(diǎn)處的高斯突 起。在此突起內(nèi)，服務(wù)器一般將知道有具有某一概率的一些對(duì)象，這些對(duì)象可以是來(lái)自先前 圖像和服務(wù)器已知的任何地理信息的估計(jì)。例如，服務(wù)器可能知道在所捕捉的圖像的位置 附近有一銀行。類(lèi)似地，圖像分類(lèi)工作或OCR也可具有與之相關(guān)聯(lián)的概率?？赏ㄟ^(guò)在后驗(yàn) 概率估計(jì)中尋找峰值來(lái)改進(jìn)對(duì)所捕捉的圖像的主題的確定。這可能是已知位置概率估計(jì)、 已知的關(guān)于所捕捉圖像附近區(qū)域的先前信息和圖像辨識(shí)結(jié)果的乘法函數(shù)。服務(wù)器還可以通 過(guò)假定先前信息不會(huì)一直去到零，來(lái)使計(jì)算規(guī)則化，因?yàn)樾碌慕ㄖ锘蛐碌母媸九瓶赡茉?任何時(shí)間被構(gòu)建。例如，有可能新的普通零售店會(huì)在短時(shí)間內(nèi)出現(xiàn)。
[0075] 基于先前圖像分析數(shù)據(jù)，先前圖像一般具有與每個(gè)先前圖像相關(guān)聯(lián)的語(yǔ)義字詞， 這些語(yǔ)義字詞可用于搜索匹配和其他處理。例如，與圖像相關(guān)聯(lián)的字詞可標(biāo)識(shí)出特定登入 頁(yè)面、服務(wù)或其他網(wǎng)絡(luò)資源的位置。網(wǎng)絡(luò)資源可能由廣告主、商家等等提供或由其贊助。作 為附加或替換，與圖像相關(guān)聯(lián)的字詞可提供去到一個(gè)或多個(gè)搜索結(jié)果頁(yè)面的關(guān)鍵。（一個(gè)或 多個(gè)）搜索數(shù)據(jù)庫(kù)可限于或包括注冊(cè)廣告主或商家的數(shù)據(jù)庫(kù)，這些注冊(cè)廣告主或商家提供 了名稱(chēng)、電話(huà)號(hào)碼、URL、電子郵件地址、位置或者關(guān)于廣告主或商家的告示牌、標(biāo)牌或圖像 中可能捕捉的其他物品的其他信息。廣告或商家數(shù)據(jù)庫(kù)或其內(nèi)容可基于展示位置出價(jià)、額 外服務(wù)收費(fèi)等等而被加權(quán)、過(guò)濾、區(qū)分優(yōu)先級(jí)，等等。中間結(jié)果可被獲得并用于細(xì)化搜索字 。
[0076] 服務(wù)器返回與所捕捉的圖像相關(guān)的搜索字詞。例如，服務(wù)器可返回最有可能是所 捕捉的圖像的主題的商家名稱(chēng)、電話(huà)號(hào)碼和URL。服務(wù)器可以基于所返回的搜索字詞而自動(dòng) 獲得信息，或者可以將這些字詞發(fā)送到捕捉了圖像的移動(dòng)設(shè)備。移動(dòng)設(shè)備的用戶(hù)可以判定 是否通過(guò)瀏覽器將返回的字詞提交給通用搜索引擎。
[0077]在操作504,服務(wù)器或另外的搜索引擎基于所確定的搜索字詞或者所確定的字詞 中用戶(hù)選擇的那些來(lái)執(zhí)行搜索。可以執(zhí)行一次或多次搜索迭代，以及/或者可搜索多個(gè)數(shù) 據(jù)庫(kù)。在結(jié)果操作506中，服務(wù)器可返回WML頁(yè)面、XHTML頁(yè)面、文本頁(yè)面、SMS消息、或者可 索引到先前圖像的其他信息。返回的頁(yè)面可被認(rèn)為是關(guān)于圖像中捕捉的對(duì)象的主頁(yè)。返回 主頁(yè)可使得服務(wù)器向商家、廣告主或主頁(yè)的其他（一個(gè)或多個(gè)）贊助者收取費(fèi)用。這樣可 以基于每圖片成本或每相機(jī)點(diǎn)擊成本而產(chǎn)生收入。
[0078]以上說(shuō)明書(shū)、示例和數(shù)據(jù)提供了對(duì)本發(fā)明的構(gòu)成的制造和使用的完整描述。例如， 可以?xún)H基于匹配的直方圖信息；或者僅基于匹配的OCR數(shù)據(jù)來(lái)執(zhí)行搜索處理或其他操作。 作為另一示例，可以按類(lèi)似的方式評(píng)估所捕捉的音頻數(shù)據(jù)，以確定搜索字詞或由此產(chǎn)生的 信息。類(lèi)似地，可以按類(lèi)似的方式評(píng)估所捕捉的視頻數(shù)據(jù)，以確定搜索字詞或由此產(chǎn)生的信 息。隨著在位置附近獲得額外圖像，還可調(diào)整匹配閾值。由于可在不脫離本發(fā)明的精神和 范圍的情況下做出本發(fā)明的許多實(shí)施例，因此本發(fā)明存在于權(quán)利要求中。
【權(quán)利要求】
1. 一種用于訪(fǎng)問(wèn)信息的方法，包括： 由處理器接收表示由移動(dòng)設(shè)備捕捉的圖像的圖像數(shù)據(jù)； 由所述處理器接收指示出所述移動(dòng)設(shè)備捕捉所述圖像的位置的位置數(shù)據(jù)； 由所述處理器根據(jù)所述圖像數(shù)據(jù)確定圖像屬性信息； 由所述處理器確定所述圖像屬性信息是否在預(yù)定的匹配閾值內(nèi)匹配先前獲得的屬性 信息，所述先前獲得的屬性信息是從先前獲得的圖像數(shù)據(jù)獲得的，所述先前獲得的圖像數(shù) 據(jù)表示在從所述移動(dòng)設(shè)備捕捉所述圖像的位置起的預(yù)定距離內(nèi)捕捉的先前圖像；以及 如果所述圖像屬性信息在所述預(yù)定的匹配閾值內(nèi)匹配所述先前獲得的屬性信息，則由 所述處理器基于所述位置數(shù)據(jù)來(lái)訪(fǎng)問(wèn)圖像內(nèi)容信息，其中所述內(nèi)容信息標(biāo)識(shí)出與所述先前 獲得的圖像數(shù)據(jù)相關(guān)聯(lián)并且與所述位置相關(guān)聯(lián)的所述圖像的內(nèi)容。
2. 如權(quán)利要求1所述的方法，其中，所述圖像屬性信息包括所述圖像的直方圖，并且所 述先前獲得的屬性信息包括先前確定的所述先前圖像的直方圖。
3. 如權(quán)利要求1所述的方法，其中，所述圖像屬性信息包括通過(guò)光學(xué)字符辨識(shí)從所述 圖像確定的字符，并且所述先前獲得的屬性信息包括先前確定的所述先前圖像的字符。
4. 如權(quán)利要求1所述的方法，還包括：如果所述圖像屬性信息在所述預(yù)定的匹配閾值 內(nèi)匹配所述先前獲得的屬性信息，則由所述處理器基于所述圖像內(nèi)容信息來(lái)訪(fǎng)問(wèn)位置相關(guān) 信息，其中所述位置相關(guān)信息與所述先前獲得的圖像數(shù)據(jù)相關(guān)聯(lián)并且與所述位置相關(guān)聯(lián)。
5. 如權(quán)利要求1所述的方法，其中，所述圖像內(nèi)容信息包括商家信息的標(biāo)識(shí)符。
6. 如權(quán)利要求1所述的方法，其中，所述先前獲得的圖像數(shù)據(jù)是利用第二移動(dòng)設(shè)備獲 得的。
7. 如權(quán)利要求1所述的方法，還包括： 由所述處理器確定與所述圖像內(nèi)容信息相關(guān)聯(lián)的搜索字詞；以及 由所述處理器基于所述搜索字詞執(zhí)行數(shù)據(jù)搜索。
8. 如權(quán)利要求1所述的方法，還包括： 由所述處理器接收所述移動(dòng)設(shè)備的移動(dòng)設(shè)備標(biāo)識(shí)符； 由所述處理器訪(fǎng)問(wèn)與所述移動(dòng)設(shè)備標(biāo)識(shí)符相關(guān)聯(lián)的簡(jiǎn)檔信息；以及 由所述處理器基于所述簡(jiǎn)檔信息來(lái)選擇所述圖像內(nèi)容信息的一部分。
9. 如權(quán)利要求8所述的方法，其中，所述簡(jiǎn)檔信息包括與所述移動(dòng)設(shè)備的用戶(hù)相關(guān)聯(lián) 的用戶(hù)行為信息。
10. 如權(quán)利要求1所述的方法，還包括： 由所述處理器確定在所述預(yù)定距離內(nèi)捕捉的多個(gè)先前圖像中每一個(gè)的優(yōu)先級(jí)；以及 由所述處理器基于由所述先前獲得的圖像數(shù)據(jù)表示的先前圖像的所確定的優(yōu)先級(jí)來(lái) 選擇所述先前獲得的屬性信息。
11. 如權(quán)利要求1所述的方法，還包括由所述處理器將所述圖像內(nèi)容信息返回給所述 移動(dòng)設(shè)備。
12. -種用于訪(fǎng)問(wèn)信息的服務(wù)器，包括： 處理器； 通信接口，所述通信接口與所述處理器和網(wǎng)絡(luò)進(jìn)行通信；以及 存儲(chǔ)器，所述存儲(chǔ)器與所述處理器進(jìn)行通信、并且存儲(chǔ)數(shù)據(jù)以及使得所述處理器執(zhí)行 包括下述項(xiàng)的多個(gè)操作的指令： 接收表示由移動(dòng)設(shè)備捕捉的圖像的圖像數(shù)據(jù)； 接收指示出所述移動(dòng)設(shè)備捕捉所述圖像的位置的位置數(shù)據(jù)； 根據(jù)所述圖像數(shù)據(jù)確定圖像屬性信息； 確定所述圖像屬性信息是否在預(yù)定的匹配閾值內(nèi)匹配先前獲得的屬性信息，所述先前 獲得的屬性信息是從先前獲得的圖像數(shù)據(jù)獲得的，所述先前獲得的圖像數(shù)據(jù)表示在從所述 移動(dòng)設(shè)備捕捉所述圖像的位置起的預(yù)定距離內(nèi)捕捉的先前圖像；以及 在所述圖像屬性信息在所述預(yù)定的匹配閾值內(nèi)匹配所述先前獲得的屬性信息的情況 下，基于所述位置數(shù)據(jù)來(lái)訪(fǎng)問(wèn)圖像內(nèi)容信息的裝置，其中所述內(nèi)容信息標(biāo)識(shí)出與所述先前 獲得的圖像數(shù)據(jù)相關(guān)聯(lián)并且與所述位置相關(guān)聯(lián)的所述圖像的內(nèi)容。
13. 如權(quán)利要求12所述的服務(wù)器，其中，所述圖像屬性信息包括以下各項(xiàng)中的至少一 項(xiàng)： 所述圖像的直方圖，并且其中所述先前獲得的屬性信息包括先前確定的所述先前圖像 的直方圖；以及 通過(guò)光學(xué)字符辨識(shí)從所述圖像確定的字符，并且其中所述先前獲得的屬性信息包括先 前確定的所述先前圖像的字符。
14. 如權(quán)利要求12所述的服務(wù)器，其中所述指令還使得所述處理器執(zhí)行下述操作： 確定與所述圖像內(nèi)容信息相關(guān)聯(lián)的搜索字詞；以及 基于所述搜索字詞執(zhí)行數(shù)據(jù)搜索。
15. 如權(quán)利要求12所述的服務(wù)器，其中所述指令還使得所述處理器執(zhí)行下述操作： 接收所述移動(dòng)設(shè)備的移動(dòng)設(shè)備標(biāo)識(shí)符； 訪(fǎng)問(wèn)與所述移動(dòng)設(shè)備標(biāo)識(shí)符相關(guān)聯(lián)的簡(jiǎn)檔信息，其中所述簡(jiǎn)檔信息包括與所述移動(dòng)設(shè) 備的用戶(hù)相關(guān)聯(lián)的用戶(hù)行為信息；以及 基于所述簡(jiǎn)檔信息來(lái)選擇所述圖像內(nèi)容信息的一部分。
16. -種用于訪(fǎng)問(wèn)信息的方法，包括： 利用移動(dòng)設(shè)備來(lái)捕捉圖像； 由處理器確定所述成像設(shè)備的位置； 由所述處理器根據(jù)所述圖像創(chuàng)建圖像數(shù)據(jù)； 由所述處理器根據(jù)所述圖像數(shù)據(jù)確定圖像屬性信息； 由所述處理器通過(guò)網(wǎng)絡(luò)接口將所述圖像屬性信息發(fā)送到數(shù)據(jù)服務(wù)器，其中所述圖像屬 性信息是與要求確定所述圖像屬性信息是否在預(yù)定的匹配閾值內(nèi)匹配先前獲得的屬性信 息的請(qǐng)求一起被發(fā)送的，所述先前獲得的屬性信息是從先前獲得的圖像數(shù)據(jù)獲得的，所述 先前獲得的圖像數(shù)據(jù)表示在從所述移動(dòng)設(shè)備捕捉所述圖像的位置起的預(yù)定距離內(nèi)捕捉的 先前圖像；以及 如果所述圖像屬性信息在所述預(yù)定的匹配閾值內(nèi)匹配所述先前獲得的屬性信息，則由 所述處理器基于所述位置數(shù)據(jù)來(lái)接收?qǐng)D像內(nèi)容信息，其中所述內(nèi)容信息標(biāo)識(shí)出與所述先前 獲得的圖像數(shù)據(jù)相關(guān)聯(lián)并且與所述位置相關(guān)聯(lián)的所述圖像的內(nèi)容。
17. 如權(quán)利要求16所述的方法，還包括由所述處理器向搜索引擎發(fā)送搜索請(qǐng)求，其中 所述搜索請(qǐng)求包括所述圖像內(nèi)容信息的至少一部分。
18. -種用于訪(fǎng)問(wèn)信息的網(wǎng)絡(luò)設(shè)備，包括： 處理器； 通信接口，所述通信接口與所述處理器和網(wǎng)絡(luò)進(jìn)行通信； 圖像處理組件，所述圖像處理組件與所述處理器進(jìn)行通信； 位置檢測(cè)器，所述位置檢測(cè)器與所述處理器進(jìn)行通信； 輸出組件，所述輸出組件與所述處理器進(jìn)行通信；以及 存儲(chǔ)器，所述存儲(chǔ)器與所述處理器進(jìn)行通信、并且存儲(chǔ)數(shù)據(jù)以及使得所述處理器執(zhí)行 包括下述項(xiàng)的多個(gè)操作的指令： 使得所述圖像處理組件捕捉圖像； 使得所述位置檢測(cè)器確定所述成像設(shè)備的位置； 根據(jù)所述圖像創(chuàng)建圖像數(shù)據(jù)； 根據(jù)所述圖像數(shù)據(jù)確定圖像屬性信息； 通過(guò)網(wǎng)絡(luò)接口將所述圖像屬性信息發(fā)送到數(shù)據(jù)服務(wù)器，其中所述圖像屬性信息是與要 求確定所述圖像屬性信息是否在預(yù)定的匹配閾值內(nèi)匹配先前獲得的屬性信息的請(qǐng)求一起 被發(fā)送的，所述先前獲得的屬性信息是從先前獲得的圖像數(shù)據(jù)獲得的，所述先前獲得的圖 像數(shù)據(jù)表示在從所述移動(dòng)設(shè)備捕捉所述圖像的位置起的預(yù)定距離內(nèi)捕捉的先前圖像； 在所述圖像屬性信息在所述預(yù)定的匹配閾值內(nèi)匹配所述先前獲得的屬性信息的情況 下，基于所述位置數(shù)據(jù)來(lái)接收?qǐng)D像內(nèi)容信息，其中所述內(nèi)容信息標(biāo)識(shí)出與所述先前獲得的 圖像數(shù)據(jù)相關(guān)聯(lián)并且與所述位置相關(guān)聯(lián)的所述圖像的內(nèi)容；以及 利用所述輸出組件輸出所述圖像內(nèi)容信息。
19. 如權(quán)利要求18所述的網(wǎng)絡(luò)設(shè)備，其中所述網(wǎng)絡(luò)設(shè)備包括移動(dòng)設(shè)備。
【文檔編號(hào)】H04W8/18GK104239408SQ201410374755
【公開(kāi)日】2014年12月24日 申請(qǐng)日期:2009年4月20日 優(yōu)先權(quán)日:2008年5月15日
【發(fā)明者】阿倫·拉瑪努嘉帕若姆, 馬爾科姆·斯萊尼 申請(qǐng)人:雅虎公司