從照片中進(jìn)行事件確定的制作方法
【專利摘要】基于圖像和與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)可確定事件。與圖像相關(guān)聯(lián)的事件類型可基于圖像的概念來確定。可基于上下文數(shù)據(jù)從事件數(shù)據(jù)庫檢索事件列表。檢索到的事件列表可接著基于所確定的事件類型和上下文數(shù)據(jù)來進(jìn)行排名。通過此事件確定，僅僅通過捕捉特定位置的圖像，用戶可獲得發(fā)生在該特定位置的一個(gè)或多個(gè)事件的信息，從而使用戶無需搜索并瀏覽互聯(lián)網(wǎng)或小冊子以定位在該特定位置的一個(gè)或多個(gè)事件的信息。
【專利說明】從照片中進(jìn)行事件確定
【背景技術(shù)】
[0001]如今，越來越多的人為了家庭度假和/或商務(wù)旅行而去不同地方并跨國家旅行。不同于去流行的觀光點(diǎn)，游客可能想要參加被安排要發(fā)生在他/她正游覽的城市的事件。然而，除非他/她通過，例如，與當(dāng)?shù)厝藚f(xié)商和/或?yàn)g覽游覽勝地網(wǎng)站(如果可用)查找事件，提前計(jì)劃以找出什么事件將在那個(gè)城市發(fā)生，否則游客可能不知道事件被安排發(fā)生。因此，如果游客碰巧遇到正在進(jìn)行的事件，游客可能不知道這事件是啥，特別是如果游客不熟悉當(dāng)?shù)仫L(fēng)俗。此外，游客可能不能輕易知道事件的類型，例如，游客不會(huì)說當(dāng)?shù)卣Z言。

【發(fā)明內(nèi)容】

[0002]本
【發(fā)明內(nèi)容】
介紹了將在以下【具體實(shí)施方式】中進(jìn)一步描述的事件確定的簡化概念。本概述并不旨在標(biāo)識所要求保護(hù)的主題的必要特征，也不旨在用于確定所要求保護(hù)的主題的范圍。
[0003]本申請描述了事件確定的示例實(shí)施例。在一個(gè)實(shí)施例中，接收圖像以及與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)。上下文數(shù)據(jù)可包括例如與圖像相關(guān)聯(lián)的空間信息和時(shí)間信息。在一個(gè)實(shí)施例中，空間信息可包括捕捉圖像的位置。在另一實(shí)施例中，空間信息可包括圖像中所示的焦點(diǎn)的位置。在一個(gè)實(shí)施例中，時(shí)間信息可包括捕捉圖像的日期和/或時(shí)間。在某些實(shí)施例中，時(shí)間可以是針對幾乎實(shí)時(shí)地發(fā)生(例如，將要開始、正在進(jìn)行、或剛完成)的事件的。
[0004]該上下文數(shù)據(jù)可與事件數(shù)據(jù)庫進(jìn)行比較來檢索第一事件列表(例如，被安排在大致在捕捉該圖像的同時(shí)大致在該圖像的附近發(fā)生的事件，和/或臨時(shí)發(fā)生的緊急事件)?？煞治鲈搱D像以確定圖像中所示的事件的事件類型(例如，體育、音樂會(huì)、演講等)?？梢詫⒌谝涣斜碇械氖录氖录愋团c所確定的事件類型進(jìn)行比較來獲得第二事件列表，該第二事件列表可以作為可在圖像中示出的潛在事件來呈現(xiàn)給用戶。
【專利附圖】

【附圖說明】
[0005]參考附圖闡述詳細(xì)描述。在附圖中，附圖標(biāo)記中最左邊的數(shù)字標(biāo)識該附圖標(biāo)記首次出現(xiàn)的附圖。在不同附圖中使用相同的附圖標(biāo)記指示相似或相同的項(xiàng)。
[0006]圖1示出了包括示例事件確定系統(tǒng)的示例性環(huán)境。
[0007]圖2更詳細(xì)地示出了圖1的示例事件確定系統(tǒng)。
[0008]圖3示出了確定圖像中所示的事件的事件類型的示例性方法。
[0009]圖4示出了確定與圖像中所示的事件相關(guān)的事件列表的示例性方法。
【具體實(shí)施方式】[0010]概覽
[0011]如上所述，旅行到一個(gè)城市的游客可能不知道該城市中發(fā)生的任何事件，即使是諸如舞蹈表演或節(jié)日活動(dòng)等事件將要發(fā)生，正在進(jìn)行，或剛在游客周圍發(fā)生也可能不知道。例如，到紐約市的游客可能在周六早晨在聯(lián)合廣場附近閑逛。某些事件可能正在聯(lián)合廣場上進(jìn)行。然而，如果例如游客不會(huì)說英語，則該游客將無法詢問其他人在聯(lián)合廣場中或其附近是否有任何事件或該事件的性質(zhì)。
[0012]此外，即使游客知道聯(lián)合廣場中正在發(fā)生事件，但他/她可能不知道該事件到底是什么以及該事件具有什么時(shí)間表。游客可能需要獲得小冊子等來確定該事件及其時(shí)間表是什么，假定存在關(guān)于該事件的正確的小冊子。大多數(shù)時(shí)間，由于游客可能需要花費(fèi)來確定事件的時(shí)間量以及他/她是否將對該事件感興趣的不確定性，游客可能放棄試圖確定該事件。因此，游客可能錯(cuò)過本來該游客會(huì)感興趣的事件。
[0013]本發(fā)明描述了一種事件確定系統(tǒng)，該系統(tǒng)確定事件和/或事件的性質(zhì)，而不需要用戶事先知道該事件是什么。
[0014]一般而言，用戶可使用客戶機(jī)設(shè)備來獲得其中發(fā)生事件的場景的信息。作為示例而非局限，事件可包括事先預(yù)安排的計(jì)劃的或排定的事件(如，音樂、體育事件、節(jié)日活動(dòng)等)，以及臨時(shí)發(fā)生的緊急事件(例如，車禍、地震等)。在一個(gè)實(shí)施例中，用戶可使用例如客戶機(jī)設(shè)備的(靜止或視頻)照相機(jī)來捕捉其中正在發(fā)生該事件的場景的圖像。響應(yīng)于接收到用戶將圖像捕捉設(shè)備(例如，客戶機(jī)設(shè)備的照相機(jī))指向其中正在發(fā)生事件的場景的指示，客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用可自動(dòng)捕捉該場景的圖像而無需用戶物理地拍攝該場景的圖像。在其他實(shí)施例中，客戶機(jī)設(shè)備或應(yīng)用可響應(yīng)于來自用戶的提示來捕捉場景的圖像。
[0015]另外地或另選地，用戶可移動(dòng)客戶機(jī)設(shè)備來以不同的觀看方向和/或不同程度變焦獲得發(fā)生事件的各種場景。響應(yīng)于用戶移動(dòng)客戶機(jī)設(shè)備，客戶機(jī)設(shè)備或應(yīng)用可連續(xù)地或定期地捕捉事件的各種場景。
[0016]在任一情況下，響應(yīng)于捕捉該場景的圖像，客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用可將該圖像發(fā)送到事件確定系統(tǒng)。如果客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用用于捕捉事件的各種場景，則該應(yīng)用可連續(xù)地或以預(yù)定時(shí)間間隔將該事件的各種場景的圖像發(fā)送到事件確定系統(tǒng)。
[0017]在一個(gè)實(shí)施例中，客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用可進(jìn)一步發(fā)送與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)。在某些實(shí)施例中，上下文數(shù)據(jù)可包括與圖像相關(guān)聯(lián)的空間信息。作為示例而非限制，空間信息可包括客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用捕捉圖像的位置。在一個(gè)實(shí)施例中，該位置可基于包括在客戶機(jī)設(shè)備中的全球定位系統(tǒng)(GPS)、基于客戶機(jī)設(shè)備在蜂窩網(wǎng)絡(luò)中的位置(例如，基于客戶機(jī)設(shè)備連接到的蜂窩塔)、基于到WiFi或其他無線網(wǎng)絡(luò)的連接等來確定。
[0018]另外地或另選地，空間信息可包括用戶提供的位置的信息。例如，用戶可通過輸入例如城市中的建筑物的名稱和/或兩條街或路的十字路口來向客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用提供該位置的估計(jì)。
[0019]另外地或另選地，空間信息可包括在圖像中捕捉的位置信息。例如，用戶可使用客戶機(jī)設(shè)備來捕捉包括建筑物名稱、街道指示牌和/或指示例如聯(lián)合廣場等具體位置的已識別對象的圖像。
[0020]在一個(gè)實(shí)施例中，上下文數(shù)據(jù)還可包括與圖像相關(guān)聯(lián)的時(shí)間信息。作為示例而非限制，時(shí)間信息可包括客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用捕捉圖像的日期和/或時(shí)間。
[0021]另外地或另選地，時(shí)間信息可包括客戶機(jī)設(shè)備的用戶輸入的時(shí)間、時(shí)間范圍、日期或日期范圍。例如，當(dāng)用戶位于例如聯(lián)合廣場等具體位置的本地或遠(yuǎn)處時(shí)，用戶可使用客戶機(jī)設(shè)備來捕捉該具體位置。用戶可能希望確定在客戶機(jī)設(shè)備所捕捉的該具體位置處是否曾經(jīng)、正在或?qū)⒁M(jìn)行任何事件。用戶可輸入用戶想要知道在該具體位置處是否曾經(jīng)、正在或?qū)⒁M(jìn)行事件的時(shí)間、事件范圍、日期或日期范圍。具體地，用戶可簡單地通過捕捉具體位置(例如，諸如聯(lián)合廣場等建筑物)的圖像并輸入用戶想要知道的時(shí)間、時(shí)間范圍、日期或日期范圍來確定在該具體位置處曾經(jīng)、正在或?qū)⒁M(jìn)行什么事件。
[0022]在一個(gè)實(shí)施例中，用戶可將包括圖像和/或與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)的查詢發(fā)送到事件確定系統(tǒng)。響應(yīng)于從客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用接收到作為查詢的圖像和/或上下文數(shù)據(jù)，事件確定系統(tǒng)可確定圖像中所示的事件。在一個(gè)實(shí)施例中，事件確定系統(tǒng)可確定與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)是否存在于該查詢中。如果為是，則事件確定系統(tǒng)可確定該上下文數(shù)據(jù)包括與圖像相關(guān)聯(lián)的空間信息和/或時(shí)間信息。
[0023]在其他實(shí)施例中，事件確定系統(tǒng)可確定查詢中沒有上下文數(shù)據(jù)。響應(yīng)于確定查詢中沒有上下文數(shù)據(jù)，即，從客戶機(jī)設(shè)備僅接收到圖像，則事件確定系統(tǒng)可使該系統(tǒng)接收到該圖像的日期和/或時(shí)間變?yōu)榕c該圖像相關(guān)聯(lián)的日期和/或時(shí)間(即，時(shí)間信息)。此外，事件確定系統(tǒng)可執(zhí)行對象識別來從圖像中估計(jì)或推斷位置(即，空間信息)。作為示例而非局限，圖像可包括諸如聯(lián)合廣場等建筑物的名稱，或諸如埃菲爾鐵塔等公知對象?；趯ο笞R別的結(jié)果，事件確定系統(tǒng)然后可估計(jì)或推斷與圖像相關(guān)聯(lián)的位置。
[0024]另外地或另選地，事件確定系統(tǒng)可通過確定客戶機(jī)設(shè)備在蜂窩網(wǎng)絡(luò)中的位置(例如，基于客戶機(jī)設(shè)備連接到的蜂窩塔)、基于到WiFi或其他無線網(wǎng)絡(luò)的連接等來確定與圖像相關(guān)聯(lián)的位置。
[0025]在某些實(shí)施例中，事件確定系統(tǒng)可接收與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)，該上下文數(shù)據(jù)可僅包括與圖像相關(guān)聯(lián)的空間信息或時(shí)間信息。在任一情況下，事件確定系統(tǒng)或者可從圖像中推斷位置，和/或?qū)D像的接收日期和/或時(shí)間分別變?yōu)榕c圖像相關(guān)聯(lián)的日期和/或時(shí)間。
[0026]響應(yīng)于確定與圖像相關(guān)聯(lián)的`空間信息和時(shí)間信息，事件確定系統(tǒng)可基于與圖像相關(guān)聯(lián)的空間信息來從事件數(shù)據(jù)庫中檢索事件列表。在某些實(shí)施例中，所檢索的列表中的事件可包括發(fā)生在距離空間信息中指示的位置預(yù)定距離內(nèi)的事件。在一個(gè)實(shí)施例中，包括在所檢索的列表中的事件可包括預(yù)先排定為在空間信息中所指示的位置發(fā)生的排定事件。另外地或另選地，所檢索的列表中的事件可包括臨時(shí)發(fā)生的緊急事件。
[0027]在某些實(shí)施例中，事件數(shù)據(jù)庫可在從客戶機(jī)設(shè)備接收查詢之前獲得排定事件和/或緊急事件。另外地或另選地，事件數(shù)據(jù)庫可在從客戶機(jī)設(shè)備接收查詢之后基本實(shí)時(shí)地獲得排定事件和/或緊急事件。在一個(gè)實(shí)施例中，事件數(shù)據(jù)庫可通過從主持網(wǎng)站(例如，博物館網(wǎng)站)、信息網(wǎng)站(例如，旅游勝地網(wǎng)站)等爬行并提取事件信息來獲得排定事件。另外，事件數(shù)據(jù)庫可從諸如收集本地區(qū)和/或國家中的各個(gè)地區(qū)和/或跨國家的事件的網(wǎng)站等各種綜合網(wǎng)站來獲得排定事件。
[0028]在一個(gè)實(shí)施例中，事件數(shù)據(jù)庫還可通過從各種社交網(wǎng)絡(luò)源檢查并提取信息來獲得緊急事件。信息源的示例包括但不限于，網(wǎng)站張貼博客或微博(例如，Twitter.等)、社交網(wǎng)站(例如,Facebook ?等)、RSS源等。事件數(shù)據(jù)庫可檢查在這些社交網(wǎng)絡(luò)源的一個(gè)或多個(gè)中討論并張貼的信息，并確定在特定時(shí)間或時(shí)間段在特定位置是否發(fā)生緊急事件。事件數(shù)據(jù)庫然后將所確定的緊急事件的信息存儲在數(shù)據(jù)庫中。[0029]除了基于與圖像相關(guān)聯(lián)的空間信息來檢索事件列表之外，事件確定系統(tǒng)還可基于與圖像相關(guān)聯(lián)的時(shí)間信息來檢索事件列表。在一個(gè)實(shí)施例中，事件確定系統(tǒng)可檢索進(jìn)一步在時(shí)間信息中指示的時(shí)間或時(shí)間范圍之前或之后的預(yù)定時(shí)間范圍內(nèi)發(fā)生的事件。
[0030]在一個(gè)實(shí)施例中，事件確定系統(tǒng)可確定時(shí)間信息中指示的時(shí)間、時(shí)間范圍、日期或日期范圍是指過去的時(shí)間(例如，I小時(shí)之前、一天之前)、當(dāng)前時(shí)間(例如，在當(dāng)前時(shí)間的預(yù)定時(shí)間范圍內(nèi)，如在當(dāng)前時(shí)間的5分鐘內(nèi))、還是將來的時(shí)間(例如，I小時(shí)之后、一天之后等)。響應(yīng)于確定時(shí)間信息中指示的時(shí)間，事件確定系統(tǒng)可檢索在時(shí)間信息中指示的時(shí)間、時(shí)間范圍、日期或日期范圍的預(yù)定時(shí)間范圍內(nèi)發(fā)生的事件。
[0031]另外或另選地，事件確定系統(tǒng)可執(zhí)行圖像的內(nèi)容分析來確定圖像中的概念。作為示例而非局限，概念可包括但不限于，圖像中所示的動(dòng)作(例如，舞蹈和音樂表演)、對象(例如，演員和建筑物)和/或背景場景(例如，湖和風(fēng)景)等。事件確定系統(tǒng)可從圖像中提取圖像特征，并基于所提取的特征來確定圖像中的概念。
[0032]在一個(gè)實(shí)施例中，響應(yīng)于確定圖像中的概念，事件確定系統(tǒng)可基于該概念來確定圖像中所示的事件的事件類型(例如，體育、音樂會(huì)、演講等)。事件確定系統(tǒng)可將所確定的事件類型與例如從事件數(shù)據(jù)庫所檢索的事件列表中的事件進(jìn)行比較，來獲得細(xì)化的事件列表。例如，事件確定系統(tǒng)可將所檢索的列表中的事件保留在細(xì)化列表中，并響應(yīng)于確定該細(xì)化事件列表中的第一事件的事件類型匹配所確定的事件類型而第二事件的事件類型不匹配，將該第一事件放在比第二事件更高排名的位置。
[0033]另外地或另選地，事件確定系統(tǒng)可在細(xì)化事件列表中包括其事件類型匹配所確定的事件類型的事件的細(xì)節(jié)，以及其事件類型不匹配所確定的事件類型的事件的簡要描述。例如，事件的細(xì)節(jié)可包括但不限于，事件名稱、事件的描述、事件的時(shí)間表、事件的位置、和/或與事件相關(guān)聯(lián)的關(guān)于進(jìn)一步信息的web鏈接等等。事件的簡要描述可包括事件的細(xì)節(jié)的子集，如事件的名稱和/或與事件相關(guān)聯(lián)的web鏈接?；蛘撸录_定系統(tǒng)可在細(xì)化事件列表中僅返回其事件類型匹配所確定的事件類型的事件。
[0034]在獲得了細(xì)化事件列表或單個(gè)匹配的事件的信息之后，事件確定系統(tǒng)可將該細(xì)化事件列表或單個(gè)匹配的事件的信息發(fā)送到客戶機(jī)設(shè)備。在一個(gè)實(shí)施例中，事件確定系統(tǒng)可將細(xì)化列表或單個(gè)匹配的事件的信息以文本消息、電子郵件、音頻消息和/或網(wǎng)頁的形式發(fā)送到客戶機(jī)設(shè)備。
[0035]響應(yīng)于從事件確定系統(tǒng)接收到細(xì)化事件列表或單個(gè)匹配的事件的信息，客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用可在客戶機(jī)設(shè)備的顯示器上顯示細(xì)化事件列表或單個(gè)匹配的事件的信息?；蛘?，如果存在音頻消息，則客戶機(jī)設(shè)備可例如通過揚(yáng)聲器向用戶播放該音頻消息。在某些實(shí)施例中，客戶機(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用可在圖像上擴(kuò)充細(xì)化事件列表或單個(gè)匹配的事件的信息。例如，客戶機(jī)設(shè)備可將事件的細(xì)節(jié)或其他信息覆蓋到客戶機(jī)設(shè)備的照相機(jī)的顯示器或取景器上。
[0036]另外，用戶可進(jìn)一步移動(dòng)客戶機(jī)設(shè)備來從不同方向和/或以不同程度變焦捕捉同一事件的另一場景的新圖像?？蛻魴C(jī)設(shè)備或客戶機(jī)設(shè)備的應(yīng)用可在有或沒有該新圖像的上下文數(shù)據(jù)的情況下將該新圖像發(fā)送到事件確定系統(tǒng)。
[0037]響應(yīng)于接收到有或沒有新圖像的上下文數(shù)據(jù)的新圖像，事件確定系統(tǒng)可基于所接收的有或沒有新圖像的上下文數(shù)據(jù)的新圖像來細(xì)化先前細(xì)化的事件列表。在一個(gè)實(shí)施例中，事件確定系統(tǒng)可保留匹配所接收的有或沒有圖像的上下文數(shù)據(jù)的新圖像的事件，并基于所接收的新圖像和圖像的上下文數(shù)據(jù)(如果有的話)來調(diào)整所保留的事件的排名。在另一實(shí)施例中，事件確定系統(tǒng)可基于所接收的新圖像和所接收的新圖像的上下文數(shù)據(jù)(如果有的話)來檢索新事件列表，并將該新列表與先前的細(xì)化列表進(jìn)行比較來獲得兩個(gè)列表中都存在的事件。事件確定系統(tǒng)然后可將共同事件的列表提供給客戶機(jī)設(shè)備。在一個(gè)實(shí)施例中，共同事件可以根據(jù)新列表中的對應(yīng)的排名次序、先前的細(xì)化列表中的對應(yīng)的排名次序、或新列表和先前的細(xì)化列表中的對應(yīng)的排名次序的加權(quán)組合來排序。
[0038]所描述的系統(tǒng)允許在事先沒有用戶對事件的知識的情況下自動(dòng)確定事件。在某些實(shí)施例中，所描述的系統(tǒng)允許用戶簡單地通過發(fā)送其中正發(fā)生事件的場景的圖像來確定事件和對應(yīng)的時(shí)間表，并基本實(shí)時(shí)地為用戶確定事件及其信息?？捎伤枋龅南到y(tǒng)確定的事件可以是過去的事件、當(dāng)前事件或?qū)硎录?。在將來事件的情況下，圖像將不是事件本身的圖像，而是在將來將在排定時(shí)間發(fā)生事件的位置的圖像。
[0039]多個(gè)不同的實(shí)現(xiàn)和實(shí)施例將在以下描述。在接下來的章節(jié)中，描述了適用于實(shí)施描述的各種實(shí)現(xiàn)的示例環(huán)境。在該討論之后，描述用于事件確定系統(tǒng)的系統(tǒng)、設(shè)備和過程的說明性實(shí)現(xiàn)。
[0040]示例性體系結(jié)構(gòu)
[0041]圖1示出了可用于實(shí)現(xiàn)事件確定系統(tǒng)的示例性環(huán)境100。環(huán)境100包括一個(gè)或多個(gè)用戶102-1、102-2、……U02-N (統(tǒng)稱為102)、網(wǎng)絡(luò)104以及事件確定系統(tǒng)106。用戶
102可使用一個(gè)或多個(gè)客戶機(jī)設(shè)備108-1、108-2、......、108_M (統(tǒng)稱為108)通過網(wǎng)絡(luò)104
與事件確定系統(tǒng)106通信。
[0042]客戶機(jī)設(shè)備108可以被實(shí)現(xiàn)為各種常規(guī)計(jì)算設(shè)備中的任一種，包括例如，個(gè)人計(jì)算機(jī)、筆記本或便攜式計(jì)算機(jī)、手`持式設(shè)備、上網(wǎng)本、因特網(wǎng)設(shè)備、便攜式閱讀設(shè)備、電子書閱讀器設(shè)備、圖形輸入板或平板計(jì)算機(jī)、電視機(jī)、機(jī)頂盒、游戲控制臺、移動(dòng)設(shè)備(例如，移動(dòng)電話、個(gè)人數(shù)字助理、智能電話等)、媒體播放器等、或其組合。
[0043]網(wǎng)絡(luò)104可以是無線或有線網(wǎng)絡(luò)，或其組合。網(wǎng)絡(luò)104可以是各單獨(dú)網(wǎng)絡(luò)的集合，這些網(wǎng)絡(luò)彼此互連并用作單個(gè)大型網(wǎng)絡(luò)(例如，因特網(wǎng)或內(nèi)聯(lián)網(wǎng))。這樣的單獨(dú)網(wǎng)絡(luò)的示例包括，但不僅限于，局域網(wǎng)(LAN)、廣域網(wǎng)(WAN)，以及城域網(wǎng)(MAN)。此外，各單獨(dú)的網(wǎng)絡(luò)也可以是無線或有線網(wǎng)絡(luò)，或其組合。
[0044]在一個(gè)實(shí)施例中，客戶機(jī)設(shè)備108包括耦合到存儲器112的處理器110。存儲器112包括應(yīng)用114和其他程序數(shù)據(jù)116。存儲器112可耦合到其他設(shè)備、與其他設(shè)備相關(guān)聯(lián)、和/或可由其他設(shè)備訪問，其他設(shè)備諸如網(wǎng)絡(luò)服務(wù)器、路由器、和/或其他客戶機(jī)設(shè)備108。
[0045]在一個(gè)實(shí)施例中，用戶102可使用客戶機(jī)設(shè)備108的應(yīng)用114來捕捉顯示事件的圖像和/或與該事件或圖像相關(guān)聯(lián)的上下文數(shù)據(jù)，并將該圖像和/或上下文數(shù)據(jù)發(fā)送到事件確定系統(tǒng)106。在某些實(shí)施例中，應(yīng)用114可捕捉圖像而無需用戶102使用例如客戶機(jī)設(shè)備108的照相機(jī)來實(shí)際拍攝圖像(例如，該圖像可簡單地通過將取景器指向事件來捕捉)。另外地或另選地，用戶102可移動(dòng)客戶機(jī)設(shè)備108來從不同視圖，如從不同方向或以不同程度變焦捕捉事件。另外地或另選地，用戶可使用應(yīng)用114來連續(xù)地或在定期的基礎(chǔ)上(例如，每隔5秒)捕捉事件的圖像。
[0046]響應(yīng)于從客戶機(jī)設(shè)備108接收到包括圖像和/或上下文數(shù)據(jù)的查詢，事件確定系統(tǒng)106可從事件數(shù)據(jù)庫(未示出)中檢索并確定與圖像中所示的事件相關(guān)的一個(gè)或多個(gè)事件，并將該一個(gè)或多個(gè)事件的信息返回給客戶機(jī)設(shè)備108以便顯示在顯示器上(未示出)。
[0047]在一個(gè)實(shí)施例中，環(huán)境100還可包括排定事件源118和緊急事件源120。排定事件源118可包括但不限于，諸如旅游勝地網(wǎng)站等信息網(wǎng)站、諸如主持事件的組織的網(wǎng)站等主持網(wǎng)站、諸如收集一個(gè)或多個(gè)地區(qū)中的事件的網(wǎng)站等事件網(wǎng)站等。緊急事件源120可包括但不限于，博客網(wǎng)站(如Twitter _)、社交網(wǎng)站(例如，F(xiàn)acebook藝等)、和/或RSS源等。
[0048]圖2更詳細(xì)地示出了事件確定系統(tǒng)106。在一個(gè)實(shí)施例中，系統(tǒng)106可包括但不限于，一個(gè)或多個(gè)處理器202、網(wǎng)絡(luò)接口 204、存儲器206和輸入/輸出接口 208。
[0049]存儲器206可包括諸如隨機(jī)存取存儲器(RAM)等易失性存儲器形式的和/或諸如只讀存儲器(ROM)或閃速RAM等非易失性存儲器形式的計(jì)算機(jī)可讀存儲介質(zhì)。存儲器206是計(jì)算機(jī)可讀存儲介質(zhì)的示例。計(jì)算機(jī)可讀介質(zhì)包括至少兩種類型的計(jì)算機(jī)可讀介質(zhì)，即計(jì)算機(jī)存儲介質(zhì)和通信介質(zhì)。
[0050]計(jì)算機(jī)存儲介質(zhì)包括以存儲如計(jì)算機(jī)可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊或其他數(shù)據(jù)等信息的任何方法或技術(shù)來實(shí)現(xiàn)的易失性和非易失性、可移動(dòng)和不可移動(dòng)介質(zhì)。計(jì)算機(jī)存儲介質(zhì)包括但不限于，相變存儲器(PRAM)、靜態(tài)隨機(jī)存取存儲器(SRAM)、動(dòng)態(tài)隨機(jī)存取存儲器(DRAM)、其他類型的隨機(jī)存取存儲器(RAM)、只讀存儲器(ROM)、電可擦除可編程只讀存儲器(EEPR0M)、閃存或其他存儲器技術(shù)、光盤只讀存儲器(⑶-ROM)、數(shù)字多功能盤(DVD )或其它光存儲、磁帶盒、磁帶、磁盤存儲或其它磁存儲設(shè)備、或可用于存儲由計(jì)算設(shè)備訪問的信息的任何其他非傳輸介質(zhì)。
[0051]相反，通信介質(zhì)通常用諸如載波或其他傳輸機(jī)制等已調(diào)制數(shù)據(jù)信號來體現(xiàn)計(jì)算機(jī)可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊或其他數(shù)據(jù)。如本文所限定的，計(jì)算機(jī)存儲介質(zhì)不包括通信介質(zhì)。
[0052]存儲器206可包括程序模塊210和程序數(shù)據(jù)212。在一個(gè)實(shí)施例中，程序模塊210可包括可從客戶機(jī)設(shè)備108接收圖像的輸入模塊214。另外，輸入模塊214還可接收與圖像或圖像中所示的事件相關(guān)聯(lián)的上下文數(shù)據(jù)。在一個(gè)實(shí)施例中，與圖像或圖像中所示的事件相關(guān)聯(lián)的上下文數(shù)據(jù)可包括圖像或圖像中所示的事件的空間信息。作為示例而非限制，空間信息可包括捕捉圖像的位置。例如，客戶機(jī)設(shè)備108可包括GPS系統(tǒng)，并且可將GPS數(shù)據(jù)連同圖像一起發(fā)送到事件確定系統(tǒng)106?；蛘撸臻g信息可包括用戶102輸入的位置估計(jì)。該位置估計(jì)可包括例如，建筑物名稱、兩條街之間的十字路口等。
[0053]另外地或另選地，與圖像或圖像中所示的事件相關(guān)聯(lián)的上下文數(shù)據(jù)還可包括圖像或圖像中所示的事件的時(shí)間信息。在一個(gè)實(shí)施例中，時(shí)間信息可包括例如捕捉圖像的日期和/或時(shí)間?；蛘?，時(shí)間信息可包括用戶102輸入的時(shí)間、時(shí)間范圍、日期或日期范圍。
[0054]在一個(gè)實(shí)施例中，響應(yīng)于接收到圖像，接收模塊214可確定與圖像或圖像中所示的事件相關(guān)聯(lián)的上下文數(shù)據(jù)是否存在。取決于上下文數(shù)據(jù)是否存在，接收模塊214可將圖像和/或上下文數(shù)據(jù)發(fā)送到上下文分析模塊216或上下文確定模塊218。
[0055]如果不存在上下文數(shù)據(jù)或者僅存在空間信息或時(shí)間信息中的一個(gè)，則接收模塊214可將圖像發(fā)送到上下文分析模塊216。例如，如果不存在空間信息，則上下文分析模塊216可分析該圖像來確定該圖像的位置。在一個(gè)實(shí)施例中，上下文分析模塊216可執(zhí)行對象識別來確定圖像中是否存在對象(例如，諸如埃菲爾鐵塔等建筑物)。上下文分析模塊216然后可提取對象并使用所提取的對象例如通過圖像搜索引擎來執(zhí)行圖像搜索，圖像搜索引擎可以與事件確定系統(tǒng)106分開或包括在其中。響應(yīng)于識別圖像中的對象，上下文分析模塊216可基于所識別的對象來確定與圖像相關(guān)聯(lián)的位置。例如，上下文分析模塊216可確定圖像中所示的建筑物是埃菲爾鐵塔，并且可確定與圖像相關(guān)聯(lián)的位置是法國巴黎的戰(zhàn)神廣場。
[0056]另外地或另選地，上下文分析模塊216可使用光學(xué)字符識別(OCR)或其他已知的文本識別技術(shù)來確定圖像中示出了文本(例如，街道標(biāo)記、建筑物名稱等)。上下文分析模塊216然后可使用例如搜索引擎來執(zhí)行文本搜索，該搜索引擎可包括在也可不包括在事件確定系統(tǒng)106中。基于文本搜索的搜索結(jié)果，上下文分析模塊216可確定與圖像相關(guān)聯(lián)的位置。
[0057]另外地或另選地，上下文分析模塊216可通過檢查客戶機(jī)設(shè)備108在蜂窩網(wǎng)絡(luò)中的空間信息(例如，基于客戶機(jī)設(shè)備108正連接到的蜂窩塔)，基于客戶機(jī)設(shè)備1008到WiFi或其他無線網(wǎng)絡(luò)的連接等來確定或估計(jì)與圖像相關(guān)聯(lián)的空間信息(例如，位置)。
[0058]在一個(gè)實(shí)施例中，響應(yīng)于確定或估計(jì)與圖像相關(guān)聯(lián)的空間信息，上下文分析模塊216可通過發(fā)送模塊220將所確定的空間信息發(fā)送給客戶機(jī)設(shè)備108以便顯示給用戶102。作為示例而非限制，發(fā)送模塊220可將上下文分析模塊216所確定的空間信息以文本消息、電子郵件、音頻消息等的形式發(fā)送給客戶機(jī)設(shè)備108。此外，所確定的空間信息可被表示為文字表示(例如，建筑物文字名稱、街道文字名等)、圖形表示(例如，指示所確定的空間信息或位置的局部或街道地圖)、和/或音頻表示(例如，記錄的消息)等。用戶102可通過例如客戶機(jī)設(shè)備108的應(yīng)用1114來確認(rèn)、拒絕或修改所確定的空間信息，并將確認(rèn)、拒絕或修改返回給事件確定系統(tǒng)106。響應(yīng)于從客戶機(jī)設(shè)備108接收到確認(rèn)或修改，上下文分析模塊216可基于所確認(rèn)或修改的空間信息或位置來確定與圖像相關(guān)聯(lián)的空間信息。
[0059]如果上下文分析模塊216無法確定與圖像相關(guān)聯(lián)的空間信息或者從客戶機(jī)設(shè)備108接收到拒絕，則上下文分析模塊216可通過發(fā)送模塊220向客戶機(jī)設(shè)備108發(fā)送消息來請求用戶102輸入圖像的位置和/或激活客戶機(jī)設(shè)備108的GPS系統(tǒng)(如果可用)。
[0060]另外地或另選地，如果不存在時(shí)間信息，則上下文分析模塊216可使接收圖像的當(dāng)前時(shí)間變?yōu)榕c圖像或圖像中所示的事件相關(guān)聯(lián)的時(shí)間。響應(yīng)于確定與圖像或圖像中所示的事件相關(guān)聯(lián)的空間信息(即，位置)和/或時(shí)間信息(即，日期和/或時(shí)間)，上下文分析模塊216可將空間信息和/或時(shí)間信息發(fā)送給上下文確定模塊218。
[0061]在一個(gè)實(shí)施例中，上下文確定模塊218可確定時(shí)間信息中指示的時(shí)間、時(shí)間范圍、日期或日期范圍是指過去的時(shí)間(例如，一天之前、I小時(shí)之前等)、當(dāng)前的時(shí)間(例如，在當(dāng)前時(shí)間的預(yù)定時(shí)間范圍內(nèi)，如5分鐘之前)、還是將來的時(shí)間(例如，從現(xiàn)在開始的I小時(shí)、從現(xiàn)在開始的I天等)。
[0062]在一個(gè)實(shí)施例中，響應(yīng)于確定時(shí)間信息中所指示的時(shí)間指過去的時(shí)間或?qū)淼臅r(shí)間，上下文確定模塊218可確定該圖像本身可能不包括用戶102感興趣的事件的任何信息，并且可單獨(dú)基于上下文數(shù)據(jù)(例如，不分析圖像內(nèi)容)來向用戶102返回事件列表。
[0063]或者，上下文確定模塊218可仍然基于時(shí)間信息中指示的時(shí)間距離當(dāng)前時(shí)間有多遠(yuǎn)來確定該圖像是否包括感興趣的事件。作為示例而非限制，上下文確定模塊218可確定時(shí)間信息中指示的日期和時(shí)間在從當(dāng)前日期和時(shí)間開始的預(yù)定時(shí)間差內(nèi)，例如，當(dāng)前時(shí)間的I小時(shí)之后。在這一情況下，上下文確定模塊218可確定該圖像可包括將在與該圖像相關(guān)聯(lián)的具體位置處進(jìn)行的事件的信息。例如，事件可以是節(jié)日活動(dòng)，且圖像可包括小吃攤、廣告牌等，盡管該事件尚未開始。
[0064]響應(yīng)于確定與圖像相關(guān)聯(lián)的上下文數(shù)據(jù)，上下文確定模塊218可以將諸如空間信息和時(shí)間信息等上下文數(shù)據(jù)發(fā)送到事件檢索模塊222。事件檢索模塊222可從事件數(shù)據(jù)庫224檢索事件列表。在一個(gè)實(shí)施例中，事件數(shù)據(jù)庫224可以包括計(jì)劃或排定的事件(預(yù)先安排的(例如，體育事件、節(jié)日活動(dòng)等)。事件數(shù)據(jù)庫224可從各種源獲得這些計(jì)劃或排定的事件。這各種源的示例包括，諸如旅游勝地網(wǎng)站等信息網(wǎng)站、諸如主持事件的組織的網(wǎng)站等主持網(wǎng)站、諸如收集一個(gè)或多個(gè)地區(qū)中的事件的網(wǎng)站等事件網(wǎng)站等。事件數(shù)據(jù)庫24還可通過例如對搜索引擎執(zhí)行搜索來爬行或提取計(jì)劃事件的信息。
[0065]在某些實(shí)施例中，事件數(shù)據(jù)庫224還可包括緊急事件。緊急事件可包括其發(fā)生是未計(jì)劃的和/或臨時(shí)的事件。這些緊急事件的示例可包括車禍、地震等。在一個(gè)實(shí)施例中，事件數(shù)據(jù)庫224可通過爬行并分析一個(gè)或多個(gè)博客網(wǎng)站(如Twitter垂)、社交網(wǎng)站(如Facebook _等)和/或RSS源等中的博客或微博來發(fā)現(xiàn)并獲得緊急事件的信息。
[0066]計(jì)劃事件和/或緊急事件的信息可包括但不限于，事件的標(biāo)題、事件的位置、事件的時(shí)間和日期(或時(shí)間/日期范圍)、事件的描述、與事件相關(guān)聯(lián)的web鏈接、和/或與事件或過去的相似事件相關(guān)聯(lián)的一個(gè)或多個(gè)圖像等等。
[0067]在一個(gè)實(shí)施例中，事件檢索模塊222可基于上下文數(shù)據(jù)從事件數(shù)據(jù)庫224檢索事件列表。作為示例而非限制，事件檢索模塊222可基于空間信息來檢索事件列表。例如，事件檢索模塊222可檢索具有在離上下文數(shù)據(jù)的空間信息中所指示的位置的預(yù)定距離內(nèi)(例如，在諸如100米等物理距離內(nèi)、在圖像或圖像中所示的事件中所示的同一建筑物內(nèi)、在同一街道內(nèi)等)的相關(guān)聯(lián)位置的事件。
[0068]另外地或另選地，事件檢索模塊222可進(jìn)一步基于時(shí)間信息從事件數(shù)據(jù)庫224檢索事件列表。例如，事件檢索模塊222可檢索具有在離上下文數(shù)據(jù)的時(shí)間信息中所指示的日期和/或時(shí)間的預(yù)定時(shí)間范圍內(nèi)(例如，在10分鐘內(nèi)、30分鐘內(nèi)、I小時(shí)內(nèi)等)的相關(guān)聯(lián)日期和/或時(shí)間的事件。
[0069]在一個(gè)實(shí)施例中，事件檢索模塊222可基于對應(yīng)的離上下文數(shù)據(jù)中指示的空間信息和時(shí)間信息的空間距離和/或時(shí)間距離來對事件列表中的事件排序。例如，事件檢索模塊222可將具有更接近上下文數(shù)據(jù)中所指示位置的位置的事件排在比具有離上下文數(shù)據(jù)中指示的位置較遠(yuǎn)的位置的事件高的排名位置。另外地或另選地，事件檢索模塊222可將具有較接近上下文數(shù)據(jù)中所指示日期和/或時(shí)間的日期和/或時(shí)間的事件排在比具有離上下文數(shù)據(jù)中指示的日期和/或時(shí)間較遠(yuǎn)的日期和/或時(shí)間的事件高的排名位置。在其他實(shí)施例中，事件檢索模塊222可將對列表中的事件的排序推遲到確定圖像中所示的事件的事件類型之后。
[0070]在某些實(shí)施例中，圖像分析模塊226可在上下文確定模塊218確定上下文數(shù)據(jù)和/或事件檢索模塊222從數(shù)據(jù)庫224檢索事件列表之前、基本同時(shí)或之后分析圖像。圖像分析模塊226可通過從圖像中提取圖像特征來分析圖像。圖像分析模塊226可采用一種或多種常規(guī)特征提取方法來從圖像中提取圖像特征。特征提取方法的示例包括但不限于，邊緣檢測、角檢測、泡檢測、脊檢測、比例不變特征變換、閾值設(shè)定、泡提取、模板匹配、Hough變換、注意力引導(dǎo)的色彩特征、色彩指紋、多層旋轉(zhuǎn)不變EOH、梯度直方圖、Daubechies小波、臉部特征和/或黑白。
[0071]在一個(gè)實(shí)施例中，圖像分析模塊226可執(zhí)行內(nèi)容分析來確定與圖像相關(guān)聯(lián)的概念。概念可包括圖像中所示的動(dòng)作(例如，打高爾夫)、對象(例如，諸如聯(lián)合廣場等建筑物)和/或背景場景(例如，風(fēng)景)。圖像分析模塊226可基于所提取的圖像特征來確定與圖像相關(guān)聯(lián)的概念。另外，圖像分析模塊226可進(jìn)一步基于概念模型228來確定概念。概念模型228可使用諸如支持向量機(jī)(SVM)等監(jiān)督訓(xùn)練方法，至少基于標(biāo)記的訓(xùn)練數(shù)據(jù)來訓(xùn)練，該標(biāo)記的訓(xùn)練數(shù)據(jù)包括標(biāo)記的圖像、對應(yīng)的事件的信息、和/或與標(biāo)記的圖像相關(guān)聯(lián)的上下文數(shù)據(jù)。另外地或另選地，可使用諸如聚類方法等未監(jiān)督訓(xùn)練方法來訓(xùn)練概念模型228。
[0072]響應(yīng)于確定圖像的概念，圖像分析模塊226可確定圖像或圖像中所示的事件的事件類型。在一個(gè)實(shí)施例中，圖像分析模塊226可基于所確定的概念來確定圖像或圖像中所示的事件的事件類型。另外，圖像分析模塊226可進(jìn)一步基于事件類型模型230來確定圖像或圖像中所示的事件的事件類型。事件類型模型230可使用諸如支持向量機(jī)(SVM)等監(jiān)督訓(xùn)練方法，至少基于標(biāo)記的訓(xùn)練數(shù)據(jù)來訓(xùn)練，該標(biāo)記的訓(xùn)練數(shù)據(jù)包括標(biāo)記的概念、標(biāo)記的圖像、和/或與標(biāo)記的圖像相關(guān)聯(lián)的上下文數(shù)據(jù)。另外地或另選地，可使用諸如聚類方法等未監(jiān)督訓(xùn)練方法來訓(xùn)練事件類型模型230。
[0073]響應(yīng)于確定圖像或圖像中所示的事件的事件類型，可使用排序模塊232來對事件檢索模塊222從事件數(shù)據(jù)庫224檢索的事件列表排序。在一個(gè)實(shí)施例中，排序模塊232可至少基于上下文數(shù)據(jù)(例如，空間信息和時(shí)間信息)和/或所確定的事件類型來對該事件列表排序。在某些實(shí)施例中，響應(yīng)于對事件列表排序來獲得經(jīng)排序的事件列表，排序模塊232可通過發(fā)送模塊220將經(jīng)排序的事件列表發(fā)送到客戶機(jī)設(shè)備108。
[0074]盡管上述實(shí)施例描述了基于與圖像相關(guān)聯(lián)的空間信息和時(shí)間信息以及所確定的事件類型來從事件數(shù)據(jù)庫224確定和/或檢索事件列表，則事件確定系統(tǒng)106可基于空間信息、時(shí)間信息和所確定的事件類型的子集來確定事件列表。作為示例而非限制，事件確定系統(tǒng)106可基于與圖像相關(guān)聯(lián)的空間信息和時(shí)間信息來確定事件列表，并將包括其空間信息和時(shí)間信息匹配與圖像相關(guān)聯(lián)的空間信息和時(shí)間信息的事件的事件列表返回給客戶機(jī)設(shè)備108以便顯示給用戶102。又如，事件確定系統(tǒng)106可基于與圖像相關(guān)聯(lián)的空間信息和所確定的事件類型來確定事件列表，并將包括在空間信息中指示的位置處或其附近發(fā)生且具有匹配所確定事件類型的事件類型的事件的事件列表返回給客戶機(jī)設(shè)備108以便顯示給用戶102，而不管例如日期和/或時(shí)間。
[0075]示例事件數(shù)據(jù)庫
[0076]出于描述的目的，在詳細(xì)描述示例事件數(shù)據(jù)庫224之間描述具體記法。
[0077]在一個(gè)實(shí)施例中，上下文照片或圖像可被定義為p=(img, time, location),其中img是照片或圖像p的圖像內(nèi)容,而time (時(shí)間)和location (位置)=對應(yīng)于照片p的時(shí)間信息(例如，時(shí)間戳)和空間信息(例如，地理坐標(biāo))的(緯度，經(jīng)度)。time和location可以標(biāo)識創(chuàng)建該照片或圖像的唯一空-時(shí)上下文。上下文照片或圖像P可被發(fā)送到事件確定系統(tǒng)106。盡管位置被描述為按照緯度和經(jīng)度來表示，但本發(fā)明不限于此?？墒褂每蓸?biāo)識或近似位置的任何描述。例如，位置可由諸如埃菲爾鐵塔等著名建筑物的名稱、街道地址、兩條街道的十字路口等來表示。[0078]事件可被建模為e= (time, location, title, description, type, media)。在一個(gè)實(shí)施例中，time=(開始，結(jié)束)可定義期間發(fā)生e的時(shí)間區(qū)間。在某些實(shí)施例中，location=(緯度1，經(jīng)度1，緯度2，經(jīng)度2)可表示例如其中會(huì)發(fā)生e的地方的西南和東北角的坐標(biāo)。事件e的名稱可被存儲在title (標(biāo)題)中，且事件e的文字解釋可被保存在description (描述)中。諸如表演、展覽、體育、政治等事件類型可被存儲在type (類型)中。某些事件可具有媒體數(shù)據(jù)，例如海報(bào)、照片和視頻，該媒體數(shù)據(jù)可被保存在media (媒體)屬性中。
[0079]給定傳入的上下文照片或圖像P，事件確定系統(tǒng)106可通過計(jì)算經(jīng)排序的事件列表(el，…，en)來確定與照片或圖像P相關(guān)的事件，在一個(gè)實(shí)施例中，該經(jīng)排序的事件列表按照一事件是捕捉照片或圖像時(shí)的事件的可能性的降序排列。
[0080]在一個(gè)實(shí)施例中，事件數(shù)據(jù)庫224可包括兩個(gè)部分。一個(gè)部分可在關(guān)系型數(shù)據(jù)庫管理系統(tǒng)(RDBMS)上構(gòu)建來存儲例如從諸如主持網(wǎng)站等信息源提取的計(jì)劃事件。另一部分可包括網(wǎng)格索引結(jié)構(gòu)。作為示例而非限制，事件數(shù)據(jù)庫224可將區(qū)域(例如，紐約市)劃分成網(wǎng)格，該網(wǎng)格的每一單元格對應(yīng)于一子區(qū)域(例如，布魯克林、華爾街等)。對于每一子區(qū)域，事件數(shù)據(jù)庫224可將在該子區(qū)域中檢測到的事件存儲到其對應(yīng)的單元中。以下表I示出了用于該事件劃分的算法。
[0081]給定照片或圖像P的輸入時(shí)間和位置，可如算法I的第2行中所指示的那樣生成具有指定例如空間范圍和時(shí)間范圍的謂詞的查詢來搜索相關(guān)事件。在一個(gè)實(shí)施例中，查詢q可被提交給計(jì)劃事件的數(shù)據(jù)庫，例如，事件數(shù)據(jù)庫224中的計(jì)劃事件的數(shù)據(jù)庫或表(如算法I的第3行中所示)。在某些實(shí)施例中，如果沒有從計(jì)劃事件數(shù)據(jù)庫返回事件，則可將查詢q提交給事件數(shù)據(jù)庫224的 網(wǎng)格結(jié)構(gòu)，并檢查當(dāng)前是否在p.location附近正發(fā)生任何緊急事件，如算法I的第5行中所示。事件數(shù)據(jù)庫 224可返回事件列表E=(el，e2，...，en)?；蛘撸樵僸可被同時(shí)提交給計(jì)劃事件數(shù)據(jù)庫和事件數(shù)據(jù)庫224的網(wǎng)格結(jié)構(gòu)兩者。
[0082]
【權(quán)利要求】
1.一種系統(tǒng)，包括: 一個(gè)或多個(gè)處理器； 存儲器，通信地耦合到所述一個(gè)或多個(gè)處理器，所述存儲器存儲指令，當(dāng)所述指令被所述一個(gè)或多個(gè)處理器執(zhí)行時(shí)，配置所述一個(gè)或多個(gè)處理器以執(zhí)行以下動(dòng)作: 接收圖像； 從所述圖像提取圖像特征； 至少基于所提取的圖像特征來確定與圖像相關(guān)聯(lián)的概念，所述概念包括所述圖像中所示的動(dòng)作、對象和/或背景場景；以及 至少基于所確定的概念來確定所述圖像中所示的事件的事件類型。
2.一種計(jì)算機(jī)實(shí)現(xiàn)的方法，包括: 在配置有可執(zhí)行指令的一個(gè)或多個(gè)處理器的控制下: 接收圖像； 獲取與所述圖像相關(guān)聯(lián)的上下文數(shù)據(jù)； 將所述上下文數(shù)據(jù)與事件數(shù)據(jù)庫進(jìn)行比較，以檢索第一事件列表； 分析所述圖像以確定所述圖像中所示的事件的事件類型；以及將所述第一列表中的所述事件的事件類型與所確定的事件類型進(jìn)行比較，以獲得第二事件列表。
3.如權(quán)利要求2所述的計(jì)算機(jī)實(shí)現(xiàn)方法，其特征在于，所述上下文數(shù)據(jù)包括:與所述圖像中所示的事件相關(guān)聯(lián)的空間數(shù)據(jù)和/或時(shí)間數(shù)據(jù)。
4.如權(quán)利要求3所述的計(jì)算機(jī)實(shí)現(xiàn)方法，其特征在于，與所述圖像中所示的事件相關(guān)聯(lián)的所述空間數(shù)據(jù)包括所述圖像被捕捉的位置，而與所述圖像中所示的事件相關(guān)聯(lián)的所述時(shí)間數(shù)據(jù)包括所述圖像被捕捉的時(shí)間。
5.如權(quán)利要求4所述的計(jì)算機(jī)實(shí)現(xiàn)方法，其特征在于，還包括響應(yīng)于確定與所述圖像中所示的事件相關(guān)聯(lián)的所述位置相對于與所述第二事件相關(guān)聯(lián)的位置更接近與所述第一事件相關(guān)聯(lián)的位置，將所述第二列表中的第一事件排名在比所述第二列表中的第二事件高的位置上。
6.如權(quán)利要求4所述的計(jì)算機(jī)實(shí)現(xiàn)方法，其特征在于，還包括響應(yīng)于確定與所述圖像中所示的事件相關(guān)聯(lián)的所述時(shí)間相對于與所述第二事件相關(guān)聯(lián)的時(shí)間更接近與所述第一事件相關(guān)聯(lián)的時(shí)間，將所述第二列表中的第一事件排名在比所述第二列表中的第二事件高的位置上。
7.如權(quán)利要求2所述的計(jì)算機(jī)實(shí)現(xiàn)方法，其特征在于，還包括響應(yīng)于確定第一事件的事件類型匹配所確定的事件類型而第二事件的事件類型不匹配所確定的事件類型，將所述第二列表中的第一事件排名在比所述第二列表中的第二事件高的位置上。
8.如權(quán)利要求2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其特征在于，還包括: 確定所述圖像中的焦點(diǎn)；以及 基于所述上下文數(shù)據(jù)和所述圖像估計(jì)所述焦點(diǎn)的位置。
9.如權(quán)利要求8所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其特征在于，將所述上下文數(shù)據(jù)與所述事件數(shù)據(jù)庫進(jìn)行比較包括將所述焦點(diǎn)的位置與所述事件數(shù)據(jù)庫進(jìn)行比較以檢索所述第一事件列表，所述第一列表中的所述事件發(fā)生在離所述焦點(diǎn)位置的預(yù)定距離內(nèi)。
10.配置有計(jì)算機(jī)可執(zhí)行指令的一個(gè)或多個(gè)計(jì)算機(jī)可讀介質(zhì)，當(dāng)所述計(jì)算機(jī)可執(zhí)行指令被一個(gè)或多個(gè)處理器執(zhí)行時(shí)，配置所述一個(gè)或多個(gè)處理器以執(zhí)行包括以下的動(dòng)作: 接收圖像和與所述圖像相關(guān)聯(lián)的上下文數(shù)據(jù)，所述上下文數(shù)據(jù)包括與所述圖像相關(guān)聯(lián)的空間信息和時(shí)間信息； 分析所述圖像的內(nèi)容以檢測所述圖像中所示的事件類型； 基于與所述圖像相關(guān)聯(lián)的所述空間信息和所述時(shí)間信息，從事件數(shù)據(jù)庫檢索第一事件列表；以及 基于所述圖像的所檢測的事件類型、所述空間信息和所述時(shí)間信息，排名所述第一事件列表以獲得經(jīng)排名的事件列表`。
【文檔編號】G06Q50/10GK103460238SQ201280014953
【公開日】2013年12月18日 申請日期:2012年4月1日 優(yōu)先權(quán)日:2011年4月4日
【發(fā)明者】M·高, X-S·華 申請人:微軟公司