信息處理設(shè)備和方法及程序的制作方法
【專利摘要】本技術(shù)涉及一種能夠高精度地使用由多個(gè)照相機(jī)捕獲的圖像來搜索和跟蹤要搜索和跟蹤的人物的信息處理設(shè)備和方法及程序。根據(jù)通過在表示搜索和跟蹤結(jié)果的圖像(P211)上例如用手(H1)指示由用于捕獲成像區(qū)域(CamA)的監(jiān)視照相機(jī)捕獲的移動(dòng)體圖像(PA)的方式輸入用于確認(rèn)用戶是正在搜索的人物的確認(rèn)信息而進(jìn)行的圖A和圖E的檢測結(jié)果之間的時(shí)空比較，盡管從圖A到圖E的行進(jìn)時(shí)間為5秒(1:00:00到1:00:05)，給定圖E的位置位于以人物平均行進(jìn)時(shí)間在約5秒內(nèi)不可能覆蓋到的距離處，從搜索和跟蹤結(jié)果刪除圖E，所以使得能夠提高搜索和跟蹤結(jié)果的精度。本技術(shù)可以用在安全系統(tǒng)和營銷研究系統(tǒng)中。
【專利說明】信息處理設(shè)備和方法及程序
【技術(shù)領(lǐng)域】
[0001]本技術(shù)涉及一種信息處理設(shè)備、信息處理設(shè)備方法和程序，具體地涉及一種被配置為從由多個(gè)照相機(jī)捕獲的圖像高精度地搜索并跟蹤想要搜索并跟蹤的人物的信息處理設(shè)備、信息處理方法和程序。
【背景技術(shù)】
[0002]過去，出于預(yù)防犯罪、營銷等的目的，在未指定的人物來來往往的地方(例如，賓館、建筑物、便利店和市區(qū))安裝了視頻監(jiān)視系統(tǒng)。在這種監(jiān)視系統(tǒng)中，在整個(gè)這些地方進(jìn)行確認(rèn)嫌疑人如何移動(dòng)和客戶在百貨商店中如何移動(dòng)的操作。
[0003]但是，為了確認(rèn)每個(gè)人物在監(jiān)視區(qū)域內(nèi)如何移動(dòng)，需要執(zhí)行如下工作:查看從多個(gè)照相機(jī)獲取的視頻，追蹤人物在照相機(jī)視頻內(nèi)的移動(dòng)，并且與人物在照相機(jī)之間移動(dòng)相對應(yīng)地執(zhí)行接下來的工作。因此,花費(fèi)相當(dāng)長的時(shí)間，由此對工作人員施加了大的負(fù)擔(dān)。
[0004]因此，提出了跟蹤多個(gè)照相機(jī)視頻內(nèi)的移動(dòng)對象的系統(tǒng)或者搜索移動(dòng)對象的系統(tǒng)。例如，提出了執(zhí)行跟蹤單個(gè)照相機(jī)視頻內(nèi)的人物并在多個(gè)照相機(jī)之間連接該人物的方案的系統(tǒng)(參見專利文獻(xiàn)I)。此外，還提出了這樣一種系統(tǒng)，該系統(tǒng)使用類似的圖像搜索來執(zhí)行人物跟蹤，并且將捕獲的圖像中的前景區(qū)域分割成塊狀態(tài)，以塊為單位執(zhí)行類似的圖像搜索，并基于匹配結(jié)果來確定該人物是否為同一人(參見非專利文獻(xiàn)I)。
[0005]引用列表
[0006]非專利文獻(xiàn)
[0007]專利文獻(xiàn)1:日本未審專利申請公開第2006-245795號
[0008]非專利文獻(xiàn) 1:Human Tracking Using Similar Image Search in SparselyDistributed Camera Environment in Technical Report, vol.110, n0.330, PRMU2010-130, pp.25to30, 2010 年 12 月

【發(fā)明內(nèi)容】

[0009]技術(shù)問題
[0010]但是，在專利文獻(xiàn)I中公開的技術(shù)中，實(shí)踐中難以使用單個(gè)照相機(jī)來連續(xù)地跟蹤人物。此外，由于人物相互交疊并且人物被遮擋在柱子等后面，所以停止跟蹤，因此跟蹤精度總體上會劣化。
[0011]在非專利文獻(xiàn)I的情況中，隨著拍攝時(shí)間越來越多地增加以確定在塊狀態(tài)中分割的所有前景區(qū)域是否都相似，處理時(shí)間進(jìn)一步增加。因此，存在對精度進(jìn)一步劣化的擔(dān)心。
[0012]鑒于上述情況而發(fā)明了本技術(shù)，并且本技術(shù)被配置為通過下面的操作來提高人物搜索和跟蹤處理的精度:刪除由多個(gè)照相機(jī)捕獲的圖像當(dāng)中的不適合于搜索的圖像，并且基于由用戶進(jìn)行的搜索處理的結(jié)果將適合于搜索目標(biāo)圖像的圖像指定為決定信息，隨后重復(fù)修改搜索處理的處理。
[0013]問題的解決方案[0014]根據(jù)本技術(shù)的第一方面，提供一種信息處理設(shè)備，該信息處理設(shè)備包括:多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像、和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息；移動(dòng)對象圖像似然度計(jì)算單元，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定單元，確定由移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲單元，存儲由移動(dòng)對象圖像閾值確定單元搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；操作輸入單元，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算單元，計(jì)算作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定單元，確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果移動(dòng)對象信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
[0015]在時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值之后，操作輸入單元可接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像重新決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息。時(shí)空似然度計(jì)算單元可重新計(jì)算作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被重新輸入了決定信息的決定移動(dòng)對象信息的似然度。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果移動(dòng)對象信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。每當(dāng)由操作輸入單元重新輸入決定信息時(shí)，操作輸入單元、時(shí)空似然度計(jì)算單元和時(shí)空似然度閾值確定單元可重復(fù)相同的處理。
[0016]移動(dòng)對象信息還可包括識別捕獲包括的移動(dòng)對象圖像的多個(gè)成像單元之一的ID。信息處理設(shè)備還可包括:亮度傳遞函數(shù)BTF計(jì)算單元，基于搜索目標(biāo)移動(dòng)對象信息和決定移動(dòng)對象信息中的具有不同的ID的兩個(gè)移動(dòng)對象圖像來計(jì)算校正成像單元之間的顏色的變化的BTF，所述不同的ID識別各自捕獲移動(dòng)對象圖像的多個(gè)成像單元，所述搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息，針對所述決定移動(dòng)對象信息接收到用來決定搜索目標(biāo)移動(dòng)對象信息的決定信息的輸入；BTF處理單元，對作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的除了決定移動(dòng)對象信息以外的移動(dòng)對象信息當(dāng)中的、包括由具有獲得BTF的ID的成像單元捕獲的移動(dòng)對象圖像的移動(dòng)對象信息的移動(dòng)對象圖像執(zhí)行BTF ；BTF移動(dòng)對象圖像似然度計(jì)算單元，計(jì)算BTF移動(dòng)對象圖像似然度，該BTF移動(dòng)對象圖像似然度由基于移動(dòng)對象圖像的似然度構(gòu)成，并且是包括由BTF處理單元使用BTF處理過的移動(dòng)對象圖像的移動(dòng)對象信息相對于決定移動(dòng)對象信息的移動(dòng)對象圖像的似然度；以及BTF移動(dòng)對象圖像閾值確定單元，確定由BTF移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF移動(dòng)對象圖像似然度是否小于預(yù)定的閾值。時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的時(shí)空似然度是否小于預(yù)定的閾值。BTF移動(dòng)對象圖像閾值確定單元可在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，確定由BTF移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF移動(dòng)對象圖像似然度是否小于預(yù)定的閾值，并且在BTF移動(dòng)對象圖像似然度小于預(yù)定的閾值時(shí)，從搜索結(jié)果移動(dòng)對象信息存儲單元擦除包括BTF移動(dòng)對象圖像似然度小于預(yù)定的閾值的移動(dòng)對象圖像的移動(dòng)對象信息。
[0017]移動(dòng)對象圖像似然度計(jì)算單元可基于搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像和包括在除了搜索對照移動(dòng)對象信息以外的移動(dòng)對象信息中的移動(dòng)對象圖像中的每個(gè)中包括的移動(dòng)對象圖像，計(jì)算指示每個(gè)移動(dòng)對象的相似性的程度的相似度作為移動(dòng)對象圖像似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象息。
[0018]時(shí)空似然度計(jì)算單元可根據(jù)成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)在除了決定移動(dòng)對象信息以外的移動(dòng)對象信息和被輸入了決定信息的決定移動(dòng)對象信息的空間位置坐標(biāo)之間的距離所花費(fèi)的必要時(shí)間之間的關(guān)系，計(jì)算時(shí)空似然度。
[0019]根據(jù)本技術(shù)的第一方面，提供一種信息處理設(shè)備的信息處理方法，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息。所述信息處理方法包括:移動(dòng)對象圖像似然度計(jì)算處理，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定處理，確定由移動(dòng)對象圖像似然度計(jì)算處理計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲處理，存儲由移動(dòng)對象圖像閾值確定處理搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；操作輸入處理，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定在結(jié)果移動(dòng)對象信息存儲處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算處理，計(jì)算在結(jié)果移動(dòng)對象信息存儲處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定處理，確定由時(shí)空似然度計(jì)算處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果移動(dòng)對象信息存儲處理中存儲的移動(dòng)對象信息擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
[0020]根據(jù)本技術(shù)的第一方面，提供一種控制信息處理設(shè)備的計(jì)算機(jī)程序，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息。所述程序使得計(jì)算機(jī)執(zhí)行:移動(dòng)對象圖像似然度計(jì)算步驟，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定步驟，確定由移動(dòng)對象圖像似然度計(jì)算步驟的處理計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲步驟，存儲由移動(dòng)對象圖像閾值確定步驟的處理搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；操作輸入步驟，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定在結(jié)果移動(dòng)對象信息存儲步驟的處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算步驟，計(jì)算在結(jié)果移動(dòng)對象信息存儲步驟的處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定步驟，確定由時(shí)空似然度計(jì)算步驟的處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果移動(dòng)對象信息存儲步驟的處理中存儲的移動(dòng)對象信息擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信肩、O
[0021]根據(jù)本技術(shù)的第二方面，提供一種信息處理設(shè)備，該信息處理設(shè)備包括:多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測該人物的空間位置坐標(biāo)，并且輸出人物圖像和包括該人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的人物信息；人物圖像似然度計(jì)算單元，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；人物圖像閾值確定單元，確定由人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；搜索結(jié)果人物信息存儲單元，存儲由人物圖像閾值確定單元搜索的作為搜索結(jié)果人物信息的人物信息；操作輸入單元，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；時(shí)空似然度計(jì)算單元，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及時(shí)空似然度閾值確定單元，確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0022]在時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值之后，操作輸入單元可接收決定信息的輸入，該決定信息由用戶用來基于人物圖像重新決定作為搜索結(jié)果人物信息存儲在結(jié)果人物信息存儲單元中的人物信息當(dāng)中的搜索目標(biāo)人物信息。時(shí)空似然度計(jì)算單元可重新計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了決定人物信息以外的人物信息相對于被重新輸入了決定信息的決定人物信息的似然度。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。每當(dāng)由操作輸入單元重新輸入決定信息時(shí)，操作輸入單元、時(shí)空似然度計(jì)算單元和時(shí)空似然度閾值確定單元可重復(fù)相同的處理。
[0023]人物信息還可包括識別捕獲包括的人物圖像的多個(gè)成像單元之一的ID。信息處理設(shè)備還可包括:亮度傳遞函數(shù)BTF計(jì)算單元，基于搜索目標(biāo)人物信息和決定人物信息中的具有不同的ID的兩個(gè)人物圖像來計(jì)算校正成像單元之間的顏色的變化的BTF，所述不同的ID識別各自捕獲人物圖像的多個(gè)成像單元，所述搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息，針對所述決定人物信息接收到用來決定搜索目標(biāo)人物信息的決定信息的輸入；BTF處理單元，對作為搜索結(jié)果人物信息存儲在結(jié)果人物信息存儲單元中的人物信息當(dāng)中的除了決定人物信息以外的人物信息當(dāng)中的、包括由具有獲得BTF的ID的成像單元捕獲的人物圖像的人物信息的人物圖像執(zhí)行BTF ；BTF人物圖像似然度計(jì)算單元，計(jì)算BTF人物圖像似然度，該BTF人物圖像似然度由基于人物圖像的似然度構(gòu)成，并且是包括由BTF處理單元使用BTF處理過的人物圖像的人物信息相對于決定人物信息的人物圖像的似然度；以及BTF人物圖像閾值確定單元，確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的時(shí)空似然度是否小于預(yù)定的閾值。BTF人物圖像閾值確定單元可在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值，并且在BTF人物圖像似然度小于預(yù)定的閾值時(shí)，從搜索結(jié)果人物信息存儲單元擦除包括BTF人物圖像似然度小于預(yù)定的閾值的人物圖像的人物信息。
[0024]該信息處理設(shè)備還可以包括:同一人物信息保持單元，保持搜索目標(biāo)人物信息和決定人物信息作為與搜索目標(biāo)人物相同的人物的人物信息，其中，搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息，針對該決定人物信息接收到用來決定搜索目標(biāo)人物信息的決定信息的輸入；其他人物信息保持單元，保持包括由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度小于預(yù)定的閾值或者由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度小于預(yù)定的閾值的人物圖像的人物信息作為其他人物信息，該其他人物信息是除了搜索目標(biāo)人物以外的人物的人物信息；獨(dú)有特征搜索單元，通過基于在同一人物信息保持單元中保持的人物信息的人物圖像和在其他人物信息保持單元中保持的人物信息的人物圖像進(jìn)行學(xué)習(xí)，選擇用來搜索搜索目標(biāo)人物的獨(dú)有特征；獨(dú)有特征似然度計(jì)算單元，計(jì)算獨(dú)有特征似然度，該獨(dú)有特征似然度是基于包括在除了搜索對照人物信息的人物信息中的人物圖像相對于搜索目標(biāo)人物信息的人物圖像的獨(dú)有特征的似然度；以及獨(dú)有特征似然度閾值確定單元，確定由獨(dú)有特征似然度計(jì)算單元計(jì)算出的每個(gè)獨(dú)有特征似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除小于預(yù)定的閾值的獨(dú)有特征似然度的人物信息。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值。在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，BTF人物圖像閾值確定單元可確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值。在BTF人物圖像似然度不小于預(yù)定的閾值時(shí)，獨(dú)有特征似然度閾值確定單元可確定由獨(dú)有特征似然度計(jì)算單元計(jì)算出的每個(gè)獨(dú)有特征似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除小于預(yù)定的閾值的獨(dú)有特征似然度的人物信息。
[0025]在獨(dú)有特征似然度閾值確定單元從搜索結(jié)果人物信息存儲單元擦除獨(dú)有特征似然度小于預(yù)定的閾值的人物信息時(shí)，其他人物信息保持單元可保持獨(dú)有特征似然度小于預(yù)定的閾值的人物信息作為其他人物信息，該其他人物信息是其他人物的人物信息。
[0026]獨(dú)有特征搜索單元可通過基于在同一人物信息保持單元中保持的人物信息的人物圖像和在其他人物信息保持單元中保持的人物信息的人物圖像進(jìn)行學(xué)習(xí)，選擇在同一人物信息保持單元中保持的人物信息的人物圖像和搜索目標(biāo)人物的人物圖像之間的似然度增加并且在其他人物信息保持單元中保持的人物信息的人物圖像和搜索目標(biāo)人物的人物圖像之間的似然度減少的特征量作為獨(dú)有特征。
[0027]獨(dú)有特征似然度計(jì)算單元可基于包括在搜索目標(biāo)人物信息中的人物圖像和包括在除了搜索對照人物信息以外的人物信息中的人物圖像中的每個(gè)人物圖像的獨(dú)有特征，計(jì)算指示每個(gè)人物的相似性的程度的相似度作為獨(dú)有特征似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息。
[0028]人物圖像似然度計(jì)算單元可基于包括在搜索目標(biāo)人物信息中的人物圖像和包括在除了搜索對照人物信息以外的人物信息中的人物圖像中的每個(gè)人物圖像，計(jì)算指示每個(gè)人物的相似性的程度的相似度作為人物圖像似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息。
[0029]時(shí)空似然度計(jì)算單元可根據(jù)成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)在除了決定人物信息以外的人物信息和被輸入了決定信息的決定人物信息的空間位置坐標(biāo)之間的距離所花費(fèi)的必要時(shí)間之間的關(guān)系計(jì)算時(shí)空似然度。
[0030]根據(jù)本技術(shù)的第二方面，提供一種信息處理設(shè)備的信息處理方法，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測人物的空間位置坐標(biāo)，并且輸出人物圖像和包括人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的個(gè)人物信息。所述信息處理方法包括:人物圖像似然度計(jì)算處理，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；人物圖像閾值確定處理，確定由人物圖像似然度計(jì)算處理計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；搜索結(jié)果人物信息存儲處理，存儲由人物圖像閾值確定處理搜索的作為搜索結(jié)果人物信息的人物信息；操作輸入處理，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲處理中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；時(shí)空似然度計(jì)算處理，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲處理中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及時(shí)空似然度閾值確定處理，確定由時(shí)空似然度計(jì)算處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果人物信息存儲處理中存儲的人物信息擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0031]根據(jù)本技術(shù)的第二方面，提供一種控制信息處理設(shè)備的計(jì)算機(jī)程序，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測人物的空間位置坐標(biāo)，并且輸出人物圖像和包括人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的個(gè)人物信息。所述程序使得計(jì)算機(jī)執(zhí)行:人物圖像似然度計(jì)算步驟，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；人物圖像閾值確定步驟，確定由人物圖像似然度計(jì)算步驟的處理計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；搜索結(jié)果人物信息存儲步驟，存儲由人物圖像閾值確定步驟的處理搜索的作為搜索結(jié)果人物信息的人物信息；操作輸入步驟，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲步驟的處理中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；時(shí)空似然度計(jì)算步驟，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲步驟的處理中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及時(shí)空似然度閾值確定步驟，確定由時(shí)空似然度計(jì)算步驟的處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0032]根據(jù)本技術(shù)的第一方面，捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)圖像圖像和包括移動(dòng)圖像的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息；計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；確定計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；存儲搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；計(jì)算時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及確定計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從存儲為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息中擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
[0033]根據(jù)本技術(shù)的第二方面，捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測該人物的空間位置坐標(biāo)，并且輸出人物圖像和包括該人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的人物信息；計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；確定計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；存儲搜索的作為搜索結(jié)果人物信息的人物信息；接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；計(jì)算時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及確定計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0034]本技術(shù)的信息處理設(shè)備可以是獨(dú)立的設(shè)備，或者是執(zhí)行信息處理的模塊。
[0035]本發(fā)明的有益效果
[0036]根據(jù)本技術(shù)的各方面，可以從由多個(gè)照相機(jī)捕獲的圖像高精度地搜索并跟蹤想要搜索并跟蹤的人物。
【專利附圖】

【附圖說明】
[0037]圖1是示出應(yīng)用本技術(shù)的實(shí)施例的監(jiān)視系統(tǒng)的配置的示例的圖。
[0038]圖2是示出監(jiān)視照相機(jī)的第一配置示例的框圖。
[0039]圖3是示出人物搜索和跟蹤服務(wù)器的第一配置示例的框圖。
[0040]圖4是示出由圖2中的監(jiān)視照相機(jī)進(jìn)行的成像處理的流程圖。
[0041]圖5是示出移動(dòng)對象信息濾波處理的流程圖。
[0042]圖6是示出在前景區(qū)域中存在偏置的移動(dòng)對象圖像和前景圖像的圖。
[0043]圖7是示出前景區(qū)域與背景區(qū)域之間的相關(guān)度高的移動(dòng)對象圖像和前景圖像的圖。[0044]圖8是示出前景區(qū)域未被正確地獲得的移動(dòng)對象圖像、前景圖像和邊緣圖像的圖。
[0045]圖9是示出單個(gè)人物和多個(gè)人物被成像的移動(dòng)對象圖像和前景圖像的圖。
[0046]圖10是示出由移動(dòng)對象信息濾波處理濾波的移動(dòng)對象圖像的示例的圖。
[0047]圖11是示出移動(dòng)對象信息匹配處理的流程圖。
[0048]圖12是示出顯示畫面的示例的圖，該顯示畫面示出由移動(dòng)對象信息匹配處理顯示的人物搜索和跟蹤結(jié)果。
[0049]圖13是示出圖11的匹配修改處理的流程圖。
[0050]圖14是示出圖11的匹配修改處理的圖。
[0051]圖15是示出圖11的匹配修改處理的圖。
[0052]圖16是示出監(jiān)視照相機(jī)的第二配置示例的框圖。
[0053]圖17是示出人物搜索和跟蹤服務(wù)器的第二配置示例的框圖。
[0054]圖18是示出由圖16中的監(jiān)視照相機(jī)進(jìn)行的成像處理的流程圖。
[0055]圖19是示出人物檢測的圖。
[0056]圖20是示出人物信息濾波處理的流程圖。
[0057]圖21是示出人物信息匹配處理的流程圖。
[0058]圖22是示出圖21的匹配修改處理的流程圖。
[0059]圖23是示出圖21的匹配修改處理的流程圖。
[0060]圖24是示出圖21的匹配修改處理的圖。
[0061]圖25是示出圖21的匹配修改處理的圖。
[0062]圖26是示出通過獨(dú)有特征的學(xué)習(xí)進(jìn)行的選擇的圖。
[0063]圖27是示出圖21的匹配修改處理的圖。
[0064]圖28是示出通用個(gè)人計(jì)算機(jī)的配置的示例的圖。
【具體實(shí)施方式】
[0065]在下文中將描述用于實(shí)現(xiàn)本發(fā)明的方式(在下文中被稱為實(shí)施例)。將按照以下順序進(jìn)行描述。
[0066]1.第一實(shí)施例(使用移動(dòng)對象的檢測的示例)
[0067]2.第二實(shí)施例(使用人物的檢測的示例)
[0068]〈1.第一實(shí)施例>
[0069][監(jiān)視系統(tǒng)的配置的示例]
[0070]圖1是示出應(yīng)用本技術(shù)的實(shí)施例的監(jiān)視系統(tǒng)的配置的示例的圖。圖1中的監(jiān)視系統(tǒng)I對需要人物搜索或跟蹤的監(jiān)視區(qū)域內(nèi)的多個(gè)區(qū)域進(jìn)行成像，并且基于捕獲的圖像執(zhí)行對監(jiān)視區(qū)域內(nèi)的人物的搜索并且執(zhí)行對該人物的移動(dòng)路徑的跟蹤。監(jiān)視系統(tǒng)I被配置為包括監(jiān)視照相機(jī)11-1至ll-η、人物搜索和跟蹤服務(wù)器12以及網(wǎng)絡(luò)13。
[0071]監(jiān)視照相機(jī)11-1至I l-η被分別安裝在由監(jiān)視系統(tǒng)I覆蓋的監(jiān)視區(qū)域中的η個(gè)地方，捕獲各個(gè)監(jiān)視區(qū)域的圖像，檢測捕獲到的圖像內(nèi)的移動(dòng)對象，并且提取檢測到的移動(dòng)對象的圖像。然后，監(jiān)視照相機(jī)11-1至ll-η通過由因特網(wǎng)、公用線路、專用線路等構(gòu)成的網(wǎng)絡(luò)13，將包括提取出的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息供應(yīng)到人物搜索和跟蹤服務(wù)器12。移動(dòng)對象信息是除了移動(dòng)對象圖像以外還包括成像時(shí)間、移動(dòng)對象圖像的前景圖像、從移動(dòng)對象圖像獲得的移動(dòng)對象的全球坐標(biāo)、和識別監(jiān)視照相機(jī)11的ID的信息。這里，全球坐標(biāo)指的是指定移動(dòng)對象在空間內(nèi)的位置的坐標(biāo)信息，并且例如是包括作為指定移動(dòng)對象在地球上的位置的坐標(biāo)信息的緯度和經(jīng)度的坐標(biāo)信息。在下文中，在不需要具體地將監(jiān)視照相機(jī)11-1至I l-η相互區(qū)分開時(shí)，監(jiān)視照相機(jī)11-1至I l-η被簡稱為監(jiān)視照相機(jī)11，并且在其他配置中被稱為相同的術(shù)語。
[0072]人物搜索和跟蹤服務(wù)器12獲取從監(jiān)視照相機(jī)11供應(yīng)的移動(dòng)對象信息，基于包括在移動(dòng)對象信息中的移動(dòng)對象圖像和該移動(dòng)對象圖像的前景圖像來過濾掉并且去除不適合于搜索的圖像，并且保持包括適合于搜索的移動(dòng)對象圖像的移動(dòng)對象信息。人物搜索和跟蹤服務(wù)器12基于保持的移動(dòng)對象信息中的關(guān)于由用戶指定的人物的信息來執(zhí)行移動(dòng)對象信息匹配處理，以提取關(guān)于指定的人物的移動(dòng)對象信息。此外，人物搜索和跟蹤服務(wù)器12基于通過移動(dòng)對象信息匹配處理提取的移動(dòng)對象信息來產(chǎn)生并顯示由指定的人物的移動(dòng)路徑構(gòu)成的搜索和跟蹤結(jié)果的顯示圖像。此外，人物搜索和跟蹤服務(wù)器12接收決定信息的輸入，該決定信息指示用戶針對作為搜索和跟蹤結(jié)果的移動(dòng)對象信息的一部分決定所指定的人物，并且人物搜索和跟蹤服務(wù)器12使用針對其接收了決定信息的移動(dòng)對象信息來執(zhí)行匹配修改處理，以修改并更新搜索和跟蹤結(jié)果。人物搜索和跟蹤服務(wù)器12顯示通過移動(dòng)對象信息匹配處理或匹配修改處理獲得的搜索和跟蹤結(jié)果，然后，通過接收用戶的決定信息的輸入并且重復(fù)匹配修改處理來提高搜索和跟蹤結(jié)果的精度。
[0073][監(jiān)視照相機(jī)的第一配置示例]
[0074]接下來，將參照圖2的框圖來描述監(jiān)視照相機(jī)11的第一配置示例。
[0075]監(jiān)視照相機(jī)11被設(shè)置在監(jiān)視區(qū)域的多個(gè)位置處，并且被設(shè)置為使得通過組合由監(jiān)視照相機(jī)11-1至ll-η捕獲的圖像來整體上覆蓋監(jiān)視區(qū)域中的所有區(qū)域。每個(gè)監(jiān)視照相機(jī)11包括成像單元31、移動(dòng)對象檢測單元32、前景圖像提取單元33、照相機(jī)ID存儲單元34、成像位置坐標(biāo)計(jì)算單元35、成像時(shí)間檢測單元36和移動(dòng)對象信息輸出單元37。
[0076]成像單元31被配置為包括CXD (電荷耦合器件)、CM0S (互補(bǔ)金屬氧化物半導(dǎo)體)等，并且連續(xù)地捕獲在可以從監(jiān)視照相機(jī)11所安裝的位置成像的范圍內(nèi)的圖像。成像單元31捕獲運(yùn)動(dòng)圖像，該運(yùn)動(dòng)圖像被配置為包括被視為時(shí)間上連續(xù)的靜止圖像的圖像。因此，由成像單元31捕獲的圖像可以被處理為以幀為單位或以場為單位的一個(gè)圖像，并且也可以通過連續(xù)地再現(xiàn)圖像而被處理為運(yùn)動(dòng)圖像。下面將在假設(shè)連續(xù)地捕獲被配置為靜止圖像的圖像的情況下進(jìn)行描述。因此，下面假設(shè)圖像指示靜止圖像。
[0077]移動(dòng)對象檢測單元32根據(jù)關(guān)于由成像單元31捕獲的每個(gè)圖像的時(shí)間上的前一圖像和后一圖像之間的關(guān)系來檢測在該圖像內(nèi)捕獲到移動(dòng)對象的區(qū)域，并且提取包括移動(dòng)對象所在的區(qū)域的矩形圖像作為移動(dòng)對象圖像。
[0078]前景圖像提取單元33從由移動(dòng)對象檢測單元32提取出的移動(dòng)對象圖像中提取前景圖像，該前景圖像被配置為包括前景區(qū)域和其它區(qū)域的二進(jìn)制值像素。例如，前景圖像是前景區(qū)域被顯示為白色且其它區(qū)域被顯示為黑色的圖像。二進(jìn)制值可以是表達(dá)其它顏色的值，并且圖像可以是白色和黑色之間的關(guān)系反轉(zhuǎn)的圖像。一般地，由于在很多情況下移動(dòng)對象被成像的區(qū)域被配置為移動(dòng)對象圖像中的前景區(qū)域，所以前景圖像被提取為其中像素值被劃分成移動(dòng)對象圖像中的顯示移動(dòng)對象的區(qū)域和其它區(qū)域的圖像。[0079]照相機(jī)ID存儲單元34存儲用來識別監(jiān)視照相機(jī)11-1至ll_n的照相機(jī)ID。因此，在產(chǎn)生移動(dòng)對象信息時(shí)，在移動(dòng)對象信息輸出單元37中讀取移動(dòng)對象信息。
[0080]成像位置坐標(biāo)計(jì)算單元35基于關(guān)于由成像單元31捕獲的圖像的信息來計(jì)算被檢測為移動(dòng)對象的對象的全球坐標(biāo)。也就是說，例如，在監(jiān)視照相機(jī)的安裝位置被GPS (全球定位系統(tǒng))(未示出)等識別時(shí)，成像位置坐標(biāo)計(jì)算單元35識別成像方向相對于地磁的傾斜角度，基于移動(dòng)對象在圖像內(nèi)的大小、位置等來獲得離被檢測為移動(dòng)對象的對象的距離，并且基于這種信息來計(jì)算全球坐標(biāo)。
[0081]成像時(shí)間檢測單元36具有產(chǎn)生諸如實(shí)時(shí)時(shí)鐘(未示出)的時(shí)間信息的功能，并且檢測在捕獲由成像單元31捕獲的每個(gè)圖像的定時(shí)的時(shí)間作為成像時(shí)間。
[0082]移動(dòng)對象信息輸出單元37針對從由成像單元31捕獲的圖像提取的每個(gè)移動(dòng)對象圖像，基于關(guān)于對應(yīng)的前景圖像、照相機(jī)ID、移動(dòng)對象的全球坐標(biāo)和成像時(shí)間的信息來產(chǎn)生包括對應(yīng)的前景圖像、照相機(jī)ID、移動(dòng)對象的全球坐標(biāo)和成像時(shí)間的移動(dòng)對象信息，然后通過網(wǎng)絡(luò)13將移動(dòng)對象信息輸出到人物搜索和跟蹤服務(wù)器12。
[0083][人物搜索和跟蹤服務(wù)器的第一配置示例]
[0084]接下來，將參照圖3的框圖來描述人物搜索和跟蹤服務(wù)器12的第一配置示例。
[0085]人物搜索和跟蹤服務(wù)器12被配置為包括移動(dòng)對象信息獲取單元51、移動(dòng)對象信息濾波處理單元52、移動(dòng)對象信息保持單元53、移動(dòng)對象信息似然度計(jì)算處理單元54、移動(dòng)對象信息似然度閾值確定單元55、結(jié)果存儲單元56、顯示圖像產(chǎn)生單元57、顯示單元58、匹配修改處理單元59和操作輸入單元60。
[0086]移動(dòng)對象信息獲取單元51獲取通過網(wǎng)絡(luò)13從監(jiān)視照相機(jī)11供應(yīng)的移動(dòng)對象信息,臨時(shí)地存儲移動(dòng)對象信息，并且將移動(dòng)對象信息供應(yīng)到移動(dòng)對象信息濾波處理單元52。
[0087]移動(dòng)對象信息濾波處理單元52在預(yù)定的條件下對從移動(dòng)對象信息獲取單元51供應(yīng)的移動(dòng)對象信息進(jìn)行濾波，只提取適合于人物搜索的移動(dòng)對象信息，將提取的移動(dòng)對象信息保持在移動(dòng)對象信息保持單元53中，并且破壞不適合的移動(dòng)對象信息。
[0088]更具體地，移動(dòng)對象信息濾波處理單元52包括檢測幀大小確定單元71、前景偏置確定單元72、前景和背景相關(guān)度確定單元73、邊緣長度確定單元74和多個(gè)人數(shù)確定單元75。
[0089]檢測幀大小確定單元71根據(jù)移動(dòng)對象圖像的幀大小是否大于預(yù)定的大小來確定移動(dòng)對象信息是否為適合于人物搜索的移動(dòng)對象信息。當(dāng)確定移動(dòng)對象信息不是適合于人物搜索的移動(dòng)對象信息時(shí)，破壞該移動(dòng)對象信息?？梢詰{經(jīng)驗(yàn)將預(yù)定的大小設(shè)置為人物搜索所需的最小大小。檢測幀大小確定單元71可以基于移動(dòng)對象圖像的幀大小估計(jì)被檢測為移動(dòng)對象的人物的身高，并且確定幀大小是否為用于搜索具有估計(jì)的身高的人物的最佳的幀大小。也就是說，由于具有小的幀大小的移動(dòng)對象圖像具有低分辨率，所以高的人物被認(rèn)為不適合人物搜索。另一方面，當(dāng)人物矮時(shí)，移動(dòng)對象圖像的幀大小為小，并且分辨率與高的人物相比沒有降低。因此，在這種情況下，矮的人物被認(rèn)為適合于人物搜索。
[0090]前景偏置確定單元72計(jì)算前景圖像的前景區(qū)域占據(jù)移動(dòng)對象圖像的比值。在該比值大于預(yù)定的閾值時(shí)，包括移動(dòng)對象圖像的移動(dòng)對象信息被認(rèn)為不是適合于人物搜索的移動(dòng)對象信息，因此被破壞。也就是說，由于只捕獲前景區(qū)域的圖像的移動(dòng)對象圖像不適合于人物搜索，所以包括這種移動(dòng)對象圖像的移動(dòng)對象信息不適合于人物搜索，因此被破壞。[0091]前景和背景相關(guān)度確定單元73基于移動(dòng)對象圖像和前景圖像獲得移動(dòng)對象圖像的前景區(qū)域和背景區(qū)域之間的相關(guān)度。當(dāng)相關(guān)度高時(shí)，即，當(dāng)其中初始搜索的人物要被成像的前景區(qū)域是幾乎與背景區(qū)域相同的圖像時(shí)，移動(dòng)對象信息被破壞。也就是說，在這種情況下，由于移動(dòng)對象(即，人物)在被視為前景區(qū)域的區(qū)域中不被成像的似然度高，所以移動(dòng)對象圖像被認(rèn)為不適合于人物搜索，并且前景和背景相關(guān)度確定單元73破壞了包括這種移動(dòng)對象圖像的移動(dòng)對象信息。
[0092]邊緣長度確定單元74基于前景圖像產(chǎn)生作為前景圖像和背景圖像之間的邊界的邊緣圖像。在邊緣的長度比預(yù)定的長度更長時(shí)，包括移動(dòng)對象圖像的移動(dòng)對象信息被認(rèn)為不適合于人物搜索，因此被破壞。也就是說，在作為移動(dòng)對象的人物是被正確地提取為前景的前景圖像時(shí)，其中人物被明確地成像的區(qū)域被認(rèn)為要在移動(dòng)對象圖像中被提取。但是，在從移動(dòng)對象圖像沒有正確地提取人物時(shí)，在很多情況下以點(diǎn)狀形式提取前景區(qū)域，而不管人物的形狀如何。因此，由于作為前景區(qū)域和背景區(qū)域之間的邊界的邊緣的長度變長，所以邊緣長度確定單元74認(rèn)為包括這種移動(dòng)對象圖像的移動(dòng)對象信息不適合于人物搜索，因此破壞該移動(dòng)對象信息。
[0093]多個(gè)人數(shù)確定單元75產(chǎn)生其中水平方向上的前景圖像的像素位置被設(shè)置為水平軸并且布置在垂直方向上的像素值的積分值被設(shè)置為垂直軸的波形，根據(jù)在該波形的外形中是否存在多個(gè)局部最大值來確定移動(dòng)對象信息是否適合于人物搜索，然后，破壞不適合于人物搜索的移動(dòng)對象信息。也就是說，當(dāng)只有一個(gè)人物在移動(dòng)對象圖像中被成像時(shí)，通過使得水平方向上的前景圖像的像素位置被設(shè)置為水平軸并且布置在垂直方向上的像素值的積分值被設(shè)置為垂直軸而獲得的波形被理解為具有I個(gè)凸形和I個(gè)局部最大值的波形。但是，當(dāng)多個(gè)人物被成像時(shí)，在波形中，局部最大值的數(shù)量取決于人物的數(shù)量。因此，在這種情況下，移動(dòng)對象信息被認(rèn)為不適合于人物搜索。
[0094]移動(dòng)對象信息保持單元53保持由移動(dòng)對象信息濾波處理單元52認(rèn)為適合于人物搜索的移動(dòng)對象信息，然后，在必要的時(shí)候?qū)⒁苿?dòng)對象信息供應(yīng)到移動(dòng)對象信息似然度計(jì)算處理單元54和顯示圖像產(chǎn)生單元57。
[0095]移動(dòng)對象信息似然度計(jì)算處理單元54針對每條移動(dòng)對象信息計(jì)算保持在移動(dòng)對象信息保持單元53中的移動(dòng)對象信息中包括的移動(dòng)對象圖像當(dāng)中的除了標(biāo)準(zhǔn)移動(dòng)對象信息以外的移動(dòng)對象信息的移動(dòng)對象圖像相對于標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像似然度，然后，將移動(dòng)對象圖像似然度供應(yīng)到移動(dòng)對象信息似然度閾值確定單元55，其中，該標(biāo)準(zhǔn)移動(dòng)對象信息是包括被指定為搜索目標(biāo)的移動(dòng)對象信息的移動(dòng)對象圖像的搜索目標(biāo)。
[0096]移動(dòng)對象信息似然度閾值確定單元55確定基于由移動(dòng)對象信息似然度計(jì)算處理單元54獲得的移動(dòng)對象圖像而獲得的移動(dòng)對象圖像似然度是否高于閾值，然后，將包括具有較高的移動(dòng)對象圖像似然度的移動(dòng)對象圖像的移動(dòng)對象信息存儲在結(jié)果存儲單元56中。也就是說，移動(dòng)對象信息似然度閾值確定單元55基于除了作為搜索目標(biāo)的標(biāo)準(zhǔn)移動(dòng)對象信息以外的移動(dòng)對象信息相對于標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像似然度來執(zhí)行移動(dòng)對象圖像匹配處理，并且提取包括具有較高的移動(dòng)對象圖像似然度的移動(dòng)對象圖像的移動(dòng)對象信息作為基于移動(dòng)對象圖像而匹配的信息。然后，移動(dòng)對象信息似然度閾值確定單元55將提取的移動(dòng)對象信息作為與作為搜索目標(biāo)的標(biāo)準(zhǔn)移動(dòng)對象信息匹配的結(jié)果存儲在結(jié)果存儲單元56中。[0097]基于作為與指定搜索目標(biāo)人物的標(biāo)準(zhǔn)移動(dòng)對象信息匹配的信息存儲在結(jié)果存儲單元56中的移動(dòng)對象信息，顯示圖像產(chǎn)生單元57產(chǎn)生顯示圖像，以顯示搜索目標(biāo)人物的搜索和跟蹤結(jié)果。然后，顯示圖像產(chǎn)生單元57在被配置為包括LCD(液晶顯示器)或有機(jī)EL(電致發(fā)光)的顯示單元58上顯示產(chǎn)生的顯示圖像。顯示單元58顯示該顯示圖像并接收使用操作輸入單元60執(zhí)行的顯示圖像的操作輸入。操作輸入單元60根據(jù)在充當(dāng)觸摸面板或指點(diǎn)器的顯示圖像上的操作內(nèi)容來產(chǎn)生操作信號，并且將操作信號供應(yīng)到移動(dòng)對象信息似然度計(jì)算處理單元54和匹配修改處理單元59。
[0098]在用戶基于在顯示單元58上顯示的搜索和跟蹤結(jié)果中顯示的移動(dòng)對象圖像來決定搜索目標(biāo)人物的移動(dòng)對象圖像時(shí)，匹配修改處理單元59基于通過操作輸入單元60的操作而輸入的決定信息來執(zhí)行匹配修改處理。每當(dāng)輸入決定信息時(shí)，匹配修改處理單元59甚至在執(zhí)行匹配修改處理之后在再次輸入決定信息時(shí)再次執(zhí)行匹配修改處理，以重復(fù)匹配修改處理。
[0099]更具體地，匹配修改處理單元59包括操作輸入識別單元91、BTF計(jì)算單元92、時(shí)空似然度計(jì)算單元93、時(shí)空似然度閾值確定單元94、BTF圖像處理單元95、BTF圖像似然度計(jì)算單元96和BTF圖像似然度閾值確定單元97。
[0100]操作輸入識別單元91基于操作輸入單元60的操作信號來識別針對顯示在顯示單元58上的搜索和跟蹤結(jié)果中的選擇的移動(dòng)對象信息而輸入決定信息。
[0101]BTF計(jì)算單元92將被指定為搜索目標(biāo)的移動(dòng)對象圖像的照相機(jī)ID和通過移動(dòng)對象圖像匹配處理或匹配修改處理而搜索的移動(dòng)對象圖像進(jìn)行比較。在照相機(jī)ID彼此不一致時(shí)，基于被輸入了決定信息的移動(dòng)對象圖像之間或者在被指定為搜索目標(biāo)的移動(dòng)對象圖像和被輸入了決定信息的移動(dòng)對象圖像之間的像素信號，BTF計(jì)算單元92計(jì)算用來校正由于監(jiān)視照相機(jī)11之間的個(gè)體差異、環(huán)境差異等引起的圖像的顏色的變化的BTF(亮度傳遞函數(shù))。也就是說，由不同的監(jiān)視照相機(jī)11捕獲的圖像的顏色即使在實(shí)際顏色相同時(shí)也由于個(gè)體差異、環(huán)境差異等而變得不同。但是，當(dāng)用戶確認(rèn)了被指定為搜索目標(biāo)的移動(dòng)對象圖像與實(shí)際搜索的移動(dòng)對象圖像匹配并且輸入了決定信息時(shí)，決定在移動(dòng)對象圖像二者中形成相同部分的區(qū)域具有相同的顏色。因此，BTF計(jì)算單元92通過根據(jù)這種關(guān)系將標(biāo)準(zhǔn)移動(dòng)對象圖像設(shè)置為標(biāo)準(zhǔn)來計(jì)算用來校正被確認(rèn)為匹配的移動(dòng)對象圖像的顏色的BTF。
[0102]時(shí)空似然度計(jì)算單元93根據(jù)包括在被輸入了決定信息的移動(dòng)對象信息中的全球坐標(biāo)和包括在結(jié)果存儲單元56中存儲的另一條移動(dòng)對象信息中的全球坐標(biāo)之間的差來獲得移動(dòng)距離，然后根據(jù)以平均人物移動(dòng)速度行駛該移動(dòng)距離所花費(fèi)的平均必要時(shí)間和在移動(dòng)對象信息的成像時(shí)間之間的時(shí)間來計(jì)算移動(dòng)對象信息的時(shí)空似然度。
[0103]也就是說，當(dāng)時(shí)空似然度對應(yīng)于成像時(shí)間之間的時(shí)間與在各條移動(dòng)對象信息之間花費(fèi)的平均必要時(shí)間的比值時(shí)，時(shí)空似然度被認(rèn)為隨著該比值越接近I而越高，并且時(shí)空似然度被認(rèn)為隨著該比值越遠(yuǎn)離I而越低。此外，在這種情況下，時(shí)空似然度隨著該比值越接近O而變得相當(dāng)小，并且時(shí)空似然度隨著該比值超過I且變得更大而逐漸地變得更小。也就是說，在成像時(shí)間之間的時(shí)間接近O時(shí)，隨著空間距離變得更大，移動(dòng)可能不是實(shí)際上可能的，因此時(shí)空似然度此時(shí)變得相當(dāng)小。另一方面，當(dāng)成像時(shí)間之間的時(shí)間長時(shí)，存在以比平均移動(dòng)速度更慢的速度移動(dòng)空間距離的似然度。此時(shí)的時(shí)空似然度低于當(dāng)比值為I時(shí)的時(shí)空似然度，但是可以實(shí)現(xiàn)移動(dòng)。因此，該時(shí)空似然度高于當(dāng)成像時(shí)間之間的時(shí)間為O時(shí)的時(shí)空似然度。
[0104]時(shí)空似然度閾值確定單元94確定被輸入了決定信息的移動(dòng)對象信息與存儲在結(jié)果存儲單元56中的其它移動(dòng)對象信息的時(shí)空似然度是否低于預(yù)定的閾值。當(dāng)時(shí)空似然度低于預(yù)定的閾值時(shí)，從結(jié)果存儲單元56刪除移動(dòng)對象信息。
[0105]在時(shí)空似然度不低于預(yù)定的閾值、并且獲得了在沒有輸入決定信息且存儲在結(jié)果存儲單元56中的各條移動(dòng)對象信息當(dāng)中的被輸入了決定信息的移動(dòng)對象信息的移動(dòng)對象圖像之間的BTF時(shí)，BTF圖像處理單元95對包括在移動(dòng)對象信息中的移動(dòng)對象圖像執(zhí)BTF顏色轉(zhuǎn)換處理。
[0106]BTF圖像似然度計(jì)算單元96計(jì)算BTF圖像似然度，該BTF圖像似然度是使用作為被輸入了決定信息的移動(dòng)對象信息的移動(dòng)對象圖像的各個(gè)像素信號的移動(dòng)對象圖像與沒有輸入決定信息且經(jīng)過BTF顏色轉(zhuǎn)換處理的移動(dòng)對象圖像之間的似然度。
[0107]BTF圖像似然度閾值確定單元97將由BTF圖像似然度計(jì)算單元96計(jì)算出的BTF圖像似然度與預(yù)定的閾值進(jìn)行比較，并且從結(jié)果存儲單元56刪除包括BTF圖像似然度低于預(yù)定的閾值的移動(dòng)對象圖像的移動(dòng)對象信息。
[0108][由圖2中的監(jiān)視照相機(jī)進(jìn)行的成像處理]
[0109]接下來，將參照圖4的流程圖來描述由圖2中的監(jiān)視照相機(jī)11進(jìn)行的成像處理。
[0110]在步驟SI中，監(jiān)視照相機(jī)11的成像單元31連續(xù)地捕獲由可以在安裝位置處被監(jiān)視的監(jiān)視區(qū)域的靜止圖像或運(yùn)動(dòng)圖像構(gòu)成的圖像。
[0111]在步驟S2中，移動(dòng)對象檢測單元32通過針對由成像單元31捕獲的每個(gè)圖像比較前一圖像和后一圖像來檢測移動(dòng)對象，并且產(chǎn)生包括存在檢測到的移動(dòng)對象的區(qū)域的矩形移動(dòng)對象圖像。例如，當(dāng)由成像單元31捕獲的圖像是以固定的方式捕獲的圖像時(shí)，在靜止的前景區(qū)域中沒有變化。另一方面，由于在存在圖像內(nèi)的移動(dòng)對象的區(qū)域中的任何移動(dòng)而導(dǎo)致在圖像上發(fā)生變化。因此，移動(dòng)對象檢測單元32檢測發(fā)生變化的區(qū)域作為存在移動(dòng)對象的區(qū)域，并且通過修剪包括存在移動(dòng)對象的檢測區(qū)域的矩形圖像來產(chǎn)生移動(dòng)對象圖像。
[0112]在步驟S3中，前景圖像提取單元33從由移動(dòng)對象檢測單元32產(chǎn)生的移動(dòng)對象圖像提取前景圖像，例如產(chǎn)生前景區(qū)域被設(shè)置為白色且其它區(qū)域被設(shè)置為黑色并且由二進(jìn)制值表達(dá)的前景圖像。
[0113]在步驟S4中，成像位置坐標(biāo)計(jì)算單元35基于移動(dòng)對象圖像中存在的移動(dòng)對象的位置或大小來計(jì)算成像方向、角度和距離，并且基于監(jiān)視照相機(jī)被安裝的全球坐標(biāo)來計(jì)算作為被攝體的移動(dòng)對象的全球坐標(biāo)。也就是說，例如，基于移動(dòng)對象圖像，成像位置坐標(biāo)計(jì)算單元35計(jì)算由移動(dòng)對象在地球上的緯度和經(jīng)度等表達(dá)的坐標(biāo)位置作為全球坐標(biāo)。
[0114]在步驟S5中，成像時(shí)間檢測單元36基于由實(shí)時(shí)時(shí)鐘(未示出)產(chǎn)生的時(shí)間信息來檢測在捕獲圖像的定時(shí)的時(shí)間信息作為成像時(shí)間。
[0115]在步驟S6中，移動(dòng)對象信息輸出單元37從照相機(jī)ID存儲單元34讀取照相機(jī)ID，并且產(chǎn)生被統(tǒng)稱為移動(dòng)對象信息的移動(dòng)對象圖像、前景圖像、全球坐標(biāo)和成像時(shí)間。
[0116]在步驟S7中，移動(dòng)對象信息輸出單元37通過諸如因特網(wǎng)的網(wǎng)絡(luò)13將產(chǎn)生的移動(dòng)對象信息輸出到人物搜索和跟蹤服務(wù)器12。
[0117]通過前景處理，由每個(gè)監(jiān)視照相機(jī)11針對每個(gè)監(jiān)視區(qū)域捕獲圖像，從捕獲的圖像檢測移動(dòng)對象，并且提取移動(dòng)對象圖像。然后，被配置為包括移動(dòng)對象圖像以及關(guān)于移動(dòng)對象圖像的前景圖像、移動(dòng)對象圖像中的移動(dòng)對象的全球坐標(biāo)和捕獲圖像的成像時(shí)間的信息的移動(dòng)對象信息被產(chǎn)生并供應(yīng)到人物搜索和跟蹤服務(wù)器12。
[0118][移動(dòng)對象信息濾波處理]
[0119]接下來，將參照圖5的流程圖描述由人物搜索和跟蹤服務(wù)器12執(zhí)行的移動(dòng)對象信息濾波處理。
[0120]在步驟S21中，移動(dòng)對象信息獲取單元51獲取并存儲通過網(wǎng)絡(luò)13從監(jiān)視服務(wù)器11順次地供應(yīng)的移動(dòng)對象信息。
[0121]在步驟S22中，移動(dòng)對象信息濾波處理單元52將存儲在移動(dòng)對象信息獲取單元51中的移動(dòng)對象信息當(dāng)中的一條未處理的移動(dòng)對象信息設(shè)置為作為處理目標(biāo)的關(guān)注的移動(dòng)對象信息。
[0122]在步驟S23中，檢測幀大小確定單元71提取包括在關(guān)注的移動(dòng)對象信息中的移動(dòng)對象圖像。
[0123]在步驟S24中，檢測幀大小確定單元71確定關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的幀大小是否在預(yù)定的范圍內(nèi)。也就是說，例如，在移動(dòng)對象圖像的幀大小為小時(shí)，難以提取用于人物搜索的特征量，因此檢測幀大小確定單元71確定幀大小是否是在可以充分地提取人物搜索所需的特征量等并且適合于人物搜索的預(yù)定范圍內(nèi)的幀大小。
[0124]當(dāng)檢測幀大小確定單元71在步驟S24中確定關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的幀大小在預(yù)定范圍內(nèi)并且認(rèn)為移動(dòng)對象圖像不是不適合于人物搜索的移動(dòng)對象圖像時(shí)，本處理前進(jìn)到步驟S25。相反，當(dāng)在步驟S24中確定關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的幀大小不在預(yù)定的確定大小內(nèi)時(shí)，移動(dòng)對象信息濾波處理單元52在步驟S34中破壞關(guān)注的移動(dòng)對象信息。
[0125]在步驟S25中，前景偏置確定單元72從關(guān)注的移動(dòng)對象信息提取前景圖像。
[0126]在步驟S26中，前景偏置確定單元72計(jì)算前景區(qū)域的分布占據(jù)整個(gè)移動(dòng)對象圖像中的提取的前景圖像的區(qū)域的比值，并且確定該比值是否大于預(yù)定的閾值以及在移動(dòng)對象圖像內(nèi)的前景區(qū)域中是否存在偏置。也就是說，例如，在由圖6的圖像Pl指示的移動(dòng)對象圖像的情況下，示出了人物的頭后部、肩部等。在這種情況下，前景圖像是由圖6的圖像P2指示的圖像。在圖像P2的情況下，因?yàn)橛芍本€矩形包圍的范圍具有前景區(qū)域的大的比值，所以該圖像可以說不適合于人物搜索。因此，在這種情況下，由于前景區(qū)域的分布占據(jù)的比值大于預(yù)定的閾值，并且在前景區(qū)域的比值中存在偏置，所以前景偏置確定單元72認(rèn)為該圖像不適合于人物搜索，并且在步驟S34中破壞關(guān)注的移動(dòng)對象信息。
[0127]相反地，當(dāng)在步驟S26中基于關(guān)于前景圖像的信息確定前景區(qū)域與移動(dòng)對象圖像的比值小于預(yù)定的閾值并且在前景區(qū)域的比值中沒有偏置時(shí)，本處理前進(jìn)到步驟S27。
[0128]在步驟S27中，基于移動(dòng)對象圖像和前景圖像，前景和背景相關(guān)度確定單元73計(jì)算構(gòu)成前景區(qū)域的白色區(qū)域和其它區(qū)域(即，移動(dòng)對象圖像中的背景區(qū)域)之間的相關(guān)度。例如，前景和背景相關(guān)度確定單元73產(chǎn)生前景區(qū)域和背景區(qū)域中的每個(gè)的每一種顏色的直方圖，并且獲得顏色之間的最大差的倒數(shù)作為相關(guān)度。在這種情況下，相關(guān)度值越大，相關(guān)度就越聞。相反，相關(guān)度值越小，相關(guān)度就越低。
[0129]在步驟S28中，前景和背景相關(guān)度確定單元73確定獲得的相關(guān)度是否大于預(yù)定的閾值，即，在前景圖像中是否沒有發(fā)生變化并且背景圖像和前景是否被認(rèn)為不是移動(dòng)對象。例如，在步驟S28中，當(dāng)移動(dòng)對象圖像是圖像Pll并且前景圖像是圖像P12時(shí)，如圖7所示，白色區(qū)域和黑色區(qū)域之間的相關(guān)度被認(rèn)為高，并且認(rèn)為不存在移動(dòng)對象，如圖像P12所示。因此，前景和背景相關(guān)度確定單元73認(rèn)為相關(guān)度值大于預(yù)定的閾值，因此在步驟S34中破壞關(guān)注的移動(dòng)對象信息。
[0130]例如，當(dāng)在成像范圍內(nèi)的同一位置處長時(shí)間存在作為人物的移動(dòng)對象，并且該人物被成像的區(qū)域由此被認(rèn)為是背景圖像的區(qū)域、然后該人物移動(dòng)到成像范圍之外時(shí)，出現(xiàn)圖7中示出的移動(dòng)對象圖像Pll和前景圖像P12，并且直到此時(shí)該人物所在的區(qū)域被檢測為移動(dòng)對象。也就是說，由于該人物在前景圖像P12中由白色指示的區(qū)域中長時(shí)間存在，所以該區(qū)域被認(rèn)為是包括該人物所在的區(qū)域的背景圖像。此后，當(dāng)該人物移動(dòng)到成像范圍之外時(shí)，直到此時(shí)該人物所在的前景圖像的白色區(qū)域被認(rèn)為是移動(dòng)對象所在的區(qū)域。因此，不管原本應(yīng)該是移動(dòng)對象的人物不存在的事實(shí)，移動(dòng)對象圖像Pll成為通過檢測移動(dòng)對象而因此獲得的圖像。
[0131]相反地，當(dāng)在步驟S28中相關(guān)度值小于預(yù)定的閾值，移動(dòng)對象存在于前景區(qū)域中并且其它區(qū)域因此被認(rèn)為是背景區(qū)域時(shí)，本處理前進(jìn)到步驟S29。
[0132]在步驟S29中，邊緣長度確定單元74基于前景圖像獲得由前景圖像和背景圖像之間的邊界形成的邊緣圖像，并且獲得邊緣長度，該邊緣長度是包括在獲得的邊緣圖像中的邊緣的長度。
[0133]在步驟S30中，邊緣長度確定單元74確定獲得的邊緣長度是否短于預(yù)定的閾值。當(dāng)邊緣長度不短于預(yù)定的閾值時(shí)，本處理前進(jìn)到步驟S34，并且破壞關(guān)注的移動(dòng)對象信息。也就是說，例如，如圖8的圖像P21所示，當(dāng)圖像是人物的背面圖像時(shí)，該人物的服裝的顏色類似于背景的顏色，由此前景區(qū)域沒有被正確地提取，并且前景圖像可能成為如圖像P22一樣的圖像。如圖像P22所示，當(dāng)以點(diǎn)狀形式提取前景區(qū)域時(shí)，前景區(qū)域變成不適合于人物搜索。在這種情況下，當(dāng)基于作為前景圖像的圖像P22提取邊緣圖像時(shí)，示出如圖像P23 —樣的圖像。在這種情況下，由于以點(diǎn)狀形式獲得前景區(qū)域，所以邊緣長度變得更長。因此，當(dāng)基于邊緣圖像獲得邊緣長度并且該邊緣長度比預(yù)定的閾值更長時(shí)，認(rèn)為沒有獲得正確的前景區(qū)域，因此破壞關(guān)注的移動(dòng)對象信息。
[0134]相反地，當(dāng)在步驟S30中邊緣長度被認(rèn)為短于預(yù)定的長度時(shí)，本處理前進(jìn)到步驟S31。
[0135]在步驟S31中，多個(gè)人數(shù)確定單元75提取前景圖像并產(chǎn)生向量，在該向量中，針對水平方向上的每個(gè)坐標(biāo)位置存在于垂直方向上的像素值之和被設(shè)置為分量。也就是說，當(dāng)與圖9的圖像P31中示出的移動(dòng)對象圖像相對應(yīng)的前景圖像是圖像P32時(shí)，獲得如下波形，在該波形中，前景圖像在水平方向上的坐標(biāo)位置被設(shè)置為水平軸，并且針對水平方向上的每個(gè)坐標(biāo)位置的垂直方向上的像素值之和被設(shè)置為垂直軸，如上面圖像P32所示。因此，多個(gè)人數(shù)確定單元75計(jì)算與該波形相對應(yīng)的向量V。例如，當(dāng)前景圖像的坐標(biāo)被表達(dá)為(X，y)(其中，X = xl, x2, χ3,..., χη,并且y = yl, y2, y3,..., ym)并且前景圖像的像素值被表達(dá)為P(x，y)時(shí)，獲得的向量V被表達(dá)為如下。
[0136]V = (P (xl, yl) +P (xl, y2) +...+P (xl, ym), P (x2, yl) +P (x2, y2) +...+P (x2, ym), P (x3, yl) +P (x3, y2) +...+P (x3, ym) +.., P (xn, yl) +P (xn, y2) +...P (xn, ym))
[0137]在步驟S32中，多個(gè)人數(shù)確定單元75計(jì)算當(dāng)單個(gè)人物在移動(dòng)對象圖像內(nèi)被成像時(shí)的向量V和向量Vl之間的相關(guān)度，并且確定計(jì)算出的相關(guān)度是否大于預(yù)定的閾值。也就是說，如圖9的圖像P31所示，當(dāng)單個(gè)人物被成像為移動(dòng)對象圖像時(shí)，其中水平方向上的前景圖像P32的坐標(biāo)位置被設(shè)置為水平軸、并且針對水平方向上的每個(gè)坐標(biāo)位置的垂直方向上的像素值之和被設(shè)置為垂直軸的波形具有一個(gè)局部最大值，并且還具有帶一個(gè)凸波形形狀的外形。另一方面，例如，如圖像P41所示，當(dāng)4個(gè)人物被成像時(shí)，獲得圖像P42作為前景圖像。因此，如上面圖像P42所示，具有針對水平方向上的每個(gè)坐標(biāo)位置的垂直方向上的像素值之和的波形具有與人數(shù)對應(yīng)的4個(gè)局部最大值，并且還具有帶4個(gè)凸波形形狀的外形。
[0138]由于上述向量V對應(yīng)于具有波形的外形的波形，所以在單個(gè)人物的成像時(shí)的向量Vl對應(yīng)于具有一個(gè)局部最大值并且還具有凸波形的波形，如上面圖像P32所示，因此相關(guān)度變高。另一方面，在多個(gè)人物被成像的前景圖像的情況下，多個(gè)局部最大值被包括在內(nèi)，并且形成具有多個(gè)凸波形形狀的外形，如上面圖像P42所示。因此，向量V和向量Vl之間的相關(guān)度變低。
[0139]因此，當(dāng)在步驟S32中計(jì)算出的相關(guān)度不高于預(yù)定的閾值時(shí)，多個(gè)人數(shù)確定單元75認(rèn)為多個(gè)人物被包括在移動(dòng)對象圖像內(nèi)，因此本處理前進(jìn)到步驟S34，并且破壞關(guān)注的移動(dòng)對象信息。
[0140]相反地，當(dāng)在步驟S32中計(jì)算出的相關(guān)度高于預(yù)定的閾值時(shí)，認(rèn)為只有單個(gè)人物包括在移動(dòng)對象圖像內(nèi)，并且本處理前進(jìn)到步驟S33。
[0141 ] 在步驟S33中，移動(dòng)對象信息濾波處理單元52認(rèn)為關(guān)注的移動(dòng)對象信息是適合于人物搜索的移動(dòng)對象信息，并且在移動(dòng)對象信息保持單元53中保持關(guān)注的移動(dòng)對象信息。
[0142]在步驟S35中，移動(dòng)對象信息濾波處理單元52確定在移動(dòng)對象信息獲取單元51中是否存在未處理的移動(dòng)對象信息。當(dāng)存在未處理的移動(dòng)對象信息時(shí)，本處理返回到步驟S22。也就是說，重復(fù)步驟S22至S35的處理，直到?jīng)]有未處理的移動(dòng)對象信息為止。另外，當(dāng)在步驟S35中確定沒有未處理的移動(dòng)對象信息時(shí)，本處理結(jié)束。
[0143]也就是說，通過對從監(jiān)視照相機(jī)11順次地供應(yīng)的移動(dòng)對象信息的前述處理，只有幀大小在預(yù)定的范圍內(nèi)、在前景圖像中沒有偏置、前景圖像和背景圖像之間的相關(guān)度小于預(yù)定的閾值、前景圖像的邊緣圖像的邊緣長度短于預(yù)定的長度并且只考慮單個(gè)人物被成像的移動(dòng)對象圖像被認(rèn)為是適合于人物搜索的移動(dòng)對象圖像，并且只有包括這種移動(dòng)對象圖像的移動(dòng)對象信息通過移動(dòng)對象信息濾波處理作為適合于人物搜索的移動(dòng)對象信息被保持在移動(dòng)對象信息保持單元53中。
[0144]例如，如圖10中示出的狀態(tài)LI所示，當(dāng)從監(jiān)視照相機(jī)11供應(yīng)的移動(dòng)對象信息中包括的移動(dòng)對象圖像是移動(dòng)對象圖像PlOl至P118時(shí)，如下通過移動(dòng)對象信息濾波處理來對移動(dòng)對象信息進(jìn)行濾波。
[0145]如狀態(tài)L2所示，通過步驟S23和S24的處理，破壞包括其中幀大小不在預(yù)定的范圍內(nèi)且?guī)笮樾〔⑶以趫D中由對角線繪制的移動(dòng)對象圖像P106、P107和P112的移動(dòng)對象信息，由此保持包括狀態(tài)L3中示出的移動(dòng)對象圖像的移動(dòng)對象信息。
[0146]接下來，如狀態(tài)L3所示，通過步驟S25和S26的處理，破壞包括其中在前景圖像中存在偏置且前景區(qū)域的比值高的移動(dòng)對象圖像P104、P105、P110和P115的移動(dòng)對象信息，由此保持包括狀態(tài)L4中示出的移動(dòng)對象圖像的移動(dòng)對象信息。
[0147]此外，如狀態(tài)L4所示，通過步驟S27和S28的處理，破壞包括其中前景圖像和背景圖像之間的相關(guān)度高且很少包括作為移動(dòng)對象的人物的移動(dòng)對象圖像P101、P117和P118的移動(dòng)對象信息，由此保持包括狀態(tài)L5中所示的移動(dòng)對象圖像的移動(dòng)對象信息。移動(dòng)對象圖像P118是對應(yīng)于圖7的圖像Pll的圖像，并且前景圖像是P12。
[0148]如狀態(tài)L5所示，通過步驟S29和S30的處理，破壞包括其中前景圖像的前景區(qū)域沒有被正確地提取的移動(dòng)對象圖像P108的移動(dòng)對象信息，由此保持包括狀態(tài)L6中所示的移動(dòng)對象圖像的移動(dòng)對象信息。移動(dòng)對象圖像P108是對應(yīng)于圖8的圖像P21的圖像。
[0149]此外，如狀態(tài)L6所示，通過步驟S31和S32的處理，破壞包括其中多個(gè)人物被成像的移動(dòng)對象圖像P103、Plll和P116的移動(dòng)對象信息，由此保持包括狀態(tài)L7中所示的移動(dòng)對象圖像的移動(dòng)對象信息。
[0150]以此方式，從監(jiān)視照相機(jī)11供應(yīng)的移動(dòng)對象圖像PlOl至P118中的僅僅包括對于人物搜索來說最優(yōu)的移動(dòng)對象圖像P102、P109、P113和P114的移動(dòng)對象信息被保持在移動(dòng)對象信息保持單元53中。
[0151]結(jié)果，由于有可能只有包括適合于人物搜索的移動(dòng)對象圖像的移動(dòng)對象信息通過移動(dòng)對象信息濾波處理被濾波且被保持在移動(dòng)對象信息保持單元53中，所以可以提高人物搜索的精度。通過破壞不適合于人物搜索的移動(dòng)對象信息，可以快速地執(zhí)行人物搜索所需的并且下面將參照圖11描述的移動(dòng)對象信息匹配處理。
[0152][移動(dòng)對象信息匹配處理]
[0153]接下來，將參照圖11的流程圖描述由人物搜索和跟蹤服務(wù)器12執(zhí)行的移動(dòng)對象信息匹配處理。
[0154]在步驟S51中，顯示圖像產(chǎn)生單元57在顯示單元58上顯示保持在移動(dòng)對象信息保持單元53中的移動(dòng)對象信息中的移動(dòng)對象圖像的列表，并且顯示該顯示圖像以提示選擇指示搜索目標(biāo)人物的移動(dòng)對象圖像。
[0155]在步驟S52中，移動(dòng)對象信息似然度計(jì)算處理單元54確定操作輸入單元60是否被操作，并且選擇指定搜索目標(biāo)人物的移動(dòng)對象圖像。在沒有選擇指定搜索目標(biāo)人物的移動(dòng)對象圖像時(shí)，本處理返回到步驟S51。也就是說，重復(fù)步驟S51和S52的處理，直到指定搜索目標(biāo)人物的移動(dòng)對象圖像被指定。然后，當(dāng)在步驟S52中用于指定搜索目標(biāo)人物的移動(dòng)對象圖像被指定時(shí)，本處理前進(jìn)到步驟S53。
[0156]在步驟S53中，移動(dòng)對象信息似然度計(jì)算處理單元54將保持在移動(dòng)對象信息保持單元53中的移動(dòng)對象信息中的對應(yīng)于被指定為搜索目標(biāo)的移動(dòng)對象圖像的移動(dòng)對象信息設(shè)置為標(biāo)準(zhǔn)移動(dòng)對象信息，并且將其他移動(dòng)對象信息設(shè)置為未處理的移動(dòng)對象信息。
[0157]在步驟S54中，移動(dòng)對象信息似然度計(jì)算處理單元54讀取保持在移動(dòng)對象信息保持單元53中的一條未處理的移動(dòng)對象信息，并且將讀取的移動(dòng)對象信息設(shè)置為關(guān)注的移動(dòng)對象信息。
[0158]在步驟S55中，移動(dòng)對象信息似然度計(jì)算處理單元54計(jì)算作為包括在標(biāo)準(zhǔn)移動(dòng)對象信息中的移動(dòng)對象圖像和包括在關(guān)注的移動(dòng)對象信息中的移動(dòng)對象圖像之間的似然度的移動(dòng)對象圖像似然度，并且將計(jì)算出的移動(dòng)對象圖像似然度與關(guān)注的移動(dòng)對象信息一起供應(yīng)到移動(dòng)對象圖像似然度閾值確定單元55。也就是說，例如，當(dāng)標(biāo)準(zhǔn)移動(dòng)對象信息和關(guān)注的移動(dòng)對象信息中成像的人物彼此更加相似時(shí)，移動(dòng)對象信息似然度計(jì)算處理單元54基于更高的相似性來計(jì)算移動(dòng)對象圖像似然度。[0159]在步驟S56中，移動(dòng)對象圖像似然度閾值確定單元55確定供應(yīng)的移動(dòng)對象圖像似然度是否高于預(yù)定的閾值。也就是說，移動(dòng)對象圖像似然度閾值確定單元55基于移動(dòng)對象圖像似然度是否高于預(yù)定的閾值來確定標(biāo)準(zhǔn)移動(dòng)對象信息和關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的人物是否相互一致。當(dāng)在步驟S56中認(rèn)為移動(dòng)對象圖像似然度高于預(yù)定的閾值，并且標(biāo)準(zhǔn)移動(dòng)對象信息和關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的人物相互匹配(相互一致)時(shí)，本處理前進(jìn)到步驟S57。
[0160]在步驟S57中，移動(dòng)對象圖像似然度閾值確定單元55在結(jié)果存儲單元56中存儲關(guān)注的移動(dòng)對象信息。此時(shí)，移動(dòng)對象信息似然度計(jì)算處理單元54將保持在移動(dòng)對象信息保持單元53中的關(guān)注的移動(dòng)對象信息設(shè)置為處理后的移動(dòng)對象信息。
[0161]相反地，當(dāng)在步驟S56中認(rèn)為移動(dòng)對象圖像似然度不高于預(yù)定的閾值，并且標(biāo)準(zhǔn)移動(dòng)對象信息和關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的人物相互不匹配(相互不一致)時(shí)，本處理前進(jìn)到步驟S59。
[0162]在步驟S59中，移動(dòng)對象圖像似然度閾值確定單元55破壞關(guān)注的移動(dòng)對象信息。然后，移動(dòng)對象信息似然度計(jì)算處理單元54將保持在移動(dòng)對象信息保持單元53中的關(guān)注的移動(dòng)對象信息設(shè)置為處理后的移動(dòng)對象信息。
[0163]在步驟S58中，移動(dòng)對象信息似然度計(jì)算處理單元54確定在移動(dòng)對象信息保持單元53中是否保持有未處理的移動(dòng)對象信息。例如，當(dāng)保持有未處理的移動(dòng)對象信息時(shí)，本處理前進(jìn)到步驟S54。也就是說，重復(fù)步驟S54至S59的處理，直到在移動(dòng)對象信息保持單元53中沒有未處理的移動(dòng)對象信息為止，從而對所有的移動(dòng)對象信息和標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像重復(fù)匹配處理。
[0164]當(dāng)在步驟S58中認(rèn)為未處理的移動(dòng)對象信息被認(rèn)為沒有保持在移動(dòng)對象信息保持單元53中時(shí)，本處理前進(jìn)到步驟S60。
[0165]在步驟S60中，顯示圖像產(chǎn)生單元57基于存儲在結(jié)果存儲單元56中的移動(dòng)對象信息來產(chǎn)生指示搜索和跟蹤結(jié)果的顯示圖像。
[0166]在步驟S61中，顯示圖像產(chǎn)生單元57在顯示單元58上顯示指示搜索和跟蹤結(jié)果的顯示圖像。例如，指示搜索和跟蹤結(jié)果的顯示圖像是如圖12所示的圖像P201。
[0167]在圖12所示的圖像P201中，基于存儲在結(jié)果存儲單元56中的移動(dòng)對象信息，將指示與搜索目標(biāo)人物相同的人物的移動(dòng)對象圖像被捕獲的位置的圖A至E顯示在與監(jiān)視區(qū)域Z中的全球坐標(biāo)相對應(yīng)的位置處。區(qū)域Zl和Z2指示監(jiān)視區(qū)域內(nèi)的對象。將包括在每條移動(dòng)對象信息中的移動(dòng)對象圖像被捕獲的成像時(shí)間顯示在指示檢測到被認(rèn)為是搜索目標(biāo)的人物的位置的圖A至E中的每個(gè)之上。在本情況下，圖A至E的成像時(shí)間被示出為1:00:00、1:00:05、1:00:09、1:00:18和1:00:20。此外，在這些位置處捕獲的移動(dòng)對象圖像通過鉛線被附加到圖A至E，因此移動(dòng)對象圖像PA至PE分別被附加到圖A至E。
[0168]當(dāng)指示搜索和跟蹤結(jié)果的圖像P201被顯示時(shí)，用戶可以識別出被指定為搜索目標(biāo)的人物從由圖A指示的位置何時(shí)依次地經(jīng)過由圖B、C、D和E指示的位置。
[0169]當(dāng)用戶在視覺上確認(rèn)移動(dòng)對象圖像PA至PE在顯示圖像P201中以從圖A至E通過鉛線連接的狀態(tài)顯示，并且確認(rèn)該人物是搜索目標(biāo)時(shí)，用戶可以用操作輸入單元60通過選擇來輸入決定信息。當(dāng)輸入決定信息時(shí)，可以執(zhí)行下面參照圖13的流程圖描述的匹配修改處理，并且可以修改搜索和跟蹤結(jié)果，以使得可以以更高的精度獲得搜索和跟蹤結(jié)果。[0170]這里，將返回參照圖11的流程圖來進(jìn)行描述。
[0171]在步驟S62中，匹配修改處理單元59基于關(guān)于從顯示圖像產(chǎn)生單元57供應(yīng)的顯示圖像P201的信息和從操作輸入單元60供應(yīng)的操作信號來確定是否選擇在顯示圖像P201中示出的移動(dòng)對象圖像PA至PE中的一個(gè)，輸入決定信息，并且指示匹配修改處理。
[0172]當(dāng)在步驟S62中選擇在顯示圖像P201中示出的移動(dòng)對象圖像PA至PE中的一個(gè)并輸入決定信息時(shí)，認(rèn)為要指示匹配修改處理，并且本處理前進(jìn)到步驟S63。
[0173]在步驟S63中，匹配修改處理單元59執(zhí)行匹配修改處理，并且顯示經(jīng)過修改處理的人物搜索和跟蹤結(jié)果。下面將參照圖13詳細(xì)地描述該匹配修改處理。
[0174]在步驟S64中，匹配修改處理單元59確定是否指示結(jié)束。當(dāng)未指示結(jié)束時(shí)，本處理返回到步驟S61。也就是說，指示人物搜索和跟蹤結(jié)果的顯示畫面P201被連續(xù)地顯示在顯示單元58上。相反地，當(dāng)在步驟S64中指示結(jié)束時(shí),本處理結(jié)束。
[0175]通過經(jīng)由前述的移動(dòng)對象信息匹配處理僅僅指定搜索目標(biāo)人物的移動(dòng)對象圖像，可以基于移動(dòng)對象圖像來搜索與搜索目標(biāo)人物一致的移動(dòng)對象信息，并且可以根據(jù)作為搜索結(jié)果的移動(dòng)對象信息來顯示指示搜索目標(biāo)人物的移動(dòng)路徑的搜索和跟蹤結(jié)果。上面已經(jīng)描述了這樣的示例，其中，當(dāng)指定搜索目標(biāo)人物時(shí)，從保持在移動(dòng)對象信息保持單元53中的移動(dòng)對象信息的移動(dòng)對象圖像中指定人物。但是，可以通過使得能夠分開地輸入除了由監(jiān)視照相機(jī)11捕獲的圖像以外的圖像并且以與移動(dòng)對象圖像相同的方式處理該圖像來指定搜索目標(biāo)人物。
[0176][圖11的匹配修改處理]
[0177]接下來，將參照圖13的流程圖描述由人物搜索和跟蹤服務(wù)器12執(zhí)行的圖11的匹配修改處理。
[0178]在步驟S81中，匹配修改處理單元59將指示包括由操作輸入單元60輸入了決定信息的移動(dòng)對象圖像的信息與移動(dòng)對象信息相關(guān)聯(lián)地存儲。由于決定了被輸入了決定信息的移動(dòng)對象信息是通過移動(dòng)對象圖像匹配處理適當(dāng)?shù)靥崛〉囊苿?dòng)對象信息，所以在后續(xù)的處理中從搜索目標(biāo)中排除移動(dòng)對象信息并將該移動(dòng)對象信息連續(xù)地存儲在結(jié)果存儲單元53中。
[0179]在步驟S82中，匹配修改處理單元59將存儲在結(jié)果存儲單元56中的移動(dòng)對象信息當(dāng)中的沒有輸入決定信息的所有的移動(dòng)對象信息設(shè)置為未處理的移動(dòng)對象信息。
[0180]在步驟S83中，匹配修改處理單元59將存儲在結(jié)果存儲單元56中的移動(dòng)對象信息當(dāng)中的最近被輸入了決定信息的移動(dòng)對象信息設(shè)置為標(biāo)準(zhǔn)移動(dòng)對象信息。
[0181]在步驟S84中，BTF計(jì)算單元92確定是否可以計(jì)算BTF。在步驟S84中，第一 BTF可計(jì)算條件是存在包括具有與包括在標(biāo)準(zhǔn)移動(dòng)對象信息中的照相機(jī)ID不同的照相機(jī)ID的另一個(gè)移動(dòng)對象圖像且被輸入了決定信息的移動(dòng)對象信息的情況。第二 BTF可計(jì)算條件是存在被輸入了決定信息的兩個(gè)或更多個(gè)移動(dòng)對象圖像并且這些移動(dòng)對象圖像由具有不同的照相機(jī)ID的不同的監(jiān)視照相機(jī)11捕獲的情況。因此，基于在結(jié)果存儲單元56中是否存在滿足前述兩個(gè)條件中的一個(gè)的移動(dòng)對象信息，BTF計(jì)算單元92確定是否可以計(jì)算BTF。當(dāng)在步驟S84中可以計(jì)算BTF時(shí)，在步驟S85中，盡管在標(biāo)準(zhǔn)移動(dòng)對象信息中包括移動(dòng)對象圖像或者不同的照相機(jī)ID，BTF計(jì)算單元92通過使用關(guān)于被輸入了決定信息的移動(dòng)對象圖像之間的像素值的信息執(zhí)行BTF計(jì)算處理來計(jì)算BTF。BTF是指示包括由兩個(gè)不同的照相機(jī)ID指定的監(jiān)視照相機(jī)11成像的同一被攝體的移動(dòng)對象圖像的顏色之間的相互對應(yīng)關(guān)系的函數(shù)。因此，當(dāng)計(jì)算BTF時(shí)，不管是否存在決定信息，可以通過使用BTF對由具有不同的照相機(jī)ID的兩個(gè)監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像中的一個(gè)執(zhí)行顏色轉(zhuǎn)換來執(zhí)行顏色校正。通過顏色校正處理，可以校正由于不同的監(jiān)視照相機(jī)11之間的監(jiān)視區(qū)域的成像環(huán)境光的差異或者成像單元31的圖像傳感器的個(gè)體差異等引起的顏色的變化。結(jié)果，由兩個(gè)不同的監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像經(jīng)過顏色校正，就好像移動(dòng)對象圖像是由同一監(jiān)視照相機(jī)11捕獲的一樣。因此，可以更加準(zhǔn)確地計(jì)算移動(dòng)對象圖像之間的移動(dòng)對象圖像似然度。
[0182]BTF 計(jì)算處理的細(xì)節(jié)可以參考"Appearance modeling for tracking in multiplenon-overlapping cameras〃by 0.JavedjK.Shafique and M.Shah, In IEEE Int.Conf.0nComputer Vis1n and Pattern Recognit1n pp.26to33，2005。
[0183]另一方面，當(dāng)在步驟S84中由一種監(jiān)視照相機(jī)11捕獲了被輸入了決定信息的移動(dòng)對象圖像時(shí)，BTF被認(rèn)為不是可計(jì)算的，并且跳過步驟S85的處理。
[0184]在步驟S86中，時(shí)空似然度計(jì)算單元93將存儲在結(jié)果存儲單元56中并且是排除了標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象信息的移動(dòng)對象信息當(dāng)中的一條未處理的移動(dòng)對象信息設(shè)置為關(guān)注的移動(dòng)對象信息。
[0185]在步驟S87中，時(shí)空似然度計(jì)算單元93基于關(guān)于包括在標(biāo)準(zhǔn)移動(dòng)對象信息和關(guān)注的移動(dòng)對象信息中的全球坐標(biāo)和成像時(shí)間的信息來計(jì)算時(shí)空似然度。更具體地，例如，時(shí)空似然度計(jì)算單元93根據(jù)包括在標(biāo)準(zhǔn)移動(dòng)對象信息中的全球坐標(biāo)和包括在關(guān)注的移動(dòng)對象信息中的全球坐標(biāo)之間的差來獲得移動(dòng)距離，并且基于移動(dòng)對象信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)該移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值來計(jì)算移動(dòng)對象信息的時(shí)空似然度。
[0186]在步驟S88中，時(shí)空似然度閾值確定單元94確定計(jì)算出的時(shí)空似然度是否高于預(yù)定的閾值。例如，當(dāng)指示人物搜索和跟蹤結(jié)果的顯示圖像是如手Hl所示的在圖14的上部中示出的顯示圖像、由操作輸入單元60選擇對應(yīng)于圖A的移動(dòng)對象圖像PA、并且輸入決定信息時(shí)，對應(yīng)于圖A的移動(dòng)對象信息成為標(biāo)準(zhǔn)移動(dòng)對象信息。在圖14的顯示圖像的情況下，在對應(yīng)于圖A至E的移動(dòng)對象信息中成像時(shí)間分別是1:00:00、1:00:05、1:00:10、1:00:15和1:00:05。圖A和B是與由同一監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像PA和PB相對應(yīng)的移動(dòng)對象信息，該監(jiān)視照相機(jī)11對由相同的虛線形成的三角形指示的成像區(qū)域CamA進(jìn)行成像。同樣地，圖C和D是與由同一監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像PC和H)相對應(yīng)的移動(dòng)對象信息，該監(jiān)視照相機(jī)11對由虛線形成的三角形指示的成像區(qū)域CamB進(jìn)行成像。此夕卜，圖E是與由監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像PE相對應(yīng)的移動(dòng)對象信息，該監(jiān)視照相機(jī)11對由虛線形成的三角形指示的成像區(qū)域CamC進(jìn)行成像。
[0187]在這種情況下，當(dāng)對應(yīng)于圖B的移動(dòng)對象信息是關(guān)注的移動(dòng)對象信息并且假設(shè)圖A和B之間的距離為距離AB時(shí)，移動(dòng)對象信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值是5/(AB/w)。這里，w指示平均人物移動(dòng)速度。例如，當(dāng)距離AB是5m并且平均人物移動(dòng)速度是lm/s時(shí)，該比值是1，并且時(shí)空似然度是最高值。同樣地，當(dāng)對應(yīng)于圖C和D的移動(dòng)對象信息是關(guān)注的移動(dòng)對象信息并且假設(shè)圖A和C之間的距離以及圖A和D之間的距離為距離AC和距離AD時(shí)，移動(dòng)對象信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)這些移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值分別是10/ (AC/w)和15/ (AD/w)。例如，當(dāng)距離AC和AD分別是1m和15m并且平均人物移動(dòng)速度是lm/s時(shí)，比值都是1，并且時(shí)空似然度是最高值。
[0188]因此，當(dāng)在步驟S88中時(shí)空似然度是最高值時(shí)，時(shí)空似然度閾值確定單元94認(rèn)為時(shí)空似然度高于預(yù)定的閾值，并且本處理前進(jìn)到步驟S89。
[0189]另一方面，當(dāng)對應(yīng)于圖E的移動(dòng)對象信息是關(guān)注的移動(dòng)對象信息并且假設(shè)圖A和E之間的距離為距離AE時(shí)，移動(dòng)對象信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)該移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值是5/(AE/w)。也就是說，例如，當(dāng)距離AE是25m并且平均人物移動(dòng)速度是lm/s時(shí)，行進(jìn)25m花費(fèi)了約5秒。因此，比值是0.2，并且時(shí)空似然度是低值。當(dāng)在步驟S88中時(shí)空似然度低時(shí)，時(shí)空似然度閾值確定單元94認(rèn)為時(shí)空似然度低于預(yù)定的閾值，并且本處理前進(jìn)到步驟S96。
[0190]在步驟S96中，匹配修改處理單元59從結(jié)果存儲單元56擦除關(guān)注的移動(dòng)對象信息。也就是說，當(dāng)指示在圖14的圖像P211中示出的搜索和跟蹤結(jié)果的圖像被顯示、并且在對應(yīng)于圖A的移動(dòng)對象圖像PA中輸入了決定信息時(shí)，基于時(shí)空信息擦除可能不存在同一人物的圖E的移動(dòng)對象信息，如下面在圖14的顯示圖像中示出的表中所示。由于僅使用移動(dòng)對象圖像在移動(dòng)對象信息匹配處理中錯(cuò)誤地檢測到的搜索和跟蹤結(jié)果可以通過這些處理被排除，所以可以以更高的精度來實(shí)現(xiàn)搜索目標(biāo)人物的人物搜索和跟蹤。
[0191]在步驟S89中，BTF圖像處理單元95確定是否獲得了 BTF。例如，當(dāng)沒有獲得BTF時(shí)，本處理前進(jìn)到步驟S93。
[0192]在步驟S93中，匹配修改處理單元59將存儲在結(jié)果存儲單元56中的移動(dòng)對象信息當(dāng)中的作為關(guān)注的移動(dòng)對象信息的移動(dòng)對象信息設(shè)置為處理完成。
[0193]在步驟S94中，顯示圖像產(chǎn)生單元57反映結(jié)果存儲單元56的更新結(jié)果，更新并產(chǎn)生指示搜索和跟蹤結(jié)果的圖像，并且在顯示單元58上顯示圖像。也就是說，例如，如圖15的上部中的顯示畫面所示，擦除并顯示對應(yīng)于圖E的顯示。在圖15中，為了指示擦除顯示，十字標(biāo)記的符號被表示。但是，在實(shí)踐中，顯示自身被擦除。
[0194]在步驟S95中，時(shí)空似然度計(jì)算單元93確定在存儲在結(jié)果存儲單元56中并且作為除了標(biāo)準(zhǔn)移動(dòng)對象信息以外的移動(dòng)對象信息的移動(dòng)對象信息當(dāng)中是否存在未處理的移動(dòng)對象信息。當(dāng)存在未處理的移動(dòng)對象信息時(shí)，本處理返回到步驟S86。也就是說，只要存在未處理的移動(dòng)對象信息，就重復(fù)步驟S86至S96的處理。然后，當(dāng)在步驟S95中認(rèn)為不存在未處理的移動(dòng)對象信息時(shí)，本處理前進(jìn)到步驟S97。
[0195]在步驟S97中，當(dāng)操作輸入單元60被操作、選擇對應(yīng)于一條移動(dòng)對象信息的移動(dòng)對象圖像、并輸入決定信息時(shí)，操作輸入識別單元91確定是否另外指示匹配修改處理。例如，如圖15的手H2所示，當(dāng)在步驟S97中操作輸入單元60被操作、選擇對應(yīng)于圖C的移動(dòng)對象圖像PC、并輸入決定信息時(shí)，本處理返回到步驟S81，并且另外執(zhí)行匹配修改處理。
[0196]此時(shí)，在步驟S84中，由于被輸入了決定信息的移動(dòng)對象圖像是兩個(gè)移動(dòng)對象圖像PA和PC，并且識別捕獲移動(dòng)對象圖像的監(jiān)視照相機(jī)11的照相機(jī)ID相互不同，所以BTF可被認(rèn)為是可計(jì)算的。
[0197]因此，在這種情況下，在步驟S85中，BTF計(jì)算單元92使用對應(yīng)于圖C的移動(dòng)對象信息的移動(dòng)對象圖像PC和對應(yīng)于圖A的移動(dòng)對象信息的移動(dòng)對象圖像PA來計(jì)算BTF。在這種情況下，由于標(biāo)準(zhǔn)移動(dòng)對象信息是對應(yīng)于圖C的移動(dòng)對象圖像PC的移動(dòng)對象信息，所以獲得的BTF被假設(shè)是用來使用由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像PC的顏色作為標(biāo)準(zhǔn)來校正由對成像區(qū)域CamA進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像PA的顏色的變化的函數(shù)。
[0198]結(jié)果，當(dāng)關(guān)注的移動(dòng)對象信息是與在成像區(qū)域CamA中捕獲的移動(dòng)對象圖像PB相對應(yīng)的移動(dòng)對象信息時(shí)，BTF被認(rèn)為是在步驟S89中獲得的，因此本處理前進(jìn)到步驟S90。
[0199]在步驟S90中，BTF圖像處理單元95通過使用計(jì)算出的BTF轉(zhuǎn)換關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的顏色來執(zhí)行顏色校正。也就是說，在本情況下，BTF圖像處理單元95通過對圖15中的移動(dòng)對象圖像PB應(yīng)用BTF來執(zhí)行顏色校正，以對應(yīng)于由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像PC的顏色。
[0200]在步驟S91中，BTF圖像似然度計(jì)算單元96計(jì)算BTF圖像似然度，該BTF圖像似然度是標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像與作為關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像并且經(jīng)過了 BTF的顏色轉(zhuǎn)換的移動(dòng)對象圖像之間的似然度。BTF圖像似然度基本上與移動(dòng)對象信息似然度計(jì)算處理單元54中的似然度相同。
[0201]在步驟S92中，BTF圖像似然度閾值確定單元97基于計(jì)算出的BTF圖像似然度是否高于預(yù)定的閾值，確定標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像是否與經(jīng)過了 BTF的顏色轉(zhuǎn)換的關(guān)注的移動(dòng)對象信息的移動(dòng)對象信息匹配。當(dāng)在步驟S92中BTF圖像似然度高于預(yù)定的閾值時(shí)，本處理前進(jìn)到步驟S93。也就是說，在這種情況下，關(guān)注的移動(dòng)對象信息的移動(dòng)對象?目息保持在結(jié)果存儲單兀56中。
[0202]相反地，當(dāng)在 步驟S92中BTF圖像似然度低于預(yù)定的閾值時(shí)，本處理前進(jìn)到步驟S96。也就是說，在這種情況下，通過步驟S96的處理，從結(jié)果存儲單元56擦除關(guān)注的移動(dòng)對象信息的移動(dòng)對象信息。
[0203]也就是說，如圖15的下部中的表所示，當(dāng)決定信息被輸入到對應(yīng)于圖A的移動(dòng)對象圖像PA、并且決定信息隨后被輸入到對應(yīng)于圖C的移動(dòng)對象圖像PC時(shí)，獲得用來使用由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的圖像的顏色作為標(biāo)準(zhǔn)來校正由對成像區(qū)域CamA進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的圖像的顏色的BTF。然后，對應(yīng)于圖B并且包括時(shí)空似然度高于預(yù)定的閾值且BTF圖像似然度高于預(yù)定的閾值的移動(dòng)對象圖像的移動(dòng)對象信息保持在結(jié)果存儲單元56中。另一方面，從結(jié)果存儲單元56擦除對應(yīng)于圖D并且包括時(shí)空似然度高于預(yù)定的閾值且BTF圖像似然度低于預(yù)定的閾值的移動(dòng)對象圖像的移動(dòng)對象信息。在圖15的下部的表中對于圖A繪制對角線的原因是，移動(dòng)對象信息是已經(jīng)被輸入了決定信息的移動(dòng)對象信息，因此不是處理目標(biāo)。
[0204]也就是說，當(dāng)在前述匹配修改處理中用戶輸入了決定信息時(shí)，基于決定信息再次重復(fù)地執(zhí)行匹配校正處理。因此，當(dāng)輸入了決定信息時(shí)，可以提高搜索和跟蹤結(jié)果的精度。當(dāng)對于由不同的監(jiān)視照相機(jī)11捕獲的移動(dòng)對象圖像輸入了決定信息時(shí)，可以獲得BTF。因此，由于在考慮時(shí)空似然度之后基于與監(jiān)視照相機(jī)11之間的顏色的變化相對應(yīng)的BTF圖像似然度來執(zhí)行匹配修改處理，所以可以以更高的精度執(zhí)行人物搜索和跟蹤。
[0205]由于可以僅僅計(jì)算標(biāo)準(zhǔn)移動(dòng)對象信息的移動(dòng)對象圖像與關(guān)注的移動(dòng)對象信息的移動(dòng)對象圖像的BTF、和與僅僅兩個(gè)監(jiān)視照相機(jī)11相對應(yīng)的BTF，所以減少了 BTF的計(jì)算的處理負(fù)荷，從而提高了與BTF的計(jì)算有關(guān)的處理速度。[0206]上面描述了通過如下步驟來重復(fù)匹配修改處理的示例:指定搜索目標(biāo)人物，搜索關(guān)于搜索目標(biāo)人物的移動(dòng)對象信息，根據(jù)搜索結(jié)果來顯示指示人物搜索和跟蹤結(jié)果的顯示圖像，隨后輸入決定信息。但是，通過以各種方式改變搜索目標(biāo)人物，本技術(shù)可以應(yīng)用于各種使用。
[0207]例如，通過將陌生人或嫌疑人設(shè)置為搜索目標(biāo)人物，可以根據(jù)人物搜索和跟蹤結(jié)果來確認(rèn)陌生人或嫌疑人的移動(dòng)歷史，并且可以在實(shí)踐中確認(rèn)是否存在疑點(diǎn)。更具體地，例如，當(dāng)在公司內(nèi)部發(fā)現(xiàn)不是公司成員的嫌疑人時(shí)，可以通過將外部嫌疑人設(shè)置為搜索目標(biāo)人物來確認(rèn)外部嫌疑人的移動(dòng)歷史。因此，例如，當(dāng)外部嫌疑人入侵到在不攜帶員工身份證的情況下禁止進(jìn)入的地方時(shí)，可以確認(rèn)外部嫌疑人入侵到該地方。因此，本技術(shù)可以用在所謂的安全系統(tǒng)中。
[0208]例如，通過將作為商店的各樓層上的搜索目標(biāo)人物的多個(gè)用戶設(shè)置為搜索目標(biāo)人物，可以根據(jù)人物搜索和跟蹤結(jié)果來確認(rèn)在每個(gè)樓層上移動(dòng)的用戶在每個(gè)樓層上行走的移動(dòng)路徑。因此，該信息可應(yīng)用于商店。更具體地，例如，由于可以確認(rèn)用戶在客戶的樓層內(nèi)的移動(dòng)歷史，并且可以基于移動(dòng)歷史最佳地改變產(chǎn)品的布局，所以本技術(shù)可以用在所謂的營銷研究系統(tǒng)中。
[0209]<2.第二實(shí)施例>
[0210]上面描述了使用通過移動(dòng)對象檢測而檢測到的移動(dòng)對象信息來獲得人物的移動(dòng)歷史的示例。但是，通過使用經(jīng)由人物檢測而不是移動(dòng)對象檢測而檢測到的人物信息，可以以更高的精度獲得移動(dòng)歷史。在下文中，將在第二實(shí)施例中描述具有人物檢測的示例。圖1中示出的監(jiān)視系統(tǒng)的配置是相同的，由此將省略其描述。在下面的描述中，對于具有與參照圖1至15描述的組成部件相同的功能的組成部件給予相同的名稱和相同的附圖標(biāo)記，并且將適當(dāng)?shù)厥÷云涿枋觥?br> [0211 ][監(jiān)視照相機(jī)的第二配置示例]
[0212]接下來，將參照圖16的框圖來描述監(jiān)視照相機(jī)11的第二配置示例。
[0213]圖16中的監(jiān)視照相機(jī)11的基本配置與圖2中的監(jiān)視照相機(jī)11相同，但是不同之處在于，提供人物檢測單元121和人物信息輸出單元122替代移動(dòng)對象檢測單元32和移動(dòng)對象信息輸出單元37。
[0214]人物檢測單元121從由成像單元31捕獲的每個(gè)圖像中提取特征量，基于提取的特征量來檢測人物被成像的區(qū)域，并且提取指示人物成像區(qū)域的圖像信息作為人物圖像，在該人物成像區(qū)域中，例如，人物被成像的檢測區(qū)域被設(shè)置為1，而其它區(qū)域被設(shè)置為O。更具體地，當(dāng)將HOG(方向梯度的直方圖)用作圖像特征量時(shí)，人物檢測單元121對捕獲的圖像執(zhí)行邊緣提取處理，以從捕獲的圖像中提取用于識別被攝體的剪影的邊緣圖像。然后，人物檢測單元121將邊緣提取的圖像分割成每個(gè)局部區(qū)域的梯度方向上的各分區(qū)，取得直方圖，并且將該直方圖設(shè)置為特征量。基于以這樣的方式提取的特征量，人物檢測單元121確定該剪影是否為人物。當(dāng)確定該剪影為人物時(shí)，人物檢測單元121產(chǎn)生其中被認(rèn)為是人物的區(qū)域被設(shè)置為I且其它區(qū)域被設(shè)置為O的圖像，并且檢測該圖像作為人物圖像。
[0215]人物信息輸出單元122針對從由成像單元131捕獲的圖像中提取的每個(gè)人物圖像，基于關(guān)于捕獲的圖像、捕獲該圖像的成像單元131的照相機(jī)ID、人物的全球坐標(biāo)和成像時(shí)間的信息，產(chǎn)生包括捕獲的圖像、捕獲該圖像的成像單元131的照相機(jī)ID、人物的全球坐標(biāo)和成像時(shí)間的人物信息，然后通過網(wǎng)絡(luò)13將人物信息輸出到人物搜索和跟蹤服務(wù)器12。
[0216][人物搜索和跟蹤服務(wù)器的第二配置示例]
[0217]接下來，將參照圖17的框圖來描述人物搜索和跟蹤服務(wù)器12的第二配置示例。
[0218]人物搜索和跟蹤服務(wù)器12被配置為包括人物信息獲取單元151、人物信息濾波處理單元152、人物信息保持單元153、人物信息似然度計(jì)算處理單元154、人物信息似然度閾值確定單元155、結(jié)果存儲單元156、顯示圖像產(chǎn)生單元157、顯示單元158、匹配修改處理單元159和操作輸入單元160。由于顯示圖像產(chǎn)生單元157、顯示單元158和操作輸入單元160具有與顯示圖像產(chǎn)生單元57、顯示單元58和操作輸入單元60相同的配置，所以將省略其描述。
[0219]人物信息獲取單元151獲取通過網(wǎng)絡(luò)13從監(jiān)視照相機(jī)11供應(yīng)的人物信息，臨時(shí)地存儲人物信息，并且將人物信息供應(yīng)到人物信息濾波處理單元152。
[0220]人物信息濾波處理單元152在預(yù)定的條件下對從人物信息獲取單元151供應(yīng)的人物信息進(jìn)行濾波，只提取適合于人物搜索的人物信息，將提取的人物信息保持在人物信息保持單元153中，并且破壞不適合的人物信息。更具體地，人物信息濾波處理單元152根據(jù)包括在人物信息中的人物圖像是否為該人物的全身被捕獲的圖像來對人物信息進(jìn)行濾波，只將該人物的全身被捕獲的圖像保持在人物信息保持單元153中，并且破壞不適合的且該人物的全身沒有被捕獲的人物信息。
[0221]人物信息保持單元153只保持包括適合于由人物信息濾波處理單元152進(jìn)行的人物搜索且人物的全身被捕獲的人物圖像的人物信息，然后在必要的時(shí)候?qū)⒃撊宋镄畔⒐?yīng)到人物信息似然度計(jì)算處理單元154和顯示圖像產(chǎn)生單元157。
[0222]人物信息似然度計(jì)算處理單元154針對每個(gè)人物信息計(jì)算保持在人物信息保持單元153中的人物信息中所包括的人物圖像當(dāng)中的除了標(biāo)準(zhǔn)人物信息以外的人物信息的人物圖像相對于標(biāo)準(zhǔn)人物信息的人物圖像似然度，然后將人物圖像似然度供應(yīng)到人物信息似然度閾值確定單元155，其中，該標(biāo)準(zhǔn)人物信息是包括被指定為搜索目標(biāo)的人物信息的人物圖像的搜索目標(biāo)。
[0223]人物信息似然度閾值確定單元155確定基于由人物信息似然度計(jì)算處理單元154計(jì)算出的人物圖像而獲得的人物圖像似然度是否高于閾值，然后將包括具有更高的人物圖像似然度的人物圖像的人物信息存儲在結(jié)果存儲單元156中。也就是說，人物信息似然度閾值確定單元155基于除了作為搜索目標(biāo)的標(biāo)準(zhǔn)人物信息以外的人物信息相對于標(biāo)準(zhǔn)人物信息的人物圖像似然度來執(zhí)行人物圖像匹配處理，并且將包括具有更高的人物圖像似然度的人物圖像的人物信息提取為基于人物圖像而匹配的信息。然后，人物信息似然度閾值確定單元155將提取的人物信息作為與作為搜索目標(biāo)的標(biāo)準(zhǔn)人物信息匹配的結(jié)果存儲在結(jié)果存儲單元156中。
[0224]當(dāng)用戶基于在顯示單元158上顯示的搜索和跟蹤結(jié)果中顯示的人物圖像來決定搜索目標(biāo)的人物圖像時(shí)，匹配修改處理單元159基于通過操作輸入單元160的操作而輸入的決定信息來執(zhí)行匹配修改處理。當(dāng)輸入了決定信息時(shí)，匹配修改處理單元159甚至在執(zhí)行匹配修改處理之后在再次輸入決定信息時(shí)再次執(zhí)行匹配修改處理，以重復(fù)匹配修改處理。
[0225]更具體地，匹配修改處理單元159包括操作輸入識別單元181、其他人物信息保持單元182、同一人物信息保持單元183、獨(dú)有特征選擇單元184、獨(dú)有特征似然度計(jì)算單元185、獨(dú)有特征似然度閾值確定單元186和BTF時(shí)空處理單元187。
[0226]操作輸入識別單元181基于操作輸入單元160的操作信號來識別針對在顯示單元158上顯示的搜索和跟蹤結(jié)果中選擇的人物信息來輸入決定信息。
[0227]其他人物信息保持單元182將沒有輸入決定信息且作為被確定為不是由BTF時(shí)空處理單元187指定為搜索目標(biāo)的人物圖像由此被破壞的人物信息的人物圖像的人物圖像保持為與被假設(shè)為搜索目標(biāo)的人物不同的另一個(gè)人物的人物圖像。
[0228]同一人物信息保持單元183將包括被輸入了決定信息的人物圖像的人物信息和包括被指定為搜索目標(biāo)的人物的人物圖像的人物信息保持為與搜索目標(biāo)人物相同的人物的人物信息。
[0229]獨(dú)有特征選擇單元184基于關(guān)于不是在其他人物信息保持單元182中登記的搜索目標(biāo)人物的人物圖像(即，被認(rèn)為是另一個(gè)人物的人物圖像的人物圖像)的人物圖像的信息來執(zhí)行學(xué)習(xí)，并且提取不是搜索目標(biāo)人物的人物的人物圖像的特征量作為學(xué)習(xí)結(jié)果。獨(dú)有特征選擇單元184基于關(guān)于被認(rèn)為是與登記在同一人物信息保持單元183中的搜索目標(biāo)人物相同的人物的人物圖像的人物圖像的信息來執(zhí)行學(xué)習(xí)，并且提取搜索目標(biāo)人物的人物圖像的特征量作為學(xué)習(xí)結(jié)果。獨(dú)有特征選擇單元184提取如下特征量作為獨(dú)有特征并且將獨(dú)有特征供應(yīng)到獨(dú)有特征似然度計(jì)算單元185，其中，另一個(gè)人物的人物圖像具有該特征量的概率低，并且通過學(xué)習(xí)被認(rèn)為是同一人物的人物圖像具有該特征量的概率高。
[0230]獨(dú)有特征似然度計(jì)算單元185針對每個(gè)人物信息，基于提取的獨(dú)有特征來計(jì)算保持在人物信息保持單元153中的人物信息中所包括的人物圖像當(dāng)中的除了標(biāo)準(zhǔn)人物信息以外的人物信息的人物圖像相對于標(biāo)準(zhǔn)人物信息的獨(dú)有特征似然度，并且將獨(dú)有特征似然度供應(yīng)到獨(dú)有特征似然度閾值確定單元186，該標(biāo)準(zhǔn)人物信息包括被指定為搜索目標(biāo)的人物信息的人物圖像并且是搜索目標(biāo)。
[0231]獨(dú)有特征似然度閾值確定單元186確定基于由獨(dú)有特征似然度計(jì)算單元185計(jì)算出的人物圖像而獲得的獨(dú)有特征似然度是否高于閾值，并且將包括具有高的獨(dú)有特征似然度的人物圖像的人物信息存儲在結(jié)果存儲單元156中。也就是說，獨(dú)有特征似然度閾值確定單元186基于除了作為搜索目標(biāo)的標(biāo)準(zhǔn)人物信息以外的人物信息相對于標(biāo)準(zhǔn)人物信息的獨(dú)有特征似然度來執(zhí)行人物圖像匹配處理，并且將包括具有高的獨(dú)有特征似然度的人物圖像的人物信息提取為基于人物圖像而匹配的信息。獨(dú)有特征似然度閾值確定單元186將提取的人物信息作為與作為搜索目標(biāo)的標(biāo)準(zhǔn)人物信息匹配的結(jié)果存儲在結(jié)果存儲單元156中。
[0232]如在第一實(shí)施例中描述的處理一樣，BTF時(shí)空處理單元187使用時(shí)空和BTF圖像來執(zhí)行確定處理。更具體地，BTF時(shí)空處理單元187包括BTF計(jì)算單元191、時(shí)空似然度計(jì)算單元192、時(shí)空似然度閾值確定單元193、BTF圖像處理單元194、BTF圖像似然度計(jì)算單元195和BTF圖像似然度閾值確定單元196。由于BTF計(jì)算單元191、時(shí)空似然度計(jì)算單元192、時(shí)空似然度閾值確定單元193、BTF圖像處理單元194、BTF圖像似然度計(jì)算單元195和BTF圖像似然度閾值確定單元196與BTF計(jì)算單元92、時(shí)空似然度計(jì)算單元93、時(shí)空似然度閾值確定單元94、BTF圖像處理單元95、BTF圖像似然度計(jì)算單元96和BTF圖像似然度閾值確定單元97相同，所以將省略其描述。[0233][由圖16中的監(jiān)視照相機(jī)進(jìn)行的成像處理]
[0234]接下來，將參照圖4的流程圖來描述由圖16中的監(jiān)視照相機(jī)11進(jìn)行的成像處理。
[0235]在步驟SlOl中，監(jiān)視照相機(jī)11的成像單元31連續(xù)地捕獲由可以在安裝位置處被監(jiān)視的監(jiān)視區(qū)域的靜止圖像或運(yùn)動(dòng)圖像構(gòu)成的圖像。
[0236]在步驟S102中，人物檢測單元121從由成像單元31捕獲的每個(gè)圖像提取為確定是否對人物進(jìn)行成像所需的特征量，并且基于提取的特征量來檢測對人物進(jìn)行成像的區(qū)域。例如，人物檢測單元121提取指示對檢測到的人物進(jìn)行成像的區(qū)域被設(shè)置為I且其它區(qū)域被設(shè)置為O的人物成像區(qū)域的圖像信息作為人物圖像。
[0237]更具體地，當(dāng)將HOG(方向梯度的直方圖)用作圖像特征量時(shí)，人物檢測單元121對捕獲的圖像執(zhí)行邊緣提取處理，以從捕獲的圖像提取用于識別被攝體的剪影的邊緣圖像。然后，人物檢測單元121將邊緣提取的圖像分割成每個(gè)局部區(qū)域的梯度方向上的各分區(qū)，取得直方圖，并且將該直方圖設(shè)置為特征量?；谝赃@樣的方式提取的特征量，人物檢測單元121確定該剪影是否為人物。當(dāng)確定剪影是人物時(shí)，人物檢測單元121產(chǎn)生其中被認(rèn)為是人物的區(qū)域被設(shè)置I且其它區(qū)域被設(shè)置為O的人物圖像，并且輸出人物圖像作為檢測結(jié)果。
[0238]也就是說，當(dāng)捕獲如圖19中的圖像Plll所示的圖像時(shí)，人物檢測單元121保持由實(shí)線指示的線段形成的并且用來檢測在圖像PlOl中示出的人物的剪影的特征量，并且在對人物進(jìn)行成像的圖像Plll上疊加這些線段。此時(shí)，提取如下直方圖作為特征量，在該直方圖中，在如由圖像P121的虛線指示的線段所示的每個(gè)局部區(qū)域的梯度方向上分割各分區(qū)。然后，基于提取的特征量，人物檢測單元121確定該區(qū)域是否為人物。當(dāng)確定該區(qū)域是人物時(shí)，人物檢測單元121提取由人物區(qū)域和其它區(qū)域形成的圖像作為人物圖像。在圖19的情況下，由于由虛線指示的特征量與預(yù)先存儲的特征量一致，所以看見其中存在人物的圖像Plll。也對捕獲的圖像Pl 12至Pl 14執(zhí)行相同的處理，因此提取如下直方圖作為特征量，在該直方圖中，在由圖像P122至P124中示出的線段形成的每個(gè)局部區(qū)域的梯度方向上分割各分區(qū)。
[0239]關(guān)于HOG(方向梯度的直方圖)，例如，可以參考Histograms of OrientedGradients for Human Detect1n by N.Dalai, B.Trigg:Computer Vis1n and PatternRecognit1n, San Diego, CA，2005年6月20日至25日。作為用來檢測人物的特征量提取方法，可以使用除了 HOG以外的方法。例如，可以多次使用通過類哈爾特征或HOG提取的特征量。這里，關(guān)于類哈爾特征，可以參考An Extended Set of Haar-1ikeFeatures for Rapid Object Detect1n by Rainer Lienhart and Jochen Maydt:1EEEICIP2002, Vol.1, pp.900to903, 2002年9月。關(guān)于多次使用通過HOG提取的特征量的方法，可以參考日本未審專利申請公開第2009-301104號。
[0240]在步驟S103中，成像位置坐標(biāo)計(jì)算單元35基于人物圖像中存在的人物的位置或大小來計(jì)算成像方向、角度和距離，并且基于監(jiān)視照相機(jī)被安裝的全球坐標(biāo)來計(jì)算作為被攝體的人物的全球坐標(biāo)。也就是說，例如，基于人物圖像，成像位置坐標(biāo)計(jì)算單元35計(jì)算由人物在地球上的緯度和經(jīng)度等表達(dá)的坐標(biāo)位置作為全球坐標(biāo)。
[0241]在步驟S104中，成像時(shí)間檢測單元36基于由實(shí)時(shí)時(shí)鐘(未示出)產(chǎn)生的時(shí)間信息來檢測在圖像被捕獲的定時(shí)的時(shí)間信息作為成像時(shí)間。[0242]在步驟S105中，人物信息輸出單元122從照相機(jī)ID存儲單元34讀取照相機(jī)ID，并且產(chǎn)生被統(tǒng)稱為人物信息的人物圖像、全球坐標(biāo)和成像時(shí)間。
[0243]在步驟S106中，人物信息輸出單元122通過諸如因特網(wǎng)的網(wǎng)絡(luò)13將產(chǎn)生的人物信息輸出到人物搜索和跟蹤服務(wù)器12。
[0244]通過前述處理，由每個(gè)監(jiān)視照相機(jī)11針對每個(gè)監(jiān)視區(qū)域捕獲圖像，從捕獲的圖像檢測人物，并且提取人物圖像。然后，產(chǎn)生由人物圖像和關(guān)于人物圖像中的人物的全球坐標(biāo)和圖像被捕獲的成像時(shí)間的信息構(gòu)成的人物信息，并且將該人物信息供應(yīng)到人物搜索和跟蹤服務(wù)器12。
[0245][人物信息濾波處理]
[0246]接下來，將參照圖20的流程圖描述由人物搜索和跟蹤服務(wù)器12執(zhí)行的人物信息濾波處理。
[0247]在步驟S121中，人物信息獲取單元151獲取并存儲通過網(wǎng)絡(luò)13從監(jiān)視服務(wù)器11順次地供應(yīng)的人物信息。
[0248]在步驟S122中，人物信息濾波處理單元152將存儲在人物信息獲取單元151中的人物信息當(dāng)中的一條未處理的人物信息設(shè)置為作為處理目標(biāo)的關(guān)注的人物信息。
[0249]在步驟S123中，人物信息濾波處理單元152根據(jù)包括在關(guān)注的人物信息中的人物圖像的剪影來確定該人物圖像是否為單個(gè)人物的全身圖像。
[0250]當(dāng)在步驟S123中根據(jù)包括在關(guān)注的人物信息中的人物圖像的剪影確定該人物圖像是單個(gè)人物的全身圖像時(shí)，本處理前進(jìn)到步驟Sm。
[0251]在步驟S124中，人物信息濾波處理單元152認(rèn)為關(guān)注的人物信息是適合于人物搜索的人物信息，并且將關(guān)注的人物信息保持在人物信息保持單元153中。
[0252]相反地，當(dāng)在步驟S123中根據(jù)包括在關(guān)注的人物信息中的人物圖像的剪影確定該人物圖像不是單個(gè)人物的全身圖像時(shí)，本處理前進(jìn)到步驟S125。
[0253]在步驟S125中，人物信息濾波處理單元152認(rèn)為關(guān)注的人物信息不是適合于人物搜索的人物信息，并且破壞被設(shè)置為獲取的關(guān)注的人物信息的人物信息。
[0254]在步驟S126中，人物信息濾波處理單元152確定在人物信息獲取單元151中是否存在未處理的人物信息。當(dāng)存在未處理的人物信息時(shí)，本處理返回到步驟S122。也就是說，重復(fù)步驟S122至S126的處理，直到?jīng)]有未處理的人物信息為止。相反地，當(dāng)在步驟S126中確定沒有未處理的人物信息時(shí)，本處理結(jié)束。
[0255]也就是說，通過前述處理，只有捕獲單個(gè)人物的全身圖像的人物信息被認(rèn)為是從監(jiān)視照相機(jī)11順次地供應(yīng)的人物信息當(dāng)中的適合于人物搜索的人物圖像，并且只有包括這種人物信息的人物信息通過人物信息濾波處理被保持在人物信息保持單元153中。
[0256]結(jié)果，由于只有包括適合于人物搜索的人物圖像的人物信息通過人物信息濾波處理被濾波并且被保持在人物信息保持單元153中，所以可以提高人物搜索的精度。通過破壞不適合于人物搜索的人物信息，可以快速地執(zhí)行為人物搜索所需的并且下面將參照圖21描述的人物信息匹配處理。
[0257][人物信息匹配處理]
[0258]接下來，將參照圖21的流程圖描述由人物搜索和跟蹤服務(wù)器12執(zhí)行的人物信息匹配處理。人物信息匹配處理的流程類似于參照圖11的流程圖描述的移動(dòng)對象信息匹配處理的流程。
[0259]在步驟S151中，顯示圖像產(chǎn)生單元157在顯示單元158上顯示保持在人物信息保持單元153中的人物信息中的人物圖像的列表，并且對顯示圖像進(jìn)行顯示以提示對指示搜索目標(biāo)人物的人物圖像的選擇。
[0260]在步驟S152中，人物信息似然度計(jì)算處理單元154確定操作輸入單元160是否被操作，并且選擇指定搜索目標(biāo)人物的人物圖像。在指定搜索目標(biāo)人物的人物圖像未被選擇時(shí)，本處理返回到步驟S151。也就是說，重復(fù)步驟S151和S152的處理，直到指定搜索目標(biāo)人物的人物圖像被指定。然后，當(dāng)在步驟S152中指定搜索目標(biāo)人物的人物圖像被指定時(shí)，本處理前進(jìn)到步驟S153。
[0261]在步驟S153中，人物信息似然度計(jì)算處理單元154將保持在人物信息保持單元153中的人物信息中的與被指定為搜索目標(biāo)的人物圖像相對應(yīng)的人物信息設(shè)置為標(biāo)準(zhǔn)人物信息，并且將其它人物信息設(shè)置為未處理的人物信息。此時(shí)，操作輸入識別單元181基于操作輸入單元160的操作信號將與被指定為搜索目標(biāo)的人物圖像相對應(yīng)的人物信息保持在同一人物信息保持單元183中。
[0262]在步驟S154中，人物信息似然度計(jì)算處理單元154讀取保持在人物信息保持單元153中的一條未處理的人物信息，并且將讀取的人物信息設(shè)置為關(guān)注的人物信息。
[0263]在步驟S155中，人物信息似然度計(jì)算處理單元154計(jì)算作為包括在標(biāo)準(zhǔn)人物信息中的人物圖像和包括在關(guān)注的人物信息中的人物圖像之間的似然度的人物圖像似然度，并且將計(jì)算出的人物圖像似然度與關(guān)注的人物信息一起供應(yīng)到人物信息似然度閾值確定單元155。也就是說，例如，當(dāng)標(biāo)準(zhǔn)人物信息和關(guān)注的人物信息的人物圖像中捕獲的人物彼此更加相似時(shí)，人物信息似然度計(jì)算處理單元154基于更高的相似度來計(jì)算人物圖像似然度。
[0264]在步驟S156中，人物信息似然度閾值確定單元155確定供應(yīng)的人物圖像似然度是否高于預(yù)定的閾值。也就是說，人物信息似然度閾值確定單元155基于人物圖像似然度是否高于預(yù)定的閾值來確定標(biāo)準(zhǔn)人物信息和關(guān)注的人物信息的人物圖像的人物是否相互一致。當(dāng)在步驟S156中認(rèn)為人物圖像似然度高于預(yù)定的閾值，并且標(biāo)準(zhǔn)人物信息和關(guān)注的人物信息的人物圖像的人物相互匹配(相互一致)時(shí)，本處理前進(jìn)到步驟S157。
[0265]在步驟S157中，人物信息似然度閾值確定單元155在結(jié)果存儲單元156中存儲關(guān)注的人物信息。此時(shí)，人物信息似然度計(jì)算處理單元154將保持在人物信息保持單元153中的關(guān)注的人物信息設(shè)置為已處理的人物信息。
[0266]相反地，當(dāng)在步驟S156中認(rèn)為人物圖像似然度不高于預(yù)定的閾值，并且標(biāo)準(zhǔn)人物信息和關(guān)注的人物信息的人物圖像的人物相互不匹配(相互不一致)時(shí)，本處理前進(jìn)到步驟 S159。
[0267]在步驟S159中，人物信息似然度閾值確定單元155破壞關(guān)注的人物信息。然后，人物信息似然度計(jì)算處理單元154將保持在人物信息保持單元153中的關(guān)注的人物信息設(shè)置為已處理的人物信息。
[0268]在步驟S158中，人物信息似然度計(jì)算處理單元154確定在人物信息保持單元153中是否保持有未處理的人物信息。例如，當(dāng)保持有未處理的人物信息時(shí)，本處理返回到步驟S154。也就是說，重復(fù)步驟S154和S159的處理，直到在人物信息保持單元153中沒有未處理的人物信息為止，從而對所有的人物信息和標(biāo)準(zhǔn)人物信息的人物圖像重復(fù)匹配處理。
[0269]當(dāng)在步驟S158中認(rèn)為未處理的人物信息被認(rèn)為沒有保持在人物信息保持單元153中時(shí)，本處理前進(jìn)到步驟S160。
[0270]在步驟S160中，顯示圖像產(chǎn)生單元157基于存儲在結(jié)果存儲單元156中的人物信息來產(chǎn)生指示搜索和跟蹤結(jié)果的顯示圖像。
[0271]在步驟S161中，顯示圖像產(chǎn)生單元157在顯示單元158上顯示指示搜索和跟蹤結(jié)果的顯示圖像。
[0272]在步驟S162中，匹配修改處理單元159基于關(guān)于從顯示圖像產(chǎn)生單元157供應(yīng)的顯示圖像的信息和從操作輸入單元160供應(yīng)的操作信號來確定是否選擇在顯示圖像中示出的人物圖像中的一個(gè)，輸入決定信息，并且指示匹配修改處理。
[0273]當(dāng)在步驟S162中選擇在顯示圖像中示出的人物圖像中的一個(gè)并輸入了決定信息時(shí)，認(rèn)為要指示匹配修改處理，并且本處理前進(jìn)到步驟S163。
[0274]在步驟S163中，匹配修改處理單元159執(zhí)行匹配修改處理，并且顯示經(jīng)過修改處理的人物搜索和跟蹤結(jié)果。下面將參照圖22和圖23詳細(xì)地描述該匹配修改處理。
[0275]在步驟S164中，匹配修改處理單元159確定是否指示結(jié)束。當(dāng)未指示結(jié)束時(shí)，本處理返回到步驟S161。也就是說，指示人物搜索和跟蹤結(jié)果的顯示畫面被連續(xù)地顯示在顯示單元158上。相反地，當(dāng)在步驟S164中指示結(jié)束時(shí)，本處理結(jié)束。
[0276]通過經(jīng)由前述人物信息匹配處理僅僅指定搜索目標(biāo)人物的人物圖像，可以基于人物圖像來搜索與搜索目標(biāo)人物一致的人物信息并且根據(jù)作為搜索結(jié)果的人物信息來顯示指示搜索目標(biāo)人物的移動(dòng)路徑的搜索和跟蹤結(jié)果。上面已經(jīng)描述了這樣的示例，其中，當(dāng)指定搜索目標(biāo)人物時(shí)，從保持在人物信息保持單元153中的人物信息的人物圖像中指定人物。然而，可以通過分開地輸入除了由監(jiān)視照相機(jī)11捕獲的圖像以外的圖像并且以與人物圖像相同的方式處理該圖像來指定搜索目標(biāo)人物。
[0277][圖21的匹配修改處理]
[0278]接下來，將參照圖22和圖23的流程圖描述由人物搜索和跟蹤服務(wù)器12執(zhí)行的圖21的匹配修改處理。
[0279]在步驟S181中，匹配修改處理單元159將指示包括由操作輸入單元160輸入了決定信息的人物圖像的信息與人物信息相關(guān)聯(lián)地存儲。由于決定了被輸入了決定信息的人物信息是通過人物圖像匹配處理適當(dāng)?shù)靥崛〉娜宋镄畔ⅲ栽诤罄m(xù)的處理中從搜索目標(biāo)中排除人物信息并且將人物信息連續(xù)地存儲在結(jié)果存儲單元153中。同時(shí)，操作輸入識別單元183將被輸入了決定信息的人物信息保持在同一人物信息保持單元183中。
[0280]在步驟S182中，匹配修改處理單元159將存儲在結(jié)果存儲單元156中的人物信息當(dāng)中的沒有輸入決定信息的所有的人物信息設(shè)置為未處理的人物信息。
[0281]在步驟S183中，匹配修改處理單元159將存儲在結(jié)果存儲單元156中的人物信息當(dāng)中的最近被輸入了決定信息的人物信息設(shè)置為標(biāo)準(zhǔn)人物信息。
[0282]在步驟S184中，BTF時(shí)空處理單元187的BTF計(jì)算單元191確定是否可以計(jì)算BTF0在步驟S184中，第一 BTF可計(jì)算條件是存在包括具有與包括在標(biāo)準(zhǔn)人物信息中的照相機(jī)ID不同的照相機(jī)ID的另一個(gè)人物圖像并且被輸入了決定信息的人物信息的情況。第二 BTF可計(jì)算條件是存在被輸入了決定信息的兩個(gè)或更多個(gè)人物圖像并且這些人物圖像由具有不同的照相機(jī)ID的不同的監(jiān)視照相機(jī)11捕獲的情況。因此，基于在結(jié)果存儲單元156中是否存在滿足前述兩個(gè)條件中的一個(gè)的人物信息，BTF計(jì)算單元92確定是否可以計(jì)算BTF。當(dāng)在步驟S184中可以計(jì)算BTF時(shí)，在步驟S185中，盡管在標(biāo)準(zhǔn)人物信息中包括人物圖像或者不同的照相機(jī)ID，BTF計(jì)算單元191通過使用關(guān)于被輸入了決定信息的人物圖像之間的像素值的信息執(zhí)行BTF計(jì)算處理來計(jì)算BTF。BTF是指示包括由兩個(gè)不同的照相機(jī)ID指定的監(jiān)視照相機(jī)11成像的同一被攝體的人物圖像的顏色之間的相互對應(yīng)關(guān)系的函數(shù)。因此，當(dāng)計(jì)算BTF時(shí)，不管是否存在決定信息，可以通過使用BTF對由具有不同的照相機(jī)ID的兩個(gè)監(jiān)視照相機(jī)11捕獲的人物圖像中的一個(gè)執(zhí)行顏色轉(zhuǎn)換來執(zhí)行顏色校正。通過顏色校正處理，可以校正由于不同的監(jiān)視照相機(jī)11之間的監(jiān)視區(qū)域的成像環(huán)境光的差異或者成像單元31的圖像傳感器的個(gè)體差異等引起的顏色的變化。結(jié)果，由兩個(gè)不同的監(jiān)視照相機(jī)11捕獲的人物圖像經(jīng)過顏色校正，就好像人物圖像是由同一監(jiān)視照相機(jī)11捕獲的一樣。因此，可以更加準(zhǔn)確地計(jì)算人物圖像之間的人物圖像似然度。
[0283]另一方面，例如，當(dāng)在步驟S184中由一種監(jiān)視照相機(jī)11捕獲被輸入了決定信息的人物圖像時(shí)，BTF被認(rèn)為不是可計(jì)算的，并且跳過步驟S185的處理。
[0284]在步驟S186中，時(shí)空似然度計(jì)算單元192將存儲在結(jié)果存儲單元156中并且作為排除了標(biāo)準(zhǔn)人物信息的人物信息的人物信息當(dāng)中的一條未處理的人物信息設(shè)置為關(guān)注的人物信息。
[0285]在步驟S187中，時(shí)空似然度計(jì)算單元192基于關(guān)于包括在標(biāo)準(zhǔn)人物信息和關(guān)注的人物信息中的全球坐標(biāo)和成像時(shí)間的信息來計(jì)算時(shí)空似然度。更具體地，例如，時(shí)空似然度計(jì)算單元192根據(jù)包括在標(biāo)準(zhǔn)人物信息中的全球坐標(biāo)和包括在關(guān)注的人物信息中的全球坐標(biāo)之間的差獲得移動(dòng)距離，并且基于人物信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)該移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值來計(jì)算人物信息的時(shí)空似然度。
[0286]在步驟S188(圖23)中，時(shí)空似然度閾值確定單元94確定計(jì)算出的時(shí)空似然度是否高于預(yù)定的閾值。例如，當(dāng)指示人物搜索和跟蹤結(jié)果的顯示圖像是在圖24的上部中示出的如手Hl所示的顯示圖像時(shí)，由操作輸入單元160選擇對應(yīng)于圖A的人物圖像PA。當(dāng)輸入了決定信息時(shí)，對應(yīng)于圖A的人物信息成為標(biāo)準(zhǔn)人物信息。在圖25的顯示圖像的情況下，在對應(yīng)于圖A至G的人物信息中成像時(shí)間分別是1:00:00、1:00:05、1:00:10、1:00:15、1:00:13、1:00:14和1:00:05。圖A和B是與由同一監(jiān)視照相機(jī)11捕獲的人物圖像PA和PB相對應(yīng)的人物信息，該監(jiān)視器11對由相同的虛線形成的三角形指示的成像區(qū)域CamA進(jìn)行成像。同樣地，圖C至F是與由同一監(jiān)視照相機(jī)11捕獲的人物圖像PC至PF相對應(yīng)的人物信息，該監(jiān)視器11對由虛線形成的三角形指示的成像區(qū)域CamB進(jìn)行成像。此外，圖G是與由監(jiān)視照相機(jī)11捕獲的人物圖像PG相對應(yīng)的人物信息，該監(jiān)視器11對由虛線形成的三角形指示的成像區(qū)域CamC進(jìn)行成像。
[0287]在這種情況下，當(dāng)對應(yīng)于圖B的人物信息是關(guān)注的人物信息，并且假設(shè)圖A和B之間的距離為距離AB時(shí)，人物信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值是5/(AB/w)。這里，w指示平均人物移動(dòng)速度。例如，當(dāng)距離AB是5m并且平均人物移動(dòng)速度是lm/s時(shí)，該比值是I，并且時(shí)空似然度是最高值。同樣地，當(dāng)對應(yīng)于圖C和D的人物信息是關(guān)注的人物信息并且假設(shè)圖A和C之間、圖A和D之間、圖A和E之間以及圖A和F之間的距離為距離AC、距離AD、距離AE和距離AF時(shí)，人物信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)這些移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值分別是 10/ (AC/w)、15/ (AD/w)、14/ (AE/w)和 13/ (AF/w)。例如，當(dāng)距離 AC、AD、AE和AF分別是10m、15m、14m和13m并且平均人物移動(dòng)速度是lm/s時(shí)，比值都是1，并且時(shí)
空似然度是最高值。
[0288]因此，當(dāng)在步驟S188中時(shí)空似然度是最高值時(shí)，時(shí)空似然度閾值確定單元193認(rèn)為時(shí)空似然度高于預(yù)定的閾值，并且本處理前進(jìn)到步驟S189。
[0289]另一方面，當(dāng)對應(yīng)于圖G的人物信息是關(guān)注的人物信息并且假設(shè)圖A和G之間的距離為距離AG時(shí)，人物信息的成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)該移動(dòng)距離所花費(fèi)的平均必要時(shí)間的比值是5/(AE/w)。也就是說，例如，當(dāng)距離AG是25m并且平均人物移動(dòng)速度是lm/s時(shí)，行進(jìn)25m花費(fèi)約5秒。因此，比值是0.2，并且時(shí)空似然度是低值。當(dāng)在步驟S188中時(shí)空似然度低時(shí)，時(shí)空似然度閾值確定單元193認(rèn)為時(shí)空似然度低于預(yù)定的閾值，并且本處理前進(jìn)到步驟S198。
[0290]在步驟S198中，匹配修改處理單元159從結(jié)果存儲單元156擦除關(guān)注的人物信息，并且在其他人物信息保持單元182中保持關(guān)注的人物信息。也就是說，當(dāng)指示在圖24的上部中示出的搜索和跟蹤結(jié)果的圖像被顯示、并且在對應(yīng)于圖A的人物圖像PA中輸入了決定信息時(shí)，基于時(shí)空信息擦除其中可能不存在同一人物的圖G的人物信息，如下面在圖24的顯示圖像中示出的表中所示。由于只使用人物圖像在人物信息匹配處理中錯(cuò)誤地檢測到的搜索和跟蹤結(jié)果可以通過這些處理被排除，所以可以以更高的精度實(shí)現(xiàn)搜索目標(biāo)人物的人物搜索和跟蹤。
[0291]在步驟S189中，BTF圖像處理單元194確定是否獲得了 BTF。例如，當(dāng)沒有獲得BTF時(shí)，本處理前進(jìn)到步驟S197。
[0292]在步驟S197中，匹配修改處理單元159將存儲在結(jié)果存儲單元156中的人物信息當(dāng)中的作為關(guān)注人物信息的人物信息設(shè)置為處理完成。
[0293]在步驟S199中，顯示圖像產(chǎn)生單元157反映結(jié)果存儲單元156的更新結(jié)果，更新并產(chǎn)生指示搜索和跟蹤結(jié)果的圖像，并且在顯示單元158上顯示圖像。也就是說，例如，如圖25的上部中的顯示畫面所示，擦除并顯示對應(yīng)于圖G的顯示。在圖25中，為了指示顯示被擦除，十字標(biāo)記的符號被表示。但是，在實(shí)踐中，顯示自身被擦除。
[0294]在步驟S200中，時(shí)空似然度計(jì)算單元192確定存儲在結(jié)果存儲單元156中并且作為除了標(biāo)準(zhǔn)人物信息以外的人物信息的人物信息當(dāng)中是否存在未處理的人物信息。當(dāng)存在未處理的人物信息時(shí)，本處理返回到步驟S186(圖22)。也就是說，只要存在未處理的人物信息就重復(fù)步驟S186至S200的處理。然后，當(dāng)在步驟S200中認(rèn)為不存在未處理的人物信息時(shí)，本處理前進(jìn)到步驟S201。
[0295]在步驟S201中，在操作輸入單元160被操作、選擇對應(yīng)于一條人物信息的人物圖像并輸入了決定信息時(shí)，操作輸入識別單元181確定是否另外指示匹配修改處理。例如，如圖25的手H2所示，當(dāng)在步驟S201中操作輸入單元160被操作、選擇對應(yīng)于圖C的人物圖像PC并輸入了決定信息時(shí)，本處理返回到步驟S181(圖22)，并且另外執(zhí)行匹配修改處理。
[0296]此時(shí)，在步驟S184中，由于被輸入了決定信息的人物圖像是兩個(gè)人物圖像PA和PC，并且識別捕獲人物圖像的監(jiān)視照相機(jī)11的照相機(jī)ID相互不同，所以BTF可以被認(rèn)為是可計(jì)算的。[0297]因此，在這種情況下，在步驟S185中，BTF計(jì)算單元191使用對應(yīng)于圖C的人物信息的人物圖像PC和對應(yīng)于圖A的人物信息的人物圖像PA來計(jì)算BTF。在這種情況下，由于標(biāo)準(zhǔn)人物信息是對應(yīng)于圖C的人物圖像PC的人物信息，所以獲得的BTF被假設(shè)是用來使用由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的人物圖像PC的顏色作為標(biāo)準(zhǔn)來校正由對成像區(qū)域CamA進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的人物圖像PA的顏色的變化的函數(shù)。
[0298]結(jié)果，當(dāng)關(guān)注的人物信息是與在成像區(qū)域CamA中捕獲的人物圖像PB相對應(yīng)的人物信息時(shí)，BTF被認(rèn)為是在步驟S189中獲得的，因此本處理前進(jìn)到步驟S190。
[0299]在步驟S190中，BTF圖像處理單元194通過使用計(jì)算出的BTF轉(zhuǎn)換關(guān)注的人物信息的人物圖像的顏色來執(zhí)行顏色校正。也就是說，在本情況下，BTF圖像處理單元194通過對圖25中的人物圖像PB應(yīng)用BTF來執(zhí)行顏色校正，以對應(yīng)于由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的標(biāo)準(zhǔn)人物信息的人物圖像PC的顏色。
[0300]在步驟S191中，BTF圖像似然度計(jì)算單元196計(jì)算BTF圖像似然度，該BTF圖像似然度是標(biāo)準(zhǔn)人物信息的人物圖像與作為關(guān)注的人物信息的人物圖像且經(jīng)過BTF的顏色轉(zhuǎn)換的人物圖像之間的似然度。BTF圖像似然度基本上與人物信息似然度計(jì)算處理單元154中的似然度相同。
[0301]在步驟S192中，BTF圖像似然度閾值確定單元97基于計(jì)算出的BTF圖像似然度是否高于預(yù)定的閾值來確定標(biāo)準(zhǔn)人物信息的人物圖像是否與經(jīng)過BTF的顏色轉(zhuǎn)換的關(guān)注的人物信息的人物信息匹配。當(dāng)在步驟S192中BTF圖像似然度高于預(yù)定的閾值時(shí)，本處理前進(jìn)到步驟S193。
[0302]相反地，當(dāng)在步驟S192中BTF圖像似然度低于預(yù)定的閾值時(shí)，本處理前進(jìn)到步驟S198。也就是說，在這種情況下，通過步驟S198的處理，關(guān)注的人物信息的人物信息從結(jié)果存儲單元156被擦除,并且被保持在其他人物信息保持單元182中。
[0303]也就是說，如圖25的下部中的表所示，當(dāng)決定信息被輸入到對應(yīng)于圖A的人物圖像PA、并且決定信息隨后被輸入到對應(yīng)于圖C的人物圖像PC時(shí)，獲得用來使用由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的圖像的顏色作為標(biāo)準(zhǔn)來校正由對成像區(qū)域CamA進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的圖像的顏色的BTF。然后，對應(yīng)于圖B并包括時(shí)空似然度高于預(yù)定的閾值且BTF圖像似然度高于預(yù)定的閾值的人物圖像的人物信息保持在結(jié)果存儲單元156中。另一方面，對應(yīng)于圖D并包括時(shí)空似然度高于預(yù)定的閾值且BTF圖像似然度低于預(yù)定的閾值的人物圖像的人物信息從結(jié)果存儲單元156被擦除并被保持在其他人物信息保持單元182中。在圖25的下部的表中對于圖A繪制對角線的原因是，人物信息是已經(jīng)被輸入了決定信息的人物信息，因此不是處理目標(biāo)。
[0304]在步驟S193中，獨(dú)有特征選擇單元184通過基于存儲在其他人物信息存儲單元182中的人物信息和存儲在同一人物信息存儲單元183中的人物信息進(jìn)行學(xué)習(xí)來選擇獨(dú)有特征。
[0305]也就是說，當(dāng)在圖18的步驟S102的處理中由人物檢測單元121檢測到人物時(shí)，使用采用HOG的特征量來檢測人物圖像，并且當(dāng)由在圖26的圖像P201中示出的各種線段形成的特征量用于檢測人物圖像時(shí)，圖26中的圖像P211至P214中的任何一個(gè)中的特征量與線段之一的特征量一致，如圖像P221至P224所示，因此檢測到存在人物。
[0306]這里，獨(dú)有特征選擇單元184通過學(xué)習(xí)來分析關(guān)于由線段示出的特征量的信息，選擇如下特征量作為獨(dú)有特征并且將選擇結(jié)果供應(yīng)到獨(dú)有特征計(jì)算單元185，在該特征量中，適合作為同一人物的人物的概率高并且適合作為另一個(gè)人物的人物的概率低。
[0307]也就是說，關(guān)于作為圖26中的圖像P211和P212的同一人物的被輸入了決定信息的人物信息中所包括的人物圖像，由圖像P221和P222的虛線指示的線段所示的特征量通過學(xué)習(xí)被指定為適合作為同一人物的人物的概率高的特征量。關(guān)于被認(rèn)為是圖像P213和P214的其他人物信息的人物信息中所包括的人物圖像，由圖像P223和P224中的實(shí)線指示的線段包圍的特征量通過學(xué)習(xí)被指定為適合于除了同一人物以外的其他人物的人物的概率低的特征量。因此，在圖26中，由單點(diǎn)劃線橢圓包圍且由圖像P251中的線段形成的特征量通過學(xué)習(xí)被選擇為滿足任何條件的有用的獨(dú)有特征。
[0308]當(dāng)新的人物信息被登記在同一人物信息保持單元183和其他人物信息保持單元182中時(shí)，重復(fù)進(jìn)行學(xué)習(xí)。因此，由于具有更高精度的獨(dú)有特征被選擇為獨(dú)有特征，所以每當(dāng)重復(fù)進(jìn)行學(xué)習(xí)時(shí)，逐漸地提高人物跟蹤精度。
[0309]關(guān)于學(xué)習(xí)，例如，可以使用〃A decis1n-theoretic generalizat1n of on-linelearning and an applicat1n to boosting,Unpublished manuscript availableelectronically by Yoav Freund and Robert E.Schapir〃 和"Additive logisticregress1n by:J.Friedman, T.Hastiej and R.Tibshiran in a statistical view ofboosting, Annals of statistics, 38:337to374，2000"。
[0310]在步驟S194中，獨(dú)有特征似然度計(jì)算單元185從標(biāo)準(zhǔn)人物信息的人物圖像和關(guān)注的人物信息的人物圖像提取被選擇為獨(dú)有特征的特征量。
[0311]在步驟S195中，獨(dú)有特征似然度計(jì)算單元185使用從標(biāo)準(zhǔn)人物信息的人物圖像和關(guān)注的人物信息的人物圖像中提取作為獨(dú)有特征的特征量來計(jì)算獨(dú)有特征似然度，并且將計(jì)算結(jié)果供應(yīng)到獨(dú)有特征似然度閾值確定單元186。也就是說，例如，獨(dú)有特征似然度計(jì)算單元185基于來自標(biāo)準(zhǔn)人物信息的人物圖像和關(guān)注的人物信息的人物圖像的特征量來計(jì)算相互的相似度等作為獨(dú)有特征似然度。
[0312]在步驟S196中，獨(dú)有特征似然度閾值確定單元186確定計(jì)算出的獨(dú)有特征似然度是否高于預(yù)定的閾值且彼此是否相互類似。當(dāng)在步驟S196中確定獨(dú)有特征似然度不高于預(yù)定的閾值且彼此不相似時(shí)，本處理前進(jìn)到步驟S198。
[0313]也就是說，在這種情況下，通過步驟S198的處理，關(guān)注的人物信息的人物信息從結(jié)果存儲單兀156被擦除，并且被保持在其他人物彳目息保持單兀182中。
[0314]相反地，當(dāng)在步驟S196中確定獨(dú)有特征似然度高于預(yù)定的閾值時(shí)，本處理前進(jìn)到步驟S197。
[0315]也就是說，在這種情況下，關(guān)注的人物信息的人物信息保持在結(jié)果存儲單元156中。
[0316]也就是說，如圖27的下部中的表所示，當(dāng)決定信息被輸入到對應(yīng)于圖A的人物圖像PA、并且決定信息隨后被輸入到對應(yīng)于圖C的人物圖像PC時(shí)，獲得用來使用由對成像區(qū)域CamB進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的圖像的顏色作為標(biāo)準(zhǔn)來校正由對成像區(qū)域CamA進(jìn)行成像的監(jiān)視照相機(jī)11捕獲的圖像的顏色的BTF。然后，對應(yīng)于圖B、D和E并包括時(shí)空似然度高于預(yù)定的閾值且BTF圖像似然度高于預(yù)定的閾值的人物圖像的人物信息保持在結(jié)果存儲單元156中。另一方面，對應(yīng)于圖D并包括時(shí)空似然度高于預(yù)定的閾值且BTF圖像似然度低于預(yù)定的閾值的人物圖像的人物信息從結(jié)果存儲單元156被擦除并被保持在其他人物信息保持單元182中。此外，當(dāng)使用人物信息獲得獨(dú)有特征似然度時(shí)，獨(dú)有特征似然度等于或小于閾值的圖D被擦除，并且圖B和F最終保持在結(jié)果存儲單元156中。
[0317]也就是說，當(dāng)在前述匹配修改處理中用戶輸入了決定信息時(shí)，基于決定信息再次重復(fù)地執(zhí)行匹配校正處理。因此，當(dāng)輸入了決定信息時(shí)，可以提高搜索和跟蹤結(jié)果的精度。當(dāng)對于由不同的監(jiān)視照相機(jī)11捕獲的人物圖像輸入了決定信息時(shí)，可以獲得BTF。因此，由于在考慮時(shí)空似然度之后基于與監(jiān)視照相機(jī)11之間的顏色的變化相對應(yīng)的BTF圖像似然度來執(zhí)行匹配修改處理，所以可以以更高的精度執(zhí)行人物搜索和跟蹤。
[0318]由于可以計(jì)算標(biāo)準(zhǔn)人物信息的人物圖像和關(guān)注的人物信息的人物圖像的BTF和僅僅與兩個(gè)監(jiān)視照相機(jī)11相對應(yīng)的BTF，所以減少了對于BTF的計(jì)算的處理負(fù)荷，從而提高了與BTF的計(jì)算有關(guān)的處理速度。
[0319]除了使用BTF的處理以外，還用通過學(xué)習(xí)獲得的特征量基于獨(dú)有特征似然度來重復(fù)匹配修改處理，由此提高獨(dú)有特征的精度。結(jié)果，可以以更高的精度實(shí)現(xiàn)人物搜索和跟
足示O
[0320]上面描述了通過如下步驟來重復(fù)匹配修改處理的示例:指定搜索目標(biāo)人物，搜索關(guān)于搜索目標(biāo)人物的人物信息，根據(jù)搜索結(jié)果顯示指示人物搜索和跟蹤結(jié)果的顯示圖像，隨后輸入決定信息。然而，通過以各種方式改變搜索目標(biāo)人物，本技術(shù)可以應(yīng)用于各種使用。
[0321]例如，通過將陌生人或嫌疑人設(shè)置為搜索目標(biāo)人物，可以根據(jù)人物搜索和跟蹤結(jié)果確認(rèn)陌生人或嫌疑人的移動(dòng)歷史，并且在實(shí)踐中可以確認(rèn)是否存在疑點(diǎn)。更具體地，例如，當(dāng)在公司內(nèi)部發(fā)現(xiàn)不是公司成員的嫌疑人時(shí)，可以通過將外部嫌疑人設(shè)置為搜索目標(biāo)人物來確認(rèn)外部嫌疑人的移動(dòng)歷史。因此，例如，當(dāng)外部嫌疑人入侵到在不攜帶員工身份證的情況下禁止進(jìn)入的地方時(shí)，可以確認(rèn)外部嫌疑人入侵到該地方。從而，本技術(shù)可以用在所謂的安全系統(tǒng)中。
[0322]例如，通過將作為商店的各樓層上的搜索目標(biāo)人物的多個(gè)用戶設(shè)置為搜索目標(biāo)人物，可以根據(jù)人物搜索和跟蹤結(jié)果確認(rèn)在每個(gè)樓層上移動(dòng)的用戶在每個(gè)樓層上行走的移動(dòng)路徑。因此，該信息可應(yīng)用于商店。更具體地，例如，由于可以確認(rèn)用戶在客戶的樓層內(nèi)的移動(dòng)歷史，并且可以基于移動(dòng)歷史最佳地改變產(chǎn)品的布局，所以本技術(shù)可以用在所謂的營銷研究系統(tǒng)中。
[0323]通過前述處理，可以以更高的精度通過多個(gè)監(jiān)視照相機(jī)在監(jiān)視區(qū)域中實(shí)現(xiàn)人物搜索和跟蹤。
[0324]上述的系列處理可以由硬件執(zhí)行，也可以由軟件執(zhí)行。當(dāng)系列處理由軟件執(zhí)行時(shí)，將軟件的程序從記錄介質(zhì)安裝到例如嵌入在專用硬件中的計(jì)算機(jī)或者能夠通過安裝各種程序來執(zhí)行各種功能的通用個(gè)人計(jì)算機(jī)。
[0325]圖16示出通用個(gè)人計(jì)算機(jī)的配置的示例。個(gè)人計(jì)算機(jī)包括CPU(中央處理單元)1001。輸入/輸出接口 1005通過總線1004與CPU1001連接。ROM(只讀存儲器)1002和RAM(隨機(jī)存取存儲器)1003與總線1004連接。
[0326]由用戶用來輸入操作命令的諸如鍵盤或鼠標(biāo)的輸入裝置構(gòu)成的輸入單元1006、將處理操作畫面或處理結(jié)果的圖像輸出到顯示裝置的輸出單元1007、由存儲程序或各種數(shù)據(jù)的硬盤驅(qū)動(dòng)器等構(gòu)成的存儲單元1008、以及由LAN(局域網(wǎng))適配器等構(gòu)成且通過諸如因特網(wǎng)的網(wǎng)絡(luò)執(zhí)行通信處理的通信單元1009與輸入/輸出接口 1005連接。還連接驅(qū)動(dòng)器1010，該驅(qū)動(dòng)器1010從可移動(dòng)介質(zhì)1011讀取數(shù)據(jù)和在可移動(dòng)介質(zhì)1011上寫入數(shù)據(jù)，所述可移動(dòng)介質(zhì)1011例如是磁盤(包括軟盤)、光盤(包括CD-ROM(壓縮盤-只讀存儲器))、DVD (數(shù)字多功能盤)、磁光盤(包括MD (迷你盤))或半導(dǎo)體存儲器。
[0327]CPU1001根據(jù)存儲在R0M1002中的程序和從安裝在存儲單元1008中的諸如磁盤、光盤、磁光盤或半導(dǎo)體存儲器的可移動(dòng)介質(zhì)1011讀取且從存儲單元1008加載到RAM1003的程序來執(zhí)行各種處理。RAM1003適當(dāng)?shù)卮鎯PU1001用來執(zhí)行各種處理所需的數(shù)據(jù)等。
[0328]在具有上述配置的計(jì)算機(jī)中，例如，CPU1001通過經(jīng)由輸入/輸出接口 1005和總線1004將存儲在存儲單元1008中的程序加載到RAM1003上并執(zhí)行該程序來執(zhí)行上述系列處理。
[0329]由計(jì)算機(jī)(CPU1001)執(zhí)行的程序可以被記錄在例如作為要提供的封裝介質(zhì)的可移動(dòng)介質(zhì)1001上。也可以通過有線或無線傳輸媒介(例如，局域網(wǎng)、因特網(wǎng)或數(shù)字衛(wèi)星廣播)提供程序。
[0330]在計(jì)算機(jī)中，通過將可移動(dòng)介質(zhì)1001安裝在驅(qū)動(dòng)器1010上，可以經(jīng)由輸入/輸出接口 1005將程序安裝到存儲單元1008中。程序可以通過有線或無線傳輸媒介由通信單元1009接收，并且被安裝到存儲單元1008中。此外，程序可以被預(yù)先安裝到R0M1002或存儲單元1008。
[0331 ] 由計(jì)算機(jī)執(zhí)行的程序可以是在時(shí)間上按照在本說明書中描述的順序執(zhí)行處理的程序，或者可以是并行地或在諸如調(diào)用時(shí)的必要定時(shí)執(zhí)行處理的程序。
[0332]在本說明書中，系統(tǒng)是指多個(gè)組成部件(裝置，模塊(組件)等)的集合，并且所有的組成部件可以存在于同一殼體中，或者可以不存在于同一殼體中。因此，收納在不同的殼體中且通過網(wǎng)絡(luò)相互連接的多個(gè)設(shè)備和在一個(gè)殼體中收納多個(gè)模塊的一個(gè)設(shè)備都是系統(tǒng)。
[0333]本技術(shù)的實(shí)施例并不限于上述的實(shí)施例，并且可以在不脫離本技術(shù)的主旨的情況下在本技術(shù)的范圍內(nèi)以各種方式來修改本技術(shù)。
[0334]例如，本技術(shù)可以被實(shí)現(xiàn)為云計(jì)算的配置，在云計(jì)算中，一種功能被分配給多個(gè)設(shè)備，并且通過網(wǎng)絡(luò)以協(xié)同的方式來處理。
[0335]在上述的流程圖中描述的步驟可以由一個(gè)設(shè)備執(zhí)行，并且也可以在多個(gè)設(shè)備中分配并執(zhí)行。
[0336]當(dāng)在一個(gè)步驟中包括多個(gè)處理時(shí)，包括在一個(gè)步驟中的多個(gè)處理可以由一個(gè)設(shè)備執(zhí)行，并且也可以在多個(gè)設(shè)備中分配并執(zhí)行。
[0337]本技術(shù)也可以被實(shí)現(xiàn)為如下:
[0338](I) 一種信息處理設(shè)備，包括:多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像、和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息；移動(dòng)對象圖像似然度計(jì)算單元，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定單元，確定由移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲單元，存儲由移動(dòng)對象圖像閾值確定單元搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；操作輸入單元，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算單元，計(jì)算作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定單元，確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果移動(dòng)對象信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
[0339](2)如⑴中描述的信息處理設(shè)備，在時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值之后，操作輸入單元接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像重新決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息。時(shí)空似然度計(jì)算單元可重新計(jì)算作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被重新輸入了決定信息的決定移動(dòng)對象信息的似然度。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果移動(dòng)對象信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。每當(dāng)由操作輸入單元重新輸入決定信息時(shí)，操作輸入單元、時(shí)空似然度計(jì)算單元和時(shí)空似然度閾值確定單元可重復(fù)相同的處理。
[0340](3)如(2)中描述的信息處理設(shè)備，移動(dòng)對象信息還可包括識別捕獲包括的移動(dòng)對象圖像的多個(gè)成像單元之一的ID。信息處理設(shè)備還可包括:亮度傳遞函數(shù)BTF計(jì)算單元，基于搜索目標(biāo)移動(dòng)對象信息和決定移動(dòng)對象信息中的具有不同的ID的兩個(gè)移動(dòng)對象圖像來計(jì)算校正成像單元之間的顏色的變化的BTF，所述不同的ID識別各自捕獲移動(dòng)對象圖像的多個(gè)成像單元，所述搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息，針對所述決定移動(dòng)對象信息接收到用來決定搜索目標(biāo)移動(dòng)對象信息的決定信息的輸入；BTF處理單元，對作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的除了決定移動(dòng)對象信息以外的移動(dòng)對象信息當(dāng)中的、包括由具有獲得BTF的ID的成像單元捕獲的移動(dòng)對象圖像的移動(dòng)對象信息的移動(dòng)對象圖像執(zhí)行BTF ；BTF移動(dòng)對象圖像似然度計(jì)算單元，計(jì)算BTF移動(dòng)對象圖像似然度，該BTF移動(dòng)對象圖像似然度由基于移動(dòng)對象圖像的似然度構(gòu)成，并且是包括由BTF處理單元使用BTF處理過的移動(dòng)對象圖像的移動(dòng)對象信息相對于決定移動(dòng)對象信息的移動(dòng)對象圖像的似然度；以及BTF移動(dòng)對象圖像閾值確定單元，確定由BTF移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF移動(dòng)對象圖像似然度是否小于預(yù)定的閾值。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的時(shí)空似然度是否小于預(yù)定的閾值，以及BTF移動(dòng)對象圖像閾值確定單元在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，確定由BTF移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF移動(dòng)對象圖像似然度是否小于預(yù)定的閾值，并且在BTF移動(dòng)對象圖像似然度小于預(yù)定的閾值時(shí)，從搜索結(jié)果移動(dòng)對象信息存儲單元擦除包括BTF移動(dòng)對象圖像似然度小于預(yù)定的閾值的移動(dòng)對象圖像的移動(dòng)對象信息。
[0341](4)如(I)或(2)中描述的信息處理設(shè)備，移動(dòng)對象圖像似然度計(jì)算單元可基于搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像和包括在除了搜索對照移動(dòng)對象信息以外的移動(dòng)對象信息中的移動(dòng)對象圖像中的每個(gè)中包括的移動(dòng)對象圖像，計(jì)算指示每個(gè)移動(dòng)對象的相似性的程度的相似度作為移動(dòng)對象圖像似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息。
[0342](5)如(I)、⑵和(4)中的任意一項(xiàng)中描述的信息處理設(shè)備，時(shí)空似然度計(jì)算單元可根據(jù)成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)在除了決定移動(dòng)對象信息以外的移動(dòng)對象信息和被輸入了決定信息的決定移動(dòng)對象信息的空間位置坐標(biāo)之間的距離所花費(fèi)的必要時(shí)間之間的關(guān)系，計(jì)算時(shí)空似然度。
[0343](6)提供一種信息處理設(shè)備的信息處理方法，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息。所述信息處理方法包括:移動(dòng)對象圖像似然度計(jì)算處理，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定處理，確定由移動(dòng)對象圖像似然度計(jì)算處理計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲處理，存儲由移動(dòng)對象圖像閾值確定處理搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；操作輸入處理，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定在結(jié)果移動(dòng)對象信息存儲處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算處理，計(jì)算在結(jié)果移動(dòng)對象信息存儲處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定處理，確定由時(shí)空似然度計(jì)算處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果移動(dòng)對象信息存儲處理中存儲的移動(dòng)對象信息擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
[0344](7)提供一種控制信息處理設(shè)備的計(jì)算機(jī)的程序，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息。所述程序使得計(jì)算機(jī)執(zhí)行:移動(dòng)對象圖像似然度計(jì)算步驟，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定步驟，確定由移動(dòng)對象圖像似然度計(jì)算步驟的處理計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲步驟，存儲由移動(dòng)對象圖像閾值確定步驟的處理搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息；操作輸入步驟，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定在結(jié)果移動(dòng)對象信息存儲步驟的處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算步驟，計(jì)算在結(jié)果移動(dòng)對象信息存儲步驟的處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定步驟，確定由時(shí)空似然度計(jì)算步驟的處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果移動(dòng)對象信息存儲步驟的處理中存儲的移動(dòng)對象信息擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
[0345](8) 一種信息處理設(shè)備，包括:多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測該人物的空間位置坐標(biāo)，并且輸出人物圖像和包括該人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的人物信息；人物圖像似然度計(jì)算單元，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；人物圖像閾值確定單元，確定由人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；搜索結(jié)果人物信息存儲單元，存儲由人物圖像閾值確定單元搜索的作為搜索結(jié)果人物信息的人物信息；操作輸入單元，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；時(shí)空似然度計(jì)算單元，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及時(shí)空似然度閾值確定單元，確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0346](9)如⑶中描述的信息處理設(shè)備，在時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值之后，操作輸入單元可接收決定信息的輸入，該決定信息由用戶用來基于人物圖像重新決定作為搜索結(jié)果人物信息存儲在結(jié)果人物信息存儲單元中的人物信息當(dāng)中的搜索目標(biāo)人物信息。時(shí)空似然度計(jì)算單元可重新計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了決定人物信息以外的人物信息相對于被重新輸入了決定信息的決定人物信息的似然度。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。每當(dāng)由操作輸入單元重新輸入決定信息時(shí)，操作輸入單元、時(shí)空似然度計(jì)算單元和時(shí)空似然度閾值確定單元可重復(fù)相同的處理。
[0347](10)如(9)中描述的信息處理設(shè)備，人物信息還可包括識別捕獲包括的人物圖像的多個(gè)成像單元之一的ID。信息處理設(shè)備還可包括:亮度傳遞函數(shù)BTF計(jì)算單元，基于搜索目標(biāo)人物信息和決定人物信息中的具有不同的ID的兩個(gè)人物圖像來計(jì)算校正成像單元之間的顏色的變化的BTF，所述不同的ID識別各自捕獲人物圖像的多個(gè)成像單元，所述搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息，針對所述決定人物信息接收到用來決定搜索目標(biāo)人物信息的決定信息的輸入；BTF處理單元，對作為搜索結(jié)果人物信息存儲在結(jié)果人物信息存儲單元中的人物信息當(dāng)中的除了決定人物信息以外的人物信息當(dāng)中的、包括由具有獲得BTF的ID的成像單元捕獲的人物圖像的人物信息的人物圖像執(zhí)行BTF ；BTF人物圖像似然度計(jì)算單元，計(jì)算BTF人物圖像似然度，該BTF人物圖像似然度由基于人物圖像的似然度構(gòu)成，并且是包括由BTF處理單元使用BTF處理過的人物圖像的人物信息相對于決定人物信息的人物圖像的似然度；以及BTF人物圖像閾值確定單元，確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的時(shí)空似然度是否小于預(yù)定的閾值，以及BTF人物圖像閾值確定單元可在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值，并且在BTF人物圖像似然度小于預(yù)定的閾值時(shí)，從搜索結(jié)果人物信息存儲單元擦除包括BTF人物圖像似然度小于預(yù)定的閾值的人物圖像的人物信息。
[0348](11)如(10)中描述的信息處理設(shè)備，還可以包括:同一人物信息保持單元，保持搜索目標(biāo)人物信息和決定人物信息作為與搜索目標(biāo)人物相同的人物的人物信息，其中，搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息，針對該決定人物信息接收到用來決定搜索目標(biāo)人物信息的決定信息的輸入；其他人物信息保持單元，保持包括由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度小于預(yù)定的閾值或者由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度小于預(yù)定的閾值的人物圖像的人物信息作為其他人物信息，該其他人物信息是除了搜索目標(biāo)人物以外的人物的人物信息；獨(dú)有特征搜索單元，通過基于在同一人物信息保持單元中保持的人物信息的人物圖像和在其他人物信息保持單元中保持的人物信息的人物圖像進(jìn)行學(xué)習(xí)，選擇用來搜索搜索目標(biāo)人物的獨(dú)有特征；獨(dú)有特征似然度計(jì)算單元，計(jì)算獨(dú)有特征似然度，該獨(dú)有特征似然度是基于包括在除了搜索對照人物信息的人物信息中的人物圖像相對于搜索目標(biāo)人物信息的人物圖像的獨(dú)有特征的似然度；以及獨(dú)有特征似然度閾值確定單元，確定由獨(dú)有特征似然度計(jì)算單元計(jì)算出的每個(gè)獨(dú)有特征似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除小于預(yù)定的閾值的獨(dú)有特征似然度的人物信息。時(shí)空似然度閾值確定單元可確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值。在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，BTF人物圖像閾值確定單元可確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值。在BTF人物圖像似然度不小于預(yù)定的閾值時(shí)，獨(dú)有特征似然度閾值確定單元可確定由獨(dú)有特征似然度計(jì)算單元計(jì)算出的每個(gè)獨(dú)有特征似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除小于預(yù)定的閾值的獨(dú)有特征似然度的人物信息。
[0349](12)如(11)中描述的信息處理設(shè)備，在獨(dú)有特征似然度閾值確定單元從搜索結(jié)果人物信息存儲單元擦除獨(dú)有特征似然度小于預(yù)定的閾值的人物信息時(shí)，其他人物信息保持單元可保持獨(dú)有特征似然度小于預(yù)定的閾值的人物信息作為其他人物信息，該其他人物信息是其他人物的人物信息。
[0350](13)如(8)中描述的信息處理設(shè)備，獨(dú)有特征搜索單元可通過基于在同一人物信息保持單元中保持的人物信息的人物圖像和在其他人物信息保持單元中保持的人物信息的人物圖像進(jìn)行學(xué)習(xí)，選擇在同一人物信息保持單元中保持的人物信息的人物圖像和搜索目標(biāo)人物的人物圖像之間的似然度增加并且在其他人物信息保持單元中保持的人物信息的人物圖像和搜索目標(biāo)人物的人物圖像之間的似然度減少的特征量作為獨(dú)有特征。
[0351](14)如(8)中描述的信息處理設(shè)備，獨(dú)有特征似然度計(jì)算單元可基于包括在搜索目標(biāo)人物信息中的人物圖像和包括在除了搜索對照人物信息以外的人物信息中的人物圖像中的每個(gè)人物圖像的獨(dú)有特征，計(jì)算指示每個(gè)人物的相似性的程度的相似度作為獨(dú)有特征似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息。
[0352](15)如⑶中描述的信息處理設(shè)備，人物圖像似然度計(jì)算單元可基于包括在搜索目標(biāo)人物信息中的人物圖像和包括在除了搜索對照人物信息以外的人物信息中的人物圖像中的每個(gè)人物圖像，計(jì)算指示每個(gè)人物的相似性的程度的相似度作為人物圖像似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息。
[0353](16)如⑶中描述的信息處理設(shè)備，時(shí)空似然度計(jì)算單元可根據(jù)成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)在除了決定人物信息以外的人物信息和被輸入了決定信息的決定人物信息的空間位置坐標(biāo)之間的距離所花費(fèi)的必要時(shí)間之間的關(guān)系計(jì)算時(shí)空似然度。
[0354](17)提供一種信息處理設(shè)備的信息處理方法，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測人物的空間位置坐標(biāo)，并且輸出人物圖像和包括人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的個(gè)人物信息。所述信息處理方法包括:人物圖像似然度計(jì)算處理，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；人物圖像閾值確定處理，確定由人物圖像似然度計(jì)算處理計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；搜索結(jié)果人物信息存儲處理，存儲由人物圖像閾值確定處理搜索的作為搜索結(jié)果人物信息的人物信息；操作輸入處理，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲處理中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；時(shí)空似然度計(jì)算處理，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲處理中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及時(shí)空似然度閾值確定處理，確定由時(shí)空似然度計(jì)算處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果人物信息存儲處理中存儲的人物信息擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0355](18)提供一種控制信息處理設(shè)備的計(jì)算機(jī)的程序，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測人物的空間位置坐標(biāo)，并且輸出人物圖像和包括人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的個(gè)人物信息。所述程序使得計(jì)算機(jī)執(zhí)行:人物圖像似然度計(jì)算步驟，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息；人物圖像閾值確定步驟，確定由人物圖像似然度計(jì)算步驟的處理計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息；搜索結(jié)果人物信息存儲步驟，存儲由人物圖像閾值確定步驟的處理搜索的作為搜索結(jié)果人物信息的人物信息；操作輸入步驟，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲步驟的處理中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息；時(shí)空似然度計(jì)算步驟，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲步驟的處理中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及時(shí)空似然度閾值確定步驟，確定由時(shí)空似然度計(jì)算步驟的處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
[0356]附圖標(biāo)記列表
[0357]I監(jiān)視系統(tǒng)，11，11-1至ll-η監(jiān)視照相機(jī)，12人物搜索和跟蹤服務(wù)器，13網(wǎng)絡(luò)，31成像單元，32移動(dòng)對象檢測單元，33前景圖像提取單元34照相機(jī)ID，35成像位置坐標(biāo)計(jì)算單元，36成像時(shí)間檢測單元，37移動(dòng)對象信息輸出單元，51移動(dòng)對象信息獲取單元，52移動(dòng)對象信息濾波處理單元，53移動(dòng)對象信息保持單元，54移動(dòng)對象信息似然度計(jì)算處理單元，55移動(dòng)對象信息似然度閾值確定單元，56結(jié)果存儲單元，57顯示圖像產(chǎn)生單元，58顯示單元，59匹配修改處理單元，60操作輸入單元，71檢測幀大小確定單元，72前景偏置確定單元，73前景和背景相關(guān)度確定單元，74邊緣長度確定單元，75多個(gè)人數(shù)確定單元，91操作輸入識別單元，92 BTF計(jì)算單元，93時(shí)空似然度計(jì)算單元，94時(shí)空似然度閾值確定單元，95 BTF圖像處理單元，96 BTF圖像似然度計(jì)算單元，97 BTF圖像似然度閾值確定單元
【權(quán)利要求】
1.一種信息處理設(shè)備,包括: 多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像、和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息；移動(dòng)對象圖像似然度計(jì)算單元，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息； 移動(dòng)對象圖像閾值確定單元，確定由移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲單元，存儲由移動(dòng)對象圖像閾值確定單元搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息； 操作輸入單元，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息； 時(shí)空似然度計(jì) 算單元，計(jì)算作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及 時(shí)空似然度閾值確定單元，確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果移動(dòng)對象信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
2.根據(jù)權(quán)利要求1所述的信息處理設(shè)備， 其中，在時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值之后，操作輸入單元接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像重新決定作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息， 其中，時(shí)空似然度計(jì)算單元重新計(jì)算作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被重新輸入了決定信息的決定移動(dòng)對象信息的似然度， 其中，時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果移動(dòng)對象信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息，以及 其中，每當(dāng)由操作輸入單元重新輸入決定信息時(shí)，操作輸入單元、時(shí)空似然度計(jì)算單元和時(shí)空似然度閾值確定單元重復(fù)相同的處理。
3.根據(jù)權(quán)利要求2所述的信息處理設(shè)備，其中，移動(dòng)對象信息還包括識別捕獲包括的移動(dòng)對象圖像的多個(gè)成像單元之一的ID， 其中，信息處理設(shè)備還包括: 亮度傳遞函數(shù)BTF計(jì)算單元，基于搜索目標(biāo)移動(dòng)對象信息和決定移動(dòng)對象信息中的具有不同的ID的兩個(gè)移動(dòng)對象圖像來計(jì)算校正成像單元之間的顏色的變化的BTF，所述不同的ID識別各自捕獲移動(dòng)對象圖像的多個(gè)成像單元，所述搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息，針對所述決定移動(dòng)對象信息接收到用來決定搜索目標(biāo)移動(dòng)對象信息的決定信息的輸入； BTF處理單元，對作為搜索結(jié)果移動(dòng)對象信息存儲在結(jié)果移動(dòng)對象信息存儲單元中的移動(dòng)對象信息當(dāng)中的除了決定移動(dòng)對象信息以外的移動(dòng)對象信息當(dāng)中的、包括由具有獲得BTF的ID的成像單元捕獲的移動(dòng)對象圖像的移動(dòng)對象信息的移動(dòng)對象圖像執(zhí)行BTF ； BTF移動(dòng)對象圖像似然度計(jì)算單元，計(jì)算BTF移動(dòng)對象圖像似然度，該BTF移動(dòng)對象圖像似然度由基于移動(dòng)對象圖像的似然度構(gòu)成，并且是包括由BTF處理單元使用BTF處理過的移動(dòng)對象圖像的移動(dòng)對象信息相對于決定移動(dòng)對象信息的移動(dòng)對象圖像的似然度；以及BTF移動(dòng)對象圖像閾值確定單元，確定由BTF移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF移動(dòng)對象圖像似然度是否小于預(yù)定的閾值， 其中，時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的時(shí)空似然度是否小于預(yù)定的閾值，以及 其中，BTF移動(dòng)對象圖像閾值確定單元在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，確定由BTF移動(dòng)對象圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF移動(dòng)對象圖像似然度是否小于預(yù)定的閾值，并且在BTF移動(dòng)對象圖像似然度小于預(yù)定的閾值時(shí)，從搜索結(jié)果移動(dòng)對象信息存儲單元擦除包括BTF移動(dòng)對象圖像似然度小于預(yù)定的閾值的移動(dòng)對象圖像的移動(dòng)對象信息。
4.根據(jù)權(quán)利要求1所述的信息處理設(shè)備，其中，移動(dòng)對象圖像似然度計(jì)算單元基于搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像和包括在除了搜索對照移動(dòng)對象信息以外的移動(dòng)對象信息中的移動(dòng)對象圖像中的每個(gè)中包括的移動(dòng)對象圖像，計(jì)算指示每個(gè)移動(dòng)對象的相似性的程度的相似度作為移動(dòng)對象圖像似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息。
5.根據(jù)權(quán)利要求1所述的信息處理設(shè)備，其中，時(shí)空似然度計(jì)算單元根據(jù)成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)在除了決定移動(dòng)對象信息以外的移動(dòng)對象信息和被輸入了決定信息的決定移動(dòng)對象信息的空間位置坐標(biāo)之間的距離所花費(fèi)的必要時(shí)間之間的關(guān)系，計(jì)算時(shí)空似然度。
6.一種信息處理設(shè)備的信息處理方法，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息，所述信息處理方法包括: 移動(dòng)對象圖像似然度計(jì)算處理，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；移動(dòng)對象圖像閾值確定處理，確定由移動(dòng)對象圖像似然度計(jì)算處理計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息；搜索結(jié)果移動(dòng)對象信息存儲處理，存儲由移動(dòng)對象圖像閾值確定處理搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息； 操作輸入處理，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定在結(jié)果移動(dòng)對象信息存儲處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息； 時(shí)空似然度計(jì)算處理，計(jì)算在結(jié)果移動(dòng)對象信息存儲處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及 時(shí)空似然度閾值確定處理，確定由時(shí)空似然度計(jì)算處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果移動(dòng)對象信息存儲處理中存儲的移動(dòng)對象信息擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
7.—種控制信息處理設(shè)備的計(jì)算機(jī)程序，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測移動(dòng)對象，提取由檢測到的移動(dòng)對象的圖像構(gòu)成的移動(dòng)對象圖像，基于移動(dòng)對象圖像來檢測移動(dòng)對象的空間位置坐標(biāo)，并且輸出移動(dòng)對象圖像和包括移動(dòng)對象的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的移動(dòng)對象信息，所述程序使得計(jì)算機(jī)執(zhí)行: 移動(dòng)對象圖像似然度 計(jì)算步驟，計(jì)算移動(dòng)對象圖像似然度，該移動(dòng)對象圖像似然度是除了搜索目標(biāo)移動(dòng)對象信息以外的移動(dòng)對象信息中包括的移動(dòng)對象圖像相對于搜索對照移動(dòng)對象信息的移動(dòng)對象圖像的似然度，該搜索目標(biāo)移動(dòng)對象信息是包括作為搜索目標(biāo)的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息； 移動(dòng)對象圖像閾值確定步驟，確定由移動(dòng)對象圖像似然度計(jì)算步驟的處理計(jì)算出的每個(gè)移動(dòng)對象圖像似然度是否大于預(yù)定的閾值，并且搜索移動(dòng)對象圖像似然度大于預(yù)定的閾值的移動(dòng)對象信息作為搜索結(jié)果移動(dòng)對象信息，該搜索結(jié)果移動(dòng)對象信息是包括與搜索目標(biāo)移動(dòng)對象信息的移動(dòng)對象圖像的移動(dòng)對象相同的移動(dòng)對象的移動(dòng)對象圖像的移動(dòng)對象信息； 搜索結(jié)果移動(dòng)對象信息存儲步驟，存儲由移動(dòng)對象圖像閾值確定步驟的處理搜索的作為搜索結(jié)果移動(dòng)對象信息的移動(dòng)對象信息； 操作輸入步驟，接收決定信息的輸入，該決定信息由用戶用來基于移動(dòng)對象圖像決定在結(jié)果移動(dòng)對象信息存儲步驟的處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的搜索目標(biāo)移動(dòng)對象信息；時(shí)空似然度計(jì)算步驟，計(jì)算在結(jié)果移動(dòng)對象信息存儲步驟的處理中作為搜索結(jié)果移動(dòng)對象信息存儲的移動(dòng)對象信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的移動(dòng)對象信息的決定移動(dòng)對象信息以外的移動(dòng)對象信息相對于被輸入了決定信息的決定移動(dòng)對象信息的似然度；以及時(shí)空似然度閾值確定步驟，確定由時(shí)空似然度計(jì)算步驟的處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果移動(dòng)對象信息存儲步驟的處理中存儲的移動(dòng)對象信息擦除時(shí)空似然度小于預(yù)定的閾值的移動(dòng)對象信息。
8.—種信息處理設(shè)備,包括: 多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測該人物的空間位置坐標(biāo)，并且輸出人物圖像和包括該人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的人物信息； 人物圖像似然度計(jì)算單元，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息； 人物圖像閾值確定單元，確定由人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息； 搜索結(jié)果人物信息存儲單元，存儲由人物圖像閾值確定單元搜索的作為搜索結(jié)果人物信息的人物信息； 操作輸入單元，接收 決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息； 時(shí)空似然度計(jì)算單元，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及 時(shí)空似然度閾值確定單元，確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
9.根據(jù)權(quán)利要求8所述的信息處理設(shè)備， 其中，在時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值之后，操作輸入單元接收決定信息的輸入，該決定信息由用戶用來基于人物圖像重新決定作為搜索結(jié)果人物信息存儲在結(jié)果人物信息存儲單元中的人物信息當(dāng)中的搜索目標(biāo)人物信息， 其中，時(shí)空似然度計(jì)算單元重新計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲單元中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了決定人物信息以外的人物信息相對于被重新輸入了決定信息的決定人物信息的似然度， 其中，時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息，以及 其中，每當(dāng)由操作輸入單元重新輸入決定信息時(shí)，操作輸入單元、時(shí)空似然度計(jì)算單元和時(shí)空似然度閾值確定單元重復(fù)相同的處理。
10.根據(jù)權(quán)利要求9所述的信息處理設(shè)備， 其中，人物信息還包括識別捕獲包括的人物圖像的多個(gè)成像單元之一的ID， 其中，信息處理設(shè)備還包括: 亮度傳遞函數(shù)BTF計(jì)算單元，基于搜索目標(biāo)人物信息和決定人物信息中的具有不同的ID的兩個(gè)人物圖像來計(jì)算校正成像單元之間的顏色的變化的BTF，所述不同的ID識別各自捕獲人物圖像的多個(gè)成像單元，所述搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息，針對所述決定人物信息接收到用來決定搜索目標(biāo)人物信息的決定信息的輸入； BTF處理單元，對作為搜索結(jié)果人物信息存儲在結(jié)果人物信息存儲單元中的人物信息當(dāng)中的除了決定人物信息以外的人物信息當(dāng)中的、包括由具有獲得BTF的ID的成像單元捕獲的人物圖像的人物信息的人物圖像執(zhí)行BTF ； BTF人物圖像似然度計(jì)算單元，計(jì)算BTF人物圖像似然度，該BTF人物圖像似然度由基于人物圖像的似然度構(gòu)成，并且是包括由BTF處理單元使用BTF處理過的人物圖像的人物信息相對于決定人物信息的人物圖像的似然度；以及 BTF人物圖像閾值確定單元，確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值， 其中，時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的時(shí)空似然度是否小于預(yù)定的閾值，以及 其中，BTF人物圖像閾值確定單元在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值，并且在BTF人物圖像似然度小于預(yù)定的閾值時(shí)，從搜索結(jié)果人物信息存儲單元擦除包括BTF人物圖像似然度小于預(yù)定的閾值的人物圖像的人物信息。
11.根據(jù)權(quán)利要求10所述的信息處理設(shè)備，還包括: 同一人物信息保持單元，保持搜索目標(biāo)人物信息和決定人物信息作為與搜索目標(biāo)人物相同的人物的人物信息，其中，搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息，針對該決定人物信息接收到用來決定搜索目標(biāo)人物信息的決定信息的輸入；其他人物信息保持單元，保持包括由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度小于預(yù)定的閾值或者由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度小于預(yù)定的閾值的人物圖像的人物信息作為其他人物信息，該其他人物信息是除了搜索目標(biāo)人物以外的人物的人物信息； 獨(dú)有特征搜索單元，通過基于在同一人物信息保持單元中保持的人物信息的人物圖像和在其他人物信息保持單元中保持的人物信息的人物圖像進(jìn)行學(xué)習(xí)，選擇用來搜索搜索目標(biāo)人物的獨(dú)有特征； 獨(dú)有特征似然度計(jì)算單元，計(jì)算獨(dú)有特征似然度，該獨(dú)有特征似然度是基于包括在除了搜索對照人物信息的人物信息中的人物圖像相對于搜索目標(biāo)人物信息的人物圖像的獨(dú)有特征的似然度；以及 獨(dú)有特征似然度閾值確定單元，確定由獨(dú)有特征似然度計(jì)算單元計(jì)算出的每個(gè)獨(dú)有特征似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除小于預(yù)定的閾值的獨(dú)有特征似然度的人物信息，其中，時(shí)空似然度閾值確定單元確定由時(shí)空似然度計(jì)算單元重新計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值， 其中，在重新計(jì)算出的時(shí)空似然度不小于預(yù)定的閾值時(shí)，BTF人物圖像閾值確定單元確定由BTF人物圖像似然度計(jì)算單元計(jì)算出的每個(gè)BTF人物圖像似然度是否小于預(yù)定的閾值，以及 其中，在BTF人物圖像似然度不小于預(yù)定的閾值時(shí)，獨(dú)有特征似然度閾值確定單元確定由獨(dú)有特征似然度計(jì)算單元計(jì)算出的每個(gè)獨(dú)有特征似然度是否小于預(yù)定的閾值，并且從搜索結(jié)果人物信息存儲單元擦除小于預(yù)定的閾值的獨(dú)有特征似然度的人物信息。
12.根據(jù)權(quán)利要求11所述的信息處理設(shè)備，其中，在獨(dú)有特征似然度閾值確定單元從搜索結(jié)果人物信息存儲單元擦除獨(dú)有特征似然度小于預(yù)定的閾值的人物信息時(shí)，其他人物信息保持單元保持獨(dú)有特征似然度小于預(yù)定的閾值的人物信息作為其他人物信息，該其他人物信息是其他人物的人物信息。
13.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，其中，獨(dú)有特征搜索單元通過基于在同一人物信息保持單元中保持的人物信息的人物圖像和在其他人物信息保持單元中保持的人物信息的人物圖像進(jìn)行學(xué)習(xí)，選擇在同一人物信息保持單元中保持的人物信息的人物圖像和搜索目標(biāo)人物的人物圖像之間的似然度增加并且在其他人物信息保持單元中保持的人物信息的人物圖像和搜索目標(biāo)人物的人物圖像之間的似然度減少的特征量作為獨(dú)有特征。
14.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，其中，獨(dú)有特征似然度計(jì)算單元基于包括在搜索目標(biāo)人物信息中的人物圖像和包括在除了搜索對照人物信息以外的人物信息中的人物圖像中的每個(gè)人物圖像的獨(dú)有特征，計(jì)算指示每個(gè)人物的相似性的程度的相似度作為獨(dú)有特征似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息。
15.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，其中，人物圖像似然度計(jì)算單元基于包括在搜索目標(biāo)人物信息中的人物圖像和包括在除了搜索對照人物信息以外的人物信息中的人物圖像中的每個(gè)人物圖像，計(jì)算指示每個(gè)人物的相似性的程度的相似度作為人物圖像似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息。
16.根據(jù)權(quán)利要求8所述的信息處理設(shè)備，其中，時(shí)空似然度計(jì)算單元根據(jù)成像時(shí)間之間的時(shí)間與以平均人物移動(dòng)速度行進(jìn)在除了決定人物信息以外的人物信息和被輸入了決定信息的決定人物信息的空間位置坐標(biāo)之間的距離所花費(fèi)的必要時(shí)間之間的關(guān)系計(jì)算時(shí)空似然度。
17.一種信息處理設(shè)備的信息處理方法，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測人物的空間位置坐標(biāo)，并且輸出人物圖像和包括人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的個(gè)人物信息，所述信息處理方法包括: 人物圖像似然度計(jì)算處理，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息； 人物圖像閾值確定處理，確定由人物圖像似然度計(jì)算處理計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息； 搜索結(jié)果人物信息存儲處理，存儲由人物圖像閾值確定處理搜索的作為搜索結(jié)果人物信息的人物信息； 操作輸入處理，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲處理中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息； 時(shí)空似然度計(jì)算處理，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲處理中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及 時(shí)空似然度閾值確定處理，確定由時(shí)空似然度計(jì)算處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果人物信息存儲處理中存儲的人物信息擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
18.—種控制信息處理設(shè)備的計(jì)算機(jī)程序，該信息處理設(shè)備包括多個(gè)成像單元，每個(gè)成像單元捕獲圖像，檢測人物，提取由檢測到的人物的圖像構(gòu)成的人物圖像，基于人物圖像來檢測人物的空間位置坐標(biāo)，并且輸出人物圖像和包括人物的空間位置坐標(biāo)和捕獲該圖像的成像時(shí)間的個(gè)人物信息，所述程序使得計(jì)算機(jī)執(zhí)行: 人物圖像似然度計(jì)算步驟，計(jì)算人物圖像似然度，該人物圖像似然度是除了搜索目標(biāo)人物信息以外的人物信 息中包括的人物圖像相對于搜索對照人物信息的人物圖像的似然度，該搜索目標(biāo)人物信息是包括作為搜索目標(biāo)的人物的人物圖像的人物信息； 人物圖像閾值確定步驟，確定由人物圖像似然度計(jì)算步驟的處理計(jì)算出的每個(gè)人物圖像似然度是否大于預(yù)定的閾值，并且搜索人物圖像似然度大于預(yù)定的閾值的人物信息作為搜索結(jié)果人物信息，該搜索結(jié)果人物信息是包括與搜索目標(biāo)人物信息的人物圖像的人物相同的人物的人物圖像的人物信息； 搜索結(jié)果人物信息存儲步驟，存儲由人物圖像閾值確定步驟的處理搜索的作為搜索結(jié)果人物信息的人物信息； 操作輸入步驟，接收決定信息的輸入，該決定信息由用戶用來基于人物圖像決定作為搜索結(jié)果人物信息在結(jié)果人物信息存儲步驟的處理中存儲的人物信息當(dāng)中的搜索目標(biāo)人物信息； 時(shí)空似然度計(jì)算步驟，計(jì)算作為搜索結(jié)果人物信息在結(jié)果人物信息存儲步驟的處理中存儲的人物信息當(dāng)中的時(shí)空似然度，該時(shí)空似然度由基于空間位置坐標(biāo)和成像時(shí)間的似然度構(gòu)成，并且是除了作為被輸入了決定信息的人物信息的決定人物信息以外的人物信息相對于被輸入了決定信息的決定人物信息的似然度；以及 時(shí)空似然度閾值確定步驟，確定由時(shí)空似然度計(jì)算步驟的處理計(jì)算出的每個(gè)時(shí)空似然度是否小于預(yù)定的閾值，并且從在搜索結(jié)果人物信息存儲單元擦除時(shí)空似然度小于預(yù)定的閾值的人物信息。
【文檔編號】G06T7/20GK104041017SQ201380005113
【公開日】2014年9月10日 申請日期:2013年1月9日 優(yōu)先權(quán)日:2012年1月17日
【發(fā)明者】小野優(yōu)嗣, 竹內(nèi)英人 申請人:索尼公司