圖像監(jiān)控系統(tǒng)和監(jiān)視攝像的制造方法
【專利摘要】本發(fā)明提供一種圖像監(jiān)控系統(tǒng)和監(jiān)視攝像機(jī)。所述圖像監(jiān)控系統(tǒng)包括所述監(jiān)視攝像機(jī)。所述監(jiān)視攝像機(jī)包括：圖像分析器，被配置為分析輸入圖像；聲源分析器，被配置為分析所述圖像中的聲源或者單獨(dú)輸入的聲源；確定器，被配置為根據(jù)圖像分析和聲源分析的結(jié)果，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源；元數(shù)據(jù)產(chǎn)生器，被配置為基于確定的結(jié)果產(chǎn)生元數(shù)據(jù)；報(bào)警信息產(chǎn)生器，被配置為基于確定的結(jié)果和產(chǎn)生的元數(shù)據(jù)來產(chǎn)生報(bào)警信息，其中，異常圖像和異常聲源被預(yù)先定義。
【專利說明】圖像監(jiān)控系統(tǒng)和監(jiān)視攝像機(jī)
[0001]本申請(qǐng)要求2013年9月27日提交于韓國知識(shí)產(chǎn)權(quán)局的第10-2013-0115708號(hào)韓國專利申請(qǐng)的優(yōu)先權(quán)，其公開內(nèi)容整體以引用方式并入本文。

【技術(shù)領(lǐng)域】
[0002]與本發(fā)明構(gòu)思的示例性實(shí)施例一致的設(shè)備和方法涉及一種分析圖像和/或聲源以產(chǎn)生、存儲(chǔ)并顯示關(guān)于異常情況的元數(shù)據(jù)的圖像監(jiān)控系統(tǒng)、包括在該圖像監(jiān)控系統(tǒng)中的監(jiān)視攝像機(jī)以及操作該監(jiān)視攝像機(jī)的方法。

【背景技術(shù)】
[0003]圖像監(jiān)控系統(tǒng)通常包括監(jiān)視攝像機(jī)和諸如網(wǎng)絡(luò)視頻記錄儀(NVR)或數(shù)字視頻記錄儀(DVR)的圖像記錄設(shè)備，并且通過利用圖像分析功能分析經(jīng)由監(jiān)視攝像機(jī)獲取的圖像，以根據(jù)預(yù)定義的規(guī)則確定監(jiān)視場(chǎng)景是否異常。
[0004]當(dāng)在圖像監(jiān)控系統(tǒng)中同時(shí)操作的監(jiān)視攝像機(jī)的數(shù)量增加時(shí)，用戶難以實(shí)時(shí)地檢查所有監(jiān)視場(chǎng)景是否異常。另外，可通過圖像分析確定移動(dòng)對(duì)象，但難以檢測(cè)異常情況。另外，即使通過圖像分析檢測(cè)到異常情況，檢測(cè)結(jié)果也可能是錯(cuò)的。


【發(fā)明內(nèi)容】

[0005]本發(fā)明構(gòu)思的一個(gè)或更多個(gè)實(shí)施例包括一種分析圖像和/或聲源以產(chǎn)生、存儲(chǔ)并顯示關(guān)于異常情況的元數(shù)據(jù)以提交監(jiān)控效率的圖像監(jiān)控系統(tǒng)、包括在該圖像監(jiān)控系統(tǒng)中的監(jiān)視攝像機(jī)以及操作該監(jiān)視攝像機(jī)的方法。
[0006]示例性實(shí)施例的各種方面將在以下描述中部分地闡述，并且從描述中部分是清楚的，或者可通過實(shí)施例的實(shí)施被理解。
[0007]根據(jù)示例性實(shí)施例的一個(gè)方面，提供一種監(jiān)視攝像機(jī)，可包括:圖像分析器，被配置為分析輸入圖像；聲源分析器，被配置為分析所述圖像中的聲源或者單獨(dú)輸入的聲源；確定器，被配置為根據(jù)圖像分析和聲源分析的結(jié)果，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源；元數(shù)據(jù)產(chǎn)生器，被配置為基于確定的結(jié)果產(chǎn)生元數(shù)據(jù)；報(bào)警信息產(chǎn)生器，被配置為基于確定的結(jié)果和產(chǎn)生的元數(shù)據(jù)來產(chǎn)生報(bào)警信息，其中，異常圖像和異常聲源被預(yù)先定義。
[0008]關(guān)于確定器，如果確定同時(shí)獲得異常圖像和異常聲源，則確定器可進(jìn)一步確定異常聲源是從異常圖像輸入還是從異常圖像之外輸入。
[0009]如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像之外獲得，則元數(shù)據(jù)產(chǎn)生器可產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0010]如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像獲得，則確定器可進(jìn)一步確定異常圖像和異常聲源是否指示同一事件。
[0011]元數(shù)據(jù)產(chǎn)生器可被配置為參考確定器的確定結(jié)果產(chǎn)生包括以下項(xiàng)的元數(shù)據(jù):異常圖像和異常聲源分別被獲得的時(shí)間、異常圖像的類型和異常聲源的類型、由異常圖像和異常聲源指示的事件的數(shù)量、異常聲源是從異常圖像獲得還是從異常圖像之外獲得、以及異常圖像和異常聲源是否指示同一事件的元數(shù)據(jù)。報(bào)警信息產(chǎn)生器可被配置為參考確定器的確定結(jié)果和元數(shù)據(jù)產(chǎn)生關(guān)于異常圖像和異常聲源的報(bào)警信息。
[0012]異常聲源的類型和異常圖像的類型各自可包括多個(gè)候選以及關(guān)于候選的準(zhǔn)確度信息，確定器可參考與異常圖像的類型和異常聲源的類型對(duì)應(yīng)的所述多個(gè)候選以及所述準(zhǔn)確度信息確定異常圖像和異常聲源是否指示同一事件。
[0013]如果確定器確定異常圖像的類型對(duì)應(yīng)于預(yù)設(shè)事件的概率和異常聲源的類型對(duì)應(yīng)于所述預(yù)設(shè)事件的概率之和超過預(yù)設(shè)閾值，則確定器可進(jìn)一步確定異常圖像和異常聲源指示所述預(yù)設(shè)事件。
[0014]如果確定器確定同時(shí)獲得異常圖像和異常聲源，則確定器可進(jìn)一步確定異常聲源是從異常圖像獲得還是從異常圖像之外獲得。
[0015]如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像之外獲得，則元數(shù)據(jù)產(chǎn)生器可產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0016]如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像獲得，則確定器可進(jìn)一步確定異常圖像和異常聲源是否指示同一事件，如果確定器確定異常圖像和異常聲源指示同一事件，則元數(shù)據(jù)產(chǎn)生器可從元數(shù)據(jù)減少異常圖像和異常聲源所指示的事件的數(shù)量。
[0017]如果確定器確定同時(shí)獲得異常圖像和異常聲源，異常聲源從異常圖像獲得，并且異常聲源和異常圖像指示不同的事件，則元數(shù)據(jù)產(chǎn)生器可產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0018]根據(jù)另一示例性實(shí)施例的一個(gè)方面，提供一種監(jiān)控系統(tǒng)，包括:上述監(jiān)視攝像機(jī)；圖像記錄設(shè)備，被配置為從所述攝像機(jī)接收?qǐng)D像、元數(shù)據(jù)和報(bào)警信息，存儲(chǔ)圖像、元數(shù)據(jù)和報(bào)警信息，并執(zhí)行用于顯示報(bào)警信息的處理；顯示設(shè)備，被配置為顯示圖像、元數(shù)據(jù)和報(bào)警信息。
[0019]根據(jù)另一示例性實(shí)施例的一個(gè)方面，提供一種控制監(jiān)視攝像機(jī)的方法，所述方法包括:分析輸入圖像；分析所述圖像中的聲源或者單獨(dú)輸入的聲源；根據(jù)圖像分析和聲源分析的結(jié)果，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源；基于確定的結(jié)果產(chǎn)生元數(shù)據(jù)；基于確定的結(jié)果和產(chǎn)生的元數(shù)據(jù)來產(chǎn)生報(bào)警信息，其中，異常圖像和異常聲源被預(yù)先定義。
[0020]確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源的步驟還可包括確定異常聲源是從異常圖像獲得還是從異常圖像之外獲得。
[0021]確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源的步驟還可包括確定異常圖像和異常聲源是否指示同一事件。.
[0022]元數(shù)據(jù)包括關(guān)于異常圖像和異常聲源分別被獲得的時(shí)間、異常圖像的類型和異常聲源的類型、由異常圖像和異常聲源指示的事件的數(shù)量、異常聲源是從異常圖像獲得還是從異常圖像之外獲得、以及異常圖像和異常聲源是否指示同一事件的信息。

【專利附圖】

【附圖說明】
[0023]從結(jié)合附圖對(duì)示例性實(shí)施例進(jìn)行的以下描述，這些和/或其它方面將變得明顯并更容易理解，其中:
[0024]圖1是示出根據(jù)示例性實(shí)施例的圖像監(jiān)控系統(tǒng)的框圖；
[0025]圖2是示出根據(jù)示例性實(shí)施例的圖1的圖像監(jiān)控系統(tǒng)的監(jiān)視攝像機(jī)的詳細(xì)結(jié)構(gòu)的框圖；
[0026]圖3A和圖3B是示出根據(jù)示例性實(shí)施例的由圖1的圖像監(jiān)控系統(tǒng)的監(jiān)視攝像機(jī)產(chǎn)生的元數(shù)據(jù)的示圖；
[0027]圖4是根據(jù)示例性實(shí)施例的操作圖像監(jiān)控系統(tǒng)的方法的流程圖。

【具體實(shí)施方式】
[0028]現(xiàn)在將參照附圖詳細(xì)描述示例性實(shí)施例，在附圖中相同的標(biāo)號(hào)始終表示相同的元件。在這方面，本發(fā)明實(shí)施例可具有不同的形式，不應(yīng)被解釋為限于本文所闡述的描述。因此，下面僅為了說明本發(fā)明構(gòu)思的各個(gè)方面而參照附圖描述這些實(shí)施例。如本文所用，術(shù)語“和/或”包括一個(gè)或更多個(gè)相關(guān)所列項(xiàng)的任何和所有組合。當(dāng)諸如“…中的至少一個(gè)”的表述在一列元素之前時(shí)，是修飾所有列出的元素，而不是修飾列出的各個(gè)元素。
[0029]圖1是示出根據(jù)示例性實(shí)施例的圖像監(jiān)控系統(tǒng)的框圖。
[0030]參照?qǐng)D1，圖像監(jiān)控系統(tǒng)包括監(jiān)視攝像機(jī)100、麥克風(fēng)200、圖像記錄設(shè)備300和顯示設(shè)備400。
[0031]監(jiān)視攝像機(jī)100可以是包括固定鏡頭并具有固定捕捉范圍的單個(gè)固定攝像機(jī)或者具有可變捕捉范圍的云臺(tái)變焦(pan-tilt-zoom, PTZ)攝像機(jī)。如果監(jiān)視攝像機(jī)100是PTZ攝像機(jī)，則可通過水平方向上的搖攝運(yùn)動(dòng)、垂直方向上的俯仰運(yùn)動(dòng)以及鏡頭拉近和/或鏡頭拉遠(yuǎn)運(yùn)動(dòng)來容易地改變監(jiān)視區(qū)域。與單個(gè)固定攝像機(jī)相比，PTZ攝像機(jī)可具有均勻的分辨率，并且可水平和垂直地旋轉(zhuǎn)，從而全方位地獲取圖像。監(jiān)視攝像機(jī)100連接到圖像記錄設(shè)備300 (可以是DVR)。如果監(jiān)視攝像機(jī)100是網(wǎng)絡(luò)攝像機(jī)，則監(jiān)視攝像機(jī)100可通過網(wǎng)絡(luò)連接到圖像記錄設(shè)備300。在這種情況下，圖像記錄設(shè)備300可以是NVR。
[0032]在本示例性實(shí)施例中，盡管在圖1的圖像監(jiān)控系統(tǒng)中僅示出一個(gè)監(jiān)視攝像機(jī)100，但圖像監(jiān)控系統(tǒng)可包括更多的監(jiān)視攝像機(jī)100，這些監(jiān)視攝像機(jī)100從輸入圖像分析一個(gè)或多個(gè)圖像和/或聲源以確定是否存在異常圖像、是否存在異常聲源或者是否存在異常圖像和聲源，以便產(chǎn)生元數(shù)據(jù)和報(bào)警信息。聲源可包括在監(jiān)視攝像機(jī)100所捕捉的圖像中或者從監(jiān)視攝像機(jī)100所捕捉的圖像獲得，或者可通過麥克風(fēng)200被直接輸入到監(jiān)視攝像機(jī)100。將參照?qǐng)D2詳細(xì)描述監(jiān)視攝像機(jī)100。
[0033]圖像記錄設(shè)備300從監(jiān)視攝像機(jī)100接收?qǐng)D像、元數(shù)據(jù)和報(bào)警信息，存儲(chǔ)圖像、元數(shù)據(jù)和報(bào)警信息，并執(zhí)行報(bào)警信息的顯示處理。報(bào)警信息的顯示處理是指對(duì)顯示在顯示設(shè)備400上的圖像或元數(shù)據(jù)執(zhí)行的諸如閃爍或高亮的處理。如上所述，根據(jù)監(jiān)視攝像機(jī)100的類型，圖像記錄設(shè)備300可以是DVR或NVR。
[0034]顯示設(shè)備400顯示從圖像記錄設(shè)備300輸出的圖像、元數(shù)據(jù)和處理的報(bào)警信息。顯示設(shè)備400可根據(jù)監(jiān)視攝像機(jī)100的數(shù)量劃分屏幕，并通過圖像記錄設(shè)備300顯示由每個(gè)監(jiān)視攝像機(jī)100分別捕捉的圖像。
[0035]圖2是示出圖1的監(jiān)視攝像機(jī)100的詳細(xì)結(jié)構(gòu)的框圖。參照?qǐng)D2，監(jiān)視攝像機(jī)100包括圖像傳感器110、圖像分析器120、聲源分析器130、確定器140、元數(shù)據(jù)產(chǎn)生器150、報(bào)警信息產(chǎn)生器160、驅(qū)動(dòng)控制器170和跟蹤控制器180。
[0036]圖像傳感器110將從對(duì)象反射并穿過監(jiān)視攝像機(jī)100的鏡頭(未示出)的光信號(hào)轉(zhuǎn)換為電信號(hào)(圖像信號(hào))，并輸出該電信號(hào)。圖像傳感器110還可以是互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)模塊或電荷耦合器件(CCD)模塊。
[0037]可對(duì)從圖像傳感器110輸出的圖像執(zhí)行圖像處理。圖像處理可由圖像分析器120或另一模塊來執(zhí)行。在本示例性實(shí)施例中，為了描述方便，圖像處理將被描述為由圖像分析器120執(zhí)行。
[0038]圖像分析器120對(duì)從圖像傳感器120輸出的圖像信號(hào)進(jìn)行降噪，并且可執(zhí)行用于改善圖像質(zhì)量的圖像信號(hào)處理(例如，伽馬校正、濾色器陣列插值、顏色矩陣、色彩校正、色彩增強(qiáng)等)。圖像分析器120還可在功能上對(duì)從圖像傳感器110輸出的圖像信號(hào)執(zhí)行顏色處理、模糊處理、邊緣增強(qiáng)處理、圖像分析處理、圖像識(shí)別處理、圖像效果處理等。圖像分析器120可通過圖像識(shí)別處理執(zhí)行臉部識(shí)別、場(chǎng)景識(shí)別等。例如，圖像分析器120可執(zhí)行亮度級(jí)調(diào)整、顏色校正、對(duì)比度調(diào)整、輪廓加強(qiáng)(contour emphasis)調(diào)整、屏幕劃分處理、人物圖像產(chǎn)生、圖像合成處理等。
[0039]另外，圖像分析器120對(duì)從圖像傳感器110輸出的圖像信號(hào)執(zhí)行圖像分析，如果分析結(jié)果滿足預(yù)設(shè)事件產(chǎn)生條件，則產(chǎn)生事件。根據(jù)示例性實(shí)施例，圖像分析是指跟蹤以檢測(cè)屏幕中的對(duì)象的消失或出現(xiàn)、與用戶所輸入的特定圖像相似的對(duì)象的圖像跟蹤、感測(cè)對(duì)象的運(yùn)動(dòng)、畫面黑屏等，并且如果圖像分析結(jié)果滿足預(yù)設(shè)產(chǎn)生條件，則檢測(cè)異常圖像以產(chǎn)生事件。
[0040]聲源分析器130分析聲源，其中，所述聲源包括在監(jiān)視攝像機(jī)100所輸出的圖像信號(hào)中或者從監(jiān)視攝像機(jī)100所輸出的圖像信號(hào)獲得，或者通過麥克風(fēng)200被直接輸入，并且如果分析結(jié)果滿足事件產(chǎn)生條件，則產(chǎn)生事件。在這種情況下，聲源分析對(duì)具有大于或等于用戶所指定的閾值的大小的聲源或者由用戶指定產(chǎn)生事件的聲源進(jìn)行分析。另外，數(shù)據(jù)庫(DB)中可包括若干類型的異常聲源，可將分析的聲源與存儲(chǔ)在DB中的聲源進(jìn)行比較，如果分析的聲源對(duì)應(yīng)于存儲(chǔ)的聲源，則可產(chǎn)生事件。
[0041]圖像分析中所使用的事件產(chǎn)生條件對(duì)應(yīng)于出現(xiàn)對(duì)象、產(chǎn)生用戶所指定的圖像(例如，出現(xiàn)無法識(shí)別的臉)、屏幕顏色改變、設(shè)置區(qū)域發(fā)生運(yùn)動(dòng)等，并且可被預(yù)設(shè)。聲源分析中所使用的事件產(chǎn)生條件對(duì)應(yīng)于產(chǎn)生異常聲音(汽車輪胎的摩擦聲(打滑)、玻璃破損聲、警報(bào)聲、碰撞聲等)、產(chǎn)生用戶所指定的聲音(例如，男人的尖叫聲、女人的尖叫聲、嬰兒的哭聲等)、產(chǎn)生振幅高于或等于閾值的聲音等，并且可被預(yù)設(shè)。
[0042]確定器140可根據(jù)圖像分析結(jié)果和/或聲源分析結(jié)果確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)存在異常圖像和異常聲源。這里，異常圖像和異常聲源可被預(yù)先定義。具體地講，如果確定同時(shí)存在異常圖像和異常聲源，則確定器140確定異常聲源是從異常圖像獲得還是從異常圖像的之外獲得。另外，如果異常聲源是從異常圖像獲得的，則確定器140確定異常圖像和異常聲源是否指示同一事件。確定器140如上所述執(zhí)行多次確定，因?yàn)楫a(chǎn)生的元數(shù)據(jù)的結(jié)果根據(jù)確定器140的確定結(jié)果而變化。
[0043]元數(shù)據(jù)產(chǎn)生器150參考確定器140的確定結(jié)果產(chǎn)生關(guān)于異常圖像的元數(shù)據(jù)、關(guān)于異常聲源的元數(shù)據(jù)以及關(guān)于異常圖像和異常聲源的元數(shù)據(jù)。元數(shù)據(jù)是指提供關(guān)于原始數(shù)據(jù)(圖像、聲源或者圖像和聲源)的信息的數(shù)據(jù)并描述另一數(shù)據(jù)。在本示例性實(shí)施例中，元數(shù)據(jù)產(chǎn)生器150參考確定器140的確定結(jié)果產(chǎn)生元數(shù)據(jù)，其中，元數(shù)據(jù)包括產(chǎn)生異常圖像和/或異常聲源的次數(shù)、異常圖像和/或異常聲源的分析結(jié)果和類型、由異常圖像和/或異常聲源指示的產(chǎn)生的事件的數(shù)量、異常聲源是否從異常圖像獲得、以及異常圖像和異常聲源是否指示同一事件。
[0044]圖3A和圖3B是示出根據(jù)示例性實(shí)施例的由元數(shù)據(jù)產(chǎn)生器150產(chǎn)生的元數(shù)據(jù)的示圖。
[0045]參照?qǐng)D3A，元數(shù)據(jù)被分成這些項(xiàng):產(chǎn)生時(shí)間、異常聲源類型、異常圖像類型、交叉檢查、事件產(chǎn)生的次數(shù)和多重檢測(cè)。多重檢測(cè)項(xiàng)指示對(duì)于異常聲源是否從異常圖像獲得的確定結(jié)果。具體地講，多重檢測(cè)項(xiàng)指示對(duì)于識(shí)別異常聲源產(chǎn)生的位置并且識(shí)別的位置是否從異常圖像獲得的確定結(jié)果。交叉檢查項(xiàng)指示對(duì)于異常圖像和異常聲源是否指示同一事件的確定結(jié)果。換言之，交叉檢查項(xiàng)指示對(duì)于異常圖像和異常聲源是不是相同類型的事件的確定結(jié)果。
[0046]圖3B示出根據(jù)示例性實(shí)施例的圖2的確定器140參考異常圖像和異常聲源執(zhí)行交叉檢查的處理。參照?qǐng)D3B，異常聲源的類型和異常圖像的類型沒有被確定為一種類型，可各自包括多個(gè)候選，并且還包括各個(gè)候選的準(zhǔn)確度。例如，圖3B所示的第一元數(shù)據(jù)指示異常聲源對(duì)應(yīng)于碰撞的概率為55%,異常聲源對(duì)應(yīng)于爆炸的概率為40%,異常聲源對(duì)應(yīng)于男人的尖叫的概率為10%。另外，圖3B所示的第一元數(shù)據(jù)指示異常圖像對(duì)應(yīng)于爆炸的概率為95%，異常圖像對(duì)應(yīng)于碰撞的概率為5%。從這些分析結(jié)果獲得的交叉檢查結(jié)果可指示爆炸。
[0047]如果異常聲源的類型和異常圖像的類型被示出為各種候選，并且候選包括準(zhǔn)確度，則可參考異常聲源和異常圖像的類型的候選以及候選的準(zhǔn)確度來執(zhí)行交叉檢查。例如，參考圖3B所示的第一元數(shù)據(jù)，異常聲源為碰撞的概率和異常圖像為爆炸的概率最高，因此，異常聲源和異常圖像的類型彼此不對(duì)應(yīng)。然而，如果異常聲源為爆炸的概率(40%)與異常圖像為爆炸的概率(95% )之和超過預(yù)設(shè)閾值(例如，130% )，則交叉檢查的結(jié)果可被確定為爆炸。例如，參考圖3B所示的第二元數(shù)據(jù)，如果異常聲源為男人的尖叫的概率(70% )、異常聲源為女人的尖叫的概率(30% )和異常圖像為暴力事件的概率(80% )之和超過預(yù)設(shè)閾值，則交叉檢查的結(jié)果可被確定為暴力事件。在這種情況下，男人的尖叫和女人的尖叫可被視為相同類型的事件，以便對(duì)準(zhǔn)確度求和，獲取最大值，或者獲取平均值以便使用準(zhǔn)確度的值。
[0048]利用候選的準(zhǔn)確度執(zhí)行交叉檢查的詳細(xì)方法不限于上述方法，可使用其它各種方法。
[0049]如果確定器140確定異常聲源是從異常圖像獲得的，并且異常圖像和異常聲源指示同一事件，則元數(shù)據(jù)產(chǎn)生器150從產(chǎn)生的元數(shù)據(jù)減去產(chǎn)生的事件的數(shù)量。參照?qǐng)D3A的標(biāo)號(hào)310，由于各種類型的異常聲源和異常圖像指示同一事件，所以從元數(shù)據(jù)減去產(chǎn)生的事件的數(shù)量。即，事件數(shù)從二變?yōu)橐?。參照?qǐng)D3A的標(biāo)號(hào)320，由于各種類型的異常聲源和異常圖像指示不同的事件，所以維持產(chǎn)生的事件的數(shù)量。
[0050]然而，如果確定器140確定異常圖像和異常聲源被不同地獲得，異常聲源是從異常圖像之外獲得的，異常聲源和異常圖像指示不同的事件，則元數(shù)據(jù)產(chǎn)生器150產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0051]報(bào)警信息產(chǎn)生器160參考確定器140的確定結(jié)果和產(chǎn)生的元數(shù)據(jù)，產(chǎn)生關(guān)于異常圖像和/或異常聲源的報(bào)警信息。報(bào)警信息產(chǎn)生器160可產(chǎn)生關(guān)于存在較大量的事件的異常圖像和/或異常聲源的報(bào)警信息或者關(guān)于特定異常圖像(例如，碰撞等)或特定異常聲源(例如，女人的尖叫等)的報(bào)警信息。
[0052]驅(qū)動(dòng)控制器170控制監(jiān)視攝像機(jī)100的驅(qū)動(dòng)。例如，驅(qū)動(dòng)控制器170控制監(jiān)視攝像機(jī)100的搖攝、俯仰和變焦操作等。如果監(jiān)視攝像機(jī)為固定攝像機(jī)，則可省略驅(qū)動(dòng)控制器170。
[0053]跟蹤控制器180參考確定器140的確定結(jié)果將跟蹤控制信號(hào)輸出給驅(qū)動(dòng)控制器170。根據(jù)跟蹤控制器180的跟蹤控制信號(hào)驅(qū)動(dòng)監(jiān)視攝像機(jī)100以跟蹤目標(biāo)。例如，如果監(jiān)視攝像機(jī)100是變焦攝像機(jī)，并且根據(jù)確定器140的多重檢測(cè)確定結(jié)果，異常聲源存在于異常圖像之外，則跟蹤控制器180可向驅(qū)動(dòng)控制器170輸出控制信號(hào)以使監(jiān)視攝像機(jī)100能夠?qū)㈢R頭拉遠(yuǎn)然后捕捉更寬的區(qū)域。
[0054]根據(jù)另一示例性實(shí)施例，如果監(jiān)視攝像機(jī)100是PTZ攝像機(jī)，并且根據(jù)確定器140的多重檢測(cè)確定結(jié)果，異常聲源存在于異常圖像之外，則跟蹤控制器180可向驅(qū)動(dòng)控制器170輸出控制信號(hào)以跟蹤產(chǎn)生異常聲源的位置。如果同時(shí)產(chǎn)生多個(gè)異常聲源，則可參考各個(gè)異常聲源的元數(shù)據(jù)根據(jù)優(yōu)先級(jí)來執(zhí)行跟蹤。例如，如果多個(gè)事件同時(shí)發(fā)生，則可根據(jù)事件的類型和優(yōu)先級(jí)來執(zhí)行跟蹤。
[0055]作為跟蹤結(jié)果，圖像和數(shù)據(jù)可顯示在顯示設(shè)備400上或者可存儲(chǔ)在附加存儲(chǔ)裝置中。如果監(jiān)視攝像機(jī)100是固定攝像機(jī)，則可不執(zhí)行跟蹤和驅(qū)動(dòng)控制。
[0056]由監(jiān)視攝像機(jī)100產(chǎn)生的圖像、元數(shù)據(jù)和報(bào)警信息通過圖像記錄設(shè)備300顯示在顯示設(shè)備400上。在這種情況下，圖像記錄設(shè)備300執(zhí)行用于顯示報(bào)警信息的處理。
[0057]如上所述，可通過圖像和/或聲源分析產(chǎn)生、存儲(chǔ)并顯示關(guān)于異常情況的元數(shù)據(jù)，以提高監(jiān)控效率?？蓹z查在監(jiān)視攝像機(jī)100的盲區(qū)中發(fā)生的異常情況，并且根據(jù)元數(shù)據(jù)的產(chǎn)生，異常情況的后續(xù)搜查可變得容易。另外，當(dāng)產(chǎn)生元數(shù)據(jù)時(shí)，可確定異常聲源是否從異常圖像獲得以及異常圖像和異常聲源是否指示同一事件以降低重復(fù)報(bào)警或錯(cuò)誤報(bào)警。
[0058]圖4是根據(jù)示例性實(shí)施例的操作圖像監(jiān)控系統(tǒng)的方法的流程圖。在以下描述中，省略與圖1至圖3的描述重復(fù)的部分的描述。
[0059]參照?qǐng)D4，在操作S410中，監(jiān)視攝像機(jī)100根據(jù)對(duì)輸入圖像和/或通過麥克風(fēng)200輸入的聲源的分析，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)存在異常圖像和異常聲源。
[0060]如果在操作S420中確定異常圖像和異常聲源不同時(shí)存在，則監(jiān)視攝像機(jī)100在操作S430中產(chǎn)生異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0061]然而，如果在操作S420中確定異常圖像和異常聲源同時(shí)存在，則監(jiān)視攝像機(jī)100在操作S440中確定異常聲源是否存在于異常圖像中。
[0062]如果在操作S440中確定異常聲源存在于異常圖像之外，則監(jiān)視攝像機(jī)100在操作S430中產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0063]然而，如果在操作S440中確定異常聲源存在于異常圖像中，則監(jiān)視攝像機(jī)100在操作S450中確定異常圖像和異常聲源是否在同一事件中產(chǎn)生。
[0064]如果在操作S450中確定異常圖像和異常聲源在不同的事件中產(chǎn)生，則監(jiān)視攝像機(jī)100在操作S430中產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
[0065]如果在操作S450中確定異常圖像和異常聲源在同一事件中產(chǎn)生，則在操作S460中監(jiān)視攝像機(jī)100在產(chǎn)生元數(shù)據(jù)時(shí)減去產(chǎn)生的事件的數(shù)量。
[0066]如果元數(shù)據(jù)被完全產(chǎn)生，則在操作S470中監(jiān)視攝像機(jī)100參考確定結(jié)果和元數(shù)據(jù)產(chǎn)生報(bào)警信息。
[0067]在操作S480中，圖像記錄設(shè)備300從監(jiān)視攝像機(jī)100接收?qǐng)D像、元數(shù)據(jù)和報(bào)警信息，存儲(chǔ)圖像、元數(shù)據(jù)和報(bào)警信息，執(zhí)行用于顯示報(bào)警信息的處理，并將報(bào)警信息顯示在顯示設(shè)備400上。
[0068]如上所述，根據(jù)上述實(shí)施例中的一個(gè)或更多個(gè)實(shí)施例，可通過圖像和/或聲源的分析產(chǎn)生、存儲(chǔ)并顯示關(guān)于異常情況的元數(shù)據(jù)，以提高監(jiān)控效率。另外，可檢查在攝像機(jī)的盲區(qū)中發(fā)生的異常情況，并且根據(jù)元數(shù)據(jù)的產(chǎn)生，異常情況的后續(xù)搜查可變得容易。另外，可確定異常聲源是否存在于異常圖像中以及異常圖像和異常聲源是否在同一事件中產(chǎn)生，以降低重復(fù)報(bào)警或錯(cuò)誤報(bào)警。
[0069]應(yīng)該理解，本文所述的示例性實(shí)施例應(yīng)該被認(rèn)為僅是描述性意義，而不是為了限制的目的。每個(gè)實(shí)施例內(nèi)的特征或方面的描述通常應(yīng)該被認(rèn)為可用于其它實(shí)施例中的其它相似特征或方面。
[0070]盡管參照附圖描述了一個(gè)或更多個(gè)實(shí)施例，本領(lǐng)域普通技術(shù)人員將理解，在不脫離由以下權(quán)利要求限定的精神和范圍的情況下，可進(jìn)行形式和細(xì)節(jié)上的各種改變。
【權(quán)利要求】
1.一種監(jiān)視攝像機(jī)，包括: 圖像分析器，被配置為分析輸入圖像； 聲源分析器，被配置為分析所述圖像中的聲源或者單獨(dú)輸入的聲源； 確定器，被配置為根據(jù)圖像分析和聲源分析的結(jié)果，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源； 元數(shù)據(jù)產(chǎn)生器，被配置為基于確定的結(jié)果產(chǎn)生元數(shù)據(jù)； 報(bào)警信息產(chǎn)生器，被配置為基于確定的結(jié)果和產(chǎn)生的元數(shù)據(jù)來產(chǎn)生報(bào)警信息， 其中，異常圖像和異常聲源被預(yù)先定義。
2.根據(jù)權(quán)利要求1所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源，則確定器進(jìn)一步確定異常聲源是從異常圖像輸入還是從異常圖像之外輸入。
3.根據(jù)權(quán)利要求2所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像之外獲得，則元數(shù)據(jù)產(chǎn)生器產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
4.根據(jù)權(quán)利要求2所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像獲得，則確定器進(jìn)一步確定異常圖像和異常聲源是否指示同一事件。
5.根據(jù)權(quán)利要求1所述的監(jiān)視攝像機(jī)，其中， 元數(shù)據(jù)產(chǎn)生器參考確定器的確定結(jié)果產(chǎn)生包括以下項(xiàng)的元數(shù)據(jù):異常圖像和異常聲源分別被獲得的時(shí)間、異常圖像的類型和異常聲源的類型、由異常圖像和異常聲源指示的事件的數(shù)量、異常聲源是從異常圖像獲得還是從異常圖像之外獲得、以及異常圖像和異常聲源是否指示同一事件； 報(bào)警信息產(chǎn)生器參考確定器的確定結(jié)果和所述元數(shù)據(jù)，產(chǎn)生關(guān)于異常圖像和異常聲源的報(bào)警信息。
6.根據(jù)權(quán)利要求5所述的監(jiān)視攝像機(jī)，其中，異常聲源的類型和異常圖像的類型各自包括多個(gè)候選以及關(guān)于候選的準(zhǔn)確度信息，并且 其中，確定器參考與異常圖像的類型和異常聲源的類型對(duì)應(yīng)的所述多個(gè)候選以及所述準(zhǔn)確度信息，確定異常圖像和異常聲源是否指示同一事件。
7.根據(jù)權(quán)利要求6所述的監(jiān)視攝像機(jī)，其中，如果確定器確定異常圖像的類型對(duì)應(yīng)于預(yù)設(shè)事件的概率和異常聲源的類型對(duì)應(yīng)于所述預(yù)設(shè)事件的概率之和超過預(yù)設(shè)閾值，則確定器進(jìn)一步確定異常圖像和異常聲源指示所述預(yù)設(shè)事件。
8.根據(jù)權(quán)利要求5所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源，則確定器進(jìn)一步確定異常聲源是從異常圖像獲得還是從異常圖像之外獲得。
9.根據(jù)權(quán)利要求8所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像之外獲得，則元數(shù)據(jù)產(chǎn)生器產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
10.根據(jù)權(quán)利要求8所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像獲得，則確定器進(jìn)一步確定異常圖像和異常聲源是否指示同一事件，如果確定器確定異常圖像和異常聲源指示同一事件，則元數(shù)據(jù)產(chǎn)生器從元數(shù)據(jù)減少由異常圖像和異常聲源指示的事件的數(shù)量。
11.根據(jù)權(quán)利要求10所述的監(jiān)視攝像機(jī)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源，異常聲源從異常圖像獲得，并且異常聲源和異常圖像指示不同的事件，則元數(shù)據(jù)產(chǎn)生器產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
12.—種監(jiān)控系統(tǒng)，包括: 根據(jù)權(quán)利要求1所述的監(jiān)視攝像機(jī)； 圖像記錄設(shè)備，被配置為從所述攝像機(jī)接收?qǐng)D像、元數(shù)據(jù)和報(bào)警信息，存儲(chǔ)圖像、元數(shù)據(jù)和報(bào)警信息，并執(zhí)行用于顯示報(bào)警信息的處理； 顯示設(shè)備，被配置為顯示圖像、元數(shù)據(jù)和報(bào)警信息。
13.根據(jù)權(quán)利要求12所述的監(jiān)控系統(tǒng)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源，則確定器進(jìn)一步確定異常聲源是從異常圖像輸入還是從異常圖像之外輸入。
14.根據(jù)權(quán)利要求13所述的監(jiān)控系統(tǒng)， 其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源是從異常圖像之外獲得，則元數(shù)據(jù)產(chǎn)生器產(chǎn)生關(guān)于異常圖像和異常聲源中的每一個(gè)的元數(shù)據(jù)。
15.根據(jù)權(quán)利要求13所述的監(jiān)控系統(tǒng)，其中，如果確定器確定同時(shí)獲得異常圖像和異常聲源并且異常聲源從異常圖像獲得，則確定器進(jìn)一步確定異常圖像和異常聲源是否指示同一事件。
16.一種控制監(jiān)視攝像機(jī)的方法，所述方法包括: 分析輸入圖像； 分析所述圖像中的聲源或者單獨(dú)輸入的聲源； 根據(jù)圖像分析和聲源分析的結(jié)果，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源； 基于確定的結(jié)果，產(chǎn)生元數(shù)據(jù)； 基于確定的結(jié)果和產(chǎn)生的元數(shù)據(jù)來產(chǎn)生報(bào)警信息， 其中，異常圖像和異常聲源被預(yù)先定義。
17.根據(jù)權(quán)利要求16所述的方法，其中，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源的步驟還包括確定異常聲源是從異常圖像獲得還是從異常圖像之外獲得。
18.根據(jù)權(quán)利要求17所述的方法，其中，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源的步驟還包括確定異常圖像和異常聲源是否指示同一事件。
19.根據(jù)權(quán)利要求16所述的方法，其中，元數(shù)據(jù)包括異常圖像和異常聲源分別被獲得的時(shí)間、異常圖像的類型和異常聲源的類型、由異常圖像和異常聲源指示的事件的數(shù)量、異常聲源是從異常圖像獲得還是從異常圖像之外獲得、以及異常圖像和異常聲源是否指示同一事件。
20.根據(jù)權(quán)利要求19所述的方法，其中，異常聲源的類型和異常圖像的類型各自包括多個(gè)候選以及關(guān)于候選的準(zhǔn)確度信息，并且 其中，確定是否存在異常圖像、是否存在異常聲源、或者是否同時(shí)獲得異常圖像和異常聲源的步驟還包括參考與異常圖像的類型和異常聲源的類型對(duì)應(yīng)的所述多個(gè)候選以及所述準(zhǔn)確度信息確定異常圖像和異常聲源是否指示同一事件。
【文檔編號(hào)】H04N7/18GK104519318SQ201410508503
【公開日】2015年4月15日 申請(qǐng)日期:2014年9月28日 優(yōu)先權(quán)日:2013年9月27日
【發(fā)明者】慎東學(xué), 全基湧 申請(qǐng)人:三星泰科威株式會(huì)社