專(zhuān)利名稱：監(jiān)視系統(tǒng)和監(jiān)視攝像機(jī)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及的是，確保有大量人員出入的機(jī)場(chǎng)、銀行、寫(xiě)字樓、公寓等設(shè)施的安全的監(jiān)視系統(tǒng)及適用于該監(jiān)視系統(tǒng)的監(jiān)視攝像機(jī)。
背景技術(shù)：
目前，在有大量人員出入的機(jī)場(chǎng)、銀行、寫(xiě)字樓、公寓等設(shè)施中為了確保安全，使用了監(jiān)視系統(tǒng)，通過(guò)監(jiān)視攝像機(jī)拍攝的攝影圖像來(lái)監(jiān)視可疑分子等的出入?，F(xiàn)有監(jiān)視系統(tǒng)，將設(shè)施的出入口和設(shè)施內(nèi)的主要場(chǎng)所等作為監(jiān)視區(qū)域，并在各個(gè)監(jiān)視區(qū)域設(shè)置監(jiān)視攝像機(jī)。此外，在警衛(wèi)室等設(shè)置主機(jī)裝置，并能利用該主機(jī)裝置確認(rèn)各監(jiān)視區(qū)域的攝影圖像。具體講，通過(guò)LAN或IP網(wǎng)絡(luò)等將監(jiān)視攝像機(jī)與主機(jī)裝置連接。監(jiān)視攝像機(jī)基本實(shí)時(shí)地將拍攝到的監(jiān)視區(qū)域的攝影圖像發(fā)送給主機(jī)裝置。從監(jiān)視攝像機(jī)發(fā)送給主機(jī)裝置的攝影圖像是運(yùn)動(dòng)圖像。主機(jī)裝置，對(duì)各個(gè)監(jiān)視攝像機(jī)發(fā)送來(lái)的監(jiān)視區(qū)域的攝影圖像(運(yùn)動(dòng)圖像)進(jìn)行保存。
此外，通過(guò)在主機(jī)裝置中設(shè)置如下的面部比對(duì)功能，即當(dāng)監(jiān)視攝像機(jī)發(fā)送來(lái)的監(jiān)視區(qū)域的攝影圖像中拍到人物時(shí)、將該人物的面部圖像抽出并與預(yù)先登記在冊(cè)人員的面部圖像進(jìn)行對(duì)比來(lái)判定其是否為在冊(cè)人員，由此使強(qiáng)化了安全性的監(jiān)視攝像機(jī)得到實(shí)際應(yīng)用。在冊(cè)人員，可根據(jù)監(jiān)視攝像機(jī)的用途來(lái)設(shè)定。例如，如果利用監(jiān)視系統(tǒng)的設(shè)施是寫(xiě)字樓或公寓等的情況下，可將準(zhǔn)許出入設(shè)施內(nèi)的人物設(shè)為在冊(cè)人員，此外如果是機(jī)場(chǎng)和銀行等的情況下，可將通緝的人物(罪犯)設(shè)為在冊(cè)人員。主機(jī)裝置，輸出面部比對(duì)的結(jié)果。例如，當(dāng)面部比對(duì)的人物是不準(zhǔn)許出入設(shè)施內(nèi)的人物時(shí)、或者是被通緝的罪犯時(shí)發(fā)出警報(bào)等，將該情況通知給保安人員。這樣，保安人員等能夠?qū)梢煞肿友杆僮鞒龇磻?yīng)，從而能夠提高安全性。
此外，現(xiàn)有的監(jiān)視系統(tǒng)中，提出的方案有檢測(cè)出在攝影圖像中是否有人物被拍到，如果有人物被拍到，則通過(guò)將該攝影圖像記錄到存儲(chǔ)介質(zhì)中(參照專(zhuān)利文獻(xiàn)1)、或?qū)⒈尘皥D像的基準(zhǔn)畫(huà)面與攝影圖像間的差值圖像壓縮保存(參照專(zhuān)利文獻(xiàn)2)，則可毫無(wú)遺漏地記錄監(jiān)視攝像機(jī)拍攝到的人物圖像，并可控制記錄攝影圖像所需要的存儲(chǔ)介質(zhì)的記錄容量。
專(zhuān)利文獻(xiàn)1特開(kāi)2000-115389號(hào)公報(bào)專(zhuān)利文獻(xiàn)2特開(kāi)2000-13742號(hào)公報(bào)然而，在作為上位裝置的主機(jī)裝置上連接有多個(gè)監(jiān)視攝像機(jī)的監(jiān)視系統(tǒng)中，由于各監(jiān)視攝像機(jī)是實(shí)時(shí)地以運(yùn)動(dòng)圖像的方式向主機(jī)裝置發(fā)送監(jiān)視區(qū)域的攝影圖像，因此連接監(jiān)視攝像機(jī)和主機(jī)裝置的網(wǎng)絡(luò)的流量很大。因此，從監(jiān)視攝像機(jī)送到主機(jī)裝置來(lái)的監(jiān)視區(qū)域的攝影圖像很可能發(fā)生延遲或丟失。若從監(jiān)視攝像機(jī)送到主機(jī)裝置來(lái)的監(jiān)視區(qū)域的攝影圖像發(fā)生延遲或丟失時(shí)，產(chǎn)生的問(wèn)題就是，主機(jī)裝置無(wú)法正確地監(jiān)視監(jiān)視區(qū)域，從而導(dǎo)致安全性降低。
另一方面，雖然通過(guò)將從監(jiān)視攝像機(jī)送到主機(jī)裝置來(lái)的監(jiān)視區(qū)域的攝影圖像轉(zhuǎn)換成粗糙的圖像、再壓縮發(fā)送，能夠控制流量增大從而解決上述問(wèn)題，但是，由于該方法中從監(jiān)視攝像機(jī)送到主機(jī)裝置來(lái)的監(jiān)視區(qū)域的攝影圖像較粗糙，因此從該攝影圖像中抽出的人物的面部圖像無(wú)法正確進(jìn)行面部比對(duì)，結(jié)果就是無(wú)法防止安全性的降低。
本發(fā)明的目的在于，提供一種監(jiān)視系統(tǒng)及適用于該監(jiān)視系統(tǒng)的監(jiān)視攝像機(jī)，即使上位裝置上連接著許多監(jiān)視攝像機(jī)，在上位裝置中也能夠正確地監(jiān)視監(jiān)視區(qū)域，并防止安全性降低。

發(fā)明內(nèi)容
為解決上述課題，本發(fā)明的監(jiān)視系統(tǒng)具有以下結(jié)構(gòu)。
(1)具備具有對(duì)監(jiān)視區(qū)域進(jìn)行攝像的攝像模塊的監(jiān)視攝像機(jī)、和連接該監(jiān)視攝像機(jī)的上位裝置的監(jiān)視系統(tǒng)中，所述監(jiān)視攝像機(jī)，具備運(yùn)動(dòng)圖像存儲(chǔ)模塊，將所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像方式進(jìn)行存儲(chǔ)；面部圖像抽出模塊，若所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像中有人物被拍到，抽出該人物的面部圖像；以及，靜止圖像發(fā)送模塊，將所述面部圖像抽出模塊抽出的面部圖像以靜止圖像方式傳送給上位裝置，所述上位裝置，具備運(yùn)動(dòng)圖像請(qǐng)求模塊，對(duì)于從所述監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像而言，當(dāng)該面部圖像相關(guān)的運(yùn)動(dòng)圖像的取得請(qǐng)求被輸入時(shí)，請(qǐng)求所述監(jiān)視攝像機(jī)發(fā)送所述面部圖像相關(guān)的運(yùn)動(dòng)圖像，所述監(jiān)視攝像機(jī)還具備運(yùn)動(dòng)圖像發(fā)送模塊，響應(yīng)來(lái)自所述上位裝置的運(yùn)動(dòng)圖像的發(fā)送請(qǐng)求，將所述運(yùn)動(dòng)圖像存儲(chǔ)模塊中存儲(chǔ)的所述監(jiān)視區(qū)域的運(yùn)動(dòng)圖像，發(fā)送給該上位裝置。
在該結(jié)構(gòu)中，監(jiān)視攝像機(jī)將攝像模塊拍攝到的監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像方式存儲(chǔ)到運(yùn)動(dòng)圖像存儲(chǔ)模塊中。此外，當(dāng)監(jiān)視區(qū)域的攝像圖像中有人物被拍到時(shí)，監(jiān)視攝像機(jī)通過(guò)面部圖像抽出模塊，將該人物的面部圖像抽出，并將此處抽出的面部圖像，通過(guò)靜止圖像發(fā)送模塊，以靜止圖像方式，發(fā)送給上位裝置。
另一方面，上位裝置，對(duì)于從監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像而言，若該面部圖像相關(guān)的運(yùn)動(dòng)圖像取得請(qǐng)求被輸入后，向監(jiān)視攝像機(jī)請(qǐng)求該面部圖像相關(guān)的運(yùn)動(dòng)圖像的發(fā)送。監(jiān)視攝像機(jī)響應(yīng)來(lái)自上位裝置的請(qǐng)求，將存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)模塊中的監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像方式進(jìn)行發(fā)送。
這樣，由于監(jiān)視攝像機(jī)的結(jié)構(gòu)為，在監(jiān)視區(qū)域的攝像圖像中有人物被拍到時(shí)，基本實(shí)時(shí)地將該人物的面部圖像抽出，并將此處抽出的面部圖像以靜止圖像方式發(fā)送給上位裝置，因此不會(huì)將從監(jiān)視攝像機(jī)發(fā)送給上位裝置的面部圖像粗糙化，并能夠充分控制連接監(jiān)視攝像機(jī)和上位裝置的網(wǎng)絡(luò)的流量。從而，能夠防止在上位裝置上無(wú)法正確監(jiān)視監(jiān)視區(qū)域的情況發(fā)生，避免降低安全性。
此外，由于上位裝置中，對(duì)于從監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像，能夠根據(jù)需要取得該面部圖像相關(guān)的運(yùn)動(dòng)圖像，因此能夠以運(yùn)動(dòng)圖像方式確認(rèn)該人物通過(guò)監(jiān)視區(qū)域時(shí)的狀況。
(2)所述上位裝置，具備面部圖像存儲(chǔ)模塊，存儲(chǔ)在冊(cè)人員的面部圖像；以及，面部對(duì)比模塊，對(duì)從所述監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像、與存儲(chǔ)在所述面部圖像存儲(chǔ)模塊中的在冊(cè)人員的面部圖像進(jìn)行對(duì)比，并輸出其結(jié)果。
在該結(jié)構(gòu)中，由于上位裝置對(duì)從監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的人物的面部圖像、與在冊(cè)人員的面部圖像進(jìn)行對(duì)比，并輸出其結(jié)果，因此當(dāng)發(fā)現(xiàn)可疑分子等時(shí)，能夠立即將該情況通知給保安人員等，使保安人員等能夠迅速作出處理。
(3)所述上位裝置，具備面部圖像存儲(chǔ)模塊，存儲(chǔ)從所述監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像；以及，顯示模塊，顯示所述面部圖像存儲(chǔ)模塊所存儲(chǔ)的面部圖像，所述運(yùn)動(dòng)圖像請(qǐng)求模塊，對(duì)于所述顯示模塊所顯示的面部圖像，受理運(yùn)動(dòng)圖像取得請(qǐng)求的輸入。
在該結(jié)構(gòu)中，上位裝置中，能夠?qū)谋O(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像存儲(chǔ)到面部圖像存儲(chǔ)模塊中，并在顯示模塊上顯示存儲(chǔ)的面部圖像。此外，對(duì)于顯示模塊所顯示的面部圖像，運(yùn)動(dòng)圖像請(qǐng)求模塊受理運(yùn)動(dòng)圖像的取得請(qǐng)求的輸入。由此，從監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的人物的面部圖像的確認(rèn)、和該人物通過(guò)監(jiān)視區(qū)域時(shí)的狀況的確認(rèn)，不僅僅可在面部圖像從監(jiān)視攝像機(jī)發(fā)送來(lái)的時(shí)刻進(jìn)行，根據(jù)需要任何時(shí)刻都可進(jìn)行。
(4)所述監(jiān)視攝像機(jī)具備時(shí)間戳附加模塊，對(duì)面部圖像抽出模塊抽出的面部圖像，附加表示抽出該面部圖像的圖像的攝像時(shí)間的時(shí)間戳，所述靜止圖像發(fā)送模塊，將附加了所述時(shí)間戳的面部圖像發(fā)送給所述上位裝置。
在該結(jié)構(gòu)中，上位裝置能夠根據(jù)從監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像中所附加的時(shí)間戳，確認(rèn)拍攝抽出該面部圖像的圖像的時(shí)間。
(5)所述上位裝置的運(yùn)動(dòng)圖像請(qǐng)求模塊，在請(qǐng)求所述監(jiān)視攝像機(jī)發(fā)送面部圖像相關(guān)的運(yùn)動(dòng)圖像時(shí)，將附加在該面部圖像中的所述時(shí)間戳發(fā)送給所述監(jiān)視攝像機(jī)，所述監(jiān)視攝像機(jī)，將涵蓋來(lái)自所述上位裝置的運(yùn)動(dòng)圖像的發(fā)送請(qǐng)求中所包含的時(shí)間戳所表示的時(shí)間的給定時(shí)間量的運(yùn)動(dòng)圖像，發(fā)送給所述上位裝置。
在該結(jié)構(gòu)中，能夠控制從監(jiān)視攝像機(jī)送往上位裝置的運(yùn)動(dòng)圖像的量，能夠防止白白加大連接監(jiān)視攝像機(jī)和上位裝置的網(wǎng)絡(luò)的流量。此外，對(duì)于給定時(shí)間而言，可為以時(shí)間戳所表示的時(shí)間為中心、4～5s的運(yùn)動(dòng)圖像。
(6)在具備具有對(duì)監(jiān)視區(qū)域進(jìn)行攝像的攝像模塊的監(jiān)視攝像機(jī)、和連接該監(jiān)視攝像機(jī)的上位裝置的監(jiān)視系統(tǒng)中，所述監(jiān)視攝像機(jī)，具備運(yùn)動(dòng)圖像發(fā)送模塊，將所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像方式發(fā)送；面部圖像抽出模塊，若在所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像中有人物被拍到，抽出該人物的面部圖像；以及，靜止圖像存儲(chǔ)模塊，將所述面部圖像抽出模塊抽出的面部圖像以靜止圖像的方式存儲(chǔ)，所述運(yùn)動(dòng)圖像發(fā)送模塊，以比所述靜止圖像發(fā)送模塊發(fā)送的面部圖像粗糙的圖像發(fā)送運(yùn)動(dòng)圖像，另外，所述上位裝置具備運(yùn)動(dòng)圖像請(qǐng)求模塊，對(duì)于從所述監(jiān)視攝像機(jī)發(fā)送來(lái)的運(yùn)動(dòng)圖像中被拍攝的人物而言，當(dāng)面部圖像的取得請(qǐng)求被輸入時(shí)，請(qǐng)求所述監(jiān)視攝像機(jī)發(fā)送該人物的面部圖像，所述監(jiān)視攝像機(jī)，還具備靜止圖像發(fā)送模塊，響應(yīng)來(lái)自所述上位裝置的面部圖像的取得請(qǐng)求，向該上位裝置發(fā)送存儲(chǔ)在所述靜止圖像存儲(chǔ)模塊中的人物的面部圖像。
在該結(jié)構(gòu)中，監(jiān)視攝像機(jī)將通過(guò)攝像模塊拍攝到的監(jiān)視區(qū)域的攝像圖像、通過(guò)運(yùn)動(dòng)圖像發(fā)送模塊以粗糙圖像的方式發(fā)送給上位裝置。此外，監(jiān)視攝像機(jī)在監(jiān)視區(qū)域的攝像圖像中有人物被拍到時(shí)，通過(guò)面部圖像抽出模塊將該人物的面部圖像抽出，并將在此抽出的面部圖像存儲(chǔ)到靜止圖像存儲(chǔ)模塊中。
另一方面，上位裝置，當(dāng)對(duì)于從監(jiān)視攝像機(jī)發(fā)送來(lái)的運(yùn)動(dòng)圖像中所拍到的人物被輸入面部圖像的取得請(qǐng)求時(shí)，會(huì)向監(jiān)視攝像機(jī)請(qǐng)求該面部圖像的發(fā)送。監(jiān)視攝像機(jī)響應(yīng)來(lái)自上位裝置的請(qǐng)求，將存儲(chǔ)在靜止圖像存儲(chǔ)模塊中的面部圖像，以靜止圖像方式進(jìn)行發(fā)送。
這樣，由于監(jiān)視攝像機(jī)構(gòu)成為，將監(jiān)視區(qū)域的攝像圖像以粗糙圖像方式基本實(shí)時(shí)地發(fā)送給上位裝置發(fā)送，因此能夠充分控制連接監(jiān)視攝像機(jī)和上位裝置的網(wǎng)絡(luò)的流量。此外，對(duì)于從監(jiān)視攝像機(jī)發(fā)送到上位裝置的運(yùn)動(dòng)圖像，不但變?yōu)榇植趫D像，還通過(guò)進(jìn)行壓縮，能夠進(jìn)一步控制連接監(jiān)視攝像機(jī)和上位裝置的網(wǎng)絡(luò)的流量。此外，上位裝置，能夠根據(jù)需要從監(jiān)視攝像機(jī)取得在監(jiān)視攝像機(jī)發(fā)送來(lái)的運(yùn)動(dòng)圖像中拍攝到的人物的面部圖像(靜止圖像)，此外，由于該面部圖像不是像運(yùn)動(dòng)圖像那樣的粗糙圖像，因此，通過(guò)取得該面部圖像，能夠正確地對(duì)該人物進(jìn)行面部對(duì)比。因此，能夠防止在上位裝置上無(wú)法正確監(jiān)視監(jiān)視區(qū)域的情況，防止降低安全性。
利用本發(fā)明，能夠充分控制連接監(jiān)視攝像機(jī)和上位裝置的網(wǎng)絡(luò)的流量。從而能夠防止在上位裝置上無(wú)法正確監(jiān)視監(jiān)視區(qū)域的情況發(fā)生，避免降低安全性。


圖1是表示本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)的結(jié)構(gòu)的圖。
圖2是表示適用于本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)的監(jiān)視攝像機(jī)的結(jié)構(gòu)的圖。
圖3是表示適用于本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)的主機(jī)裝置的結(jié)構(gòu)的圖。
圖4是表示上述實(shí)施方式的監(jiān)視攝像機(jī)中的運(yùn)動(dòng)圖像處理的流程圖。
圖5是表示上述實(shí)施方式的監(jiān)視攝像機(jī)中的面部圖像發(fā)送處理的流程圖。
圖6是表示上述實(shí)施方式的主機(jī)裝置中的面部圖像接收處理的流程圖。
圖7是表示上述實(shí)施方式的主機(jī)裝置中的運(yùn)動(dòng)圖像取得處理的流程圖。
圖8是表示上述實(shí)施方式的監(jiān)視攝像機(jī)中的運(yùn)動(dòng)圖像發(fā)送處理的流程圖。
圖9是表示適用于本發(fā)明另一實(shí)施方式的監(jiān)視系統(tǒng)的監(jiān)視攝像機(jī)的結(jié)構(gòu)的圖。
圖10是表示適用于本發(fā)明另一實(shí)施方式的監(jiān)視系統(tǒng)的主機(jī)裝置的結(jié)構(gòu)的圖。
圖11是表示另一實(shí)施方式的監(jiān)視攝像機(jī)中的運(yùn)動(dòng)圖像發(fā)送處理的流程圖。
圖12是表示另一實(shí)施方式的監(jiān)視攝像機(jī)中的面部圖像存儲(chǔ)處理的流程圖。
圖13是表示另一實(shí)施方式的主機(jī)裝置中的運(yùn)動(dòng)圖像接收處理的流程圖。
圖14是表示另一實(shí)施方式的主機(jī)裝置中的面部圖像取得處理的流程圖。
圖15是表示另一實(shí)施方式的監(jiān)視攝像機(jī)中的面部圖像發(fā)送處理的流程圖。
圖中1-監(jiān)視攝像機(jī)，2-主機(jī)裝置，3-網(wǎng)絡(luò)，12-攝像部，13-FF模塊，14-圖像壓縮部，15-運(yùn)動(dòng)圖像存儲(chǔ)部，16-通信部，17-靜止圖像存儲(chǔ)部，22-在冊(cè)人員存儲(chǔ)部，23-通信部，24-面部對(duì)比部，25-圖像展開(kāi)部，26-顯示部，27-面部圖像存儲(chǔ)部，28-運(yùn)動(dòng)圖像存儲(chǔ)部具體實(shí)施方式
下面，對(duì)作為本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)進(jìn)行說(shuō)明。
圖1是表示作為本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)的結(jié)構(gòu)圖。該實(shí)施方式的監(jiān)視系統(tǒng)，通過(guò)網(wǎng)絡(luò)3將多個(gè)監(jiān)視攝像機(jī)1與主機(jī)裝置2連接。該監(jiān)視裝置用于對(duì)出入機(jī)場(chǎng)、銀行、寫(xiě)字樓、公寓等設(shè)施的人物或在設(shè)施內(nèi)通行的人物等進(jìn)行監(jiān)視，并確保安全。各個(gè)監(jiān)視區(qū)域都設(shè)置監(jiān)視攝像機(jī)1。監(jiān)視區(qū)域是設(shè)施的出入口或設(shè)施內(nèi)的主要場(chǎng)所等。主機(jī)裝置2設(shè)置在警衛(wèi)室等中，保安人員等能夠確認(rèn)監(jiān)視區(qū)域的狀況。網(wǎng)絡(luò)3，例如是LAN或IP網(wǎng)絡(luò)。
圖2是表示適用于本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)中的監(jiān)視攝像機(jī)的結(jié)構(gòu)的圖。監(jiān)視攝像機(jī)1包括控制部11，控制主體的動(dòng)作；攝像部12，對(duì)監(jiān)視區(qū)域進(jìn)行拍攝；人臉?biāo)褜つK13(Face Finding Module，以下簡(jiǎn)稱FF模塊13)，判定在攝像部12拍攝的監(jiān)視區(qū)域的攝影圖像中是否拍攝到人物，如果拍攝到人物，將拍到的人物的面部圖像以靜止圖像的方式抽出；圖像壓縮部14，將攝像部12拍攝的監(jiān)視區(qū)域的攝影圖像作為運(yùn)動(dòng)圖像獲取，并將其壓縮；運(yùn)動(dòng)圖像存儲(chǔ)部15，存儲(chǔ)由圖像壓縮部14壓縮的運(yùn)動(dòng)圖像；以及，通信部16，通過(guò)網(wǎng)絡(luò)3與主機(jī)裝置2之間進(jìn)行通信。
攝像部12，具有CDD作為攝像傳感器。攝像部12拍攝的監(jiān)視區(qū)域的攝影圖像，被輸入到FF模塊13和圖像壓縮部14。FF模塊13和圖像壓縮部14，以預(yù)定的時(shí)間間隔、例如間隔0.3s，取入輸入的攝影圖像。關(guān)于FF模塊13和圖像壓縮部14取入攝影圖像的時(shí)間間隔，既可以相同也可以不同。FF模塊13，具有對(duì)取入的攝影圖像中是否有人物被拍到進(jìn)行判定的功能、和當(dāng)有人物被拍到時(shí)抽出人物面部圖像的功能。此FF模塊13，相當(dāng)于本發(fā)明所說(shuō)的面部圖像抽出模塊。FF模塊13從攝影圖像中所抽出的面部圖像(靜止圖像)，基本實(shí)時(shí)地被通過(guò)網(wǎng)絡(luò)3從通信部16發(fā)送給主機(jī)裝置2。送往主機(jī)裝置2的面部圖像中，附加有表示攝影時(shí)間的時(shí)間戳。有關(guān)該時(shí)間戳的詳細(xì)內(nèi)容在以后描述。此外，圖像壓縮部14將作為運(yùn)動(dòng)圖像獲取的監(jiān)視區(qū)域的攝影圖像，以MPEG4等方式進(jìn)行壓縮。運(yùn)動(dòng)圖像存儲(chǔ)部15，對(duì)該壓縮的監(jiān)視區(qū)域的運(yùn)動(dòng)圖像進(jìn)行存儲(chǔ)。在運(yùn)動(dòng)圖像存儲(chǔ)部15所存儲(chǔ)的運(yùn)動(dòng)圖像中，也以適當(dāng)?shù)拈g隔附加表示攝影時(shí)間的時(shí)間戳，能夠判斷運(yùn)動(dòng)圖像存儲(chǔ)部15所存儲(chǔ)的運(yùn)動(dòng)圖像的攝影時(shí)間。監(jiān)視攝像機(jī)1響應(yīng)來(lái)自主機(jī)裝置2的請(qǐng)求，將存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部15的運(yùn)動(dòng)圖像發(fā)送給主機(jī)裝置2。運(yùn)動(dòng)圖像存儲(chǔ)部15，具有例如硬盤(pán)作為存儲(chǔ)介質(zhì)。
接下來(lái)，對(duì)適用于該監(jiān)視系統(tǒng)的主機(jī)裝置2的結(jié)構(gòu)進(jìn)行說(shuō)明。圖3是表示適用于作為本發(fā)明實(shí)施方式的監(jiān)視系統(tǒng)中的主機(jī)裝置的結(jié)構(gòu)的圖。主機(jī)裝置2，具備控制部21，控制主體的動(dòng)作；在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22，存儲(chǔ)各個(gè)在冊(cè)人員的面部圖像；通信部23，通過(guò)網(wǎng)絡(luò)3與監(jiān)視攝像機(jī)1進(jìn)行通信；面部對(duì)比部24，將從監(jiān)視攝像機(jī)1以靜止圖像送來(lái)的面部圖像、與在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22中所存儲(chǔ)的在冊(cè)人員面部圖像進(jìn)行對(duì)比；圖像展開(kāi)部25，將從監(jiān)視攝像機(jī)1送來(lái)的以MPEG4壓縮的運(yùn)動(dòng)圖像展開(kāi)；顯示部26，顯示從監(jiān)視攝像機(jī)1送來(lái)的面部圖像或運(yùn)動(dòng)圖像；以及，面部圖像存儲(chǔ)部27，存儲(chǔ)從監(jiān)視攝像機(jī)1以靜止圖像送來(lái)的面部圖像。
在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22，作為在冊(cè)人員的面部圖像，存儲(chǔ)有眼、鼻、口等面部組成部分的特征量。在冊(cè)人員，可以是例如準(zhǔn)許出入設(shè)施的人物、或是被通緝的罪犯，可根據(jù)監(jiān)視系統(tǒng)的用途來(lái)決定在冊(cè)人員。面部對(duì)比部24，從由監(jiān)視攝像機(jī)1以靜止圖像送來(lái)的面部圖像中、抽取面部組成部分的特征量，并計(jì)算出與存儲(chǔ)在在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22中的各個(gè)在冊(cè)人員的面部組成部分的特征量的相似度，將該相似度最大、且大于預(yù)定閾值的在冊(cè)人員判定為本次送來(lái)的面部圖像的人物。另外，若不存在相似度大于預(yù)定閾值的在冊(cè)人員，則判定為不是在冊(cè)人員。圖像展開(kāi)部25，將從監(jiān)視攝像機(jī)1送來(lái)的運(yùn)動(dòng)圖像展開(kāi)，并生成再生圖像信號(hào)。顯示部26，顯示從監(jiān)視攝像機(jī)1送來(lái)的面部圖像或運(yùn)動(dòng)圖像(基于圖像展開(kāi)部25所生成的再生圖像信號(hào)的圖像)。面部圖像存儲(chǔ)部27，存儲(chǔ)從監(jiān)視攝像機(jī)1以靜止圖像送來(lái)的面部圖像。面部圖像存儲(chǔ)部27，具有硬盤(pán)等作為存儲(chǔ)介質(zhì)。
下面，對(duì)本實(shí)施方式的監(jiān)視系統(tǒng)的動(dòng)作進(jìn)行說(shuō)明。
監(jiān)視攝像機(jī)1，將基本實(shí)時(shí)地處理監(jiān)視區(qū)域的攝影圖像的監(jiān)視圖像處理、和響應(yīng)來(lái)自主機(jī)裝置2的請(qǐng)求發(fā)送存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部15中的運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像發(fā)送處理并列執(zhí)行。首先，說(shuō)明監(jiān)視攝像機(jī)1中的監(jiān)視圖像處理。該監(jiān)視圖像處理分為兩個(gè)處理，即，運(yùn)動(dòng)圖像處理，將攝像部12拍攝的監(jiān)視區(qū)域的攝影圖像，作為運(yùn)動(dòng)圖像存儲(chǔ)到運(yùn)動(dòng)圖像存儲(chǔ)部15；和，面部圖像發(fā)送處理，當(dāng)攝影圖像中拍到人物時(shí)，抽出該人物的面部圖像，傳往主機(jī)裝置2。
圖4是表示運(yùn)動(dòng)圖像處理的流程圖。監(jiān)視攝像機(jī)1以預(yù)定的一定時(shí)間間隔、例如間隔0.3s，將攝像部12拍攝的監(jiān)視區(qū)域的攝影圖像取入到圖像壓縮部14中(s1、s2)。圖像壓縮部14，將以一定時(shí)間間隔取入的攝影圖像作為運(yùn)動(dòng)圖像，將其以MPEG4等方式壓縮(s3)。監(jiān)視攝像機(jī)1將此壓縮運(yùn)動(dòng)圖像存儲(chǔ)到運(yùn)動(dòng)圖像存儲(chǔ)部15(s4)。運(yùn)動(dòng)圖像存儲(chǔ)部15中存儲(chǔ)的運(yùn)動(dòng)圖像被以適當(dāng)?shù)拈g隔、例如間隔1～2分鐘，附加表示攝影時(shí)間的時(shí)間戳。
監(jiān)視攝像機(jī)裝置1，通過(guò)反復(fù)執(zhí)行上述s1～s4的處理，將監(jiān)視區(qū)域的運(yùn)動(dòng)圖像存儲(chǔ)到運(yùn)動(dòng)圖像存儲(chǔ)部15中。此外，由于在存儲(chǔ)于運(yùn)動(dòng)圖像存儲(chǔ)部15中的運(yùn)動(dòng)圖像上以適當(dāng)?shù)拈g隔附加了表示攝影時(shí)間的時(shí)間戳，因此通過(guò)參照該時(shí)間戳，就可以判斷出存儲(chǔ)于運(yùn)動(dòng)圖像存儲(chǔ)部15中的運(yùn)動(dòng)圖像的攝影時(shí)間。
接下來(lái)，說(shuō)明面部圖像發(fā)送處理。圖5是表示該面部圖像發(fā)送處理的流程圖。監(jiān)視攝像機(jī)1以預(yù)定的一定時(shí)間間隔、例如間隔0.3s，將攝像部12拍攝的監(jiān)視區(qū)域的攝影圖像取入到FF模塊13中(s11、s12)。FF模塊13，算出上次取入的攝影圖像與本次取入的攝影圖像之間的差值(s13)。眾所周知，當(dāng)有人物被拍到時(shí)，由于被拍人物的位置和姿勢(shì)等發(fā)生了變化，上次取入的攝影圖像和本次取入的攝影圖像的差值會(huì)變大。
FF模塊13，在s13計(jì)算的差值大于預(yù)定的閾值的情況下(s14)，判定在該攝影圖像中有人物被拍到，并將該攝影圖像暫時(shí)保存在未圖示的緩存中(s15)。此外，F(xiàn)F模塊13在s13計(jì)算的差值不大于預(yù)定閾值的情況下，跳轉(zhuǎn)到s19將緩存清空。FF模塊13，當(dāng)用s15將攝影圖像存儲(chǔ)到緩存后，判定是否有適于抽出面部圖像幀數(shù)的攝影圖像被存儲(chǔ)到該緩存中(s16)。在s16，要在緩存中存儲(chǔ)幾幀、例如4～6幀的攝影圖像，以避免無(wú)法從例如被拍人物的面部圖像被截?cái)?、或者面部朝向不佳的攝影圖像中，抽出適合用于該人物面部對(duì)比的面部圖像。換言之，提高了能夠抽出適合用于該人物面部對(duì)比的面部圖像的攝影圖像，被存儲(chǔ)在緩存中的可能性。當(dāng)FF模塊13，用s16判定緩存中沒(méi)有存儲(chǔ)適于面部圖像抽出的幀數(shù)的攝影圖像時(shí)，就返回s11重復(fù)上述處理，在該緩存中存儲(chǔ)適于抽出面部圖像幀數(shù)的攝影圖像。
另外，適于抽出面部圖像的幀數(shù)，為被攝人物通過(guò)監(jiān)視區(qū)域的時(shí)間(2～3s)內(nèi)、FF模塊13能夠取入的攝影圖像的幀數(shù)以下。
另一方面，在s16，如果判定緩存中存有適于面部圖像抽出幀數(shù)的攝影圖像，就從存儲(chǔ)在該緩存的多幀攝影圖像中，選擇最適合面部圖像抽出的攝影圖像(s17)。在s17，選擇所攝人物的面部沒(méi)被截?cái)?、面部朝向?yàn)檎娴臄z影圖像。FF模塊13，從由s17選擇的攝影圖像中抽出所攝人物的面部圖像(s18)。在s18，從攝影圖像中檢測(cè)出面部形狀(橢圓形)，并將包含這里檢測(cè)到的面部形狀的范圍、作為本次拍攝到的人物的面部圖像抽出。當(dāng)FF模塊13，用s18抽出本次拍攝到的人物的面部圖像后，清空緩存(s19)。監(jiān)視攝像機(jī)1對(duì)由s18抽出的面部圖像附加表示攝影時(shí)間的時(shí)間戳(s20)，并將其從通信部16送往主機(jī)裝置2(s21)，返回s11重復(fù)上述處理。
這樣，監(jiān)視攝像機(jī)1就能夠?qū)z像部12拍攝的通過(guò)監(jiān)視區(qū)域的人物的面部圖像、基本實(shí)時(shí)地送到主機(jī)裝置2中。換言之，在主機(jī)裝置2中，能夠基本實(shí)時(shí)地獲得通過(guò)監(jiān)視區(qū)域的人物的面部圖像。此外，由于監(jiān)視攝像機(jī)1，并不是對(duì)主機(jī)裝置2發(fā)送監(jiān)視區(qū)域的運(yùn)動(dòng)圖像，而是以靜止圖像的形式發(fā)送抽出的面部圖像，因此從監(jiān)視攝像機(jī)1發(fā)送到主機(jī)裝置2的數(shù)據(jù)量就得到充分控制，即使是主機(jī)裝置2上連接的監(jiān)視攝像機(jī)1較多的監(jiān)視系統(tǒng)，連接主機(jī)裝置2與監(jiān)視攝像機(jī)1的網(wǎng)絡(luò)3的流量也能得到充分控制。此外，對(duì)于以靜止圖像的形式從監(jiān)視攝像機(jī)1向主機(jī)裝置2發(fā)送面部圖像來(lái)說(shuō)，由于可以不使用粗糙圖像，因此在后述的主機(jī)裝置2中能夠正確地進(jìn)行所攝人物的面部對(duì)比，不會(huì)降低安全性。
這里，對(duì)接收以靜止圖像方式從監(jiān)視攝像機(jī)1送來(lái)的面部圖像的主機(jī)裝置2的動(dòng)作進(jìn)行說(shuō)明。圖6是表示主機(jī)裝置中的面部圖像接收處理的流程圖。主機(jī)裝置2接收從監(jiān)視攝像機(jī)1以靜止圖像方式送來(lái)的面部圖像后，將該面部圖像存儲(chǔ)到圖像存儲(chǔ)部27中，同時(shí)將該面部圖像顯示在顯示部26上(s31、s32)。在存儲(chǔ)于圖像存儲(chǔ)部27的面部圖像中，附加有表示抽出該面部圖像的攝影圖像的攝影時(shí)間的時(shí)間戳。主機(jī)裝置2實(shí)施對(duì)本次從監(jiān)視攝像機(jī)1送來(lái)的面部圖像、與存儲(chǔ)在在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22中的在冊(cè)人員面部圖像進(jìn)行對(duì)比的面部對(duì)比處理(s33)。該面部對(duì)比處理，使用例如公知的伽柏小波(Gabor Wavelet)和圖像比對(duì)方法(GraphMatching Method)來(lái)進(jìn)行。這里，雖不詳細(xì)說(shuō)明，但簡(jiǎn)單來(lái)說(shuō)，就是從由監(jiān)視攝像機(jī)1送來(lái)的面部圖像中抽出眼、鼻、口等面部組成部分的特征量，并計(jì)算出與存儲(chǔ)在在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22中的各個(gè)在冊(cè)人員的面部組成部分的特征量的相似度。然后，將算出的相似度最大且大于預(yù)定閾值的在冊(cè)人員判定為本次被送來(lái)面部圖像的人物。此外，如果不存在相似度大于預(yù)定閾值的在冊(cè)人員，則判定為不是在冊(cè)人員。
主機(jī)裝置2輸出s33的面部對(duì)比處理結(jié)果(s34)。在s34中，面部對(duì)比的結(jié)果顯示在顯示部26上，根據(jù)需要進(jìn)行報(bào)警。例如，如果是禁止在冊(cè)人員以外的人物出入的設(shè)施，當(dāng)通過(guò)s33的面部對(duì)比，證明本次面部圖像被送來(lái)的人物不是在冊(cè)人員時(shí)進(jìn)行報(bào)警。如上所述，由于監(jiān)視攝像機(jī)1基本實(shí)時(shí)地將通過(guò)監(jiān)視區(qū)域的人物的面部圖像發(fā)送到主機(jī)裝置2中，因此對(duì)該人物的面部對(duì)比也能夠基本實(shí)時(shí)地進(jìn)行。因此，能夠基本實(shí)時(shí)地檢測(cè)出可疑分子進(jìn)入設(shè)施等，并能夠迅速將該情況報(bào)告給保安人員等。這樣，保安人員等就能對(duì)可疑分子迅速作出處理，避免降低設(shè)施安全性。
此外，主機(jī)裝置2，能夠?qū)⒋鎯?chǔ)在圖像存儲(chǔ)部27中的、從監(jiān)視攝像機(jī)1以靜止圖像方式送來(lái)的面部圖像顯示在顯示部26上。對(duì)于被在顯示部26上顯示面部圖像的人物，能夠從監(jiān)視攝像機(jī)1中獲取該人物通過(guò)監(jiān)視區(qū)域時(shí)的運(yùn)動(dòng)圖像。接下來(lái)，對(duì)主機(jī)裝置2從監(jiān)視攝像機(jī)1獲得運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像取得處理進(jìn)行說(shuō)明。圖7是表示主機(jī)裝置中的運(yùn)動(dòng)圖像取得處理的流程圖，圖8是表示與其對(duì)應(yīng)的監(jiān)視攝像機(jī)的運(yùn)動(dòng)圖像發(fā)送處理的流程圖。
保安人員等，對(duì)于認(rèn)為需要確認(rèn)通過(guò)監(jiān)視區(qū)域時(shí)的狀況的面部圖像的人物，向主機(jī)裝置2中輸入運(yùn)動(dòng)圖像的取得請(qǐng)求。具體講，在主機(jī)裝置2的顯示部26上顯示要取得運(yùn)動(dòng)圖像的人物的面部圖像，并進(jìn)行請(qǐng)求獲取運(yùn)動(dòng)圖像的輸入操作。主機(jī)裝置2，被輸入該運(yùn)動(dòng)圖像的取得請(qǐng)求后，開(kāi)始圖7所示的運(yùn)動(dòng)圖像取得處理。首先，讀出附加在本次請(qǐng)求取得運(yùn)動(dòng)圖像的人物的面部圖像上的時(shí)間戳(s41)。主機(jī)裝置2，將發(fā)送由s41讀出的時(shí)間戳所表示的時(shí)間的運(yùn)動(dòng)圖像的請(qǐng)求，從通信部23送到監(jiān)視攝像機(jī)1(s42)。
監(jiān)視攝像機(jī)1接收到來(lái)自主機(jī)裝置2的運(yùn)動(dòng)圖像發(fā)送請(qǐng)求后(s51)，讀出該發(fā)送請(qǐng)求中包含的時(shí)間戳所表示的時(shí)間(s52)。監(jiān)視攝像機(jī)1從運(yùn)動(dòng)圖像存儲(chǔ)部15中，讀出以s52讀出的時(shí)間為中心的前后數(shù)秒、例如4～5秒的運(yùn)動(dòng)圖像(s53)，并將其從通信部16傳往主機(jī)裝置2(s54)。
主機(jī)裝置2，接收到從監(jiān)視攝像機(jī)1送來(lái)的運(yùn)動(dòng)圖像后(s43)，在圖像展開(kāi)部25展開(kāi)接收到的運(yùn)動(dòng)圖像，并生成再生影像信號(hào)(s44)。主機(jī)裝置2將基于由s44生成的再生影像信號(hào)的圖像顯示在顯示部26上(s45)。
這樣，主機(jī)裝置2就能夠根據(jù)需要，對(duì)面部圖像被以靜止圖像方式傳送來(lái)的人物，取得通過(guò)監(jiān)視區(qū)域時(shí)的運(yùn)動(dòng)圖像圖像，并進(jìn)行確認(rèn)。換言之，能夠?qū)γ娌繄D像被以靜止圖像方式送來(lái)的人物，用主機(jī)裝置2確認(rèn)通過(guò)監(jiān)視區(qū)域時(shí)的狀況。此外，由于對(duì)于上述運(yùn)動(dòng)圖像發(fā)送請(qǐng)求，監(jiān)視攝像機(jī)1發(fā)送給主機(jī)裝置2的運(yùn)動(dòng)圖像是數(shù)秒的運(yùn)動(dòng)圖像，因此不會(huì)白白增加連接監(jiān)視攝像機(jī)1和主機(jī)裝置2的網(wǎng)絡(luò)3的流量，獲得充分控制。
另外，在上述實(shí)施方式中，雖然運(yùn)動(dòng)圖像存儲(chǔ)部15中總存儲(chǔ)有監(jiān)視區(qū)域的運(yùn)動(dòng)圖像，但也可以在上述面部圖像發(fā)送處理中，在s18抽出面部圖像之后、s19清空緩存之前，將存儲(chǔ)在該緩存中的多幀的攝影圖像作為運(yùn)動(dòng)圖像壓縮，并存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部15中。換言之，也可以構(gòu)成為，將攝影圖像中有人物被拍到時(shí)的運(yùn)動(dòng)圖像存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部15中，沒(méi)有人物被攝到時(shí)的監(jiān)視區(qū)域的運(yùn)動(dòng)圖像不存儲(chǔ)到運(yùn)動(dòng)圖像存儲(chǔ)部15中。這樣，就能夠控制運(yùn)動(dòng)圖像存儲(chǔ)部15所需要的存儲(chǔ)容量。此外，由于不總進(jìn)行圖4所示的運(yùn)動(dòng)圖像處理，因此能夠降低監(jiān)視攝像機(jī)1的負(fù)荷。
接下來(lái)，對(duì)本發(fā)明的另一個(gè)實(shí)施方式進(jìn)行說(shuō)明。該實(shí)施方式的監(jiān)視系統(tǒng)與上述實(shí)施方式相同具有如圖1所示的結(jié)構(gòu)。監(jiān)視攝像機(jī)1的結(jié)構(gòu)雖然與上述實(shí)施方式的裝置大致相同，但是如圖9所示，不同點(diǎn)在于，不具備運(yùn)動(dòng)圖像存儲(chǔ)部15、和具有靜止圖像存儲(chǔ)部17。靜止圖像存儲(chǔ)部17，對(duì)由FF模塊13抽出的人物的面部圖像進(jìn)行存儲(chǔ)。此外，主機(jī)裝置2的結(jié)構(gòu)雖然與上述實(shí)施方式的裝置大致相同，但是如圖10所示，不同點(diǎn)在于，不具備面部圖像存儲(chǔ)部27、和具有運(yùn)動(dòng)圖像存儲(chǔ)部28。運(yùn)動(dòng)圖像存儲(chǔ)部28，存儲(chǔ)從監(jiān)視攝像機(jī)1送來(lái)的監(jiān)視區(qū)域的運(yùn)動(dòng)圖像。
下面，對(duì)本實(shí)施方式的監(jiān)視系統(tǒng)的動(dòng)作進(jìn)行說(shuō)明。
監(jiān)視攝像機(jī)1，將基本實(shí)時(shí)地處理監(jiān)視區(qū)域的攝影圖像的監(jiān)視圖像處理、和響應(yīng)主機(jī)裝置2的請(qǐng)求將存儲(chǔ)在靜止圖像存儲(chǔ)部17中的人物的面部圖像以靜止圖像方式發(fā)送給主機(jī)裝置2的靜止圖像發(fā)送處理并列執(zhí)行。首先，說(shuō)明監(jiān)視攝像機(jī)1中的監(jiān)視圖像處理。該監(jiān)視圖像處理，包含運(yùn)動(dòng)圖像發(fā)送處理，將攝像部12所攝的監(jiān)視區(qū)域的攝影圖像作為運(yùn)動(dòng)圖像發(fā)送給主機(jī)裝置2；和，面部圖像存儲(chǔ)處理，若攝影圖像中攝到人物，將該人物的面部圖像抽出后存儲(chǔ)到靜止圖像存儲(chǔ)部17中。
圖11是表示運(yùn)動(dòng)圖像發(fā)送處理的流程圖。監(jiān)視攝像機(jī)1以預(yù)定的一定時(shí)間間隔、例如間隔0.3s，將攝像部12所攝的監(jiān)視區(qū)域的攝影圖像取入到圖像壓縮部14(s61、s62)。在圖像壓縮部14中，將以一定時(shí)間間隔取入的攝影圖像作為運(yùn)動(dòng)圖像，并將其以MPEG4等方式壓縮(s63)。在s63中，將攝影圖像變?yōu)檩^粗糙的圖像并進(jìn)行壓縮。監(jiān)視攝像機(jī)1將由圖像壓縮部14壓縮后的運(yùn)動(dòng)圖像，從通信部16經(jīng)由網(wǎng)絡(luò)3送往主機(jī)裝置2(s64)。在送往主機(jī)裝置2的運(yùn)動(dòng)圖像中，附加表示攝影時(shí)間的時(shí)間戳。
監(jiān)視攝像機(jī)裝置1通過(guò)重復(fù)執(zhí)行上述s1～s4的處理，將監(jiān)視區(qū)域的運(yùn)動(dòng)圖像基本實(shí)時(shí)地發(fā)送給主機(jī)裝置2。此外，由于發(fā)送到主機(jī)裝置2上的運(yùn)動(dòng)圖像為較粗糙的圖像，因此能夠充分控制發(fā)送到主機(jī)裝置2上的運(yùn)動(dòng)圖像的數(shù)據(jù)量。從而，即使是主機(jī)裝置2上連接的監(jiān)視攝像機(jī)1較多的監(jiān)視系統(tǒng)，連接主機(jī)裝置2與監(jiān)視攝像機(jī)1的網(wǎng)絡(luò)3的流量也能得到充分控制。此外，由于在送往主機(jī)裝置2的運(yùn)動(dòng)圖像中，附加了表示攝影時(shí)間的時(shí)間戳，因此主機(jī)裝置2通過(guò)參照時(shí)間戳能夠判斷攝影時(shí)間。
接下來(lái)，說(shuō)明面部圖像存儲(chǔ)處理。圖12是表示該面部圖像存儲(chǔ)處理的流程圖。監(jiān)視攝像機(jī)1以預(yù)定的一定時(shí)間間隔、例如間隔0.3s，將攝像部12所攝的監(jiān)視區(qū)域的攝影圖像取入FF模塊13中(s71、s72)。FF模塊13，計(jì)算出上次取入的攝影圖像、與本次取入的攝影圖像的差值(s73)。FF模塊13在由s73計(jì)算出的差值大于預(yù)定閾值的情況下(s74)，判定在該攝影圖像中有人物被拍到，并將該攝影圖像暫時(shí)保存在未圖示的緩存中(s75)。此外，F(xiàn)F模塊13在由s73計(jì)算出的差值不大于預(yù)定閾值的情況下，跳轉(zhuǎn)到s79將緩存清空。當(dāng)FF模塊13用s75將攝影圖像存儲(chǔ)到緩存后，判定是否有適于抽出面部圖像幀數(shù)的攝影圖像被存儲(chǔ)到該緩存中(s76)。在s16，要在緩存中存儲(chǔ)幾幀、例如4～6幀的攝影圖像，以避免無(wú)法從例如被拍人物的面部圖像被截?cái)?、或者面部朝向不佳的攝影圖像中，抽出適合用于該人物面部對(duì)比的面部圖像。換言之，提高抽出適合進(jìn)行用于該人物面部對(duì)比的面部圖像的攝影圖像，被存儲(chǔ)在緩存中的可能性。當(dāng)FF模塊13用s76判定緩存中沒(méi)有存儲(chǔ)適于面部圖像抽出幀數(shù)的攝影圖像時(shí)，返回s71重復(fù)上述處理，在該緩存中存儲(chǔ)適于抽出面部圖像幀數(shù)的攝影圖像。
另外，適于抽出面部圖像的幀數(shù)，是所攝人物通過(guò)監(jiān)視區(qū)域的時(shí)間(2～3s)內(nèi)、FF模塊13能夠取入的攝影圖像的幀數(shù)以下。
另一方面，在s76中，如果判定緩存中存有適于面部圖像抽出幀數(shù)的攝影圖像，就從存儲(chǔ)在該緩存的多幀攝影圖像中，選擇最適合面部圖像抽出的攝影圖像(s77)。在s77中，選擇所攝人物的面部沒(méi)有截?cái)?、面部朝向?yàn)檎娴臄z影圖像。FF模塊13，從由s77選擇的攝影圖像中抽出拍攝人物的面部圖像(s78)。在s78中，從攝影圖像中檢測(cè)出面部形狀(橢圓形)，抽出包含該檢測(cè)的面部形狀的范圍，作為本次拍攝到的人物的面部圖像。此外，不將攝影圖像粗糙化，抽出面部圖像。換言之，雖然圖像壓縮部14將變?yōu)榇植趫D像并壓縮后的攝影圖像發(fā)送到主機(jī)裝置2，但是FF模塊13不將攝影圖像變?yōu)榇植趫D像，從該攝影圖像中抽出面部圖像。當(dāng)FF模塊13，用s78將本次拍攝的人物的面部圖像抽出后，清空緩存(s79)。監(jiān)視攝像機(jī)1，將表示攝影時(shí)間的時(shí)間戳附加在由s78抽出的面部圖像中(s80)，并將其存儲(chǔ)到靜止圖像存儲(chǔ)部17中(s81)，并返回s71重復(fù)上述處理。
這樣，監(jiān)視攝像機(jī)1就可以將攝像部12所攝的通過(guò)監(jiān)視區(qū)域的人物的面部圖像，以靜止圖像方式存儲(chǔ)到靜止圖像存儲(chǔ)部17中。此外，該面部圖像是能夠進(jìn)行正確面部對(duì)比的非粗糙的圖像。
這里，對(duì)接收從監(jiān)視攝像機(jī)1送來(lái)的運(yùn)動(dòng)圖像的主機(jī)裝置2的動(dòng)作進(jìn)行說(shuō)明。圖13是表示主機(jī)裝置中的運(yùn)動(dòng)圖像接收處理的流程圖。當(dāng)主機(jī)裝置2，接收從監(jiān)視攝像機(jī)1送來(lái)的運(yùn)動(dòng)圖像后，將該運(yùn)動(dòng)圖像存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部28中(s91)，同時(shí)圖像展開(kāi)部25將接收的運(yùn)動(dòng)圖像展開(kāi)，并生成再生影像信號(hào)(s92)。主機(jī)裝置2，將基于由s92生成的再生影像信號(hào)的運(yùn)動(dòng)圖像顯示在顯示部26上(s93)。
這樣，由于在主機(jī)裝置2中，監(jiān)視區(qū)域的運(yùn)動(dòng)圖像被基本實(shí)時(shí)地顯示出來(lái)，因此保安人員等能通過(guò)主機(jī)裝置2基本實(shí)時(shí)地確認(rèn)監(jiān)視區(qū)域的狀況。此外，在保安人員等認(rèn)為顯示部26上所顯示的運(yùn)動(dòng)圖像的人物需要面部對(duì)比時(shí)，能夠獲得適于進(jìn)行該人物的面部對(duì)比的面部圖像。以下，說(shuō)明在主機(jī)裝置2中獲得能夠正確進(jìn)行該人物面部對(duì)比的面部圖像的面部圖像取得處理。
圖14是表示主機(jī)裝置中的面部圖像取得處理的流程圖。圖15是表示與其對(duì)應(yīng)的監(jiān)視攝像機(jī)的面部圖像發(fā)送處理的流程圖。
保安人員等，對(duì)于通過(guò)監(jiān)視區(qū)域的人物認(rèn)為需要進(jìn)行面部對(duì)比時(shí)，向主機(jī)裝置2中輸入面部圖像的取得請(qǐng)求。具體講，對(duì)于在主機(jī)裝置2的顯示部26上以運(yùn)動(dòng)圖像方式顯示的人物，進(jìn)行請(qǐng)求取得其面部圖像的輸入操作。主機(jī)裝置2在該面部圖像取得請(qǐng)求被輸入后，開(kāi)始圖14所示的面部圖像取得處理。首先，讀出附加在本次請(qǐng)求面部圖像取得的人物的運(yùn)動(dòng)圖像上的時(shí)間戳(s101)。主機(jī)裝置1，將由s101讀出的時(shí)間戳所表示的時(shí)間的面部圖像的發(fā)送請(qǐng)求，從通信部23發(fā)送到監(jiān)視攝像機(jī)1(s102)。
監(jiān)視攝像機(jī)1，接收到來(lái)自主機(jī)裝置2的面部圖像的發(fā)送請(qǐng)求后(s111)，讀出該發(fā)送請(qǐng)求中所含的時(shí)間戳所表示的時(shí)間(s112)。監(jiān)視攝像機(jī)1從靜止圖像存儲(chǔ)部17中，讀出附加有與由s112讀出的時(shí)間最接近的時(shí)間戳的面部圖像(s113)，并將該面部圖像以靜止圖像方式從通信部16傳往主機(jī)裝置2(s114)。
主機(jī)裝置2，接收到從監(jiān)視攝像機(jī)1送來(lái)的面部圖像后(s103)，將該面部圖像顯示在顯示部26上(s104)。然后，主機(jī)裝置2，進(jìn)行對(duì)比本次從監(jiān)視攝像機(jī)1送來(lái)的面部圖像、與存儲(chǔ)在在冊(cè)人員數(shù)據(jù)存儲(chǔ)部22中的在冊(cè)人員面部圖像的面部對(duì)比處理(s105)。該面部對(duì)比處理，與上述實(shí)施方式同樣，使用伽柏小波(Gabor Wavelet)和圖像比對(duì)方法(GraphMatching Method)來(lái)進(jìn)行。主機(jī)裝置2輸出s105的面部對(duì)比處理結(jié)果(s106)。在s106中，將面部對(duì)比的結(jié)果顯示在顯示部26上，并根據(jù)需要進(jìn)行報(bào)警。
這樣，由于主機(jī)裝置2能夠從監(jiān)視攝像機(jī)1中取得適于進(jìn)行面部對(duì)比的面部圖像，因此避免降低安全性。此外，由于用于面部對(duì)比的面部圖像以靜止圖像方式從監(jiān)視攝像機(jī)1發(fā)送到主機(jī)裝置2，因此不會(huì)白白增加連接監(jiān)視攝像機(jī)1和主機(jī)裝置的網(wǎng)絡(luò)3的流量。因此，即使是主機(jī)裝置2上連接的監(jiān)視攝像機(jī)1較多的監(jiān)視系統(tǒng)，主機(jī)裝置2也能夠?qū)ΡO(jiān)視區(qū)域正確地進(jìn)行監(jiān)視，且避免降低安全性。
權(quán)利要求
1.一種監(jiān)視系統(tǒng)，具備具有對(duì)監(jiān)視區(qū)域進(jìn)行攝像的攝像模塊的監(jiān)視攝像機(jī)，和連接該監(jiān)視攝像機(jī)的上位裝置，其特征在于所述監(jiān)視攝像機(jī)，具備運(yùn)動(dòng)圖像存儲(chǔ)模塊，將所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像方式進(jìn)行存儲(chǔ)；面部圖像抽出模塊，若所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像中有人物被拍到，抽出該人物的面部圖像；以及，靜止圖像發(fā)送模塊，將所述面部圖像抽出模塊抽出的面部圖像以靜止圖像方式傳送給上位裝置，所述上位裝置，具備運(yùn)動(dòng)圖像請(qǐng)求模塊，對(duì)于從所述監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像而言，當(dāng)該面部圖像相關(guān)的運(yùn)動(dòng)圖像的取得請(qǐng)求被輸入時(shí)，請(qǐng)求所述監(jiān)視攝像機(jī)發(fā)送所述面部圖像相關(guān)的運(yùn)動(dòng)圖像，所述監(jiān)視攝像機(jī)還具備運(yùn)動(dòng)圖像發(fā)送模塊，響應(yīng)來(lái)自所述上位裝置的運(yùn)動(dòng)圖像的發(fā)送請(qǐng)求，將所述運(yùn)動(dòng)圖像存儲(chǔ)模塊中存儲(chǔ)的所述監(jiān)視區(qū)域的運(yùn)動(dòng)圖像，發(fā)送給該上位裝置。
2.根據(jù)權(quán)利要求1所述的監(jiān)視系統(tǒng)，其特征在于，所述上位裝置，具備面部圖像存儲(chǔ)模塊，存儲(chǔ)在冊(cè)人員的面部圖像；以及，面部對(duì)比模塊，對(duì)從所述監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像、與存儲(chǔ)在所述面部圖像存儲(chǔ)模塊中的在冊(cè)人員的面部圖像進(jìn)行對(duì)比，并輸出其結(jié)果。
3.根據(jù)權(quán)利要求1或2所述的監(jiān)視系統(tǒng)，其特征在于，所述上位裝置，具備面部圖像存儲(chǔ)模塊，存儲(chǔ)從所述監(jiān)視攝像機(jī)以靜止圖像方式發(fā)送來(lái)的面部圖像；以及，顯示模塊，顯示所述面部圖像存儲(chǔ)模塊所存儲(chǔ)的面部圖像，所述運(yùn)動(dòng)圖像請(qǐng)求模塊，對(duì)于所述顯示模塊所顯示的面部圖像，受理運(yùn)動(dòng)圖像取得請(qǐng)求的輸入。
4.根據(jù)權(quán)利要求1～3的任一項(xiàng)所述的監(jiān)視系統(tǒng)，其特征在于，所述監(jiān)視攝像機(jī)具備時(shí)間戳附加模塊，對(duì)面部圖像抽出模塊抽出的面部圖像，附加表示抽出該面部圖像的圖像的攝像時(shí)間的時(shí)間戳，所述靜止圖像發(fā)送模塊，將附加了所述時(shí)間戳的面部圖像發(fā)送給所述上位裝置。
5.根據(jù)權(quán)利要求4所述的監(jiān)視系統(tǒng)，其特征在于，所述上位裝置的運(yùn)動(dòng)圖像請(qǐng)求模塊，在請(qǐng)求所述監(jiān)視攝像機(jī)發(fā)送面部圖像相關(guān)的運(yùn)動(dòng)圖像時(shí)，將附加在該面部圖像中的所述時(shí)間戳發(fā)送給所述監(jiān)視攝像機(jī)，所述監(jiān)視攝像機(jī)，將涵蓋來(lái)自所述上位裝置的運(yùn)動(dòng)圖像的發(fā)送請(qǐng)求中所包含的時(shí)間戳所表示的時(shí)間的給定時(shí)間量的運(yùn)動(dòng)圖像，發(fā)送給所述上位裝置。
6.一種監(jiān)視攝像機(jī)，其特征在于，具備攝像模塊，對(duì)監(jiān)視區(qū)域進(jìn)行攝像；運(yùn)動(dòng)圖像存儲(chǔ)模塊，將所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像以運(yùn)動(dòng)圖像方式進(jìn)行存儲(chǔ)；面部圖像抽出模塊，若在所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像中有人物被拍到，抽出該人物的面部圖像；靜止圖像發(fā)送模塊，將所述面部圖像抽出模塊抽出的面部圖像以靜止圖像方式發(fā)送往上位裝置；以及，運(yùn)動(dòng)圖像發(fā)送模塊，響應(yīng)來(lái)自所述上位裝置的請(qǐng)求，將所述運(yùn)動(dòng)圖像存儲(chǔ)模塊中存儲(chǔ)的所述監(jiān)視區(qū)域的運(yùn)動(dòng)圖像，發(fā)送給該上位裝置。
7.一種監(jiān)視系統(tǒng)，具備具有對(duì)監(jiān)視區(qū)域進(jìn)行攝像的攝像模塊的監(jiān)視攝像機(jī)，和連接該監(jiān)視攝像機(jī)的上位裝置，其特征在于，所述監(jiān)視攝像機(jī)，具備運(yùn)動(dòng)圖像發(fā)送模塊，將所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像方式發(fā)送；面部圖像抽出模塊，若在所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像中有人物被拍到，抽出該人物的面部圖像；以及，靜止圖像存儲(chǔ)模塊，將所述面部圖像抽出模塊抽出的面部圖像以靜止圖像的方式存儲(chǔ)，所述運(yùn)動(dòng)圖像發(fā)送模塊，以比所述靜止圖像發(fā)送模塊發(fā)送的面部圖像粗糙的圖像發(fā)送運(yùn)動(dòng)圖像，另外，所述上位裝置具備運(yùn)動(dòng)圖像請(qǐng)求模塊，對(duì)于從所述監(jiān)視攝像機(jī)發(fā)送來(lái)的運(yùn)動(dòng)圖像中被拍攝的人物而言，當(dāng)面部圖像的取得請(qǐng)求被輸入時(shí)，請(qǐng)求所述監(jiān)視攝像機(jī)發(fā)送該人物的面部圖像，所述監(jiān)視攝像機(jī)，還具備靜止圖像發(fā)送模塊，響應(yīng)來(lái)自所述上位裝置的面部圖像的取得請(qǐng)求，向該上位裝置發(fā)送存儲(chǔ)在所述靜止圖像存儲(chǔ)模塊中的人物的面部圖像。
8.一種監(jiān)視攝像機(jī)，其特征在于，具備攝像模塊，對(duì)監(jiān)視區(qū)域進(jìn)行攝像；運(yùn)動(dòng)圖像發(fā)送模塊，將所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像，以運(yùn)動(dòng)圖像的方式進(jìn)行發(fā)送；面部圖像抽出模塊，若在所述攝像模塊拍攝的所述監(jiān)視區(qū)域的攝像圖像中有人物被拍到，抽出該人物的面部圖像；靜止圖像存儲(chǔ)模塊，將所述面部圖像抽出模塊抽出的面部圖像以靜止圖像方式進(jìn)行存儲(chǔ)；以及，靜止圖像發(fā)送模塊，響應(yīng)來(lái)自所述上位裝置的請(qǐng)求，向該上位裝置發(fā)送存儲(chǔ)在所述靜止圖像存儲(chǔ)模塊中的人物的面部圖像，所述運(yùn)動(dòng)圖像發(fā)送模塊，以比所述靜止圖像發(fā)送模塊發(fā)送的面部圖像粗糙的圖像發(fā)送運(yùn)動(dòng)圖像。
全文摘要
本發(fā)明提供一種監(jiān)視系統(tǒng)，即使上位裝置上連接的監(jiān)視攝像機(jī)很多，也能夠在上位裝置上正確監(jiān)視監(jiān)視區(qū)域，并防止安全性降低。監(jiān)視攝像機(jī)(1)，將攝像部(12)拍攝的監(jiān)視區(qū)域的攝影圖像存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部(15)中。此外，若攝影圖像中有人物被拍到，抽出被攝人物的面部圖像，并將抽出的面部圖像以靜止圖像方式發(fā)送給主機(jī)裝置(2)中。再有，監(jiān)視攝像機(jī)(1)，響應(yīng)來(lái)自主機(jī)裝置(2)的請(qǐng)求，將存儲(chǔ)在運(yùn)動(dòng)圖像存儲(chǔ)部(15)中的運(yùn)動(dòng)圖像發(fā)送給主機(jī)裝置(2)。
文檔編號(hào)G06T1/00GK1694530SQ20051006689
公開(kāi)日2005年11月9日 申請(qǐng)日期2005年4月30日 優(yōu)先權(quán)日2004年5月7日
發(fā)明者宮田博文, 一之瀨克彥, 宮本剛 申請(qǐng)人:歐姆龍株式會(huì)社