專利名稱：基于視頻摘要、視頻檢索的視頻分析方法
技術(shù)領(lǐng)域：
本發(fā)明屬于視頻處理技術(shù)領(lǐng)域，涉及一種視頻分析方法，具體而言涉及一種基于視頻摘要、視頻檢索，進(jìn)而自動(dòng)獲取人的幾個(gè)關(guān)鍵特征的方法。
背景技術(shù)：
隨著視頻監(jiān)控網(wǎng)絡(luò)的發(fā)展，利用監(jiān)控視頻作為破案線索的視頻偵查已成為公安刑偵偵查的重要手段，極大程度地打擊了違法份子的犯罪行為。但是，目前的視頻偵查主要通過(guò)肉眼查看視頻來(lái)進(jìn)行，效率低下而且很容易遺漏目標(biāo)。即使得到了嫌疑目標(biāo)如人的照片和視頻片段，其進(jìn)一步應(yīng)用也只能通過(guò)人工偵查方式進(jìn)行，對(duì)細(xì)節(jié)信息的獲取停留在經(jīng)驗(yàn)層面，沒有流程保障。

發(fā)明內(nèi)容
為克服現(xiàn)有技術(shù)中的缺點(diǎn)，本發(fā)明的目的在于提供一種基于視頻摘要、視頻檢索的視頻分析方法，該視頻分析方法能提高視頻偵查尤其是嫌疑目標(biāo)是人的偵查效率。為實(shí)現(xiàn)上述技術(shù)目的，達(dá)到上述技術(shù)效果，本發(fā)明通過(guò)以下技術(shù)方案實(shí)現(xiàn)一種基于視頻摘要、視頻檢索的視頻分析方法，其包括以下步驟步驟I)原始視頻導(dǎo)入從視頻監(jiān)控平臺(tái)獲取或本地存儲(chǔ)介質(zhì)拷貝獲取原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器；步驟2)判斷原始視頻是否需要進(jìn)行視頻濃縮處理在視頻濃縮檢索客戶端上根據(jù)實(shí)際需要判斷原始視頻是否需要進(jìn)行視頻濃縮處理，如果需要?jiǎng)t進(jìn)入步驟3，否則，直接則進(jìn)入步驟4 ；步驟3)視頻濃縮處理首先，通過(guò)視頻濃縮檢索服務(wù)器進(jìn)行視頻濃縮處理，得到包括所有運(yùn)動(dòng)目標(biāo)的視頻摘要和所有運(yùn)動(dòng)目標(biāo)的全快照；然后，根據(jù)所得的視頻摘要和全快照進(jìn)行視頻檢索處理；步驟4)視頻檢索處理通過(guò)視頻濃縮檢索服務(wù)器進(jìn)行視頻檢索處理，得到按特征相似度排列的運(yùn)動(dòng)目標(biāo)的目標(biāo)快照；步驟5)判斷是否需要進(jìn)行圖像增強(qiáng)處理如果嫌疑目標(biāo)的快照或視頻片段不夠清晰則進(jìn)入步驟6，否則，直接進(jìn)入步驟7 ;步驟6)圖像增強(qiáng)處理首先，調(diào)用圖像增強(qiáng)系統(tǒng)進(jìn)行圖像增強(qiáng)處理，并進(jìn)行局部區(qū)域的放大；所述圖像增強(qiáng)系統(tǒng)的圖像去模糊的過(guò)程，主要是通過(guò)模糊內(nèi)核對(duì)模糊圖像解卷積實(shí)現(xiàn)；然后，進(jìn)行人像偵查處理；步驟7)人像偵查處理
在視頻濃縮檢索客戶端上調(diào)用人像偵查系統(tǒng)進(jìn)行人像偵查，人像偵查系統(tǒng)可自動(dòng)輸出人的幾個(gè)明顯特征，包括人臉特寫、上衣、手部、鞋子及背包特寫照片；步驟8)所述的特寫照片可以直接作為線索，也可以作為特征輸入視頻濃縮檢索系統(tǒng)中以圖搜圖，進(jìn)一步檢索獲取更多信息；步驟9)將得到的人臉特寫結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)或違法犯罪信息資源查詢系統(tǒng)等進(jìn)行進(jìn)一步偵查。優(yōu)選的，在步驟I中，通過(guò)硬盤快速拷貝方法進(jìn)行快速拷貝實(shí)現(xiàn)原始視頻的導(dǎo)入。進(jìn)一步的，視頻濃縮檢索服務(wù)器處理時(shí)包括以下步驟首先，采用了動(dòng)態(tài)紋理建模方法，精確處理視頻背景變化，進(jìn)行背景建模；然后，視頻的邊界檢測(cè)，找出視頻中的突變和漸變變化，挨幀進(jìn)行視頻的分割，提取運(yùn)動(dòng)目標(biāo)對(duì)象，將獲取的運(yùn)動(dòng)目標(biāo)相關(guān)信息如大小、顏色或運(yùn)動(dòng)方向存入數(shù)據(jù)庫(kù)；最后，根據(jù)數(shù)據(jù)庫(kù)的內(nèi)容得到檢索結(jié)果，或者列出所有運(yùn)動(dòng)目標(biāo)的照片，或者進(jìn)行視頻拼接，將運(yùn)動(dòng)目標(biāo)拼接回背景中形成時(shí)間大為縮短的濃縮視頻。進(jìn)一步的，在步驟5之間還包括以下步驟通過(guò)人工對(duì)視頻摘要、全快照或目標(biāo)照片的偵查，找到嫌疑目標(biāo)的快照及對(duì)應(yīng)的視頻片段。本發(fā)明的有益效果是1、提聞海量視頻偵查的效率，減少目標(biāo)遺漏的可能；2、采用了圖像增強(qiáng)處理，提高運(yùn)動(dòng)模糊、散焦模糊等不良圖像的質(zhì)量；3、如果嫌疑目標(biāo)是人，能自動(dòng)獲取人的幾個(gè)關(guān)鍵特征，包括臉部特寫，上衣尤其是logo，手部特寫，鞋子、背包的照片，使視頻智能分析的結(jié)果應(yīng)用更智能。上述說(shuō)明僅是本發(fā)明技術(shù)方案的概述，為了能夠更清楚了解本發(fā)明的技術(shù)手段，并可依照說(shuō)明書的內(nèi)容予以實(shí)施，以下以本發(fā)明的較佳實(shí)施例并配合附圖詳細(xì)說(shuō)明如后。本發(fā)明的具體實(shí)施方式
由以下實(shí)施例及其附圖詳細(xì)給出。


此處所說(shuō)明的附圖用來(lái)提供對(duì)本發(fā)明的進(jìn)一步理解，構(gòu)成本申請(qǐng)的一部分，本發(fā)明的示意性實(shí)施例及其說(shuō)明用于解釋本發(fā)明，并不構(gòu)成對(duì)本發(fā)明的不當(dāng)限定。在附圖中圖1本發(fā)明的基于視頻摘要、視頻檢索的視頻分析方法的流程示意圖。
具體實(shí)施例方式下面將參考附圖并結(jié)合實(shí)施例，來(lái)詳細(xì)說(shuō)明本發(fā)明。參見圖1所示，一種基于視頻摘要、視頻檢索的視頻分析方法，其包括以下步驟步驟I)原始視頻導(dǎo)入從視頻監(jiān)控平臺(tái)獲取或本地存儲(chǔ)介質(zhì)拷貝獲取原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器；步驟2)判斷原始視頻是否需要進(jìn)行視頻濃縮處理在視頻濃縮檢索客戶端上根據(jù)實(shí)際需要判斷原始視頻是否需要進(jìn)行視頻濃縮處理，如果需要?jiǎng)t進(jìn)入步驟3，否則，直接則進(jìn)入步驟4 ；步驟3)視頻濃縮處理
首先，通過(guò)視頻濃縮檢索服務(wù)器進(jìn)行視頻濃縮處理，得到包括所有運(yùn)動(dòng)目標(biāo)的視頻摘要和所有運(yùn)動(dòng)目標(biāo)的全快照；然后，根據(jù)所得的視頻摘要和全快照進(jìn)行視頻檢索處理；步驟4)視頻檢索處理通過(guò)視頻濃縮檢索服務(wù)器進(jìn)行視頻檢索處理，得到按特征相似度排列的運(yùn)動(dòng)目標(biāo)的目標(biāo)快照；步驟5)判斷是否需要進(jìn)行圖像增強(qiáng)處理如果嫌疑目標(biāo)的快照或視頻片段不夠清晰則進(jìn)入步驟6，否則，直接進(jìn)入步驟7 ；步驟6)圖像增強(qiáng)處理首先，調(diào)用圖像增強(qiáng)系統(tǒng)進(jìn)行圖像增強(qiáng)處理，并進(jìn)行局部區(qū)域的放大；然后，進(jìn)行人像偵查處理；步驟7)人像偵查處理在視頻濃縮檢索客戶端上調(diào)用人像偵查系統(tǒng)進(jìn)行人像偵查，人像偵查系統(tǒng)可自動(dòng)輸出人的幾個(gè)明顯特征，包括人臉特寫、上衣、手部、鞋子及背包特寫照片；步驟8)所述的特寫照片可以直接作為線索，也可以作為特征輸入視頻濃縮檢索系統(tǒng)中以圖搜圖，進(jìn)一步檢索獲取更多信息；步驟9)將得到的人臉特寫結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)或違法犯罪信息資源查詢系統(tǒng)進(jìn)行進(jìn)一步偵查。實(shí)施例1 :如果某地發(fā)生重大搶劫傷人案，從偽裝和逃竄等方式來(lái)看，這是一起經(jīng)過(guò)精心謀劃的作案。其他偵查方式未果后轉(zhuǎn)向視頻偵查，準(zhǔn)備從嫌犯踩點(diǎn)作為突破口。但問(wèn)題是需要查看的視頻數(shù)量過(guò)大。通常需要查看的視頻包括案發(fā)前一個(gè)月的視頻。周圍雖然只有5個(gè)強(qiáng)相關(guān)的攝像頭，但晝夜錄像，視頻總量為3600小時(shí)。即使10個(gè)人每天看12小時(shí)，也需要看一個(gè)月，工作量太大，且很容易遺漏目標(biāo)。那通過(guò)這本實(shí)施例的基于視頻摘要、視頻檢索的視頻分析方法會(huì)是怎樣處理呢？1:從監(jiān)控平臺(tái)或本地存儲(chǔ)介質(zhì)中拷貝原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器。如果本地服務(wù)器資源緊張，還可以通過(guò)公安專網(wǎng)，調(diào)用其他地方的服務(wù)器。2 :需要處理的視頻中有白天的視頻也有黑夜的視頻，且目標(biāo)特征未知，先將原始視頻提交濃縮分析即進(jìn)行視頻濃縮處理；3 :視頻濃縮檢索服務(wù)器進(jìn)行視頻濃縮處理，得到包括所有運(yùn)動(dòng)目標(biāo)的視頻摘要和所有活動(dòng)目標(biāo)的全快照。通常情況下，夜晚視頻的濃縮比例能超過(guò)30倍，白天視頻濃縮比例也能達(dá)到10倍。這樣通過(guò)視頻濃縮處理后，查看視頻所需時(shí)間將會(huì)大為減少，而且還有快照作為輔助；4 :觀看上述步驟中產(chǎn)生的視頻摘要，結(jié)合人工偵查，找到嫌疑人的目標(biāo)快照及對(duì)應(yīng)的視頻片段。一旦找到有用信息，則可以根據(jù)這個(gè)信息的特征，對(duì)其他視頻進(jìn)行檢索操作，獲取更多嫌疑人的活動(dòng)狀況視頻和快照；5 :有部分嫌疑人的目標(biāo)快照和視頻片段由于對(duì)焦模糊等原因不夠清晰，調(diào)用圖像增強(qiáng)系統(tǒng)進(jìn)行去模糊處理，局部區(qū)域需要進(jìn)行放大；
6 :在視頻濃縮檢索客戶端上用人像偵查系統(tǒng)對(duì)嫌疑人進(jìn)行人像偵查，自動(dòng)獲取嫌疑人的幾個(gè)明顯特征，包括臉部特寫，上衣尤其是logo，手部特寫，鞋子、背包的照片，以流程來(lái)保證嫌疑人的信息能被充分收集。根據(jù)這些信息，確定嫌疑人的可能就大大增加；7:至此視頻偵查工作已經(jīng)完成，如果需要，可以將所述的人像明顯特征，結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)、違法犯罪信息資源查詢等系統(tǒng)進(jìn)行進(jìn)一步偵查；以上所述僅為本發(fā)明的優(yōu)選實(shí)施例而已，并不用于限制本發(fā)明，對(duì)于本領(lǐng)域的技術(shù)人員來(lái)說(shuō)，本發(fā)明可以有各種更改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
權(quán)利要求
1.基于視頻摘要、視頻檢索的視頻分析方法，其特征在于，包括以下步驟步驟I)原始視頻導(dǎo)入從視頻監(jiān)控平臺(tái)獲取或本地存儲(chǔ)介質(zhì)拷貝獲取原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器；步驟2)判斷原始視頻是否需要進(jìn)行視頻濃縮處理在視頻濃縮檢索客戶端上根據(jù)實(shí)際需要判斷原始視頻是否需要進(jìn)行視頻濃縮處理，如果需要?jiǎng)t進(jìn)入步驟3，否則，直接則進(jìn)入步驟4 ;步驟3)視頻濃縮處理首先，通過(guò)視頻濃縮檢索服務(wù)器進(jìn)行視頻濃縮處理，得到包括所有運(yùn)動(dòng)目標(biāo)的視頻摘要和所有運(yùn)動(dòng)目標(biāo)的全快照；然后，根據(jù)所得的視頻摘要和全快照進(jìn)行視頻檢索處理；步驟4)視頻檢索處理通過(guò)視頻濃縮檢索服務(wù)器進(jìn)行視頻檢索處理，得到按特征相似度排列的運(yùn)動(dòng)目標(biāo)的目標(biāo)快照；步驟5)判斷是否需要進(jìn)行圖像增強(qiáng)處理如果嫌疑目標(biāo)的快照或視頻片段不夠清晰則進(jìn)入步驟6，否則，直接進(jìn)入步驟7 ；步驟6)圖像增強(qiáng)處理首先，調(diào)用圖像增強(qiáng)系統(tǒng)進(jìn)行圖像增強(qiáng)處理，并進(jìn)行局部區(qū)域的放大；然后，進(jìn)行人像偵查處理；步驟7)人像偵查處理在視頻濃縮檢索客戶端上調(diào)用人像偵查系統(tǒng)進(jìn)行人像偵查，人像偵查系統(tǒng)可自動(dòng)輸出人的幾個(gè)明顯特征，包括人臉特寫、上衣、手部、鞋子及背包特寫照片。
2.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，還包括 步驟8)所述的特寫照片可以直接作為線索，也可以作為特征輸入視頻濃縮檢索系統(tǒng)中以圖搜圖，進(jìn)一步檢索獲取更多信息。
3.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，還包括 步驟9)將得到的人臉特寫結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)或違法犯罪信息資源查詢等系統(tǒng)進(jìn)行進(jìn)一步偵查。
4.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于步驟I 中，通過(guò)硬盤快速拷貝方法進(jìn)行快速拷貝實(shí)現(xiàn)原始視頻的導(dǎo)入。
5.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于所述圖像增強(qiáng)系統(tǒng)的圖像去模糊的過(guò)程，主要是通過(guò)模糊內(nèi)核對(duì)模糊圖像解卷積實(shí)現(xiàn)。
6.根據(jù)權(quán)利要求1、2、3、4或5所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，視頻濃縮檢索服務(wù)器處理時(shí)包括以下步驟首先，采用了動(dòng)態(tài)紋理建模方法，精確處理視頻背景變化，進(jìn)行背景建模；然后，視頻的邊界檢測(cè)，找出視頻中的突變和漸變變化，挨幀進(jìn)行視頻的分割，提取運(yùn)動(dòng)目標(biāo)對(duì)象，將獲取的運(yùn)動(dòng)目標(biāo)相關(guān)信息如大小、顏色或運(yùn)動(dòng)方向存入數(shù)據(jù)庫(kù)；最后，根據(jù)數(shù)據(jù)庫(kù)的內(nèi)容得到檢索結(jié)果，或者列出所有運(yùn)動(dòng)目標(biāo)的照片，或者進(jìn)行視頻拼接，將運(yùn)動(dòng)目標(biāo)拼接回背景中形成時(shí)間大為縮短的濃縮視頻。
7.根據(jù)權(quán)利1、2、3、4或5所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，在步驟5之間還包括以下步驟通過(guò)人工對(duì)視頻摘要、全快照或目標(biāo)照片的偵查，找到嫌疑目標(biāo)的快照及對(duì)應(yīng)的視頻片段。
全文摘要
本發(fā)明公開了一種基于視頻摘要、視頻檢索的視頻分析方法，其包括以下步驟步驟1)原始視頻導(dǎo)入；步驟2)判斷原始視頻是否需要進(jìn)行視頻濃縮處理；步驟3)視頻濃縮處理；步驟4)視頻檢索處理；步驟5)判斷是否需要進(jìn)行圖像增強(qiáng)處理；步驟6)圖像增強(qiáng)處理；步驟7)人像偵查處理。該視頻分析方法能提高了海量視頻偵查的效率，減少目標(biāo)遺漏的可能。
文檔編號(hào)G06F17/30GK103020275SQ20121057887
公開日2013年4月3日 申請(qǐng)日期2012年12月28日 優(yōu)先權(quán)日2012年12月28日
發(fā)明者姚領(lǐng)眾 申請(qǐng)人:蘇州千視通信科技有限公司