基于多視角學(xué)習(xí)的魯棒性前景檢測方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及智能視頻監(jiān)控技術(shù),特別是涉及一種基于多視角學(xué)習(xí)的魯棒性前景檢 測方法。
【背景技術(shù)】
[0002] 智能視頻監(jiān)控是一種重要的信息采集手段,而前景檢測或背景消減是智能視頻監(jiān) 控研宄中一個很有挑戰(zhàn)性的底層問題。在前景檢測的基礎(chǔ)上,可以實現(xiàn)目標(biāo)跟蹤、識別、異 常檢測等其他應(yīng)用。前景檢測的基本原則是將視頻場景的當(dāng)前圖像與背景模型相比較,檢 測有顯著區(qū)別的區(qū)域。雖然看似簡單,前景檢測在實際應(yīng)用中經(jīng)常遇到三種挑戰(zhàn):運動陰 影、光照變化和圖像噪聲。運動陰影是由于光源被前景目標(biāo)遮擋造成的,在晴天時為硬陰 影,在陰天時為軟陰影。無論何種形式,運動陰影容易被檢測為前景,干擾對被分割前景目 標(biāo)的尺寸和形狀信息的提取。光照變化在交通場景中很常見。例如,隨著太陽在天空中移 動,光照也緩慢變化;當(dāng)太陽進入或移出云層時,光照也可能發(fā)生快速變化。另外,在圖像的 采集、壓縮和傳輸過程中,不可避免會引入噪聲。如果信噪比太低,將難以從背景場景中區(qū) 分出前景目標(biāo)。
[0003] 我們將前景檢測技術(shù)分為稀疏模型、參數(shù)模型、非參數(shù)模型、機器學(xué)習(xí)模型等。稀 疏模型主要利用主成分分析和矩陣分解的各種變體,將背景建模為低秩表示,將前景建模 為稀疏離群點。但是這類方法的計算復(fù)雜性較高,并且難以檢測與背景顏色相似的前景。參 數(shù)模型利用某種概率分布來建模背景。非參數(shù)模型在概率密度估計中具有更高的靈活性。 機器學(xué)習(xí)模型利用支持向量機、神經(jīng)網(wǎng)絡(luò)等機器學(xué)習(xí)方法進行前景和背景的分類。
[0004] 現(xiàn)有技術(shù)存在以下問題。第一,只利用亮度特征,但是亮度特征對光照變化和運動 陰影比較敏感。第二,只建立背景模型,將前景像素識別為離群點,難以區(qū)分與背景顏色相 似的前景。第三,沒有利用視頻序列中的時空一致性約束。
【發(fā)明內(nèi)容】
[0005] 本發(fā)明提供的基于多視角學(xué)習(xí)的魯棒性前景檢測方法,可以準(zhǔn)確地實現(xiàn)前景和背 景的分割。
[0006] 根據(jù)本發(fā)明的一方面,提供一種基于多視角學(xué)習(xí)的魯棒性前景檢測方法,包括:
[0007] 將輸入視頻通過時域中值濾波方法獲取參考背景圖像,對當(dāng)前圖像和所述參考背 景圖像進行迭代搜索和多尺度融合獲取異類特征;
[0008] 利用所述異類特征的條件獨立性計算前景類的條件概率密度和背景類的條件概 率密度,并且根據(jù)前景似然、背景似然和先驗概率利用貝葉斯規(guī)則計算前景的后驗概率和 背景的后驗概率;
[0009] 通過所述前景的后驗概率、所述背景的后驗概率和時空一致性約束構(gòu)建馬爾科夫 隨機場模型的能量函數(shù),利用置信傳播算法將所述能量函數(shù)最小化得到前景和背景的分割 結(jié)果。
[0010] 本發(fā)明實施例提供的基于多視角學(xué)習(xí)的魯棒性前景檢測方法,可以根據(jù)前景似 然、背景似然和先驗概率利用貝葉斯規(guī)則計算前景的后驗概率和背景的后驗概率,并通過 前景的后驗概率、背景的后驗概率和時空一致性約束構(gòu)建馬爾科夫隨機場模型的能量函 數(shù),從而利用置信傳播算法準(zhǔn)確地實現(xiàn)前景和背景的分割。
【附圖說明】
[0011] 圖1為本發(fā)明實施例提供的基于多視角學(xué)習(xí)的魯棒性前景檢測方法流程圖;
[0012] 圖2為本發(fā)明實施例提供的輸入視頻圖像和參考背景圖像示意圖;
[0013] 圖3為本發(fā)明實施例提供的金字塔搜索模板示意圖;
[0014] 圖4為本發(fā)明實施例提供的基于迭代搜索和多尺度融合的紋理變化特征示意圖;
[0015] 圖5為本發(fā)明實施例提供的RGB顏色模型示意圖;
[0016] 圖6為本發(fā)明實施例提供的亮度變化特征和色度變化特征示意圖;
[0017] 圖7為本發(fā)明實施例提供的候選背景獲取方法流程圖;
[0018] 圖8為本發(fā)明實施例提供的異類特征頻率直方圖;
[0019] 圖9為本發(fā)明實施例提供的圖像標(biāo)記結(jié)果示意圖;
[0020] 圖10為本發(fā)明實施例提供的前景和背景的分割結(jié)果示意圖。
【具體實施方式】
[0021] 下面結(jié)合附圖對本發(fā)明實施例提供的基于多視角學(xué)習(xí)的魯棒性前景檢測方法進 行詳細描述。
[0022] 圖1為本發(fā)明實施例提供的基于多視角學(xué)習(xí)的魯棒性前景檢測方法流程圖。
[0023] 參照圖1,在步驟S101,將輸入視頻通過時域中值濾波方法獲取參考背景圖像,對 當(dāng)前圖像和所述參考背景圖像進行迭代搜索和多尺度融合獲取異類特征。
[0024] 在步驟S102,利用所述異類特征的條件獨立性計算前景類的條件概率密度和背景 類的條件概率密度,并且根據(jù)前景似然、背景似然和先驗概率利用貝葉斯規(guī)則計算前景的 后驗概率和背景的后驗概率。
[0025] 在步驟S103,通過所述前景的后驗概率、所述背景的后驗概率和時空一致性約束 構(gòu)建馬爾科夫隨機場模型的能量函數(shù),利用置信傳播算法將所述能量函數(shù)最小化得到前景 和背景的分割結(jié)果。
[0026] 進一步地,所述將輸入視頻通過時域中值濾波方法獲取參考背景圖像包括:
[0027] 讀取所述輸入視頻的每幀圖像;
[0028] 將所述每幀圖像通過時域中值濾波方法獲取閾值時間窗口內(nèi)各個像素的中值;
[0029] 根據(jù)所述各個像素的中值得到所述參考背景圖像。
[0030] 這里,閾值時間窗口為500幀圖像的持續(xù)時間,具體參照如圖2所示的本發(fā)明實 施例提供的輸入視頻圖像和參考背景圖像示意圖,(a)為輸入視頻圖像,(b)為參考背景圖 像。
[0031] 進一步地,所述異類特征為紋理變化特征,所述對當(dāng)前圖像和所述參考背景圖像 進行迭代搜索和多尺度融合獲取異類特征包括:
[0032] 根據(jù)公式(1)計算所述紋理變化特征:
【主權(quán)項】
1. 一種基于多視角學(xué)習(xí)的魯棒性前景檢測方法,其特征在于,所述方法包括: 將輸