視頻目標(biāo)區(qū)域遮擋方法和裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及視頻圖像領(lǐng)域，具體來(lái)說(shuō)，涉及一種視頻目標(biāo)區(qū)域遮擋方法和裝置。
【背景技術(shù)】
[0002]目前，在視頻影像中，人們?yōu)榱吮Ｗo(hù)個(gè)人隱私，通常會(huì)采用戴帽子或戴墨鏡的方式來(lái)避免暴露個(gè)人身份，但是這種方式會(huì)給當(dāng)事人帶來(lái)不便，于是，為了減少當(dāng)事人的負(fù)擔(dān)，在現(xiàn)有技術(shù)中，普遍通過(guò)對(duì)視頻圖像進(jìn)行遮擋或?qū)σ曨l圖像打馬賽克的方式來(lái)實(shí)現(xiàn)對(duì)視頻圖像中人物圖像的遮擋，從而達(dá)到保護(hù)個(gè)人隱私的目的。
[0003]但是對(duì)于現(xiàn)有技術(shù)中的上述兩種視頻圖像處理方式來(lái)說(shuō)，均存在一些需要解決的問(wèn)題，首先，就現(xiàn)有技術(shù)中的對(duì)視頻圖像進(jìn)行遮擋的方法而言，其實(shí)是通過(guò)在視頻中的原圖像位置直接覆蓋了一個(gè)替換圖像，而替換圖像也僅僅只是達(dá)到了對(duì)原始圖像進(jìn)行遮擋的效果，替換圖像并不能夠與視頻中的圖像場(chǎng)景相銜接和融合，舉例而言，其就是將一幅現(xiàn)有的圖片直接貼到人臉的位置，但是該圖片并不能夠與人臉相匹配，也不能夠與周?chē)谋尘皥D像相銜接與融合。
[0004]另一方面，就現(xiàn)有技術(shù)中的對(duì)視頻圖像打馬賽克的方法而言，其是通過(guò)在視頻中鎖定人眼的位置，然后對(duì)人眼所在的固定矩形區(qū)域進(jìn)行放大縮小的方式，從而達(dá)到對(duì)人眼打馬賽克的效果，雖然這種方式在一定程度上保護(hù)了個(gè)人的隱私，但是，這種通過(guò)對(duì)視頻圖像打馬賽克的方法同樣存在視覺(jué)上影響美觀的問(wèn)題。
[0005]針對(duì)相關(guān)技術(shù)中的上述問(wèn)題，目前尚未提出有效的解決方案。

【發(fā)明內(nèi)容】

[0006]針對(duì)相關(guān)技術(shù)中的上述問(wèn)題，本發(fā)明提出一種視頻目標(biāo)區(qū)域遮擋方法和裝置，能夠采用與目標(biāo)區(qū)域相匹配的圖像作為區(qū)域替換圖像，并使設(shè)置有區(qū)域替換圖像的目標(biāo)區(qū)域與視頻的背景圖像相銜接與融合，且不影響美觀。
[0007]本發(fā)明的技術(shù)方案是這樣實(shí)現(xiàn)的:
[0008]根據(jù)本發(fā)明的一個(gè)方面，提供了一種視頻目標(biāo)區(qū)域遮擋方法。
[0009]該視頻目標(biāo)區(qū)域遮擋方法包括:
[0010]通過(guò)對(duì)視頻圖像進(jìn)行分析，確定所述視頻圖像中的目標(biāo)區(qū)域，以及所述目標(biāo)區(qū)域中的目標(biāo)特征；
[0011]根據(jù)所述目標(biāo)特征對(duì)視頻圖像進(jìn)行跟蹤，確定目標(biāo)區(qū)域在視頻圖像中的位置；
[0012]基于目標(biāo)特征對(duì)目標(biāo)區(qū)域進(jìn)行機(jī)器學(xué)習(xí)，確定預(yù)先配置的區(qū)域替換圖像數(shù)據(jù)庫(kù)中與目標(biāo)區(qū)域相匹配的區(qū)域替換圖像；
[0013]通過(guò)無(wú)縫拼接技術(shù)將區(qū)域替換圖像置于目標(biāo)區(qū)域，使區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接。
[0014]其中，在通過(guò)對(duì)視頻圖像進(jìn)行分析，確定視頻圖像中的目標(biāo)區(qū)域，以及目標(biāo)區(qū)域中的目標(biāo)特征時(shí)，可通過(guò)對(duì)視頻圖像進(jìn)行分析，確定視頻圖像的前景圖像和背景圖像；再對(duì)前景圖像進(jìn)行檢測(cè)和/或人工標(biāo)定，從而確定前景圖像中的目標(biāo)區(qū)域，以及目標(biāo)區(qū)域中的目標(biāo)特征。
[0015]此外，在區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接后，該視頻目標(biāo)區(qū)域遮擋方法進(jìn)一步包括:
[0016]通過(guò)對(duì)目標(biāo)區(qū)域進(jìn)行跟蹤，可確定目標(biāo)區(qū)域的目標(biāo)特征變化；
[0017]并根據(jù)目標(biāo)區(qū)域的目標(biāo)特征變化對(duì)視頻圖像中的區(qū)域替換圖像進(jìn)行處理，使處理后的區(qū)域替換圖像與目標(biāo)區(qū)域變換后的目標(biāo)特征相匹配。
[0018]另外，無(wú)縫拼接技術(shù)可采用圖像梯度域編輯方法。
[0019]此外，視頻圖像的目標(biāo)特征可包括以下至少之一:
[0020]局部特征、輪廓特征、紋理特征。
[0021]根據(jù)本發(fā)明的另一方面，提供了一種視頻目標(biāo)區(qū)域遮擋裝置。
[0022]該視頻目標(biāo)區(qū)域遮擋裝置包括:
[0023]分析模塊，用于通過(guò)對(duì)視頻圖像進(jìn)行分析，確定視頻圖像中的目標(biāo)區(qū)域，以及目標(biāo)區(qū)域中的目標(biāo)特征；
[0024]跟蹤模塊，用于根據(jù)目標(biāo)特征對(duì)視頻圖像進(jìn)行跟蹤，確定目標(biāo)區(qū)域在視頻圖像中的位置；
[0025]學(xué)習(xí)模塊，用于基于目標(biāo)特征對(duì)目標(biāo)區(qū)域進(jìn)行機(jī)器學(xué)習(xí)，確定預(yù)先配置的區(qū)域替換圖像數(shù)據(jù)庫(kù)中與目標(biāo)區(qū)域相匹配的區(qū)域替換圖像；
[0026]拼接模塊，用于通過(guò)無(wú)縫拼接技術(shù)將區(qū)域替換圖像置于目標(biāo)區(qū)域，使區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接。
[0027]其中，分析模塊包括:
[0028]第一分析子模塊，用于對(duì)視頻圖像進(jìn)行分析，確定視頻圖像的前景圖像和背景圖像；
[0029]第二分析子模塊，用于對(duì)前景圖像進(jìn)行檢測(cè)和/或人工標(biāo)定，確定前景圖像中的目標(biāo)區(qū)域，以及目標(biāo)區(qū)域中的目標(biāo)特征；
[0030]此外，該視頻目標(biāo)區(qū)域遮擋裝置進(jìn)一步包括:
[0031]跟蹤子模塊，用于在區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接后，對(duì)目標(biāo)區(qū)域進(jìn)行跟蹤，從而確定目標(biāo)區(qū)域的目標(biāo)特征變化；
[0032]處理模塊，用于根據(jù)目標(biāo)區(qū)域的目標(biāo)特征變化對(duì)視頻圖像中的區(qū)域替換圖像進(jìn)行處理，使處理后的區(qū)域替換圖像與目標(biāo)區(qū)域變換后的目標(biāo)特征相匹配。
[0033]另外，無(wú)縫拼接技術(shù)可采用圖像梯度域編輯方法。
[0034]此外，視頻圖像的特征可包括以下至少之一:
[0035]局部特征、輪廓特征、紋理特征。
[0036]本發(fā)明通過(guò)對(duì)視頻圖像的分析和跟蹤，從而確定目標(biāo)區(qū)域，并通過(guò)機(jī)器學(xué)習(xí)的方式確定與目標(biāo)區(qū)域相匹配的區(qū)域替換圖像，并通過(guò)無(wú)縫拼接技術(shù)對(duì)目標(biāo)區(qū)域進(jìn)行區(qū)域替換圖像的實(shí)時(shí)替換，使經(jīng)過(guò)圖像替換的目標(biāo)區(qū)域與視頻圖像的背景圖像相銜接與融合，且不影響美觀。
【附圖說(shuō)明】
[0037]為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對(duì)實(shí)施例中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見(jiàn)地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
[0038]圖1是根據(jù)本發(fā)明實(shí)施例的視頻目標(biāo)區(qū)域遮擋方法的流程圖；
[0039]圖2是根據(jù)本發(fā)明一具體實(shí)施例的視頻目標(biāo)區(qū)域遮擋方法的流程圖；
[0040]圖3是根據(jù)本發(fā)明實(shí)施例的視頻目標(biāo)區(qū)域遮擋裝置的框圖。
【具體實(shí)施方式】
[0041]下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。
[0042]根據(jù)本發(fā)明的實(shí)施例，提供了一種視頻目標(biāo)區(qū)域遮擋方法。
[0043]如圖1所示，根據(jù)本發(fā)明實(shí)施例的視頻目標(biāo)區(qū)域遮擋方法包括:
[0044]步驟S101，通過(guò)對(duì)視頻圖像進(jìn)行分析，確定所述視頻圖像中的目標(biāo)區(qū)域，以及所述目標(biāo)區(qū)域中的目標(biāo)特征；
[0045]步驟S103，根據(jù)所述目標(biāo)特征對(duì)視頻圖像進(jìn)行跟蹤，確定目標(biāo)區(qū)域在視頻圖像中的位置；
[0046]步驟S105，基于目標(biāo)特征對(duì)目標(biāo)區(qū)域進(jìn)行機(jī)器學(xué)習(xí)，確定預(yù)先配置的區(qū)域替換圖像數(shù)據(jù)庫(kù)中與目標(biāo)區(qū)域相匹配的區(qū)域替換圖像；
[0047]步驟S107，通過(guò)無(wú)縫拼接技術(shù)將區(qū)域替換圖像置于目標(biāo)區(qū)域，使區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接。
[0048]通過(guò)本發(fā)明的上述方案，能夠?qū)σ曨l圖像的分析和跟蹤，從而確定目標(biāo)區(qū)域，并通過(guò)機(jī)器學(xué)習(xí)的方式確定與目標(biāo)區(qū)域相匹配的區(qū)域替換圖像，并通過(guò)無(wú)縫拼接技術(shù)對(duì)目標(biāo)區(qū)域進(jìn)行區(qū)域替換圖像的實(shí)時(shí)替換，使經(jīng)過(guò)圖像替換的目標(biāo)區(qū)域與視頻圖像的背景圖像相銜接與融合，且不影響美觀。
[0049]為了更好的理解本發(fā)明的上述技術(shù)方案，下面結(jié)合一具體實(shí)施例對(duì)本發(fā)明的上述技術(shù)方案進(jìn)行詳細(xì)闡述。
[0050]參照?qǐng)D2所示，為了對(duì)視頻圖像中的目標(biāo)區(qū)域(這里為用戶(hù)想要遮擋、替換的圖像區(qū)域)進(jìn)行遮擋或替換，首先，可對(duì)視頻圖像進(jìn)行區(qū)域劃分，具體的，可通過(guò)對(duì)視頻圖像進(jìn)行分析的方式，來(lái)確定視頻圖像中的前景圖像和背景圖像；
[0051]其中，對(duì)于目標(biāo)區(qū)域，即用戶(hù)想要遮擋或替換的圖像區(qū)域，在實(shí)際應(yīng)用中可以是人的眼睛區(qū)域、臉部輪廓區(qū)域、頭部區(qū)域、上半身區(qū)域、眼睛與上身服飾區(qū)域、服飾與頭部區(qū)域等等，也就是說(shuō)，目標(biāo)區(qū)域既可以是連通區(qū)域，也可以是非連通區(qū)域，還可以是多個(gè)非連通區(qū)域，本發(fā)明對(duì)此并不做限定。
[0052]然后，再對(duì)前景圖像進(jìn)行目標(biāo)區(qū)域的檢測(cè)，具體的，可通過(guò)對(duì)視頻的前景圖像序列的首張或前幾幀圖片進(jìn)行手工標(biāo)定和/或自動(dòng)檢測(cè)的方式，從而獲得目標(biāo)區(qū)域，以及目標(biāo)區(qū)域的特征(例如位置、邊緣、輪廓和紋理等特征)；
[0053]其中，在對(duì)圖像進(jìn)行手工標(biāo)定和/或自動(dòng)檢測(cè)時(shí)，如果沒(méi)有檢測(cè)到目標(biāo)區(qū)域，一種原因可能是前景圖像序列的首張或前幾幀圖片不存在目標(biāo)區(qū)域，那么可通過(guò)對(duì)后幾幀的圖片進(jìn)行手工標(biāo)定和/或自動(dòng)檢測(cè)的方式繼續(xù)檢測(cè)；另一種原因可能是區(qū)域劃分不準(zhǔn)確，即，此時(shí)的前景圖像中不存在目標(biāo)區(qū)域，那么可對(duì)視頻圖像重新進(jìn)行區(qū)域劃分(這里為，前景圖像與背景圖像的劃分)；
[0054]在檢測(cè)到視頻圖像中的目標(biāo)區(qū)域以及目標(biāo)區(qū)域的特征后，則可以進(jìn)行目標(biāo)的替換，具體的，需要根據(jù)檢測(cè)到的目標(biāo)區(qū)域的邊緣、輪廓和紋理等特征來(lái)對(duì)目標(biāo)區(qū)域進(jìn)行機(jī)器學(xué)習(xí)，從而在本地的用于視頻圖像遮擋的區(qū)域替換圖像數(shù)據(jù)庫(kù)中查找與目標(biāo)區(qū)域相匹配的圖像；
[0055]在查找到與目標(biāo)區(qū)域相匹配的區(qū)域替換圖像后，如圖2所示，可通過(guò)圖像梯度域編輯方法將區(qū)域替換圖像遮擋或替換至目標(biāo)區(qū)域，使區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接；
[0056]但是，應(yīng)當(dāng)注意的是，在本例中，采用的視頻圖像的無(wú)縫拼接技術(shù)雖然是圖像梯度域編輯方法，但是在實(shí)際應(yīng)用中，也可以根據(jù)實(shí)際需要采用其他的能夠使區(qū)域替換圖像與目標(biāo)區(qū)域的背景圖像形成無(wú)縫拼接的無(wú)縫拼接