一種基于深度標(biāo)注技術(shù)的3d視圖轉(zhuǎn)換方法
【專利摘要】本發(fā)明公開了一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,包括:選取待轉(zhuǎn)換的2D視圖素材、3D轉(zhuǎn)換可行性分析、分割與聚類、整片3D鏡頭效果預(yù)期、鏡頭3D立體效果調(diào)節(jié)及3D立體視覺校準(zhǔn)操作;本發(fā)明所設(shè)計(jì)的一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法能夠自動(dòng)生成深度貼圖,提高工作效率,操作簡單、明晰,只需要少量人工操作,同時(shí)單幀標(biāo)注的深度能夠在整個(gè)視頻中相似的幀之間得到復(fù)用,最終轉(zhuǎn)換畫面完美無瑕。
【專利說明】一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及數(shù)字影像處理領(lǐng)域,特別是一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法。
【背景技術(shù)】
[0002]目前,三維(3D)影像的制作,主要使用2眼式3D相機(jī),或者通過2D-3D轉(zhuǎn)換技術(shù)對2D影像進(jìn)行數(shù)字處理,制作出左眼及右眼用影像,不過,兩種技術(shù)都還存在很多課題。
[0003]3D相機(jī)需要設(shè)置能以調(diào)整光軸的方式固定兩臺相機(jī)的“Rig”臺架,一般來說整個(gè)系統(tǒng)大且重。因此,3D相機(jī)本身的成本、機(jī)動(dòng)性較低以及每個(gè)拍攝場景的調(diào)整技術(shù)與經(jīng)驗(yàn)都是大問題。
[0004]由于2D-3D轉(zhuǎn)換技術(shù)需要將2D影像的各部分嵌入3D的計(jì)算機(jī)圖形(CG)空間中,要制作出比較協(xié)調(diào)的自然3D影像,一般需要進(jìn)行名為“Roto”、由數(shù)百人手工操作的大規(guī)模調(diào)整工作;即便如此,由于具有只需要拍攝2D電影,以及各過去拍攝的2D電影等可轉(zhuǎn)換為3D的優(yōu)點(diǎn),因此在最近的3D電影中,幾乎整部影片都采用2D-3D轉(zhuǎn)換技術(shù)制作的作品越來越多;即使是3D相機(jī)拍攝的影像,為了根據(jù)熒屏及電視屏幕的尺寸調(diào)整3D影像的視差,也會采用2D-3D轉(zhuǎn)換技術(shù),所以設(shè)計(jì)一種高效的3D視圖轉(zhuǎn)換方法即為本發(fā)明所要解決的技術(shù)問題。
【發(fā)明內(nèi)容】
[0005]本發(fā)明所要解決的技術(shù)問題是,克服現(xiàn)有技術(shù)的缺點(diǎn),提供一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,能夠自動(dòng)生成深度貼圖,提高工作效率,操作簡單、明晰,只需要少量人工操作,同時(shí)單幀標(biāo)注的深度能夠在整個(gè)視頻中相似的幀之間得到復(fù)用,最終轉(zhuǎn)換畫面完美無瑕。
[0006]為了解決以上技術(shù)問題,本發(fā)明提供一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,包括如下步驟:
[0007]步驟⑴:選取待轉(zhuǎn)換的2D視圖素材;
[0008]步驟⑵:對步驟⑴中的2D視圖進(jìn)行3D轉(zhuǎn)換可行性分析,若分析通過則執(zhí)行步驟(2),若分析不通過則結(jié)束操作;
[0009]步驟(3):對上述2D視圖進(jìn)行3D鏡頭分類,即分割與聚類;
[0010]步驟(4):對分類后的2D視圖進(jìn)行整片3D鏡頭效果預(yù)期;
[0011]步驟(5):對步驟(4)處理后的視圖進(jìn)行鏡頭3D立體效果調(diào)節(jié);
[0012]步驟(6):對步驟(5)處理后的視圖進(jìn)行3D立體視覺校準(zhǔn)。
[0013]本發(fā)明進(jìn)一步限定的技術(shù)方案是:
[0014]進(jìn)一步的,前述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,所述步驟(5)包括如下具體處理:
[0015]步驟(51):對步驟⑷處理后的視圖進(jìn)行鏡頭3D深度解算;
[0016]步驟(52):根據(jù)上述精算結(jié)果對步驟(4)處理后的視圖進(jìn)行深度圖修補(bǔ);
[0017]步驟(53):對深度圖修補(bǔ)后的視圖中的特殊鏡頭進(jìn)行三維空間建構(gòu)。
[0018]前述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,所述步驟(5)中即可將普通的平面圖面轉(zhuǎn)換為多個(gè)視圖,而每個(gè)視圖之間的距離差根據(jù)畫面的不同自行設(shè)置到最佳為止。
[0019]前述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,所述步驟(2)中在可行性分析前對步驟(I)選取的2D視圖素材中的單幀圖像進(jìn)行深度標(biāo)注。
[0020]前述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,步驟(3)中分割與聚類操作具體為:
[0021]A.首先把2D視圖素材中所關(guān)注的一個(gè)或多個(gè)前景使用半自動(dòng)交互的方法分割出來;
[0022]B.再對場景的背景進(jìn)行簡單的標(biāo)注實(shí)現(xiàn)對背景深度的估計(jì);
[0023]C.最終根據(jù)前景在背景中的位置實(shí)現(xiàn)前景的深度定位,并與背景的深度進(jìn)行融八口 ο
[0024]前述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,步驟(3)中分割與聚類使得單幀標(biāo)注的深度能夠在整個(gè)視頻中相似的幀之間得到復(fù)用。
[0025]本發(fā)明的有益效果是:
[0026]1.本發(fā)明所設(shè)計(jì)的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法能夠根據(jù)畫面特征,使其人物和場景都飽滿、立體、真實(shí),這是2D轉(zhuǎn)3D技術(shù)的核心部分;
[0027]2.本發(fā)明所設(shè)計(jì)的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法能夠自動(dòng)生成深度貼圖,提高工作效率,操作簡單、明晰,只需要少量人工操作就能夠完成對單幀圖像的深度標(biāo)注;
[0028]3.本發(fā)明所設(shè)計(jì)的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法由于有鏡頭分割和聚類的功能,使得單幀標(biāo)注的深度能夠在整個(gè)視頻中相似的幀之間得到復(fù)用;
[0029]4.本發(fā)明所設(shè)計(jì)的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法轉(zhuǎn)換后的3D視圖補(bǔ)圖精致,使畫面完美無瑕。
【具體實(shí)施方式】
[0030]首先,我們簡單介紹一下:電影院放映采用的是偏振法,通過兩個(gè)放映機(jī),把兩個(gè)攝影機(jī)拍下的兩組膠片同步放映,使這略有差別的兩幅圖像重疊在銀幕上;這時(shí)如果用眼睛直接觀看,看到的畫面是重影模糊不清的,要看到立體電影,就要在每架電影機(jī)前裝一塊偏振片;從兩架放映機(jī)射出的光,通過偏振片后,就成了偏振光;左右兩架放映機(jī)前的偏振片的偏振化方向互相垂直,因而產(chǎn)生的兩束偏振光的偏振方向也互相垂直。
[0031]這兩束偏振光投射到銀幕上再反射到觀眾處,偏振光方向不改變;當(dāng)觀眾帶上偏振眼鏡后,左右兩片偏振鏡的偏振軸互相垂直并與放映鏡頭前的偏振軸一致,所以每只眼睛只看到相應(yīng)的偏振光圖象,即左眼只能看到左機(jī)映出的畫面,右眼只能看到右機(jī)映出的畫面,這樣就會像直接觀看那樣產(chǎn)生立體感覺。
[0032]實(shí)施例1
[0033]本實(shí)施例提供的一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,包括如下步驟:
[0034]步驟(I):選取待轉(zhuǎn)換的2D視圖素材;
[0035]步驟(2):對步驟(I)中的2D視圖進(jìn)行3D轉(zhuǎn)換可行性分析,可行性分析前對步驟
(I)選取的2D視圖素材中的單幀圖像進(jìn)行深度標(biāo)注,若分析通過則執(zhí)行步驟(2),若分析不通過則結(jié)束操作;
[0036]步驟(3):對上述2D視圖進(jìn)行3D鏡頭分類,即分割與聚類,分割與聚類操作具體為:
[0037]A.首先把2D視圖素材中所關(guān)注的一個(gè)或多個(gè)前景使用半自動(dòng)交互的方法分割出來;
[0038]B.再對場景的背景進(jìn)行簡單的標(biāo)注實(shí)現(xiàn)對背景深度的估計(jì);
[0039]C.最終根據(jù)前景在背景中的位置實(shí)現(xiàn)前景的深度定位,并與背景的深度進(jìn)行融合;
[0040]分割與聚類使得單幀標(biāo)注的深度能夠在整個(gè)視頻中相似的幀之間得到復(fù)用;
[0041]步驟(4):對分類后的2D視圖進(jìn)行整片3D鏡頭效果預(yù)期;
[0042]步驟(5):對步驟⑷處理后的視圖進(jìn)行鏡頭3D立體效果調(diào)節(jié),具體處理:
[0043]步驟(51):對步驟(4)處理后的視圖進(jìn)行鏡頭3D深度解算;
[0044]步驟(52):根據(jù)上述精算結(jié)果對步驟(4)處理后的視圖進(jìn)行深度圖修補(bǔ);
[0045]步驟(53):對深度圖修補(bǔ)后的視圖中的特殊鏡頭進(jìn)行三維空間建構(gòu);
[0046]即可將普通的平面圖面轉(zhuǎn)換為多個(gè)視圖,而每個(gè)視圖之間的距離差根據(jù)畫面的不同自行設(shè)置到最佳為止;
[0047]步驟(6):對步驟(5)處理后的視圖進(jìn)行3D立體視覺校準(zhǔn)。
[0048]以上實(shí)施例僅為說明本發(fā)明的技術(shù)思想,不能以此限定本發(fā)明的保護(hù)范圍,凡是按照本發(fā)明提出的技術(shù)思想,在技術(shù)方案基礎(chǔ)上所做的任何改動(dòng),均落入本發(fā)明保護(hù)范圍之內(nèi)。
【權(quán)利要求】
1.一種基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,其特征在于,包括如下步驟: 步驟(I):選取待轉(zhuǎn)換的2D視圖素材; 步驟(2):對步驟(I)中的2D視圖進(jìn)行3D轉(zhuǎn)換可行性分析,若分析通過則執(zhí)行步驟(2),若分析不通過則結(jié)束操作; 步驟(3):對上述2D視圖進(jìn)行3D鏡頭分類,即分割與聚類; 步驟(4):對分類后的2D視圖進(jìn)行整片3D鏡頭效果預(yù)期; 步驟(5):對步驟(4)處理后的視圖進(jìn)行鏡頭3D立體效果調(diào)節(jié); 步驟(6):對步驟(5)處理后的視圖進(jìn)行3D立體視覺校準(zhǔn)。
2.根據(jù)權(quán)利要求1所述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,其特征在于,所述步驟(5)包括如下具體處理: 步驟(51):對步驟(4)處理后的視圖進(jìn)行鏡頭3D深度解算; 步驟(52):根據(jù)上述精算結(jié)果對步驟(4)處理后的視圖進(jìn)行深度圖修補(bǔ); 步驟(53):對深度圖修補(bǔ)后的視圖中的特殊鏡頭進(jìn)行三維空間建構(gòu)。
3.根據(jù)權(quán)利要求1或2所述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,其特征在于,所述步驟(5)中即可將普通的平面圖面轉(zhuǎn)換為多個(gè)視圖,而每個(gè)視圖之間的距離差根據(jù)畫面的不同自行設(shè)置到最佳為止。
4.根據(jù)權(quán)利要求3所述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,其特征在于,所述步驟(2)中在可行性分析前對步驟(I)選取的2D視圖素材中的單幀圖像進(jìn)行深度標(biāo)注。
5.根據(jù)權(quán)利要求4所述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,其特征在于,步驟(3)中分割與聚類操作具體為: A.首先把2D視圖素材中所關(guān)注的一個(gè)或多個(gè)前景使用半自動(dòng)交互的方法分割出來; B.再對場景的背景進(jìn)行簡單的標(biāo)注實(shí)現(xiàn)對背景深度的估計(jì); C.最終根據(jù)前景在背景中的位置實(shí)現(xiàn)前景的深度定位,并與背景的深度進(jìn)行融合。
6.根據(jù)權(quán)利要求5所述的基于深度標(biāo)注技術(shù)的3D視圖轉(zhuǎn)換方法,其特征在于,步驟(3)中分割與聚類使得單幀標(biāo)注的深度能夠在整個(gè)視頻中相似的幀之間得到復(fù)用。
【文檔編號】G06T15/00GK104240279SQ201410329353
【公開日】2014年12月24日 申請日期:2014年7月11日 優(yōu)先權(quán)日:2014年7月11日
【發(fā)明者】沈會艷 申請人:江蘇瑞洋動(dòng)漫制作有限公司