運用時間序列結(jié)構(gòu)光技術(shù)實現(xiàn)投影顯示幾何校正的方法
【專利摘要】本發(fā)明是針對不規(guī)則投影表面的一種運用時間序列結(jié)構(gòu)光技術(shù)實現(xiàn)投影顯示幾何校正的方法。使用時間序列結(jié)構(gòu)光技術(shù)得到攝像頭圖像與投影機緩存圖像的坐標對應(yīng)關(guān)系，在攝像頭圖像中確定投影有效區(qū)域，在投影有效區(qū)域內(nèi)計算出最終圖像顯示區(qū)域，求解最終圖像顯示區(qū)域與原始圖像的單應(yīng)性關(guān)系，根據(jù)該單應(yīng)性關(guān)系以及攝像頭圖像與投影機緩存圖像的坐標對應(yīng)關(guān)系建立原始圖像到投影機緩存圖像的非線性離散映射關(guān)系，根據(jù)離散映射點將原始圖像與投影機緩存平面網(wǎng)格化，最后在對應(yīng)網(wǎng)格區(qū)域采用紋理映射把原始圖像變換到投影機緩存平面。本發(fā)明可用于針對不規(guī)則表面的投影顯示幾何校正。本發(fā)明具有幾何校正精度高、計算效率高、操作簡便的優(yōu)點。
【專利說明】運用時間序列結(jié)構(gòu)光技術(shù)實現(xiàn)投影顯示幾何校正的方法

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及多投影機拼接中的投影顯示幾何校正技術(shù)，特別是涉及基于時間序列結(jié)構(gòu)光技術(shù)的針對不規(guī)則投影表面的幾何校正。

【背景技術(shù)】
[0002]向不規(guī)則三維表面投影時，受投影表面三維形狀和投影機擺放位置和朝向的影響，顯示圖像會產(chǎn)生幾何畸變。利用計算機視覺技術(shù)，對投影機緩存圖像進行幾何修正，使人眼在特定位置和視角觀察投影畫面時，能看到?jīng)]有幾何畸變的投影圖像。該技術(shù)可用于投影拼接中的幾何校正問題。三維表面投影的幾何校正技術(shù)使投影環(huán)境擺脫了專用投影屏幕的限制，作為多投影拼接的關(guān)鍵技術(shù)，被廣泛應(yīng)用于高分辨率、大屏幕、沉浸式顯示，如機場塔臺模擬系統(tǒng)、遠程視頻會議顯示、辦公室交互式顯示環(huán)境等。羅建利等在論文“多投影儀自由立體顯示系統(tǒng)中的特征點檢測及幾何校正[J]。電子學(xué)報，2010，38 (8): 1729-1735”中采用投影和捕捉特征圖案的方法獲取攝像頭平面與投影機緩存平面的對應(yīng)關(guān)系，并通過該對應(yīng)關(guān)系對投影圖像進行幾何校正。該方法首先投影和捕捉圓形特征點陣列；對拍攝到的特征點陣列進行特征點檢測，采用基于Hough變換的圓檢測方法檢測特征圓，然后使用最小二乘直線擬合方法對特征點位置進行校正；利用檢測到的特征點在攝像頭空間與投影機緩存空間建立一一對應(yīng)的網(wǎng)格；最后，根據(jù)對應(yīng)網(wǎng)格間一一映射關(guān)系，把期望圖像紋理映射到投影機緩存空間來實現(xiàn)幾何校正。以上述方法為代表的基于投影特征圖案的幾何校正方法有如下缺陷:首先，檢測特征點的方法受投影環(huán)境干擾較大，常見干擾如反射率不一致的顯示表面、背景光、投影環(huán)境中的無關(guān)物體均會對特征點的檢測造成不利影響，上述干擾可能造成特征點的誤檢和漏檢，進而對后續(xù)步驟如網(wǎng)格構(gòu)建帶來不便。其次，由于建立起的映射網(wǎng)格越細密，攝像頭與投影機的映射關(guān)系越精確，幾何校正精度就越高，然而特征點檢測得到的特征點數(shù)目有限，導(dǎo)致得到的映射網(wǎng)格緊密程度不高，直接影響幾何校正的精確度。第三，采用Hough變換方法檢測拍攝到的已經(jīng)變形的非標準圓，雖然在后期處理中進行了校正，得到的圓心位置也不可避免存在誤差。第四，該方法利用特征點構(gòu)建網(wǎng)格的方法操作繁瑣、計算量大，包括排序、直線擬合、判斷和去除誤檢測點、插入漏檢測點等操作，不利于投影幾何校正的快速性。如何克服現(xiàn)有方法特征點檢測精確度低、抗干擾性差，映射網(wǎng)格不夠緊密，網(wǎng)格化過程操作繁瑣、計算效率低的缺點，應(yīng)用本發(fā)明提及的方案就可以解決這一關(guān)鍵技術(shù)問題。
[0003]


【發(fā)明內(nèi)容】

[0004]本發(fā)明的目的是針對目前投影顯示幾何校正方法特征點檢測精確度低、抗干擾性差，映射網(wǎng)格不夠緊密，網(wǎng)格化過程操作繁瑣、計算效率低的缺點，提供一種運用時間序列結(jié)構(gòu)光技術(shù)的投影顯示幾何校正方法，該方法精確度高、操作簡便。
[0005]本發(fā)明的目的是采用下述技術(shù)方案來實現(xiàn)的: 使用投影裝置向顯示表面投射水平和垂直方向的結(jié)構(gòu)光圖案序列，并用攝像裝置進行同步拍攝，通過解碼得到攝像頭圖像每個像素點對應(yīng)的投影機緩存圖像坐標，在攝像頭圖像中確定投影有效區(qū)域，在投影有效區(qū)域內(nèi)找一個與原始圖像具有相同橫縱比的最大內(nèi)接矩形作為最終圖像顯示區(qū)域Λ,，求解與原始圖像的單應(yīng)性關(guān)系s，根據(jù)s以及攝像頭圖像與投影機緩存圖像的坐標對應(yīng)關(guān)系建立原始圖像到投影機緩存圖像的非線性離散映射關(guān)系，根據(jù)離散映射點將原始圖像與投影機緩存平面網(wǎng)格化，在對應(yīng)網(wǎng)格區(qū)域采用紋理映射的方法把原始圖像變換到投影機緩存平面。
[0006]本發(fā)明與現(xiàn)有技術(shù)相比有如下優(yōu)點:
因為攝像頭空間中最終矩形顯示區(qū)域每一個像素點的對應(yīng)點均作為節(jié)點構(gòu)建映射網(wǎng)格，所以在攝像頭像素數(shù)目一定的條件下，本發(fā)明的網(wǎng)格劃分方法理論上是最精細的劃分方式，能達到很高的幾何校正精度；與基于特征點的網(wǎng)格化映射的方法相比，本文方法建立的網(wǎng)格精細程度更高，而且網(wǎng)格建立過程更加簡便直接，不必進行排序、直線擬合、判斷和去除誤檢測點、插入漏檢測點等繁瑣操作，能達到更高的計算效率和精確度。

【專利附圖】

【附圖說明】
[0007]圖1為本發(fā)明投影幾何校正系統(tǒng)結(jié)構(gòu)圖。
[0008]圖2為本發(fā)明投影幾何校正方法的工作流程圖。

【具體實施方式】
[0009]下面結(jié)合附圖、工作原理對本發(fā)明作進一步詳細說明。
[0010]附圖1為投影顯示幾何校正系統(tǒng)結(jié)構(gòu)圖，圖中101為攝像頭，102為投影機，103為計算機，104為不規(guī)則投影顯示表面。采用的裝置有I臺CAS1 XJ-M140投影機，投影機緩存幀大小為1024 X 768像素，灰度量化等級為8bit，投影機最大輸出頻率為150幀/s ;1個Prosilica GC650工業(yè)攝像頭,分辨率為>640 x 4S0像素,灰度量化等級為8bit,攝像頭最大捕捉頻率為62幀/S。I臺具有Core ?3 3530 CPU，4GB內(nèi)存的計算機。把由大尺寸紙張扭曲形成的不規(guī)則曲面作為投影顯示表面。在Microsoft Visual Stud1 2010環(huán)境下采用C++編寫主程序，應(yīng)用OpenGL完成紋理映射。附圖2為本實施例投影顯示幾何校正方法流程圖。攝像頭與投影機位置固定，攝像頭能捕捉到顯示表面上的整個投影區(qū)域。原始圖像的大小尺寸已知。投影機緩存圖像大小表示為其像素坐標為;攝像頭圖像像素坐標為本實例針對單投影幾何校正，具體實施步驟如下:
(I)用相位測量輪廓術(shù)(phase measuring profilometry, PMP)對顯示表面進行水平和垂直方向的掃描，得到水平相位和垂直相位.1f/j以及亮度調(diào)制
[0011]PMP 原理在論文 “Liu K，Wang Y，Lau D Lj et al.Dual-frequency patternscheme for high-speed 3-D shape measurement[J].0pt.Express, 2010， 18(5):5229-5244”中有詳細介紹，現(xiàn)簡述如下:
用投影機向顯示表面投射正弦結(jié)構(gòu)光圖案，投射的圖案表示為:

【權(quán)利要求】
1.一種運用時間序列結(jié)構(gòu)光技術(shù)的投影顯示幾何校正算法，其特征在于使用投影裝置向顯示表面投射水平和垂直方向的結(jié)構(gòu)光圖案序列，并用攝像裝置進行同步拍攝，通過解碼得到攝像頭圖像每個像素點對應(yīng)的投影機緩存圖像坐標，在攝像頭圖像中確定投影有效區(qū)域，在投影有效區(qū)域內(nèi)找一個與原始圖像具有相同橫縱比的最大內(nèi)接矩形作為最終圖像顯示區(qū)域^^，求解與原始圖像的單應(yīng)性關(guān)系5，根據(jù)S以及攝像頭圖像與投影機緩存圖像的坐標對應(yīng)關(guān)系建立原始圖像到投影機緩存圖像的非線性離散映射關(guān)系，根據(jù)離散映射點將原始圖像與投影機緩存平面網(wǎng)格化，在對應(yīng)網(wǎng)格區(qū)域采用紋理映射的方法把原始圖像變換到投影機緩存平面。
2.按照權(quán)利要求1所述的方法，其特征在于所說的結(jié)構(gòu)光圖案序列包括線結(jié)構(gòu)光圖案序列、二進制結(jié)構(gòu)光圖案序列、格雷碼結(jié)構(gòu)光圖案序列、正弦結(jié)構(gòu)光圖案序列、三角波結(jié)構(gòu)光圖案序列、梯形波結(jié)構(gòu)光圖案序列。
3.按照權(quán)利要求1所述的方法，其特征在于所說的在攝像頭圖像中確定投影有效區(qū)域，是通過對正弦結(jié)構(gòu)光的亮度調(diào)制進行閾值分割來確定投影有效區(qū)域。
4.按照權(quán)利要求1所述的方法，其特征在于所說根據(jù)離散映射點將原始圖像與投影機緩存平面網(wǎng)格化，是利用映射到原始圖像中的離散點等間隔排列的特性，以上下左右相鄰4個映射點為一組把原始圖像坐標平面劃分為正方形網(wǎng)格，再利用原始圖像到投影機緩存圖像的離散映射關(guān)系d角定投影機緩存平面中對應(yīng)的四邊形網(wǎng)格劃分。
【文檔編號】H04N5/74GK104168467SQ201410442211
【公開日】2014年11月26日 申請日期:2014年9月2日 優(yōu)先權(quán)日:2014年9月2日
【發(fā)明者】劉凱, 龍云飛, 鄭曉軍, 吳煒, 楊曉敏 申請人:四川大學(xué)