專利名稱：多目標(biāo)處理裝置及終端的制作方法
技術(shù)領(lǐng)域：
本實用新型涉及數(shù)字電視，尤其涉及一種多目標(biāo)處理裝置及終端。
背景技術(shù)：
隨著科技的發(fā)展，數(shù)字電視越來越普及，也越來越脫離當(dāng)前普通電視的含義。在信 息技術(shù)與媒體技術(shù)的背景下，數(shù)字電視系統(tǒng)越來越成為電視機(jī)與PC機(jī)的結(jié)合體，發(fā)展為一 種使觀眾通過遙控器或無線鍵盤與電視節(jié)目進(jìn)行互動的系統(tǒng)，最終將重塑我們生活、工作 和娛樂的方式。數(shù)字電視作為出售給消費(fèi)者的一種產(chǎn)品和服務(wù)，是包括電信網(wǎng)絡(luò)、高科技和娛樂 等多種產(chǎn)業(yè)的匯聚。同時，它具有跨行業(yè)的特征，它不僅用于數(shù)字電視、游戲娛樂，而且還可 以與互聯(lián)網(wǎng)溝通以實現(xiàn)種種信息和多媒體的綜合服務(wù)。因此它所使用的終端遙控器也應(yīng)該 同時兼具遙控和鼠標(biāo)等多重功能。發(fā)明人在實現(xiàn)本實用新型的過程中發(fā)現(xiàn)，目前兼具遙控和鼠標(biāo)等多重功能的遙控 器在使用過程中，接收端只能處理一個目標(biāo)，即判斷并在屏幕上顯示一個鼠標(biāo)箭頭，對于多 用戶同時操作的應(yīng)用環(huán)境，例如協(xié)同處理，多用戶游戲等等，目前的接收端并沒有很好的解 決方法。

實用新型內(nèi)容本實用新型提供一種多目標(biāo)處理裝置及終端，以處理多個運(yùn)動目標(biāo)，實現(xiàn)多用戶 同時操作的應(yīng)用，并準(zhǔn)確快速的定位。一方面，本實用新型實施例提供一種多目標(biāo)處理裝置，所述裝置包括發(fā)光體，用于發(fā)射光線，以便遙控器上的反光體反射所述光線；至少兩個圖像采集單元，每一個圖像采集單元用于獲取以反光體作為標(biāo)志物的遙 控器的連續(xù)圖像信息；聚類及濾波單元，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像信息，確 認(rèn)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖像的有效目標(biāo)，并計算每個有效目 標(biāo)的重心；多目標(biāo)分離單元，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖 像的有效目標(biāo)的重心坐標(biāo)，確認(rèn)所述有效目標(biāo)的移動軌跡；交叉判別單元，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖像 的有效目標(biāo)的重心坐標(biāo)，確認(rèn)有效目標(biāo)的實際重心坐標(biāo)；光標(biāo)偏移控制單元，用于根據(jù)所述有效目標(biāo)的實際重心坐標(biāo)和所述有效目標(biāo)的移 動軌跡，計算所述有效目標(biāo)的屏幕顯示坐標(biāo)，獲得與所述有效目標(biāo)的移動軌跡相對應(yīng)的屏 幕顯示坐標(biāo)的移動軌跡。另一方面，本實用新型實施例還提供一種終端，所述終端包括終端本體、前述的 多目標(biāo)處理裝置以及遙控器。[0014]通過本實用新型實施例提供的多目標(biāo)處理裝置及終端，可以處理多個運(yùn)動目標(biāo)， 實現(xiàn)多用戶同時操作的應(yīng)用，并準(zhǔn)確快速的定位。

此處所說明的附圖用來提供對本實用新型的進(jìn)一步理解，構(gòu)成本申請的一部分， 并不構(gòu)成對本實用新型的限定。在附圖中圖1為本實用新型實施例的多目標(biāo)處理裝置的組成框圖；圖2為本實用新型實施例的終端的組成框圖；圖3為本實用新型實施例的終端的應(yīng)用示意圖。
具體實施方式
為使本實用新型實施例的目的、技術(shù)方案和優(yōu)點更加清楚明白，下面結(jié)合實施例 和附圖，對本實用新型實施例做進(jìn)一步詳細(xì)說明。在此，本實用新型的示意性實施例及其說 明用于解釋本實用新型，但并不作為對本實用新型的限定。圖1為本實用新型實施例提供的一種多目標(biāo)處理裝置的組成框圖，請參照圖1，該 裝置包括發(fā)光體11、至少兩個圖像采集單元12、聚類及濾波單元13、多目標(biāo)分離單元14、 交叉判別單元15以及光標(biāo)偏移控制單元16，其中發(fā)光體11用于發(fā)射光線，以便遙控器上的反光體可以反射該光線，以便于本實施 例的圖像采集單元12可以獲取以該遙控器上的反光體作為標(biāo)志物的遙控器的連續(xù)圖像信 肩、ο在本實施例中，發(fā)光體11可以是紅外發(fā)光體，以發(fā)射紅外光；可以是激光發(fā)光體， 以發(fā)射激光；也可以是可見光發(fā)光體，以發(fā)射可見光，本實施例并不以此作為限制。在本實施例中，發(fā)光體11可以設(shè)置于方便遙控器上的反光體反光的位置，例如設(shè) 置于承載本實施例的多目標(biāo)處理裝置的終端的顯示屏幕四周，或者設(shè)置于圖像采集單元12 的四周，本實施例并不以此作為限制。每一個圖像采集單元12用于獲取以反光體作為標(biāo)志物的遙控器的連續(xù)圖像信 肩、ο在本實施例中，該圖像采集單元11可以是攝像頭，以通過拍攝的方式獲取遙控器 的圖像，以獲取其連續(xù)圖像信息。其可以通過現(xiàn)有的任何攝像頭芯片，例如Mage-Sensor來 實現(xiàn)。在本實施例中，遙控器可以是一個或者多個。該遙控器作為運(yùn)動目標(biāo)，設(shè)置有反光 體，以便攝像頭根據(jù)反射了光線的反光體的運(yùn)動軌跡獲知遙控器的運(yùn)動軌跡，并據(jù)此確認(rèn) 有效目標(biāo)。其中，反光體由反光材料制成，無需任何電源，且可以根據(jù)需要做成各種形狀，滿 足3D動作模式。其中，連續(xù)圖像信息是指攝像頭在預(yù)定時間內(nèi)拍攝到的一組圖像，例如1秒中拍 攝30幀圖像。在本實施例中，由于設(shè)置不止一個攝像頭，而每一個攝像頭都會采集遙控器的連 續(xù)圖像信息，因此，對應(yīng)每一個攝像頭，會獲得一組遙控器的連續(xù)圖像信息。聚類及濾波單元13用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像信息，確認(rèn)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖像的有效目標(biāo)，并計算每個有效 目標(biāo)的重心。在本實施例中，由于攝像頭拍攝到的圖像中可能存在多個目標(biāo)，例如除了遙控器 上的反光體反射出的光線形成的目標(biāo)以外，還可能具有其他靜止或運(yùn)動目標(biāo)，例如陽光、固 定的射燈發(fā)出的光、搖晃的燈光燈等等光源發(fā)出的光線形成的目標(biāo)，該聚類及濾波單元13 用于根據(jù)每一個攝像頭拍攝的連續(xù)圖像，判斷每一個有效目標(biāo)的存在。在本實施例中，對應(yīng)每一個圖像采集單元12采集到的連續(xù)圖像信息，聚類及濾波 單元13都要確認(rèn)該連續(xù)圖像中每幀圖像的有效目標(biāo)，并計算每個有效目標(biāo)的重心，因此， 經(jīng)過聚類及濾波單元13處理之后，得到對應(yīng)每一個圖像采集單元12的一組連續(xù)圖像中每 幀圖像的有效目標(biāo)的重心。根據(jù)本實施例的一個實施方式，該聚類及濾波單元13包括聚類處理模塊131、運(yùn) 動檢測模塊132、消噪模塊133以及計算模塊134，其中聚類處理模塊131用于根據(jù)每一個圖像采集單元12獲取到的所述連續(xù)圖像信息， 對具有相同特征的目標(biāo)進(jìn)行合并，獲得所述連續(xù)圖像中每幀圖像的多個目標(biāo)。其中，本實施例在進(jìn)行目標(biāo)判斷過程中進(jìn)行聚類處理，是為了減少圖像目標(biāo)的數(shù) 目，一方面，對太多目標(biāo)的處理占用一部分資源；另一方面，圖像中具有相同特征的不同目 標(biāo)可能本身就只是一個光源反饋的。本實施例通過聚類處理模塊對攝像頭拍攝到的連續(xù)圖 像進(jìn)行聚類算法處理，將相同特性的像素融合成一體，減少圖像中目標(biāo)的數(shù)目。其中，經(jīng)典 的聚類算法有基于分水嶺和模糊C均值聚類、基于K-Means聚類等等。在本實施方式中，通過聚類處理，將很多散點噪聲融合到一起，間接的起到了消噪 的目的，因此，該聚類處理模塊131還可以去掉大面積干擾噪聲或者靜止背景。運(yùn)動檢測模塊132用于從所述多個目標(biāo)中找出運(yùn)動目標(biāo)。在本實施例中，確定了存在的目標(biāo)之后，還可以根據(jù)運(yùn)動檢測來判斷每個目標(biāo)是 靜止的還是運(yùn)動的，從中找出運(yùn)動目標(biāo)，以便計算每個運(yùn)動目標(biāo)的重心。其中，運(yùn)動檢測可采用經(jīng)典算法，即相鄰幀的每個像素差如果大于一個閾值，且當(dāng) 前幀的這個像素處在消噪后的平坦背景中，則認(rèn)為此像素為運(yùn)動像素。在本實施例中，由于 已經(jīng)經(jīng)過聚類算法，每幀圖像中被聚類成多個目標(biāo)，則運(yùn)動檢測是基于相鄰幀目標(biāo)的，而不 是基于像素的。消噪模塊133用于對所述運(yùn)動目標(biāo)進(jìn)行濾波處理，以確認(rèn)每一個圖像采集單元獲 取到的所述連續(xù)圖像中每幀圖像的有效目標(biāo)。在本實施例中，如果圖像采集單元12是用于采集以反光體作為標(biāo)志物的多個遙 控器的圖像信息，則在本實施例中，該消噪模塊133可以確認(rèn)多個有效目標(biāo)。其中，一個有 效目標(biāo)對應(yīng)一個遙控器。在本實施例中，在攝像頭采集圖像時由于電路、電磁等干擾會引入各種噪聲，例如 高斯白噪聲，其特點是隨機(jī)性以及弱光強(qiáng)性，噪聲會給處理多目標(biāo)帶來干擾，所以本實施例 通過消噪模塊133根據(jù)連續(xù)多幀圖像信息來進(jìn)行濾波，選用不同的濾波模型以濾除掉相應(yīng) 的噪聲。其中，消噪模塊133可以采用經(jīng)典的幀間濾波模型，例如平均值濾波、高斯低通濾 波等等，例如，若N個連續(xù)幀中，同一目標(biāo)的重心坐標(biāo)為ρ (i)，相鄰重心坐標(biāo)差的絕對值為 A⑴，A(in) = |p(in)-p(in-l) |，若連續(xù)N幀的A(i)的均方差小于一個閾值，則認(rèn)為是高
5斯噪聲。計算模塊134，用于計算所述有效目標(biāo)的重心。多目標(biāo)分離單元14用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀 圖像的有效目標(biāo)的重心坐標(biāo)，確認(rèn)所述有效目標(biāo)的移動軌跡。本實施例的多目標(biāo)分離單元14利用所記錄的每一個圖像采集單元12采集到的 連續(xù)多幀圖像運(yùn)動目標(biāo)的重心坐標(biāo)，來判斷當(dāng)前幀圖像多個運(yùn)動目標(biāo)所屬的運(yùn)動軌跡。舉 例說明兩個反光體a，b各自運(yùn)動，對于任意一個圖像采集單元12采集到的連續(xù)多幀圖像 中的運(yùn)動目標(biāo)，每幀都會記錄兩個運(yùn)動目標(biāo)的重心坐標(biāo)A (η)，B (η)，則肯定會有兩條軌跡 TA (η)，TB (η)，每幀都會判斷出A (η)屬于TA (η)，B (η)屬于TB (η)。在本實施例中，該多目標(biāo)分離單元14是用于將每個運(yùn)動物體根據(jù)軌跡來自動判 斷應(yīng)該歸屬于哪個運(yùn)動目標(biāo)，也即，對于每個運(yùn)動物體，多目標(biāo)分離單元14會根據(jù)其各自 軌跡來自動判斷其歸屬于已知的哪個目標(biāo)。在本實施例中，由于不同目標(biāo)其運(yùn)動軌跡各不相同，本實施例的多目標(biāo)分離單元 14根據(jù)每個運(yùn)動物體的運(yùn)動軌跡來自動判斷當(dāng)前幀的有效目標(biāo)的重心坐標(biāo)應(yīng)該歸屬于哪 個目標(biāo)，例如，當(dāng)前幀的第i條軌跡T (n，i)，其在當(dāng)前幀中運(yùn)動坐標(biāo)預(yù)測值Pre (n，i)= 2*T(n-l，i)-T(n-2, i)，如果Pre(n，i)和當(dāng)前幀的某個目標(biāo)的重心坐標(biāo)C(n)的差的絕對 值小于一個閾值，則認(rèn)為這個目標(biāo)屬于第i條軌跡，以此類推，可以計算出當(dāng)前幀的所有目 標(biāo)屬于哪個軌跡。其中，運(yùn)動軌跡的檢測可以利用速度、加速度，或者分別利用目標(biāo)重心(X， Y)的運(yùn)動矢量等等，需要注意的是，當(dāng)目標(biāo)越多，其運(yùn)動軌跡檢測的正確性越低，因為各目 標(biāo)運(yùn)動軌跡間存在相似干擾，為解決此問題，可采用概率校驗的模型來檢測正確度進(jìn)行相 應(yīng)匹配，在此不再贅述。在本實施例中，還可以根據(jù)每個目標(biāo)的寬、高以及面積再次檢驗上述判斷是否正 確。例如，首先利用光流法和卡爾曼濾波模型，用最小均方差為估計準(zhǔn)則來檢驗，然后用寬 高及面積來校驗，因為發(fā)光體大小固定的情況下，其在攝像頭成像寬高大小都可以設(shè)定成 閾值來加以限制。需要注意的是，如果用戶前后移動遙控器，其反映到圖像上的運(yùn)動目標(biāo)的 寬高面積也會發(fā)生改變，為解決這個問題，可以采用多個攝像頭，用3D方法計算出每個目 標(biāo)距離屏幕的距離以及角度等來進(jìn)行區(qū)分，在此不再贅述。交叉判別單元15用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖 像的有效目標(biāo)的重心坐標(biāo)，確認(rèn)有效目標(biāo)的實際重心坐標(biāo)。在本實施例中，由于設(shè)置了至少兩個圖像采集單元12，對于每一個圖像采集單元 采集到的連續(xù)圖像信息，都會經(jīng)過聚類及濾波單元13、多目標(biāo)分離單元14的處理，經(jīng)過上 述處理后，得到對應(yīng)每一個圖像采集單元12的有效目標(biāo)的重心坐標(biāo)，本實施例的交叉判別 單元15即將根據(jù)每一個圖像采集單元12采集的連續(xù)圖像信息獲得的有效目標(biāo)的重心坐 標(biāo)，來確認(rèn)有效目標(biāo)的真實坐標(biāo)。根據(jù)本實施例的一個實施方式，交叉判別單元15針對一個接收端在多個攝像頭 (通常為2個)的中心坐標(biāo)的關(guān)系來判斷當(dāng)前運(yùn)動物體，也即有效目標(biāo)的真實坐標(biāo)。設(shè)P(i， χ)和P(i，y)為第i個攝像頭采集到的運(yùn)動物體的中心坐標(biāo)，其中，i = 1,2, ...N。P(i， xk)和P(i，yk)為此中心坐標(biāo)的第k幀數(shù)據(jù)，P(i，xpred)和P(i，ypral)為此中心坐標(biāo)對應(yīng)的預(yù) 測值，則 P (i，Xpred) = (3. 0*Ρ (1，χ) -3. 5*Ρ (2，χ) +2*Ρ (3，χ) _0· 5*Ρ (4，χ))，同理，P (i，ypred)=(3.0*P(l，y)-3.5*P(2，y)+2*P(3，y)-0.5*P(4，y))。取 P(i, x)-P(i, xpred) | 值最小的 第i個攝像頭對應(yīng)的重心坐標(biāo)為當(dāng)前幀的X坐標(biāo)，|P(i，y)-P(i, ypred) I值最小的第i個攝 像頭對應(yīng)的重心坐標(biāo)為當(dāng)前幀的Y坐標(biāo)，其中，i = 1，2，…N。這樣，即可獲得該運(yùn)動物體 的真實坐標(biāo)。光標(biāo)偏移控制單元16用于根據(jù)所述有效目標(biāo)的實際重心坐標(biāo)和所述有效目標(biāo)的 移動軌跡，計算所述有效目標(biāo)的屏幕顯示坐標(biāo)，獲得與所述有效目標(biāo)的移動軌跡相對應(yīng)的 屏幕顯示坐標(biāo)的移動軌跡。在本實施例中，該光標(biāo)偏移控制單元16用于計算每個運(yùn)動物體在當(dāng)前幀的屏 幕顯示坐標(biāo)以輸出到終端的屏幕，從而分別控制屏幕上多個光標(biāo)的移動。例如，假設(shè)相 鄰兩幀的每個運(yùn)動目標(biāo)的真實重心坐標(biāo)為T(n)，T(n-l)，則當(dāng)前幀坐標(biāo)的幀差為d(n)= T (η) -T (η-1)，接收端會記錄下上一幀屏幕鼠標(biāo)箭頭的坐標(biāo)M (η)，則當(dāng)前幀屏幕鼠標(biāo)箭頭的 顯示坐標(biāo)為M (n) +d(n)。根據(jù)本實施例的一個實施方式，該多目標(biāo)處理裝置還可以包括輸出單元17，用于將所述有效目標(biāo)的屏幕顯示坐標(biāo)輸出到終端，通過所述終端加 以顯不。在本實施例中，該輸出單元17可以通過有線或者無線的方式將上述坐標(biāo)傳輸?shù)?終端主機(jī)，從而控制終端屏幕上的多個光標(biāo)的移動。本實施例的多目標(biāo)處理裝置，可以處理多個運(yùn)動目標(biāo)，實現(xiàn)多用戶同時操作的應(yīng) 用，并準(zhǔn)確快速的定位。圖2為本實用新型實施例提供的一種終端的組成框圖，請參照圖2，該終端除了包 括終端本體21以外，還包括前述的多目標(biāo)處理裝置22以及遙控器23，其中終端本體21為現(xiàn)有的終端的組成，這里的終端可以是個人計算機(jī)、數(shù)字電視、或 模擬電視，例如如果終端為個人計算機(jī)，則終端本體21為現(xiàn)有的計算機(jī)主機(jī)以及顯示器； 如果終端為數(shù)字電視，則終端本體21為現(xiàn)有的數(shù)字電視機(jī)；如果終端為模擬電視，則終端 本體21為現(xiàn)有的機(jī)頂盒和模擬電視機(jī)。多目標(biāo)處理裝置22已經(jīng)在前述實施例中作了詳細(xì)說明，在此不再贅述。遙控器23用于通過反光體向多目標(biāo)處理裝置22反射光線，以通過多目標(biāo)處理裝 置22對以該反光體作為標(biāo)志物的遙控器的移動軌跡的判斷和處理，控制終端本體21的光 標(biāo)的移動。其中，遙控器23可以是一個或者多個。根據(jù)本實施例的一個實施方式，該遙控器23主要包括反光體，用于反射設(shè)置于終端本體21側(cè)或者多目標(biāo)處理裝置22側(cè)的發(fā)光體發(fā)射 出來的光線。在本實施例中，該反光體由反光材料制成，無需任何電源，且可以根據(jù)需要做成各 種形狀，滿足3D動作模式。根據(jù)本實施例的另外一個實施方式，該遙控器23還可以包括基本按鍵部，用于發(fā)送基本按鍵的按鍵碼流信息；其中，該基本按鍵部的基本按鍵包括了數(shù)字鍵、功能鍵、快捷鍵等，在功能與現(xiàn)有 遙控器的基本按鍵的功能相同，在此不再贅述。[0068]鼠標(biāo)按鍵部，用于發(fā)送鼠標(biāo)按鍵的按鍵碼流信息；其中，該鼠標(biāo)按鍵部的鼠標(biāo)按鍵包括了鼠標(biāo)左鍵、鼠標(biāo)右鍵、鼠標(biāo)速度調(diào)節(jié)鍵等， 其功能也與現(xiàn)有鼠標(biāo)的各按鍵的功能相同，在此不再贅述。至少一個無線或紅外發(fā)射單元，用于將所述基本按鍵的按鍵碼流信息和/或所述 鼠標(biāo)按鍵的按鍵碼流信息發(fā)送到所述多目標(biāo)處理裝置。其中，這里的無線或紅外發(fā)射單元是用于將基本按鍵部的按鍵碼流信息和/或鼠 標(biāo)按鍵部的按鍵碼流信息發(fā)送到多目標(biāo)處理裝置22，因此，根據(jù)本實施例的一個實施方式， 可以設(shè)置兩個無線或紅外發(fā)射單元，以分別發(fā)送基本按鍵部的按鍵碼流信息和鼠標(biāo)按鍵部 的按鍵碼流信息；根據(jù)本實施例的另外一個實施方式，可以僅設(shè)置一個無線或紅外發(fā)射單 元，以發(fā)送基本按鍵部的按鍵碼流信息和鼠標(biāo)按鍵部的按鍵碼流信息。本實施例的終端可以是個人計算機(jī)、數(shù)字電視或模擬電視，包括前述的終端本體 21、多目標(biāo)處理裝置22和遙控器23，通過遙控器23和多目標(biāo)處理裝置22的配合，突破了傳 統(tǒng)遙控器和傳統(tǒng)鼠標(biāo)的限制，更方便快捷的對日益發(fā)展的終端及其提供的業(yè)務(wù)進(jìn)行控制和 使用。圖3為本實用新型實施例提供的一種終端應(yīng)用示意圖，請參照圖3，在本應(yīng)用中， 該終端包括終端本體31 ；多目標(biāo)處理裝置32以及兩個帶反光體的遙控器33，其中終端本體31通過一個顯示屏幕和一個處理主機(jī)表示，在本實施例中，該終端本體 31的顯示屏幕可以是計算機(jī)的顯示器，數(shù)字電視的顯示屏，或者模擬電視的顯示屏；該終 端本體31的處理主機(jī)可以是計算器的主機(jī)，數(shù)字電視的處理芯片，或者模擬電視的處理芯 片。多目標(biāo)處理裝置32可以包含于計算機(jī)的處理主機(jī)，數(shù)字電視的處理部分，或者模 擬電視的機(jī)頂盒。兩個帶反光體的遙控器33可以是鼠標(biāo)式遙控器，兼具鼠標(biāo)和遙控器的功能。在本應(yīng)用中，設(shè)置于顯示屏幕的發(fā)光體發(fā)出光線，帶有反光體的遙控器反射所述 光線到顯示屏幕，多目標(biāo)處理裝置32通過兩個攝像頭捕捉該遙控器33的圖像，判斷兩個運(yùn) 動目標(biāo)的存在，并分別計算出各自坐標(biāo)后，通過有線或者無線的方式傳輸給終端本體31，從 而控制終端本體31的屏幕上兩個光標(biāo)的移動。本實施例是以兩個遙控器為例加以說明，但本實施例并不以此作為限制，例如一 個遙控器或者多個遙控器的方案都可以應(yīng)用于本實用新型。本實施例將遙控器功能與鼠標(biāo)功能更好的結(jié)合，通過多目標(biāo)處理，即，利用相鄰多 幀圖像數(shù)據(jù)判斷運(yùn)動目標(biāo)的重心，根據(jù)運(yùn)動軌跡判斷出當(dāng)前幀各個運(yùn)動目標(biāo)所屬的運(yùn)動軌 跡，并利用概率模型進(jìn)行檢驗，使空中鼠標(biāo)方案能夠判斷并處理多個運(yùn)動目標(biāo)，可實行多用 戶同時操作的應(yīng)用，并準(zhǔn)確快速的定位，并具有如下優(yōu)點1.不但可以用來看電視、錄像、V⑶、DVD等，還能用來玩游戲、上網(wǎng)、發(fā)電子郵件、 網(wǎng)上購物、網(wǎng)上點播等。2.解決了原鼠標(biāo)遙控器工作時只能有一個用戶操作的局限性，使得在PC或者電 視上可以劃分多個區(qū)域，讓多用戶分別操作，例如電視上畫中畫可以有兩個用戶分別換臺。3.解決了原鼠標(biāo)遙控器在游戲領(lǐng)域只能有一個玩家的局限性，使游戲(尤其是射 擊類游戲)更真實化。[0083]結(jié)合本文中所公開的實施例描述的方法或算法的步驟可以直接用硬件、處理器執(zhí) 行的軟件模塊，或者二者的結(jié)合來實施。軟件模塊可以置于隨機(jī)存儲器(RAM)、內(nèi)存、只讀存 儲器(ROM)、電可編程ROM、電可擦除可編程ROM、寄存器、硬盤、可移動磁盤、CD-ROM、或技術(shù) 領(lǐng)域內(nèi)所公知的任意其它形式的存儲介質(zhì)中。以上所述的具體實施例，對本實用新型的目的、技術(shù)方案和有益效果進(jìn)行了進(jìn)一 步詳細(xì)說明，所應(yīng)理解的是，以上所述僅為本實用新型的具體實施例而已，并不用于限定本 實用新型的保護(hù)范圍，凡在本實用新型的精神和原則之內(nèi)，所做的任何修改、等同替換、改 進(jìn)等，均應(yīng)包含在本實用新型的保護(hù)范圍之內(nèi)。
權(quán)利要求一種多目標(biāo)處理裝置，其特征在于，所述裝置包括發(fā)光體，用于發(fā)射光線，以便遙控器上的反光體反射所述光線；至少兩個圖像采集單元，每一個圖像采集單元用于獲取以反光體作為標(biāo)志物的遙控器的連續(xù)圖像信息；聚類及濾波單元，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像信息，確認(rèn)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖像的有效目標(biāo)，并計算每個有效目標(biāo)的重心；多目標(biāo)分離單元，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖像的有效目標(biāo)的重心坐標(biāo)，確認(rèn)所述有效目標(biāo)的移動軌跡；交叉判別單元，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像中每幀圖像的有效目標(biāo)的重心坐標(biāo)，確認(rèn)有效目標(biāo)的實際重心坐標(biāo)；光標(biāo)偏移控制單元，用于根據(jù)所述有效目標(biāo)的實際重心坐標(biāo)和所述有效目標(biāo)的移動軌跡，計算所述有效目標(biāo)的屏幕顯示坐標(biāo)，獲得與所述有效目標(biāo)的移動軌跡相對應(yīng)的屏幕顯示坐標(biāo)的移動軌跡。
2.根據(jù)權(quán)利要求1所述的裝置，其特征在于，所述聚類及濾波單元包括聚類處理模塊，用于根據(jù)每一個圖像采集單元獲取到的所述連續(xù)圖像信息，對具有相 同特征的目標(biāo)進(jìn)行合并，獲得所述連續(xù)圖像中每幀圖像的多個目標(biāo)； 運(yùn)動檢測模塊，用于從所述多個目標(biāo)中找出運(yùn)動目標(biāo)；消噪模塊，用于對所述運(yùn)動目標(biāo)進(jìn)行濾波處理，以確認(rèn)每一個圖像采集單元獲取到的 所述連續(xù)圖像中每幀圖像的有效目標(biāo)；計算模塊，用于計算所述有效目標(biāo)的重心。
3.根據(jù)權(quán)利要求1所述的裝置，其特征在于，所述裝置還包括輸出單元，用于將所述有效目標(biāo)的屏幕顯示坐標(biāo)輸出到終端，通過所述終端加以顯示。
4.根據(jù)權(quán)利要求1所述的裝置，其特征在于，所述圖像采集單元為攝像頭。
5.根據(jù)權(quán)利要求1所述的裝置，其特征在于，所述有效目標(biāo)為單個或者多個。
6.根據(jù)權(quán)利要求1所述的裝置，其特征在于，所述發(fā)光體為紅外光發(fā)光體或者激光發(fā) 光體或者可見光發(fā)光體。
7.根據(jù)權(quán)利要求1所述的裝置，其特征在于，所述發(fā)光體設(shè)置于所述終端的顯示屏幕 的四周，或者設(shè)置于所述圖像采集單元的四周。
8.一種終端，所述終端包括終端本體，其特征在于，所述終端還包括權(quán)利要求1-7任一 項所述的多目標(biāo)處理裝置以及遙控器。
9.根據(jù)權(quán)利要求8所述的終端，其特征在于，所述遙控器包括 反光體，用于反射所述發(fā)光體發(fā)射出來的光線；基本按鍵部，用于發(fā)送基本按鍵的按鍵碼流信息； 鼠標(biāo)按鍵部，用于發(fā)送鼠標(biāo)按鍵的按鍵碼流信息；至少一個無線或紅外發(fā)射單元，用于將所述基本按鍵的按鍵碼流信息和/或所述鼠標(biāo) 按鍵的按鍵碼流信息發(fā)送到所述多目標(biāo)處理裝置。
10.根據(jù)權(quán)利要求8所述的終端，其特征在于，所述終端為個人計算機(jī)、數(shù)字電視或模 擬電視。
專利摘要本實用新型實施例提供一種多目標(biāo)處理裝置及終端，所述裝置包括發(fā)光體，用于發(fā)射光線；至少兩個圖像采集單元，分別用于獲取以反光體作為標(biāo)志物的遙控器的連續(xù)圖像信息；聚類及濾波單元，用于根據(jù)所述連續(xù)圖像信息，確認(rèn)所述連續(xù)圖像中每幀圖像的有效目標(biāo)，并計算每個有效目標(biāo)的重心；多目標(biāo)分離單元，用于根據(jù)所述有效目標(biāo)的重心坐標(biāo)，確認(rèn)所述有效目標(biāo)的移動軌跡；交叉判別單元，用于根據(jù)所述有效目標(biāo)的重心坐標(biāo)，確認(rèn)有效目標(biāo)的實際重心坐標(biāo)；光標(biāo)偏移控制單元，用于根據(jù)實際重心坐標(biāo)和所述有效目標(biāo)的移動軌跡，計算所述有效目標(biāo)的屏幕顯示坐標(biāo)，獲得與所述有效目標(biāo)的移動軌跡相對應(yīng)的屏幕顯示坐標(biāo)的移動軌跡。
文檔編號G06T7/20GK201654982SQ20102004683
公開日2010年11月24日 申請日期2010年1月13日 優(yōu)先權(quán)日2010年1月13日
發(fā)明者周海京, 李剛, 洪鈞, 路海明, 鄧宇, 韓堅, 馬輝 申請人:北京視博數(shù)字電視科技有限公司