專利名稱：一種視頻處理方法和系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及遠(yuǎn)程呈現(xiàn)技術(shù)，尤其涉及ー種視頻處理方法和系統(tǒng)。
背景技術(shù)：
遠(yuǎn)程呈現(xiàn)技術(shù)可用于視頻會(huì)議系統(tǒng)中，在該系統(tǒng)中包括處于不同地理位置的與會(huì)的雙方，雙方需要通過(guò)視頻通信實(shí)現(xiàn)類似于在同一地點(diǎn)進(jìn)行會(huì)議的效果。在視頻通信時(shí)，一方面需要采集本地視頻信息，另ー方面需要顯示遠(yuǎn)端的視頻信息。由于攝像機(jī)與遠(yuǎn)端圖像位置的差異，當(dāng)與會(huì)者看著遠(yuǎn)端圖像交談時(shí)，不能看像攝像機(jī)，這樣就無(wú)法產(chǎn)生“眼對(duì)眼”的臨場(chǎng)交談的效果。如圖1所示，為現(xiàn)有的遠(yuǎn)程會(huì)議系統(tǒng)的一個(gè)組成布局，該系統(tǒng)中3臺(tái)攝像機(jī)無(wú)重復(fù)地均勻覆蓋所有與會(huì)者；接收到3路視頻流分別顯示在3臺(tái)顯示器上。顯然，只有所有與會(huì)人員都正視攝像機(jī)吋，才可以在中間屏幕上獲得眼對(duì)眼效果；在其余情況下均無(wú)法獲得“目艮對(duì)眼”效果。

發(fā)明內(nèi)容
本發(fā)明實(shí)施例所要解決的技術(shù)問(wèn)題在于，提供ー種視頻處理方法和系統(tǒng)。可以在遠(yuǎn)程會(huì)議系統(tǒng)中實(shí)現(xiàn)眼對(duì)眼的效果。為了解決上述技術(shù)問(wèn)題，本發(fā)明實(shí)施例提供了ー種視頻處理方法，用于遠(yuǎn)程會(huì)議系統(tǒng)中，所述方法的視頻發(fā)送部分包括:獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端；所述方法的視頻顯示部分包括:接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目；其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。同吋，本發(fā)明實(shí)施例還提供了ー種視頻處理裝置，用于遠(yuǎn)程會(huì)議系統(tǒng)中，所述裝置的發(fā)送模塊包括:本地視頻獲取単元，用于獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；本地視頻發(fā)送単元，用于將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端；所述裝置的顯示模塊包括:遠(yuǎn)端視頻接收単元，用于接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；遠(yuǎn)端視頻顯示単元，用于采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目；其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。相應(yīng)地，本發(fā)明實(shí)施例還提供了一種遠(yuǎn)程會(huì)議系統(tǒng)，所述系統(tǒng)的本地端包括:多個(gè)具有不同攝像視角的攝像設(shè)備，用以分別獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；通訊設(shè)備，用于向遠(yuǎn)端發(fā)送所述攝像設(shè)備獲得的所述具有不同視角的本地視頻信息，并接收來(lái)自所述遠(yuǎn)端的具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；多視角顯示設(shè)備，用于向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目；其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。在本發(fā)明實(shí)施例中，獲取多視角本地視頻信息發(fā)送給遠(yuǎn)端顯示，在本地端則顯示來(lái)自遠(yuǎn)端的多視角遠(yuǎn)端視頻信息，只要顯示時(shí)恰當(dāng)進(jìn)行視角的匹配就可以實(shí)現(xiàn)眼對(duì)眼的會(huì)議效果。


為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見(jiàn)地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)性的前提下，還可以根據(jù)這些附圖獲得其他的附圖。圖1是現(xiàn)有的遠(yuǎn)程會(huì)議系統(tǒng)一端的布局示意圖；圖2是本發(fā)明實(shí)施例中的視頻處理方法中的發(fā)送部分的ー個(gè)具體流程圖；圖3是本發(fā)明實(shí)施例中的視頻處理方法中的顯示部分的ー個(gè)具體流程圖；圖4是本發(fā)明實(shí)施例中的視頻處理裝置的ー個(gè)具體組成圖；圖5是本發(fā)明實(shí)施例中的遠(yuǎn)程會(huì)議系統(tǒng)的ー個(gè)具體組成圖；圖6是為本發(fā)明實(shí)施例的布局I示意圖；圖7是為本發(fā)明實(shí)施例的布局I示意圖；圖8是為本發(fā)明實(shí)施例的布局I示意圖；圖9是為本發(fā)明實(shí)施例的包括輔流顯示器的布局I示意圖；圖10是為本發(fā)明實(shí)施例的包括輔流顯示器的布局I示意圖；圖11是為本發(fā)明實(shí)施例的布局I示意圖；圖12是為本發(fā)明實(shí)施例中多視角顯示器的顯示視角示意圖；圖13是為本發(fā)明實(shí)施例中多視角顯示器的顯示原理示意圖；圖14是為本發(fā)明實(shí)施例的布局Ia示意圖15是為本發(fā)明實(shí)施例的布局Ib示意圖；圖16是為本發(fā)明實(shí)施例的布局2示意圖；圖17是為本發(fā)明實(shí)施例的布局3示意圖；圖18是為本發(fā)明實(shí)施例的布局4示意圖；圖19是為本發(fā)明實(shí)施例的布局5示意圖；圖20是為本發(fā)明實(shí)施例的布局6示意圖；圖21是為本發(fā)明實(shí)施例的布局7示意圖；圖22是為本發(fā)明實(shí)施例的布局8示意圖；圖23是為本發(fā)明實(shí)施例的布局9示意圖；圖24是為本發(fā)明實(shí)施例的布局10示意圖。
具體實(shí)施例方式下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒(méi)有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。眼對(duì)眼效果的基礎(chǔ)在于雙方可以觀察到不同視角的信息，當(dāng)一方轉(zhuǎn)向某一視角時(shí)只有處于該視角的觀察者能夠感受到“正視”的效果?；谠撛恚诒景l(fā)明實(shí)施例中充分考慮與會(huì)雙方的可能視角數(shù)目，根據(jù)觀察者的數(shù)目獲取相應(yīng)數(shù)目的多視角視頻信息，以實(shí)現(xiàn)逼真的眼對(duì)眼效果。如圖2和圖3所示，為本發(fā)明實(shí)施例中的視頻處理方法的ー個(gè)具體流程圖，該方法可用于遠(yuǎn)程會(huì)議系統(tǒng)中。如圖2所示，為該方法的視頻發(fā)送部分流程:201、獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；202、將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端。其中，在步驟201中采集視頻信息時(shí)，可以在下述的多視角顯示設(shè)備處采用具有不同攝像視角的攝像設(shè)備獲取本地視頻信息。如圖3所示，為該方法的視頻顯示部分流程:301、接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；302、采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目。其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。其中，在上述實(shí)施例中的遠(yuǎn)程會(huì)議系統(tǒng)中可包括多個(gè)遠(yuǎn)端，則步驟301可為選取多個(gè)遠(yuǎn)端中的ー個(gè)遠(yuǎn)端，接收來(lái)自該選取的遠(yuǎn)端發(fā)送的具有不同視角的遠(yuǎn)端視頻信息。另一方面，在進(jìn)行顯示時(shí)可選用多個(gè)多視角顯示設(shè)備，即在步驟302中采用多個(gè)多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息?？梢岳斫猓谝粋€(gè)視頻會(huì)議流程中，圖2和圖3中顯示的流程是同步或基本同步進(jìn)行的。上述遠(yuǎn)端或本地的觀察點(diǎn)可以是指與會(huì)者在參加會(huì)議時(shí)的位置、也可以是指與會(huì)者的位置組(即，可能有2個(gè)或2個(gè)以上的與會(huì)者在參加會(huì)議時(shí)被當(dāng)作一個(gè)觀察點(diǎn)，而不進(jìn)行區(qū)分)。在上述流程中沒(méi)有具體指出在何種觀察點(diǎn)情況下，獲得哪些視角信息，在哪些視角顯示信息，這是由于這些情況依賴于非常具體的會(huì)議布局，在上述實(shí)施例中僅能給出總體方案，結(jié)合后續(xù)的不同實(shí)施例中的會(huì)議布局，應(yīng)當(dāng)能夠理解如何根據(jù)上述實(shí)施例的技術(shù)方案實(shí)現(xiàn)遠(yuǎn)程會(huì)議中的眼對(duì)眼效果。同時(shí)，在眼對(duì)眼時(shí)，其效果的逼真性也與系統(tǒng)的成本有關(guān)，不代表在本發(fā)明的所有實(shí)施例中均要實(shí)現(xiàn)最逼真的眼對(duì)眼效果，只實(shí)現(xiàn)部分的眼對(duì)眼效果的實(shí)施例也應(yīng)當(dāng)輸入本發(fā)明實(shí)施例中的ー種。相應(yīng)于上述方法實(shí)施例，本發(fā)明實(shí)施例中還提供了 ー種視頻處理裝置I，該裝置用于遠(yuǎn)程會(huì)議系統(tǒng)中，如圖4所示，裝置I的發(fā)送模塊10包括:本地視頻獲取単元100，用于獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；本地視頻發(fā)送単元102，用于將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端。其中，本地視頻獲取単元100，還用于在所述多視角顯示設(shè)備處采用具有不同攝像視角的攝像設(shè)備獲取本地視頻信息。裝置I的顯示模塊12包括:遠(yuǎn)端視頻接收単元120，用于接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；遠(yuǎn)端視頻顯示単元122，用于采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目；其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。其中的遠(yuǎn)端視頻顯示単元120，還可用于采用多個(gè)多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息。若所述系統(tǒng)包括多個(gè)遠(yuǎn)端，則遠(yuǎn)端視頻接收單元120，還用于選取多個(gè)遠(yuǎn)端中的ー個(gè)遠(yuǎn)端，接收來(lái)自該選取的遠(yuǎn)端發(fā)送的具有不同視角的遠(yuǎn)端視頻信息。相應(yīng)于上述方法和裝置實(shí)施例，本發(fā)明實(shí)施例還提供了一種遠(yuǎn)程會(huì)議系統(tǒng)，在該系統(tǒng)中明確了具有上述功能的實(shí)體設(shè)備如何實(shí)現(xiàn)整個(gè)系統(tǒng)，當(dāng)然圖中所示僅表示連接關(guān)系，不代表實(shí)際系統(tǒng)中的位置關(guān)系。如圖5所示，系統(tǒng)的本地端包括:多個(gè)具有不同攝像視角的攝像設(shè)備2，用以分別獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；通訊設(shè)備3，用于向遠(yuǎn)端發(fā)送所述攝像設(shè)備獲得的所述具有不同視角的本地視頻信息，并接收來(lái)自所述遠(yuǎn)端的具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；多視角顯示設(shè)備4，用于向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目；其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。其中，可在本地端設(shè)置多個(gè)多視角顯示設(shè)備，使所述系統(tǒng)中的多視角顯示設(shè)備的數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目。以達(dá)到更好的眼對(duì)眼效果。所述多視角顯示設(shè)備可為多視角顯示器，或所述多視角顯示設(shè)備為多個(gè)投影儀與具有多視角顯示功能的投影幕的組合。若所述系統(tǒng)還包括多個(gè)遠(yuǎn)端，所述本地端的通訊設(shè)備還用于從所述多個(gè)遠(yuǎn)端中選擇ー個(gè)遠(yuǎn)端進(jìn)行多視角視頻信息的接收和發(fā)送。
為了能夠更清楚的說(shuō)明上述實(shí)施例中如何實(shí)現(xiàn)眼對(duì)眼效果。以下描述幾種具體的系統(tǒng)布局，并描述不同視頻信息之間的采集和顯示對(duì)應(yīng)關(guān)系。如圖6 圖11所示，為本發(fā)明實(shí)施例的布局1，在布局I中顯示了圖5中所示系統(tǒng)中的各組成設(shè)備的ー種具體位置關(guān)系的示例，以及各設(shè)備的相應(yīng)視角等。圖6 圖10中顯示了系統(tǒng)中的本地端和遠(yuǎn)端的總體情況，圖11中顯示系統(tǒng)中的一端的具體布局(兩端為對(duì)稱分布)。系統(tǒng)中包括兩個(gè)會(huì)場(chǎng)A、B，會(huì)場(chǎng)AB通過(guò)網(wǎng)絡(luò)直接相連；每個(gè)會(huì)場(chǎng)都包含3臺(tái)大尺寸平板顯示器作為主顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，IXD電視或DLP背投電視等平板顯示器技木。3臺(tái)顯示器以ー個(gè)折面的方式放置，中間的顯示器和兩邊的顯示器緊靠在一起，3臺(tái)顯示器的圖像構(gòu)成了會(huì)議室場(chǎng)景的ー個(gè)完整呈現(xiàn)，位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。系統(tǒng)中采用的顯示設(shè)備為具有多個(gè)視角的顯示器，如圖11所示，各個(gè)顯示器具有3個(gè)視角，每個(gè)視角可以呈現(xiàn)不同的內(nèi)容，每個(gè)顯示器的視角情況如圖12所示。如圖12所示的顯示器具有如下特點(diǎn):在不同的視角上可以顯示不同的內(nèi)容；如上圖中在假設(shè)待呈現(xiàn)的物體用虛線標(biāo)識(shí)，具有3個(gè)表面，該多視角顯示器可以在三個(gè)不同的視角上分別呈現(xiàn)出面I內(nèi)容，面2內(nèi)容和面3內(nèi)容，如果該物體真實(shí)的放置在顯示器位置一樣。該顯示設(shè)備采用視差擋板原理實(shí)現(xiàn)，如圖13所示，不同的視角觀察到的是該視角的圖像內(nèi)容。以下具體描述系統(tǒng)中的一端的布局情況。如圖11所示，在每臺(tái)顯示器的中間位置，放置了 3臺(tái)高清攝像機(jī)，能夠支持720p和IOSOp分辨率的高清圖像采集，并且每臺(tái)攝像機(jī)無(wú)重復(fù)地覆蓋所有與會(huì)者。每個(gè)會(huì)議室的會(huì)議桌按照從左至右分別為D1、D2、D3，顯示器為T(mén)1、T2、T3，每個(gè)顯示器上的3臺(tái)攝像機(jī)從左至右分別為Cl、C2、C3，每臺(tái)顯示器的3個(gè)視角從左至右分別為V1、V2、V3 ；則左側(cè)顯示屏頂部的攝像機(jī)Cl拍攝范圍覆蓋會(huì)議桌D1，攝像機(jī)C2拍攝范圍覆蓋會(huì)議桌D2,攝像機(jī)C3拍攝范圍覆蓋會(huì)議桌D3 ;中間顯示屏頂部的攝像機(jī)Cl拍攝范圍覆蓋會(huì)議桌Dl,攝像機(jī)C2拍攝范圍覆蓋會(huì)議桌D2,攝像機(jī)C3拍攝范圍覆蓋會(huì)議桌D3 ;右側(cè)顯示屏頂部的攝像機(jī)Cl拍攝范圍覆蓋會(huì)議桌Dl,攝像機(jī)C2拍攝范圍覆蓋會(huì)議桌D2,攝像機(jī)C3拍攝范圍覆蓋會(huì)議桌D。Tl的視角Vl對(duì)應(yīng)于會(huì)議桌D1，Tl的視角V2對(duì)應(yīng)于會(huì)議桌D2，Tl的視角V3對(duì)應(yīng)于會(huì)議桌D3 ；T2的視角Vl對(duì)應(yīng)于會(huì)議桌Dl，T2的視角V2對(duì)應(yīng)于會(huì)議桌D2，T2的視角V3對(duì)應(yīng)于會(huì)議桌D3 ；T3的視角Vl對(duì)應(yīng)于會(huì)議桌Dl，T3的視角V2對(duì)應(yīng)于會(huì)議桌D2，T3的視角V3對(duì)應(yīng)于會(huì)議桌D3。則為了實(shí)現(xiàn)眼對(duì)眼效果，假設(shè)如圖6所示的兩個(gè)會(huì)場(chǎng)分別為會(huì)場(chǎng)A、會(huì)場(chǎng)B，如果是會(huì)場(chǎng)A的攝像機(jī)的視頻流被發(fā)送到會(huì)場(chǎng)B顯示，對(duì)于中間的座位區(qū)域D2，則有如下視頻流的發(fā)送、接收對(duì)應(yīng)關(guān)系:A Tl C2 = > B T2 V3A T2 C2 = > B T2 V2A T3 C2 = > B T2 Vl
對(duì)于左邊的座位區(qū)域D1，如圖7所示，有如下的對(duì)應(yīng)關(guān)系:A Tl Cl = > B T3 V3A T2 Cl = > B T3 V2A T3 Cl = > B T3 Vl對(duì)于右邊的座位區(qū)域D3，如圖8所示，有如下的對(duì)應(yīng)關(guān)系:A Tl C3 = > B Tl V3A T2 C3 = > B Tl V2A T3 C3 = > B Tl Vl如果是會(huì)場(chǎng)B的攝像機(jī)的視頻流被發(fā)送到會(huì)場(chǎng)A顯示，類似的有如下對(duì)應(yīng)關(guān)系:B Tl Cl = > A T3 V3B T2 Cl = > A T3 V2B T3 Cl = > A T3 VlB Tl C2 = > A T2 V3B T2 C2 = > A T2 V2B T3 C2 = > A T2 VlB Tl C3 = > A Tl V3B T2 C3 = > A Tl V2B T3 C3 = > A Tl Vl在具體實(shí)施例中，以上的視頻發(fā)送接收對(duì)應(yīng)關(guān)系可以有兩種實(shí)現(xiàn)方式:在對(duì)會(huì)場(chǎng)的顯示設(shè)備和與會(huì)者的方位信息的表述中做如下規(guī)定，以所有與會(huì)區(qū)域的中間位置為中心，面對(duì)所有主顯示設(shè)備的中間位置的左手方向最左邊的顯示設(shè)備為第0個(gè)顯示設(shè)備區(qū)域，以次左邊的顯示設(shè)備為第I個(gè)顯示設(shè)備，以此類推；在每個(gè)以最左邊的與會(huì)區(qū)域?yàn)榈?個(gè)(攝像機(jī))覆蓋區(qū)域，次左邊的與會(huì)區(qū)域?yàn)榈贗個(gè)(攝像機(jī))覆蓋區(qū)域，以此類推。會(huì)場(chǎng)A和B可能會(huì)存在輔助顯示器T4，用于顯示輔流視頻。在這種場(chǎng)景下，視頻流的發(fā)送、接收對(duì)應(yīng)關(guān)系包括兩種方式:一種和圖6 8所述的方式保持一致，如圖9所示。另ー種方式為鏡像方式，如圖10所示，這種方式在完全相同的會(huì)場(chǎng)布局下可以獲得更好的眼對(duì)眼體驗(yàn)。在系統(tǒng)的與會(huì)雙方進(jìn)行視頻會(huì)議之前，先進(jìn)行協(xié)商，協(xié)商內(nèi)容即包括上述的視頻發(fā)送接收對(duì)應(yīng)關(guān)系信息。即，有如下過(guò)程。1、在能力協(xié)商階段將體現(xiàn)各個(gè)視頻流的發(fā)送接收關(guān)系，可以利用會(huì)話描述協(xié)議來(lái)描述這種對(duì)應(yīng)關(guān)系；比如發(fā)送視頻流T1C3可以描述為:“AuxStream:OFF SndPos:0 CovPos:2”2、發(fā)送方將本法所有的視頻流發(fā)送到對(duì)方，對(duì)方接收視頻流，解碼后，按照以上對(duì)應(yīng)關(guān)系將視頻顯示在特定顯示器上，這就需要對(duì)方在接收視頻可以識(shí)別出視頻的方位，因此在RTP HEADER中用戶數(shù)據(jù)部分增加如下結(jié)構(gòu):aux_fIg senaer_pos cover_pos recver_pos displayer_posaux_fIg: Ibit輔流標(biāo)記，I標(biāo)識(shí)輔流，0表示非輔流(即主流)
sender_pos:8bits視頻流發(fā)送者的位置(顯示器的位置)，在主流情況下，全部比特標(biāo)識(shí)位置；在輔流情況下，最高2比特表示輔流的垂直位置，11表示在主顯示設(shè)備的上方，10表示與主顯示設(shè)備在同一水平位置，00表示在主顯示設(shè)備的下方；1個(gè)區(qū)域，全部區(qū)域cover_pos:9bits視頻流的覆蓋區(qū)域，最高比特表示是否覆蓋全部區(qū)域，I表示覆蓋全部區(qū)域，此時(shí)后面8比特?zé)o意義；0表示只覆蓋某一區(qū)域，后面0-7比特表示覆蓋的區(qū)域方位；recver_pos:8bits 視頻接收者的位置，用于能力協(xié)商；displayer_pos:8bits視頻顯示的位置,用于能力協(xié)商。如圖14所示 ，位于布局I類似的本發(fā)明實(shí)施例中的布局la。其中，攝像機(jī)、會(huì)議桌的設(shè)置均與布局I相同，不同之處在于顯示設(shè)備采用的是投影方式，在投影幕的后面的9個(gè)不同位置放置了 9臺(tái)高分辨率高亮度的投影機(jī)，如奧圖碼的IOSOp投影機(jī)，在投影幕上安排了柱面光柵，可以使得在不同的角度看到不同的內(nèi)容。如圖15所示，位于布局I類似的本發(fā)明實(shí)施例中的布局lb。其中，攝像機(jī)、會(huì)議桌的設(shè)置均與布局I相同，不同之處在于顯示設(shè)備采用的是投影方式，在投影幕的前面的9個(gè)不同位置放置了 9臺(tái)高分辨率高亮度的投影機(jī)，如奧圖碼的IOSOp投影機(jī)，在投影幕上安排了柱面光柵，可以使得在不同的角度看到不同的內(nèi)容?？梢岳斫?布局Ia和布局Ib中的視頻米集和顯不對(duì)應(yīng)關(guān)系與布局I中的相同，協(xié)商過(guò)程也相同。如圖16所示，為本發(fā)明實(shí)施例中的布局2。該系統(tǒng)包括AB兩個(gè)會(huì)場(chǎng)通過(guò)網(wǎng)絡(luò)直連，AB會(huì)場(chǎng)的配置情況相同；每個(gè)會(huì)場(chǎng)采用兩個(gè)個(gè)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用PDP電視，IXD電視或DLP背投電視等平板顯示器技木。該顯示設(shè)備具有多個(gè)視角，可以顯示不同的內(nèi)容；每個(gè)會(huì)場(chǎng)均有3個(gè)與會(huì)者區(qū)域，按照上圖所示方式配置，每個(gè)位干與會(huì)者區(qū)域的與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示器上面的兩側(cè)及中間按照匯聚方式設(shè)置2臺(tái)高清攝像機(jī)，每臺(tái)攝像機(jī)可以在不同的角度拍攝到全部與會(huì)者；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。位于Tl位置的顯示器上面的Cl攝像機(jī)拍攝與會(huì)區(qū)域D1，C2攝像機(jī)拍攝與會(huì)區(qū)域D2 ;位于T2位置的顯示器上面的Cl攝像機(jī)拍攝與會(huì)區(qū)域Dl，C2攝像機(jī)拍攝與會(huì)區(qū)域D2 ；與會(huì)趨于Dl可以觀看到顯示器Tl的視角Vl ;與會(huì)趨于Dl可以觀看到顯示器T2的視角Vl ;與會(huì)趨于D2可以觀看到顯示器Tl的視角V2 ;與會(huì)趨于D2可以觀看到顯示器T2的視角V2為實(shí)現(xiàn)“眼對(duì)眼”效果，該系統(tǒng)中的視頻流的發(fā)送接收關(guān)系為:A Tl Cl => B T2 V2A Tl C2 = > B T2 VlA T2 Cl = > B Tl V2A T2 C2 = > B Tl VlB Tl Cl = > A T2 V2B Tl C2 = > A T2 Vl
B T2 Cl = > A Tl V2B T2 C2 = > A Tl Vl本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。如圖17所不,為本發(fā)明實(shí)施例中的布局3。該系統(tǒng)包括AB兩個(gè)會(huì)場(chǎng)通過(guò)網(wǎng)絡(luò)直連，AB會(huì)場(chǎng)的配置情況相同；每個(gè)會(huì)場(chǎng)采用ー個(gè)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，LCD電視或DLP背投電視等平板顯示器技木。該顯示設(shè)備具有3個(gè)視角，可以顯示不同的內(nèi)容；每個(gè)會(huì)場(chǎng)均有3個(gè)與會(huì)者，按照上圖所示方式配置，每個(gè)與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示器上面的兩側(cè)及中間按照匯聚方式設(shè)置3臺(tái)高清攝像機(jī)，每臺(tái)攝像機(jī)可以在不同的角度拍攝到全部與會(huì)者；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。假設(shè)會(huì)場(chǎng)中3臺(tái)攝像機(jī)從左至右分別設(shè)為C1、C2、C3，多視角顯示設(shè)備的3個(gè)視角從做至右分別為V1、V2、V3，則有如下配置情況:C1C2C3分別從3個(gè)角度拍攝全部與會(huì)者P1、P2、P3 ；三個(gè)與會(huì)者分布在多視角顯示器的三個(gè)視角上，視角Vl對(duì)應(yīng)P1，視角V2對(duì)應(yīng)P2，視角V3對(duì)應(yīng)P3。則為達(dá)到眼對(duì)眼效果，兩會(huì)場(chǎng)的視頻流發(fā)送接收對(duì)應(yīng)關(guān)系為:A Cl = > B V3A C2 = > B V2A C3 = > B VlB Cl = > A V3B C2 = > A V2B C3 = > A Vl本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。如圖18所不,為本發(fā)明實(shí)施例中的布局4。該系統(tǒng)包括AB兩個(gè)會(huì)場(chǎng)通過(guò)網(wǎng)絡(luò)直連，AB會(huì)場(chǎng)的配置情況相同；每個(gè)會(huì)場(chǎng)采用ー個(gè)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，LCD電視或DLP背投電視等平板顯示器技木。該顯示設(shè)備具有2個(gè)視角，可以顯示不同的內(nèi)容；每個(gè)會(huì)場(chǎng)均有2個(gè)與會(huì)者，按照上圖所示方式配置，每個(gè)與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示器上面的兩側(cè)及中間按照匯聚方式設(shè)置2臺(tái)高清攝像機(jī)，每臺(tái)攝像機(jī)可以在不同的角度拍攝到全部與會(huì)者；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。假設(shè)會(huì)場(chǎng)中2臺(tái)攝像機(jī)從左至右分別設(shè)為Cl、C2，多視角顯示設(shè)備的2個(gè)視角從做至右分別為V1、V2，則有如下配置情況:C1C2分別從2個(gè)角度拍攝全部與會(huì)者P1、P2 ；兩個(gè)與會(huì)者分布在多視角顯示器的兩個(gè)視角上，視角Vl對(duì)應(yīng)P1，視角V2對(duì)應(yīng)P2。則為達(dá)到眼對(duì)眼效果，兩會(huì)場(chǎng)的視頻流發(fā)送接收對(duì)應(yīng)關(guān)系為:A Cl = > B V2A C2 = > B Vl
B Cl = > A V2B C2 = > A Vl本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。如圖19所不，為本發(fā)明實(shí)施例中的布局5。該系統(tǒng)包括AB兩個(gè)會(huì)場(chǎng)通過(guò)網(wǎng)絡(luò)直連；A會(huì)場(chǎng)包含一臺(tái)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用PDP電視，LCD電視或DLP背投電視等平板顯示器技木，該顯示設(shè)備為常規(guī)顯示設(shè)備，只具有一個(gè)視角；在該顯示器頂部?jī)啥撕椭虚g設(shè)置3臺(tái)高清攝像機(jī)，按照匯聚方式放置，可以從3個(gè)不同的角度拍攝與會(huì)者P1。B會(huì)場(chǎng)包含一臺(tái)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，IXD電視或DLP背投電視等平板顯示器技木。該顯示設(shè)備具有3個(gè)視角，可以顯示不同的內(nèi)容；每個(gè)會(huì)場(chǎng)均有3個(gè)與會(huì)者，按照上圖所示方式配置，每個(gè)與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示設(shè)備頂端中間位置放置一臺(tái)高清攝像機(jī)，能夠支持720p和1080p分辨率的高清圖像采集，該攝像機(jī)可以覆蓋該會(huì)場(chǎng)中的全部與會(huì)者。位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。則為達(dá)到眼對(duì)眼效果，兩會(huì)場(chǎng)的視頻流發(fā)送接收關(guān)系為:A Cl = > B V3A C2 = > B V2A C3 = > B VlB Cl => A VlB Cl = > A V3B C2 = > A V2B C3 = > A VlB Cl => A Vl本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。如圖20所不，為本發(fā)明實(shí)施例中的布局6。該系統(tǒng)包括AB兩個(gè)會(huì)場(chǎng)通過(guò)網(wǎng)絡(luò)直連；A會(huì)場(chǎng)包含3臺(tái)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，IXD電視或DLP背投電視等平板顯示器技木，該顯示設(shè)備為常規(guī)顯示設(shè)備，只具有一個(gè)視角；在該顯示器頂部設(shè)置3臺(tái)高清攝像機(jī)，可以分別從3個(gè)不同的角度拍攝全部與會(huì)者P1、P2、P3。B會(huì)場(chǎng)包含一臺(tái)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，IXD電視或DLP背投電視等平板顯示器技木。該顯示設(shè)備具有3個(gè)視角，該會(huì)場(chǎng)有3個(gè)與會(huì)者，按照上圖所示方式配置。，該與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示設(shè)備頂端中間及兩端位置放置3臺(tái)高清攝像機(jī)，分別從3個(gè)角度采集與會(huì)者圖像，該攝像機(jī)能夠支持720p和1080p分辨率的高清圖像采集。位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。A會(huì)場(chǎng)的與會(huì)者可以選擇將B會(huì)場(chǎng)的視頻流顯示在本會(huì)場(chǎng)中的不同的顯示設(shè)備上，通常情況下，將視頻流顯示在T2顯示器上。本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。
如圖21所示，為本發(fā)明實(shí)施例中的布局7。該系統(tǒng)包括3個(gè)會(huì)場(chǎng)PA、PB、PC，每個(gè)會(huì)場(chǎng)的配置情況相同，都一臺(tái)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用TOP電視，LCD電視或DLP背投電視等平板顯示器技木，該顯示設(shè)備具有3個(gè)視角，可以顯示不同的內(nèi)容；每個(gè)會(huì)場(chǎng)均有3個(gè)與會(huì)者，按照上圖所示方式配置，每個(gè)與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示器上面的兩側(cè)及中間按照匯聚方式設(shè)置3臺(tái)高清攝像機(jī)，每臺(tái)攝像機(jī)可以在不同的角度拍攝到全部與會(huì)者；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。3個(gè)會(huì)場(chǎng)PA、PB、PC通過(guò)MCU進(jìn)行連接，在會(huì)議開(kāi)始前進(jìn)行媒體能力協(xié)商，各個(gè)會(huì)場(chǎng)將本會(huì)場(chǎng)的所有視頻上傳至MCU，通常情況下，每個(gè)會(huì)場(chǎng)均可以選擇觀看遠(yuǎn)端會(huì)場(chǎng)，比如會(huì)場(chǎng)PA，可以選擇觀看會(huì)場(chǎng)PB或者會(huì)場(chǎng)PC的內(nèi)容，假設(shè)某一時(shí)刻觀看的是會(huì)場(chǎng)PC的內(nèi)容，則MCU需要將會(huì)場(chǎng)PC的3路視頻流發(fā)送至PA，在實(shí)現(xiàn)眼對(duì)眼的情況下，兩會(huì)場(chǎng)的視頻流發(fā)送與接收對(duì)應(yīng)關(guān)系(經(jīng)過(guò)MCU轉(zhuǎn)發(fā))為:PC Cl => PA V3PC C2 = > PA V2PC C3 => PA Vl ；對(duì)于會(huì)場(chǎng)PB，PC均有類似的發(fā)送接收對(duì)應(yīng)關(guān)系。如果在某ー會(huì)場(chǎng)需要同時(shí)看到另外兩個(gè)會(huì)場(chǎng),則需要在MCU完成將兩外兩會(huì)場(chǎng)的圖像拼接起來(lái)，構(gòu)成新的視頻流；在拼接過(guò)程中需要注意視點(diǎn)的對(duì)應(yīng)關(guān)系；假設(shè)PA會(huì)場(chǎng)需要同時(shí)看到PB，PC會(huì)場(chǎng)的內(nèi)容，則實(shí)現(xiàn)眼對(duì)眼功能情況下，視頻流的發(fā)送與接收對(duì)應(yīng)關(guān)系為:PC C1+PB Cl => PA V3PC C2+PB C2 = > PA V2PC C3+PB C3 => PA Vl ；其中PC CI+PB Cl標(biāo)識(shí)MCU將PC會(huì)場(chǎng)的Cl視頻和PB會(huì)場(chǎng)的Cl視頻拼接起來(lái)構(gòu)成新的視頻流。本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。如圖22所示，為本發(fā)明實(shí)施例中的布局8。該系統(tǒng)包括4個(gè)會(huì)場(chǎng)PA、PB、PC、PD，各個(gè)會(huì)場(chǎng)的配置情況相同；4個(gè)會(huì)場(chǎng)通過(guò)MCU進(jìn)行控制。每個(gè)會(huì)場(chǎng)都包含3臺(tái)大尺寸平板顯示器作為主顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用PDP電視，IXD電視或DLP背投電視等平板顯示器技木。3臺(tái)顯示器以ー個(gè)折面的方式放置，中間的顯示器和兩邊的顯示器緊靠在一起，3臺(tái)顯示器的圖像構(gòu)成了會(huì)議室場(chǎng)景的ー個(gè)完整呈現(xiàn)。系統(tǒng)中采用的顯示設(shè)備為具有多個(gè)視角的顯示器，如上圖中各個(gè)顯示器具有3個(gè)視角，每個(gè)視角可以呈現(xiàn)不同的內(nèi)容，每個(gè)視角分別對(duì)應(yīng)著會(huì)場(chǎng)的ー個(gè)與會(huì)者；在每個(gè)顯示器的頂部配置有ー個(gè)高清攝像機(jī)，分別從3個(gè)角度采集與會(huì)者圖像，該攝像機(jī)能夠支持720p和1080p分辨率的高清圖像采集；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。假設(shè)每個(gè)會(huì)議室的會(huì)議桌按照從左至右分別為Dl、D2、D3，顯示器為T(mén)l、T2、T3，，每臺(tái)顯示器的3個(gè)視角從左至右分別為V1、V2、V3 ；3臺(tái)攝像機(jī)從左至右分別為T(mén)1_C1、T2_C1、T3_C1，則攝像機(jī)T1_C1、T2_C1、T3_C1均可以獨(dú)立覆蓋所有會(huì)議桌D1、D2、D3所在區(qū)域；Tl的視角Vl對(duì)應(yīng)于會(huì)議桌D1，T1的視角V2對(duì)應(yīng)于會(huì)議桌D2，T1的視角V3對(duì)應(yīng)于會(huì)議桌D3 ；T2的視角Vl對(duì)應(yīng)于會(huì)議桌Dl，T2的視角V2對(duì)應(yīng)于會(huì)議桌D2，T2的視角V3對(duì)應(yīng)于會(huì)議桌D3 ；T3的視角Vl對(duì)應(yīng)于會(huì)議桌Dl，T3的視角V2對(duì)應(yīng)于會(huì)議桌D2，T3的視角V3對(duì)應(yīng)于會(huì)議桌D3。該系統(tǒng)中要求各個(gè)會(huì)場(chǎng)的每個(gè)與會(huì)者均可以看到其余所有會(huì)場(chǎng)的與會(huì)者，則在會(huì)議進(jìn)行中各個(gè)會(huì)場(chǎng)將本會(huì)場(chǎng)所有視頻上傳至MCU，在MCU中完成對(duì)應(yīng)視頻的拼接，后發(fā)送到目的會(huì)場(chǎng)；現(xiàn)假設(shè)PA會(huì)場(chǎng)需要觀看到所有會(huì)場(chǎng)的內(nèi)容，則在滿足眼對(duì)眼情況下，視頻流的發(fā)送接收對(duì)應(yīng)關(guān)系為:PB Tl CI+PC Tl CI+PD Tl Cl => PA T3 V3PB Tl C2+PC Tl C2+PD Tl C2 => PA T2 V3PB Tl C3+PC Tl C3+PD Tl C3 => PA Tl V3PB T2 CI+PC T2 CI+PD T2 Cl => PA T3 V2PB T2 C2+PC T2 C2+PD T2 C2 => PA T2 V2PB T2 C3+PC T2 C3+PD T2 C3 => PA Tl V2PB T3 CI+PC T3 CI+PD T3 Cl => PA T3 VlPB T3 C2+PC T3 C2+PD T3 C2 => PA T2 VlPB T3 C3+PC T3 C3+PD T3 C3 => PA Tl Vl其中PB Tl CI+PC Tl CI+PD Tl Cl標(biāo)識(shí)MCU將PB會(huì)場(chǎng)的Cl視頻和PB會(huì)場(chǎng)的Cl視頻拼接起來(lái)構(gòu)成新的視頻流。本實(shí)施例的另外ー種形式為；會(huì)場(chǎng)中的3個(gè)顯示設(shè)備分別顯示遠(yuǎn)端的3個(gè)會(huì)場(chǎng)，按照眼對(duì)眼的關(guān)系，有如下視頻流對(duì)應(yīng)關(guān)系:假設(shè)將PB會(huì)場(chǎng)顯示在Tl顯示器上，PC會(huì)場(chǎng)俠士在T2顯示器上，PD會(huì)場(chǎng)顯示在T3顯示器上:PB T3 Cl => PA Tl VlPB T2 Cl => PA Tl V2PB Tl Cl => PA Tl V3PC T3 Cl => PA T2 VlPC T2 Cl => PA T2 V2PC Tl Cl => PA T2 V3PD T3 Cl => PA T3 VlPD T2 Cl => PA T3 V2PD Tl Cl => PA T3 V3本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。如圖23所示，為本發(fā)明實(shí)施例中的布局9。該系統(tǒng)包括4個(gè)會(huì)場(chǎng)PA、PB、PC、PD,各個(gè)會(huì)場(chǎng)的配置情況相同；4個(gè)會(huì)場(chǎng)通過(guò)MCU進(jìn)行控制。每個(gè)會(huì)場(chǎng)都包含3臺(tái)大尺寸平板顯示器作為主顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用PDP電視，IXD電視或DLP背投電視等平板顯示器技木。3臺(tái)顯示器以ー個(gè)折面的方式放置，中間的顯示器和兩邊的顯示器緊靠在一起，3臺(tái)顯示器的圖像構(gòu)成了會(huì)議室場(chǎng)景的ー個(gè)完整呈現(xiàn)。系統(tǒng)中采用的顯示設(shè)備為具有多個(gè)視角的顯示器，如上圖中各個(gè)顯示器具有3個(gè)視角，每個(gè)視角可以呈現(xiàn)不同的內(nèi)容，每個(gè)視角分別對(duì)應(yīng)著會(huì)場(chǎng)的ー個(gè)與會(huì)者；在每個(gè)顯示器的頂部配置有ー個(gè)高清攝像機(jī)，分別從3個(gè)角度采集與會(huì)者圖像，該攝像機(jī)能夠支持720p和1080p分辨率的高清圖像采集；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。假設(shè)每個(gè)會(huì)議室的會(huì)議桌按照從左至右分別為Dl、D2、D3，顯示器為T(mén)l、T2、T3，，每臺(tái)顯示器的3個(gè)視角從左至右分別為V1、V2、V3 ；3臺(tái)攝像機(jī)從左至右分別為T(mén)1_C1、T2_C1、T3_C1，則攝像機(jī)T1_C1、T2_C1、T3_C1均可以獨(dú)立覆蓋所有會(huì)議桌D1、D2、D3所在區(qū)域。Tl的視角Vl對(duì)應(yīng)于會(huì)議桌D1，Tl的視角V2對(duì)應(yīng)于會(huì)議桌D2，Tl的視角V3對(duì)應(yīng)于會(huì)議桌D3 ；T2的視角Vl對(duì)應(yīng)于會(huì)議桌Dl，T2的視角V2對(duì)應(yīng)于會(huì)議桌D2，T2的視角V3對(duì)應(yīng)于會(huì)議桌D3 ；T3的視角Vl對(duì)應(yīng)于會(huì)議桌Dl，T3的視角V2對(duì)應(yīng)于會(huì)議桌D2，T3的視角V3對(duì)應(yīng)于會(huì)議桌D3。該系統(tǒng)中要求各個(gè)會(huì)場(chǎng)的每個(gè)與會(huì)者均可以看到其余所有會(huì)場(chǎng)的與會(huì)者，則在會(huì)議進(jìn)行中各個(gè)會(huì)場(chǎng)將本會(huì)場(chǎng)所有視頻上傳至MCU，在MCU中完成對(duì)應(yīng)視頻的拼接，后發(fā)送到目的會(huì)場(chǎng)；現(xiàn)假設(shè)PA會(huì)場(chǎng)需要觀看到所有會(huì)場(chǎng)的內(nèi)容，則在滿足眼對(duì)眼情況下，視頻流的發(fā)送接收對(duì)應(yīng)關(guān)系為:PB Tl CI+PC Tl CI+PD Tl Cl => PA T3 V3PB Tl C2+PC Tl C2+PD Tl C2 => PA T2 V3PB Tl C3+PC Tl C3+PD Tl C3 => PA Tl V3PB T2 CI+PC T2 CI+PD T2 Cl => PA T3 V2PB T2 C2+PC T2 C2+PD T2 C2 => PA T2 V2PB T2 C3+PC T2 C3+PD T2 C3 => PA Tl V2PB T3 CI+PC T3 CI+PD T3 Cl => PA T3 VlPB T3 C2+PC T3 C2+PD T3 C2 => PA T2 VlPB T3 C3+PC T3 C3+PD T3 C3 => PA Tl Vl其中PB Tl CI+PC T1C1+PD Tl Cl標(biāo)識(shí)MCU將PB會(huì)場(chǎng)的Cl視頻和PB會(huì)場(chǎng)的Cl視頻拼接起來(lái)構(gòu)成新的視頻流。本實(shí)施例的另外ー種形式為；會(huì)場(chǎng)中的3個(gè)顯示設(shè)備分別顯示遠(yuǎn)端的3個(gè)會(huì)場(chǎng)，按照眼對(duì)眼的關(guān)系，有如下視頻流對(duì)應(yīng)關(guān)系:假設(shè)將PB會(huì)場(chǎng)顯示在Tl顯示器上，PC會(huì)場(chǎng)俠士在T2顯示器上，PD會(huì)場(chǎng)顯示在T3顯示器上:PB T3 Cl => PA Tl VlPB T2 Cl => PA Tl V2PB Tl Cl => PA Tl V3PC T3 Cl => PA T2 VlPC T2 Cl => PA T2 V2PC Tl Cl => PA T2 V3PD T3 Cl => PA T3 VlPD T2 Cl => PA T3 V2PD Tl Cl => PA T3 V3本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。
如圖24所示，為本發(fā)明實(shí)施例中的布局10。該系統(tǒng)包括3個(gè)會(huì)場(chǎng)PA、PB、PC，各個(gè)會(huì)場(chǎng)的配置情況不相同；3個(gè)會(huì)場(chǎng)通過(guò)MCU進(jìn)行控制。會(huì)場(chǎng)A包含3臺(tái)大尺寸平板顯示器作為主顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用PDP電視，LCD電視或DLP背投電視等平板顯示器技木。3臺(tái)顯示器以ー個(gè)折面的方式放置，中間的顯示器和兩邊的顯示器緊靠在一起，3臺(tái)顯示器的圖像構(gòu)成了會(huì)議室場(chǎng)景的ー個(gè)完整呈現(xiàn)。系統(tǒng)中采用的顯示設(shè)備為具有多個(gè)視角的顯示器，如上圖中各個(gè)顯示器具有3個(gè)視角，每個(gè)視角可以呈現(xiàn)不同的內(nèi)容，每個(gè)視角分別對(duì)應(yīng)著會(huì)場(chǎng)的ー個(gè)與會(huì)者；在每個(gè)顯示器的頂部配置有ー個(gè)高清攝像機(jī)，分別從3個(gè)角度采集與會(huì)者圖像，該攝像機(jī)能夠支持720p和1080p分辨率的高清圖像采集；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。會(huì)場(chǎng)A的具體設(shè)備方位與覆蓋關(guān)系可以參考布局I。會(huì)場(chǎng)B包含一臺(tái)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用PDP電視，LCD電視或DLP背投電視等平板顯示器技術(shù)，該顯示設(shè)備具有I個(gè)視角，可以顯示不同的內(nèi)容；會(huì)場(chǎng)均有I個(gè)與會(huì)者，按照上圖所示方式配置，在顯示器上面的兩側(cè)及中間按照匯聚方式設(shè)置3臺(tái)高清攝像機(jī)，每臺(tái)攝像機(jī)可以在不同的角度拍攝到與會(huì)者；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。會(huì)場(chǎng)B的具體設(shè)備方位與覆蓋關(guān)系可以參考布局3。會(huì)場(chǎng)C采用兩個(gè)個(gè)大尺寸的多視角平板顯示器作為顯示設(shè)備，如65英寸或70英寸的平板顯示器，用于呈現(xiàn)接近真人大小尺寸的高清畫(huà)面，可以采用rop電視，LCD電視或DLP背投電視等平板顯示器技木。該顯示設(shè)備具有多個(gè)視角，可以顯示不同的內(nèi)容；每個(gè)會(huì)場(chǎng)均有2個(gè)與會(huì)者區(qū)域，按照上圖所示方式配置，每個(gè)位干與會(huì)者區(qū)域的與會(huì)者剛好可以觀看到多視角顯示設(shè)備的一個(gè)視角的內(nèi)容；在顯示器上面的兩側(cè)及中間按照匯聚方式設(shè)置3臺(tái)高清攝像機(jī)，每臺(tái)攝像機(jī)可以在不同的角度拍攝到全部與會(huì)者；位于會(huì)議桌側(cè)面的輔助顯示屏可以顯示共享的數(shù)據(jù)等信息。會(huì)場(chǎng)C的具體設(shè)備方位與覆蓋關(guān)系可以參考布局2。顯示器Tl上面的攝像機(jī)Cl拍攝與會(huì)區(qū)域Dl ；顯示器Tl上面的攝像機(jī)C2拍攝與會(huì)區(qū)域Dl ；顯示器Tl上面的攝像機(jī)C3拍攝與會(huì)區(qū)域D2 ；顯示器T2上面的攝像機(jī)Cl拍攝與會(huì)區(qū)域Dl ；顯示器T2上面的攝像機(jī)C2拍攝與會(huì)區(qū)域D2 ；顯示器T2上面的攝像機(jī)C3拍攝與會(huì)區(qū)域D2 ；與會(huì)者區(qū)域Dl可以看到顯示器Tl的視角V2 ；與會(huì)者區(qū)域Dl可以看到顯示器T2的視角Vl ；與會(huì)者區(qū)域D2可以看到顯示器Tl的視角V3;與會(huì)者區(qū)域D2可以看到顯示器T2的視角V2 ；對(duì)于會(huì)場(chǎng)A來(lái)說(shuō)，其3個(gè)顯示屏分別顯示BC兩個(gè)會(huì)場(chǎng)的內(nèi)容，其Tl屏顯示B會(huì)場(chǎng)，T2顯示C會(huì)場(chǎng)的D1，T3顯示C會(huì)場(chǎng)的D2內(nèi)容；B會(huì)場(chǎng)可以選擇地觀看AC某一會(huì)場(chǎng)的某一與會(huì)者的某ー視角內(nèi)容；設(shè)顯示為A會(huì)場(chǎng)的D2 ；C會(huì)場(chǎng)可以選擇觀看AB兩會(huì)場(chǎng)的內(nèi)容，比如Tl顯示B會(huì)場(chǎng)的內(nèi)容，T2顯示A會(huì)場(chǎng)D2與會(huì)者內(nèi)容；各個(gè)會(huì)場(chǎng)將本會(huì)場(chǎng)的所有視頻流發(fā)送MCU，MCU完成視頻流的發(fā)送接收對(duì)應(yīng)關(guān)系匹配，則為了達(dá)到眼對(duì)眼效果，有如下對(duì)應(yīng)關(guān)系:A 會(huì)場(chǎng):B Tl C3 => A Tl VlB Tl C2 = > A Tl V2B Tl Cl => A Tl V3C T2 Cl = > A T2 VlC Tl C2 = > A T2 V2C Tl Cl = > A T2 V3C T2 C3 = > A T3 VlC T2 C2 = > A T3 V2C Tl C3 = > A T3 V3B 會(huì)場(chǎng):A Tl C2 => B Tl VlA T2 C2 = > B Tl VlA T3 C2 = > B Tl VlC 會(huì)場(chǎng):B Tl C2 = > C Tl V2B Tl Cl => C Tl V3A T2 C2 = > C T2 VlA T3 C2 = > C T2 V2本實(shí)施例的其他細(xì)節(jié)可以參考布局I中所述，此處不做贅述。在本發(fā)明實(shí)施例中，獲取多視角本地視頻信息發(fā)送給遠(yuǎn)端顯示，在本地端則顯示來(lái)自遠(yuǎn)端的多視角遠(yuǎn)端視頻信息，只要顯示時(shí)恰當(dāng)進(jìn)行視角的匹配就可以實(shí)現(xiàn)眼對(duì)眼的會(huì)議效果。本領(lǐng)域普通技術(shù)人員可以理解實(shí)現(xiàn)上述實(shí)施例方法中的全部或部分流程，是可以通過(guò)計(jì)算機(jī)程序來(lái)指令相關(guān)的硬件來(lái)完成，所述的程序可存儲(chǔ)于一計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中，該程序在執(zhí)行時(shí)，可包括如上述各方法的實(shí)施例的流程。其中，所述的存儲(chǔ)介質(zhì)可為磁碟、光盤(pán)、只讀存儲(chǔ)記憶體(Read-Only Memory, ROM)或隨機(jī)存儲(chǔ)記憶體(Random AccessMemory, RAM)等。以上所揭露的僅為本發(fā)明ー種較佳實(shí)施例而已，當(dāng)然不能以此來(lái)限定本發(fā)明之權(quán)利范圍，因此依本發(fā)明權(quán)利要求所作的等同變化，仍屬本發(fā)明所涵蓋的范圍。
權(quán)利要求
1.一種視頻處理方法，用于遠(yuǎn)程會(huì)議系統(tǒng)中，其特征在干， 所述方法的視頻發(fā)送部分包括: 獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目； 將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端； 所述方法的視頻顯示部分包括: 接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目； 采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目； 其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。
2.按權(quán)利要求1所述的方法，其特征在于，所述采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息包括: 采用多個(gè)多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息。
3.按權(quán)利要求2所述的方法，其特征在于，所述獲取具有不同視角的本地視頻信息包括: 在所述多視角顯示設(shè)備處采用具有不同攝像視角的攝像設(shè)備獲取本地視頻信息。
4.按權(quán)利要求1至3中任一項(xiàng)所述的方法，其特征在于，所述系統(tǒng)包括多個(gè)遠(yuǎn)端，所述接收具有不同視角的遠(yuǎn)端視頻信息包括: 選取多個(gè)遠(yuǎn)端中的ー個(gè)遠(yuǎn)端，接收來(lái)自該選取的遠(yuǎn)端發(fā)送的具有不同視角的遠(yuǎn)端視頻信息。
5.一種視頻處理裝置，用于遠(yuǎn)程會(huì)議系統(tǒng)中，其特征在干， 所述裝置的發(fā)送模塊包括: 本地視頻獲取単元，用于獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目； 本地視頻發(fā)送単元，用于將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端； 所述裝置的顯示模塊包括: 遠(yuǎn)端視頻接收単元，用于接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目； 遠(yuǎn)端視頻顯示単元，用于采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目； 其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。
6.按權(quán)利要求5所述的裝置，其特征在于，所述遠(yuǎn)端視頻顯示単元，還用于采用多個(gè)多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息。
7.按權(quán)利要求6所述的裝置，其特征在于，所述本地視頻獲取単元，還用于在所述多視角顯示設(shè)備處采用具有不同攝像視角的攝像設(shè)備獲取本地視頻信息。
8.按權(quán)利要求5至7中任一項(xiàng)所述的裝置，其特征在于，所述系統(tǒng)包括多個(gè)遠(yuǎn)端，所述遠(yuǎn)端視頻接收単元，還用于選取多個(gè)遠(yuǎn)端中的ー個(gè)遠(yuǎn)端，接收來(lái)自該選取的遠(yuǎn)端發(fā)送的具有不同視角的遠(yuǎn)端視頻信息。
9.一種遠(yuǎn)程會(huì)議系統(tǒng)，其特征在于，所述系統(tǒng)的本地端包括: 多個(gè)具有不同攝像視角的攝像設(shè)備，用以分別獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目； 通訊設(shè)備，用于向遠(yuǎn)端發(fā)送所述攝像設(shè)備獲得的所述具有不同視角的本地視頻信息，并接收來(lái)自所述遠(yuǎn)端的具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目； 多視角顯示設(shè)備，用于向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目； 其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有ー個(gè)數(shù)目不小于2。
10.按權(quán)利要求9所述的系統(tǒng)，其特征在于，所述系統(tǒng)中的多視角顯示設(shè)備的數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目。
11.按權(quán)利要求9所述的系統(tǒng)，其特征在于，所述多視角顯示設(shè)備為多視角顯示器，或所述多視角顯示設(shè)備為多個(gè)投影儀與具有多視角顯示功能的投影幕的組合。
12.按權(quán)利要求9至11所述的系統(tǒng)，其特征在于，所述系統(tǒng)還包括多個(gè)遠(yuǎn)端，所述本地端的通訊設(shè)備還用于從所述多個(gè)遠(yuǎn)端中選擇ー個(gè)遠(yuǎn)端進(jìn)行多視角視頻信息的接收和發(fā)送。
全文摘要
本發(fā)明實(shí)施例公開(kāi)了視頻處理方法和系統(tǒng)，該方法的視頻發(fā)送部分包括獲取具有不同視角的本地視頻信息，所述本地視頻信息的視角數(shù)目不小于遠(yuǎn)端觀察點(diǎn)數(shù)目；將所述具有不同視角的本地視頻信息發(fā)送至遠(yuǎn)端；所述方法的視頻顯示部分包括接收具有不同視角的遠(yuǎn)端視頻信息，所述遠(yuǎn)端視頻信息的視角數(shù)目不小于本地觀察點(diǎn)數(shù)目；采用多視角顯示設(shè)備向不同的本地觀察點(diǎn)顯示對(duì)應(yīng)視角的遠(yuǎn)端視頻信息，以實(shí)現(xiàn)眼對(duì)眼顯示效果，所述多視角顯示設(shè)備的顯示視角不小于所述本地觀察點(diǎn)數(shù)目；其中，所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目均為自然數(shù)，且所述遠(yuǎn)端觀察點(diǎn)數(shù)目和本地觀察點(diǎn)數(shù)目中至少有一個(gè)數(shù)目不小于2。采用本發(fā)明，可以實(shí)現(xiàn)遠(yuǎn)程會(huì)議系統(tǒng)中的眼對(duì)眼效果。
文檔編號(hào)H04N7/15GK103096015SQ20111033514
公開(kāi)日2013年5月8日 申請(qǐng)日期2011年10月28日 優(yōu)先權(quán)日2011年10月28日
發(fā)明者趙嵩, 王靜, 劉源 申請(qǐng)人:華為技術(shù)有限公司