多畫面處理方法、多點(diǎn)控制單元及視頻系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及通信領(lǐng)域，具體而言，涉及多畫面處理方法、多點(diǎn)控制單元及視頻系統(tǒng)。
【背景技術(shù)】
[0002]多點(diǎn)視頻通訊需求越來(lái)越大，每臺(tái)局端設(shè)備容量有限，需要多臺(tái)局端設(shè)備級(jí)聯(lián)來(lái)解決容量問題，局端設(shè)備也可以稱為多點(diǎn)控制單元(Multi Control Unit，簡(jiǎn)稱為MCU)。
[0003]目前，在多點(diǎn)視頻通訊中通常會(huì)使用多畫面功能，在相關(guān)技術(shù)中，多畫面功能的實(shí)現(xiàn)是基于每臺(tái)局端設(shè)備(MCU)內(nèi)部多點(diǎn)實(shí)現(xiàn)的，級(jí)聯(lián)時(shí)由于局端設(shè)備(MCU)間的帶寬有限，一般只有一路圖像的帶寬，很難實(shí)現(xiàn)多個(gè)子畫面在不同局端設(shè)備的多畫面功能。針對(duì)這個(gè)問題有多種解決方案，例如，最簡(jiǎn)單的解決方案就是多通道級(jí)聯(lián)，這種方案犧牲了的局端間的帶寬。
[0004]針對(duì)相關(guān)技術(shù)中使用簡(jiǎn)單的多通道級(jí)聯(lián)來(lái)實(shí)現(xiàn)多畫面功能所導(dǎo)致的問題，目前尚未提出有效的解決方案。

【發(fā)明內(nèi)容】

[0005]本發(fā)明提供了多畫面處理方法、多點(diǎn)控制單元及視頻系統(tǒng)，以至少解決相關(guān)技術(shù)中使用簡(jiǎn)單的多通道級(jí)聯(lián)來(lái)實(shí)現(xiàn)多畫面功能所導(dǎo)致的問題。
[0006]根據(jù)本發(fā)明的一個(gè)方面，提供了一種多畫面處理方法，包括:一個(gè)或多個(gè)多點(diǎn)控制單元MCU中的每個(gè)MCU將多畫面布局中的本MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行縮放合成；所述每個(gè)MCU將合成后的視頻圖像進(jìn)行編碼并發(fā)送；終點(diǎn)MCU將接收到所述每個(gè)MCU發(fā)送的合成后的視頻圖像解碼并提取每個(gè)終端的視頻圖像；所述終點(diǎn)MCU使用提取到的視頻圖像以及所述終點(diǎn)MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行合成并發(fā)送合成后的視頻圖像。
[0007]進(jìn)一步地，所述方法還包括:根據(jù)預(yù)定規(guī)則從多個(gè)MCU中協(xié)商并確定一個(gè)MCU作為所述終點(diǎn)MCU。
[0008]進(jìn)一步地，所述預(yù)定規(guī)則包括以下至少之一:選擇特定終端所在MCU為終點(diǎn)MCU、帶寬最大的MCU作為終點(diǎn)MCU、選擇運(yùn)算處理能力最強(qiáng)的MCU作為終點(diǎn)MCU、選擇空閑資源最多的MCU作為終點(diǎn)MCU、根據(jù)管理員的設(shè)置確定終點(diǎn)MCU。
[0009]進(jìn)一步地，所述方法還包括:所述終點(diǎn)MCU獲取所述每個(gè)MCU所能夠使用的帶寬資源；所述每個(gè)MCU將合成后的視頻圖像進(jìn)行編碼并發(fā)送包括:所述每個(gè)MCU按照其所能使用的帶寬將合成后的視頻圖像進(jìn)行編碼并發(fā)送。
[0010]進(jìn)一步地，所述終點(diǎn)MCU使用提取到的視頻圖像以及所述終點(diǎn)MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行合成并發(fā)送合成后的視頻圖像包括:所述終點(diǎn)MCU獲取另一MCU發(fā)送多畫面的信息，所述信息用于表示所述另一MCU所需要的終端的視頻圖像；所述終點(diǎn)MCU根據(jù)所述信息將所述另一 MCU所需要的終端的視頻圖像按照上述多畫面布局進(jìn)行合成并向終端和/或需要此合成圖像的MCU發(fā)送合成后的視頻圖像。
[0011]根據(jù)本發(fā)明的另一個(gè)方面，提供了一種多畫面處理方法，包括:多點(diǎn)控制單元MCU將多畫面布局中的本MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行縮放合成，將合成后的視頻圖像進(jìn)行編碼并發(fā)送；或者，所述MCU接收其他MCU發(fā)送的按照所述多畫面布局合成后的視頻圖像并進(jìn)行解碼以及提取每個(gè)終端的視頻圖像，使用提取到的視頻圖像以及該MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行合成并發(fā)送合成后的視頻圖像。
[0012]進(jìn)一步地，所述方法還包括:所述MCU與所述其他MCU根據(jù)預(yù)定規(guī)則進(jìn)行協(xié)商并確定作為所述終點(diǎn)MCU的MCU ;在所述MCU未作為終點(diǎn)MCU的情況下，所述MCU將多畫面布局中的本MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行縮放合成，將合成后的視頻圖像進(jìn)行編碼并發(fā)送；在所述MCU作為終點(diǎn)MCU的情況下，所述MCU接收所述其他MCU發(fā)送的按照所述多畫面布局合成后的視頻圖像并進(jìn)行解碼以及提取每個(gè)終端的視頻圖像，使用提取到的視頻圖像以及所述MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行合成并發(fā)送合成后的視頻圖像。
[0013]進(jìn)一步地，所述預(yù)定規(guī)則包括以下至少之一:選擇特定終端所在MCU為終點(diǎn)MCU、選擇帶寬最大的MCU作為終點(diǎn)MCU、選擇運(yùn)算處理能力最強(qiáng)的MCU作為終點(diǎn)MCU、選擇空閑資源最多的MCU作為終點(diǎn)MCU、根據(jù)管理員的設(shè)置確定終點(diǎn)MCU。
[0014]進(jìn)一步地，所述MCU將合成后的視頻圖像進(jìn)行編碼并發(fā)送包括:所述MCU按照其所能使用的帶寬將合成后的視頻圖像進(jìn)行編碼并發(fā)送，其中，所能使用的帶寬為所述終點(diǎn)MCU確定的。
[0015]進(jìn)一步地，所述終點(diǎn)MCU使用提取到的視頻圖像以及所述終點(diǎn)MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行合成并發(fā)送合成后的視頻圖像包括:所述MCU獲取另一MCU的多畫面的信息，其中，所述信息用于表示所述另一 MCU所需要的終端的視頻圖像；所述MCU根據(jù)所述信息將所述另一 MCU所需要的終端的視頻圖像按照上述多畫面布局進(jìn)行合成并向終端和/或需要此合成圖像的MCU發(fā)送合成后的視頻圖像。
[0016]根據(jù)本發(fā)明的另一方面，提供了一種多點(diǎn)控制單元，所述多點(diǎn)控制單元MCU包括:第一處理模塊，用于將多畫面布局中的本MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行縮放合成，將合成后的視頻圖像進(jìn)行編碼并發(fā)送；和/或，第二處理模塊，用于接收其他MCU發(fā)送的按照所述多畫面布局合成后的視頻圖像并進(jìn)行解碼以及提取每個(gè)終端的視頻圖像，使用提取到的視頻圖像以及所述MCU下的終端的視頻圖像按照所述多畫面布局進(jìn)行合成并發(fā)送合成后的視頻圖像。
[0017]進(jìn)一步地，所述多點(diǎn)控制單元還包括:協(xié)商模塊，用于與所述其他MCU根據(jù)預(yù)定規(guī)則進(jìn)行協(xié)商并確定作為所述終點(diǎn)MCU的MCU ;在所述MCU未作為終點(diǎn)MCU的情況下，所述第一處理模塊使能；在所述MCU作為終點(diǎn)MCU的情況下，所述第二處理模塊使能。
[0018]進(jìn)一步地，所述預(yù)定規(guī)則包括以下至少之一:選擇特定終端所在MCU為終點(diǎn)MCU、選擇帶寬最大的MCU作為終點(diǎn)MCU、選擇運(yùn)算處理能力最強(qiáng)的MCU作為終點(diǎn)MCU、選擇空閑資源最多的MCU作為終點(diǎn)MCU、根據(jù)管理員的設(shè)置確定終點(diǎn)MCU。
[0019]進(jìn)一步地，所述第一處理模塊用于按照所述第一處理模塊所在的MCU所能使用的帶寬將合成后的視頻圖像進(jìn)行編碼并發(fā)送，其中，所能使用的帶寬為所述終點(diǎn)MCU確定的。
[0020]進(jìn)一步地，所述第二處理模塊用于獲取另一 MCU發(fā)送的多畫面的信息，其中，所述信息用于表示所述另一 MCU所需要的終端的視頻圖像；并根據(jù)所述信息將所述另一 MCU所需要的終端的視頻圖像按照上述多畫面布局進(jìn)行合成并向終端和/或需要此合成圖像的MCU發(fā)送合成后的視頻圖像。
[0021]根據(jù)本發(fā)明的另一方面，提供了一種視頻系統(tǒng)，包括:至少兩個(gè)多點(diǎn)控制器，其中，所述至少兩個(gè)多點(diǎn)控制器中有一個(gè)具有上述的第二處理模塊，其余多點(diǎn)控制器具有上述的第一處理模塊。
[0022]通過本發(fā)明，采用一個(gè)或多個(gè)MCU中的每個(gè)MCU將多畫面布局中的本MCU下的終端的視頻圖像按照該多畫面布局進(jìn)行縮放合成；該每個(gè)MCU將合成后的