用于在線教學(xué)的多方位視音頻信號(hào)采集方法及裝置制造方法
【專利摘要】本發(fā)明涉及一種用于在線教學(xué)的多方位視音頻信號(hào)采集方法及裝置，教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)攝像頭，采集多視角視頻信號(hào)；教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)麥克風(fēng)，采集聲場(chǎng)信號(hào)；將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，視音頻編碼合成信號(hào)傳送至源端；源端將視音頻合成信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器。
【專利說明】用于在線教學(xué)的多方位視音頻信號(hào)采集方法及裝置

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種用于在線教學(xué)的多方位視音頻信號(hào)采集方法及裝置。

【背景技術(shù)】
[0002]傳統(tǒng)的視音頻通訊系統(tǒng)中，通過一個(gè)攝像頭加麥克風(fēng)實(shí)現(xiàn)視頻音頻的傳輸。一個(gè)攝像頭連接到錄制或者通訊終端設(shè)備，用于采集視頻信號(hào)，音頻依靠?jī)?nèi)置于攝像頭或者終端本身的內(nèi)置麥克風(fēng)實(shí)現(xiàn)，有的視頻采集或通訊系統(tǒng)中采用單獨(dú)的外置麥克風(fēng)實(shí)現(xiàn)更好一些的錄音質(zhì)量。將現(xiàn)有的視音頻系統(tǒng)應(yīng)用于在線教育時(shí)，雖然可以實(shí)現(xiàn)一些課程的從線下到線上的迀移，但是整體來說體驗(yàn)遠(yuǎn)遠(yuǎn)差于線下教學(xué)。宄其原因，在于系統(tǒng)不能很好地實(shí)現(xiàn)視覺聽覺的完整傳輸，從而對(duì)于在線教育的學(xué)生來說，很難達(dá)到線下教育對(duì)音樂、語言等課程的理解。


【發(fā)明內(nèi)容】

[0003]本發(fā)明的發(fā)明目的在于提供一種用于在線教學(xué)的多方位視音頻信號(hào)采集方法及裝置，具有更佳的視音頻效果，獲得更佳的在線教學(xué)體驗(yàn)。
[0004]基于同一發(fā)明構(gòu)思，本發(fā)明具有兩個(gè)獨(dú)立的技術(shù)方案:
1、一種用于在線教學(xué)的多方位視音頻信號(hào)采集方法，其特征在于:教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)攝像頭，采集多視角視頻信號(hào)；教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)麥克風(fēng)，采集聲場(chǎng)信號(hào)；將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，視音頻編碼合成信號(hào)傳送至源端；源端將視音頻合成信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器。
[0005]可對(duì)采集的多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理后，再將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，即將拼接合成的視頻編碼中嵌入對(duì)應(yīng)的聲場(chǎng)編碼。
[0006]源端可將多視角視音頻信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器后，遠(yuǎn)程服務(wù)器再根據(jù)直播客戶端或者點(diǎn)播的客戶端的請(qǐng)求，發(fā)送特定視角的視音頻信號(hào)。
[0007]所說的源端可以是電腦、平板電腦、工作站、或手機(jī)終端。
[0008]2、一種上述方法的采集裝置，其特征在于:設(shè)有多個(gè)攝像頭和多個(gè)麥克風(fēng)，攝像頭的信號(hào)輸出端接視頻信號(hào)處理單元，麥克風(fēng)的信號(hào)輸出端接音頻信號(hào)處理單元，視頻信號(hào)處理單元的輸出端、音頻信號(hào)處理單元的信號(hào)輸出端接視音頻合成單元，視音頻合成單元的信號(hào)輸出端接源端。
[0009]視頻信號(hào)處理單元可對(duì)多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理。
[0010]當(dāng)檢測(cè)到只有一個(gè)攝像頭啟動(dòng)時(shí)，視頻信號(hào)處理單元可直接輸出視頻信號(hào)至視音頻合成單元。
[0011]所說的源端可以是電腦、平板電腦、工作站或手機(jī)終端。
[0012]本發(fā)明具有的有益效果:
本發(fā)明教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)攝像頭，可采集多視角視頻信號(hào)；教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)麥克風(fēng)，采集聲場(chǎng)信號(hào)；將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，視音頻編碼合成信號(hào)傳送至源端；源端將視音頻合成信號(hào)通過互聯(lián)網(wǎng)傳送至終端；本發(fā)明可采集多視角視頻信號(hào)和聲場(chǎng)信號(hào)，將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，可獲得更佳的視音頻效果，學(xué)生可獲得更佳的在線教學(xué)體驗(yàn)。多視角教學(xué)畫面可以讓學(xué)生更加清楚老師的演奏或者手部嘴部動(dòng)作，同理，老師也可以通過學(xué)生端的多視角合成畫面更加有針對(duì)性地指導(dǎo)學(xué)生。多麥克風(fēng)的聲場(chǎng)采集會(huì)準(zhǔn)確記錄傳輸老師或?qū)W生端的每一個(gè)聲音細(xì)節(jié)，從而達(dá)到身臨其境的教學(xué)體驗(yàn)。
[0013]本發(fā)明可對(duì)采集的多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理后，再將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，本發(fā)明也可以前期不需對(duì)采集的多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理，源端可將多視角視音頻信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器后，遠(yuǎn)程服務(wù)器再根據(jù)直播客戶端或者點(diǎn)播的客戶端的請(qǐng)求，發(fā)送特定視角的視音頻信號(hào)，方便使用。

【專利附圖】

【附圖說明】
[0014]附圖是本發(fā)明用于在線教學(xué)的全方位視音頻信號(hào)采集裝置原理圖。

【具體實(shí)施方式】
[0015]如圖所示，教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)攝像頭I和多個(gè)麥克風(fēng)2，攝像頭I的信號(hào)輸出端接視頻信號(hào)處理單元3，麥克風(fēng)的信號(hào)輸出端接音頻信號(hào)處理單元4，視頻信號(hào)處理單元3的輸出端、音頻信號(hào)處理單元4的信號(hào)輸出端接視音頻合成單元5，視音頻合成單元5的信號(hào)輸出端接源端6。視頻信號(hào)處理單元5可對(duì)多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理，源端6可以是電腦或工作站。
[0016]實(shí)施例一:用于音樂教學(xué)時(shí)，用一個(gè)攝像頭拍攝老師正面的視頻畫面，另外至少一個(gè)攝像頭拍攝老師局部的具體演奏細(xì)節(jié)畫面，通過視頻信號(hào)處理單元3在將這幾個(gè)畫面拼接成一個(gè)視頻畫面，輸出傳送至視音頻合成單元5。當(dāng)檢測(cè)到只有一個(gè)攝像頭啟動(dòng)時(shí)，視頻信號(hào)處理單元3不需進(jìn)行視頻畫面拼接，直接輸出視頻信號(hào)至視音頻合成單元5。視音頻合成單元5將視頻畫面與采集到的聲場(chǎng)信號(hào)一起進(jìn)行編碼，也就是說聲場(chǎng)信號(hào)編碼碼流同步內(nèi)嵌于視頻碼流中，再通過傳輸線傳輸給源端，本實(shí)施例中源端選用電腦。源端將視音頻合成信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器，源端通過在線教育網(wǎng)絡(luò)軟件與對(duì)端的老師或?qū)W生對(duì)接，實(shí)現(xiàn)在線教學(xué)。
[0017]實(shí)施例二:視頻信號(hào)處理單元3不對(duì)多視角畫面進(jìn)行裁減拼接，僅是對(duì)它們都進(jìn)行編碼，通過源端傳輸?shù)竭h(yuǎn)程服務(wù)器之后，遠(yuǎn)程服務(wù)器再根據(jù)直播客戶端或者點(diǎn)播的客戶端的請(qǐng)求，發(fā)送特定視角的視音頻信號(hào)。
【權(quán)利要求】
1.一種用于在線教學(xué)的多方位視音頻信號(hào)采集方法，其特征在于:教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)攝像頭，采集多視角視頻信號(hào)；教學(xué)現(xiàn)場(chǎng)設(shè)有多個(gè)麥克風(fēng)，采集聲場(chǎng)信號(hào)；將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，視音頻編碼合成信號(hào)傳送至源端；源端將視音頻合成信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于:可對(duì)采集的多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理后，再將視頻信號(hào)和聲場(chǎng)信號(hào)進(jìn)行視音頻編碼合成，即將拼接合成的視頻編碼中嵌入對(duì)應(yīng)的聲場(chǎng)編碼。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于:源端可將多視角視音頻信號(hào)通過互聯(lián)網(wǎng)傳送至遠(yuǎn)程服務(wù)器后，遠(yuǎn)程服務(wù)器再根據(jù)直播客戶端或者點(diǎn)播的客戶端的請(qǐng)求，發(fā)送特定視角的視音頻信號(hào)。
4.根據(jù)權(quán)利要求1-3任何一項(xiàng)所述的方法，其特征在于:所說的源端可以是電腦、平板電腦、工作站、或手機(jī)終端。
5.一種實(shí)現(xiàn)權(quán)利要求1所述方法的采集裝置，其特征在于:設(shè)有多個(gè)攝像頭和多個(gè)麥克風(fēng)，攝像頭的信號(hào)輸出端接視頻信號(hào)處理單元，麥克風(fēng)的信號(hào)輸出端接音頻信號(hào)處理單元，視頻信號(hào)處理單元的輸出端、音頻信號(hào)處理單元的信號(hào)輸出端接視音頻合成單元，視音頻合成單元的信號(hào)輸出端接源端。
6.根據(jù)權(quán)利要求5所述的采集裝置，其特征在于:視頻信號(hào)處理單元可對(duì)多視角視頻信號(hào)進(jìn)行裁剪拼接合成處理。
7.根據(jù)權(quán)利要求5所述的采集裝置，其特征在于:當(dāng)檢測(cè)到只有一個(gè)攝像頭啟動(dòng)時(shí)，視頻信號(hào)處理單元可直接輸出視頻信號(hào)至視音頻合成單元。
8.根據(jù)權(quán)利要求5-7任何一項(xiàng)所述的采集裝置，其特征在于:所說的源端可以是電腦、平板電腦、工作站或手機(jī)終端。
【文檔編號(hào)】G09B5/06GK104506781SQ201510001426
【公開日】2015年4月8日 申請(qǐng)日期:2015年1月5日 優(yōu)先權(quán)日:2015年1月5日
【發(fā)明者】張德明 申請(qǐng)人:北京塞賓科技有限公司