專利名稱：由可視電話終端傳輸非視頻信息的系統(tǒng)和方法
技術領域：
本發(fā)明涉及一種通信系統(tǒng)，特別是在固定通信和移動通信網(wǎng)絡中的一種 傳輸非視頻輸入信息的可視電話終端系統(tǒng)和方法。
背景技術：
隨著技術的發(fā)展，能同時傳遞語音和圖像信息的可視電話系統(tǒng)得到了越
來越廣泛的部署。這種可視電話系統(tǒng)可以用于固定通信網(wǎng)絡(如ISDN網(wǎng)絡) 也可以用于移動網(wǎng)絡(如WCDMA網(wǎng)絡和TD-SCDMA網(wǎng)絡)；這種可視電 話系統(tǒng)可以基于電路交換(Circuit Switched, CS)也可以基于包交換(Packet Switched, PS)。實際上有多種針對可視電話系統(tǒng)的國際技術標準被制定出 來，包括適用于固定ISDN網(wǎng)絡的ITU H.324標準，適用于包交換IP網(wǎng)絡的 ITUH.323標準和SIP協(xié)議以及基于H.324發(fā)展起來并適用于3GPP(第3代 伙伴計劃，3fd Generation Partnership Project)移動通信網(wǎng)絡的3G-H.324M標 準。普通的可視電話通信系統(tǒng)終端的邏輯構(gòu)成如圖l所示，可以分為視頻輸 入子系統(tǒng)(攝像頭)11，視頻輸出子系統(tǒng)(LCD顯示屏)14，音頻輸入子系 統(tǒng)(麥克風)16，音頻輸出子系統(tǒng)(揚聲器)9，視頻編碼子系統(tǒng)12，視頻 解碼子系統(tǒng)13，音頻編碼子系統(tǒng)17，音頻解碼子系統(tǒng)18，可視電話控制與 傳輸子系統(tǒng)15等邏輯組成部分。其中視頻輸入子系統(tǒng)11通過鏡頭以一定頻 率連續(xù)拍攝外部圖像并生成數(shù)字格式的圖像數(shù)據(jù)，視頻輸出子系統(tǒng)14用于 顯示本方和通信對方攝像機拍攝的畫面，音頻輸入子系統(tǒng)16以一定速率連 續(xù)錄制外部聲音并生成數(shù)字格式的聲音數(shù)據(jù)，音頻輸出子系統(tǒng)19用于播放 通信對方發(fā)送過來的聲音數(shù)據(jù)，視頻編碼子系統(tǒng)12將攝像頭生成的未壓縮圖像數(shù)據(jù)編碼為一定格式的壓縮圖像數(shù)據(jù)，視頻解碼子系統(tǒng)13將接收到的
通信對方發(fā)送的編碼壓縮圖像數(shù)據(jù)解碼為未壓縮的圖像數(shù)據(jù)，音頻編碼子系
統(tǒng)17將麥克風生成的未壓縮音頻數(shù)據(jù)編碼為一定格式的壓縮音頻數(shù)據(jù)，音 頻編碼子系統(tǒng)18將接收到的通信對方發(fā)送的編碼壓縮音頻數(shù)據(jù)解碼為未壓 縮的音頻數(shù)據(jù)，而可視電話控制與傳輸子系統(tǒng)15則按照相應協(xié)議進行控制 和協(xié)議處理，并通過通信信道將處理后的音頻、視頻數(shù)據(jù)發(fā)送給通信對方或 從對方接收處理過的音頻、視頻數(shù)據(jù)。
可視電話可以認為是普通的語音電話的一種加強，它使得通話雙方不僅 能進行語音交流，也能同時看到對方的視頻圖像。 一般來說，可視電話中雙 方傳輸?shù)囊曨l圖像是雙方電話上的攝像頭拍攝下來的。另外一方面，可視電 話的通信雙方可能同時也希望交流一些別的信息，比如通過鍵盤輸入的數(shù)字 和文字，或者通過觸摸屏輸入的草圖等。在目前的解決方案中，要在可視電 話系統(tǒng)中傳輸這些信息，需要采用-一些額外的信令處理軟件或模塊，如一些 電子白板協(xié)議如T.120等，這就需要雙方都支持相關協(xié)議。但是出于成本考 慮，大部分的可視電話終端都不具備相關協(xié)議處理能力。這樣就存在兼容性 問題，比如一個支持電子白板協(xié)議的終端向一個不支持相應協(xié)議終端發(fā)送的 文字或草圖信息就不會被正確處理或顯示。
發(fā)明內(nèi)容
本發(fā)明的目的在于提供一種將用戶的非視頻輸入信息通過可視電話系 統(tǒng)進行傳輸?shù)姆椒?，這種方法包含以下步驟
(1) 獲取用戶的非視頻輸入信息；
(2) 將上述非視頻輸入信息轉(zhuǎn)化為圖像信息；
(3) 將上述圖像信息插入或取代由攝像頭生成的視頻輸入信息，并形成 混合的視頻輸入信息；
(4) 將上述混合的視頻輸入信息按照可視電話協(xié)議進行壓縮和協(xié)議處 理，并通過通信信道發(fā)送出去；(5)通信對方在接收到上述信息后進行協(xié)議處理和解壓縮，得到視頻 信息并在視頻顯示模塊上顯示出來。
在上述步驟中的非視頻輸入信息是指所有不是由攝像頭或類似光學設
備實時生成或事先生成的信息；
上述非視頻輸入信息可以是用戶通過鍵盤輸入的信息，包括數(shù)字或文
字；
上述非視頻輸入信息可以是用戶通過觸摸屏輸入的信息，包括用戶在觸 摸屏上輸入的幾何坐標集合；
所述的將非視頻輸入信息轉(zhuǎn)化為圖像信息的步驟
(1) 獲取非視頻輸入信息的幾何數(shù)據(jù)，也就是說獲取組成相關信息的所
有的點的坐標集合，以及相關點的顏色信息；鍵盤輸入的數(shù)字或文字，以及 通過觸摸屏輸入的點的集合都被轉(zhuǎn)換為相應的幾何信息；
(2) 根據(jù)當前視頻電話系統(tǒng)設置的幀的格式(包括分辨率和顏色數(shù))， 上述輸入信息的幾何數(shù)據(jù)會進行相關的幾何轉(zhuǎn)換和顏色轉(zhuǎn)換，以適應幀的格 式；
將所述經(jīng)過轉(zhuǎn)換的圖像信息插入或取代由攝像頭生成的視頻輸入信息的 步驟是指對由攝像頭產(chǎn)生的每一個視頻幀，將上述圖像信息中包含的每一個 點插入該幀中，也就是說將視頻幀對應坐標上的顏色改為圖像信息中對應的 顏色，或
(1) 先生成一個單色幀；
(2) 再將上述圖像信息中包含的每一個點插入該幀中，也就是說將視頻 幀對應，坐標上的顏色改為圖像信息中對應的顏色；
(3) 然后將上述幀插入或取代由攝像頭產(chǎn)生的視頻幀。 屬于同一個總的發(fā)明構(gòu)思，本發(fā)明提供一種將用戶的非視頻輸入信息，
通過可視電話系統(tǒng)進行傳輸?shù)目梢曤娫捊K端系統(tǒng)，其特征在于該可視電話終 端是由以下子系統(tǒng)組成視頻輸入子系統(tǒng)，視頻輸出子系統(tǒng)，音頻輸入子系統(tǒng)，音頻輸出子系統(tǒng)，視頻編碼子系統(tǒng)，視頻解碼子系統(tǒng)，音頻編碼子系統(tǒng)， 音頻解碼子系統(tǒng)，可視電話傳輸與控制子系統(tǒng)，非視頻輸入子系統(tǒng)，圖像信 息轉(zhuǎn)化生成子系統(tǒng)和圖形信息插入子系統(tǒng)。
上述可視電話終端系統(tǒng)的特征在于，其中的圖像信息轉(zhuǎn)化生成子系統(tǒng)可 以從非視頻輸入子系統(tǒng)獲取用戶的非視頻輸入信息，并將上述非視頻輸入信
息轉(zhuǎn)化為圖像信息；其中的圖形信息插入子系統(tǒng)可以將上述圖像信息插入或 取代由攝像頭生成的視頻輸入信息；其中的視頻編碼子系統(tǒng)可以對上述混合 的視頻信息進行壓縮；其中的可視電話傳輸與控制子系統(tǒng)可以將上述信息進 行協(xié)議處理并發(fā)送出去。
上述可視電話終端系統(tǒng)的特征在于，其中的音頻編解碼子系統(tǒng)支持 AMR-NB， AMR-WB， G.723或與之兼容的音頻編解碼格式；所述的視頻編 解碼子系統(tǒng)支持H.263， H.264， MPeg4或與之兼容的視頻編解碼格式。
本發(fā)明的優(yōu)點是可以方便地在可視電話系統(tǒng)中發(fā)送非視頻輸入信息， 同時對接收方?jīng)]有更多的要求，只要接收方能進行基本的視頻通話就能收到 相應信息。
圖1是現(xiàn)有的普通可視電話系統(tǒng)組成示意圖。
圖2是本發(fā)明所述的將用戶的非視頻輸入信息通過可視電話系統(tǒng)進行傳 輸?shù)目梢曤娫捊K端系統(tǒng)組成示意圖3是本發(fā)明的一種將用戶的非視頻輸入信息通過可視電話系統(tǒng)進行傳 輸?shù)牧鞒淌疽鈭D。
具體實施例方式
下面根據(jù)圖2和圖3給出本發(fā)明一個較好實施例，并予以詳細說明，以 使本技術領域的技術人員更易于理解本發(fā)明的結(jié)構(gòu)特征和方法特點，而不是 用來限定本發(fā)明的范圍。如圖2所示，本發(fā)明提出了一種將用戶的非視頻輸入信息通過可視電話 系統(tǒng)進行傳輸?shù)目梢曤娫捊K端系統(tǒng)，與普通的可視電話終端系統(tǒng)相比新增了 3個子系統(tǒng)非視頻輸入子系統(tǒng)(鍵盤，觸摸屏等)21，圖像信息轉(zhuǎn)化生成
子系統(tǒng)22，圖形信息插入子系統(tǒng)23。
其中非視頻輸入子系統(tǒng)21可以獲取用戶通過鍵盤輸入的數(shù)字或文字， 也可以獲取用戶通過觸摸屏輸入的圖形信息。
而圖形信息轉(zhuǎn)化生成子系統(tǒng)22則可以將上述從非視頻輸入子系統(tǒng)21獲 取的輸入轉(zhuǎn)化為圖形信息。
如果相關輸入是通過鍵盤輸入的數(shù)字或文字(包括中文文字或其它語言 文字)，那么可以通過以下2種方法來獲取這些數(shù)字或文字的圖形信息
1. 一般數(shù)字或文字的圖形信息會存儲在相關的字庫文件中，字庫文件包 含了組成每個字符的所有點的坐標信息，因此，可以直接從字庫文件中獲取 相關字符的圖形信息；
2. 用戶輸入數(shù)字和文字最終會顯示到LCD顯示器上，因此，可以通過 L C D的驅(qū)動程序獲取所有被顯示出來的點的圖形信息。
如果相關輸入是通過觸摸屏輸入的，那么觸摸屏的驅(qū)動程序會獲取用戶 所輸入的每個點的坐標信息，因此，只需要截獲觸摸屏的驅(qū)動程序所獲取的 輸入就能得到用戶輸入的圖形信息。
另外一方面，系統(tǒng)正在傳輸?shù)目梢曤娫挼囊曨l信息幀會有一個特定的格 式，這個格式可以用分辨率(長度方向和寬度方向的點的個數(shù))和顏色數(shù)(在 一幀中最多可以支持的顏色數(shù)量)來描述。為了保證圖形信息轉(zhuǎn)化生成子系 統(tǒng)生成的輸出可以適應這樣的幀格式，對生成的點陣將進行坐標轉(zhuǎn)換和顏色 轉(zhuǎn)換。坐標轉(zhuǎn)換的目的是保證相關圖形點陣可以落在上述幀格式的范圍，在 這個前提下具體的轉(zhuǎn)換規(guī)則有多種，但并不影響本發(fā)明的實施；同樣的道理， 顏色轉(zhuǎn)換的目的是保證相關圖形點陣的顏色信息可以由當前的幀格式表示， 在這個前提下具體的轉(zhuǎn)換規(guī)則有多種，但并不影響本發(fā)明的實施。
在本發(fā)明中，圖形信息插入子系統(tǒng)23用于將上述圖形點陣插入或取代視頻輸入子系統(tǒng)生成的視頻信息幀。這里有兩種方法如果采用疊加方法， 則將圖形信息轉(zhuǎn)化生成子系統(tǒng)輸出的點陣疊加到視頻輸入子系統(tǒng)生成的視 頻幀的相應坐標點上，即實現(xiàn)了視頻輸入信息上疊加非視頻輸入信息的效 果；如果采用替代方法，則利用圖形信息轉(zhuǎn)化生成子系統(tǒng)輸出的點陣生成一 個完整的視頻幀，具體方法可以先生成一個單色幀，再將圖形信息轉(zhuǎn)化生成 子系統(tǒng)輸出的點陣疊加上去。最后再用生成的新視頻幀替代掉視頻輸入子系 統(tǒng)生成的視頻幀。
本發(fā)明的整個流程100可以用圖3來表示，首先S,卿從非視頻輸入設 備獲取用戶輸入；S,ocn然后獲取組成相關信息的所有的點的坐標集合，以及
相關點的顏色信息，Sux)2并根據(jù)當前視頻電話系統(tǒng)設置的幀的格式進行相關
的幾何轉(zhuǎn)換和顏色轉(zhuǎn)換；S,oo3如果采用疊加方法，S,則將上述圖形信息疊
加到視頻輸入系統(tǒng)生成的視頻幀上，S,o(H否則利用上述圖形信息生成完整的
新視頻幀，并用其取代視頻輸入系統(tǒng)生成的視頻幀；S1G()6，最后按照可視電 話協(xié)議進行壓縮和協(xié)議處理，并發(fā)送出去。
權(quán)利要求
1、一種由可視電話終端傳輸非視頻信息的方法，包括步驟S1、獲取用戶的非視頻輸入信息；S2、將所獲取的非視頻輸入信息轉(zhuǎn)化成圖像信息；S3、將所述的圖像信息插入或取代由攝像頭生成的視頻輸入信息，并形成混合的視頻輸入信息；S4、將形成的混合的視頻輸入信息按照可視電話協(xié)議進行壓縮和協(xié)議處理，并通過通信信道發(fā)送出去；S5、通信對方在接收到上述信息后，進行協(xié)議處理和解壓縮，得到視頻信息并在視頻模塊上顯示出來。
2、 根據(jù)權(quán)利要求1所述的由可視電話終端傳輸非視頻信息的方法，其 特征在于，所述的非視頻輸入信息是指所有不是由攝像頭或類似光學設備實 時生成或事先生成的信息。
3、 根據(jù)權(quán)利要求1或2所述的由可視電話終端傳輸非視頻信息的方法， 其特征在于，所述的非視頻輸入信息是指由用戶通過鍵盤輸入的信息，包括 數(shù)字或文字。
4、 根據(jù)權(quán)利要求1或2所述的由可視電話終端傳輸非視頻信息的方法， 其特征在于，所述的非視頻信息是指由用戶通過觸摸屏輸入的信息，包括用 戶在觸摸屏上輸入的幾何坐標集合。
5、 根據(jù)權(quán)利要求1所述的由可視電話終端傳輸非視頻信息的方法，其 特征在于，所述的非視頻信息轉(zhuǎn)化為圖像信息的步驟是先獲取非視頻輸入 信息的幾何數(shù)據(jù)，再根據(jù)當前視頻電話系統(tǒng)設置的包括分辨率和顏色數(shù)構(gòu)成 的幀格式，將所述的輸入信息的幾何數(shù)據(jù)進行相關的幾何轉(zhuǎn)換和顏色轉(zhuǎn)換以 適應幀的格式。
6、 根據(jù)權(quán)利要求1或5所述的由可視電話終端傳輸非視頻信息的方法，其特征在于，所述的獲取非視頻輸入信息的幾何數(shù)據(jù)是指獲取組成相關信息 的所有的點的坐標集合，以及相關點的顏色信息鍵盤輸入的數(shù)字或文字， 以及通過觸摸屏輸入的點的集合都被轉(zhuǎn)換為相應的幾何信息。
7、 根據(jù)權(quán)利要求1所述的由可視電話終端傳輸非視頻信息的方法，其 特征在于，所述的將經(jīng)過轉(zhuǎn)換的圖像信息插入或取代由攝像頭生成的視頻輸 入信息的步驟是指對由攝像頭產(chǎn)生的每一個視頻幀，將所述圖像信息中包含 的每一個點插入該幀中，將該視頻幀對應坐標上的顏色改為圖像信息中對應 的顏色。
8、 根據(jù)權(quán)利要求1所述的由可視電話終端傳輸非視頻信息的方法，其 特征在于，所述的將經(jīng)過轉(zhuǎn)換的圖像信息插入或取代由攝像頭生成的視頻輸 入信息，其步驟是先生成一個單色幀，再將該圖像信息中包含的每一個點 插入該單色幀中，將視頻幀對應坐標上的顏色改為圖像信息中對應的顏色， 然后，將所述幀插入或取代由攝像頭產(chǎn)生的視頻幀。
9、 一種將用戶的非視頻輸入信息通過可視電話系統(tǒng)進行傳輸?shù)目梢曤?話終端系統(tǒng)，包括如下子系統(tǒng)視頻輸入子系統(tǒng)、視頻輸出子系統(tǒng)、音頻輸 入子系統(tǒng)、音頻輸出子系統(tǒng)、視頻編碼子系統(tǒng)、視頻解碼子系統(tǒng)、音頻編碼 子系統(tǒng)、音頻解碼子系統(tǒng)、可視電話傳輸與控制子系統(tǒng)，其特征在于，還包 括非視頻輸入子系統(tǒng)、圖像信息轉(zhuǎn)化生成子系統(tǒng)和圖形信息插入子系統(tǒng)該圖像信息轉(zhuǎn)化生成子系統(tǒng)連接非視頻輸入子系統(tǒng)獲取用戶的非視頻 輸入信息，并將所述非視頻輸入信息轉(zhuǎn)化為圖像信息；該圖像信息插入子系統(tǒng)將所述圖像信息插入或取代由攝像頭生成的視頻輸入信息；該視頻編碼子 系統(tǒng)對所述混合的視頻信息進行壓縮；可視電話傳輸與控制子系統(tǒng)可以將所 述信息進行協(xié)議處理并發(fā)送出去。
10、 根據(jù)權(quán)利要求9所述的將用戶的非視頻輸入信息通過可視電話系統(tǒng) 進行傳輸?shù)目梢曤娫捊K端系統(tǒng)，其特征在于，所述的音頻編解碼子系統(tǒng)支持 AMR-NB， AMR-WB， G7223音頻編解碼或與之兼容的格式。
11、 根據(jù)權(quán)利要求9所述的將用戶的非視頻輸入信息通過可視電話系統(tǒng)進行傳輸?shù)目梢曤娫捊K端系統(tǒng)，其特征在于，所述的視頻編解碼子系統(tǒng)支持H.263; H.264; MPeg4或與之相兼容的編解碼格式。
全文摘要
一種將用戶的非視頻輸入信息通過可視電話系統(tǒng)進行傳輸?shù)姆椒?，其特征在于包含以下步驟獲取用戶的非視頻輸入信息；將上述非視頻輸入信息轉(zhuǎn)化為圖像信息；將上述圖像信息插入或取代由攝像頭生成的視頻輸入信息；將上述混合的視頻輸入信息按照可視電話協(xié)議進行壓縮和協(xié)議處理，并通過通信信道發(fā)送出去。一種將用戶的非視頻輸入信息通過可視電話系統(tǒng)進行傳輸?shù)目梢曤娫捊K端系統(tǒng)，其特征在于包含以下子系統(tǒng)視頻輸入子系統(tǒng)，視頻輸出子系統(tǒng)，音頻輸入子系統(tǒng)，音頻輸出子系統(tǒng)，視頻編碼子系統(tǒng)，視頻解碼子系統(tǒng)，音頻編碼子系統(tǒng)，音頻解碼子系統(tǒng)，可視電話傳輸與控制子系統(tǒng)，非視頻輸入子系統(tǒng)，圖像信息轉(zhuǎn)化生成子系統(tǒng)和圖形信息插入子系統(tǒng)。
文檔編號H04N7/52GK101420585SQ20071004744
公開日2009年4月29日 申請日期2007年10月26日 優(yōu)先權(quán)日2007年10月26日
發(fā)明者磊 陳 申請人:希姆通信息技術(上海)有限公司