一種基于智能手機(jī)的會議交互方法
【專利摘要】本發(fā)明公開了一種智能會議室前端交互設(shè)計方法，本發(fā)明服務(wù)器運(yùn)行于PC，包含信息展示界面、語音播放和數(shù)據(jù)存儲功能，接收來自客戶端的用戶信息并展示，實(shí)時播放客戶端發(fā)送的語音流，整理并存儲用戶和語音信息。與會者發(fā)言前點(diǎn)擊軟件發(fā)言按鈕，通過手機(jī)麥克風(fēng)發(fā)言，服務(wù)器通過會議室音響設(shè)備播放發(fā)言，同時顯示發(fā)言人信息。與會者通過手機(jī)客戶端查看發(fā)言人信息，同時可存儲發(fā)言人信息，與會者間可通過手機(jī)客戶端互相交流。服務(wù)器將每個發(fā)言人的語音和個人信息以及與會者間的交互信息分別存放至?xí)h記錄數(shù)據(jù)庫，并為智能會議室系統(tǒng)提供訪問接口。智能會議室系統(tǒng)通過接口訪問會議記錄數(shù)據(jù)庫，作為其語音數(shù)據(jù)記錄，可簡化發(fā)言人識別，交互分析等步驟。
【專利說明】一種基于智能手機(jī)的會議交互方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及人機(jī)交互領(lǐng)域，尤其涉及一種智能會議室前端交互設(shè)計方法。
【背景技術(shù)】
[0002]現(xiàn)代社會生活中，會議是信息和知識共享的重要渠道。語言交流是會議中最常見的交流方式，因此提高與會者的口頭交流體驗(yàn)是提升會議效果的重要途徑。傳統(tǒng)的大型會議室一般通過傳遞麥克風(fēng)的方式來滿足與會者的發(fā)言要求，但是麥克風(fēng)傳遞浪費(fèi)大量時間，且會降低與會者的參與感和積極性。同時，與會者往往希望通過會議結(jié)交其它參會人員，但在傳統(tǒng)會議環(huán)境下，陌生的與會者之間通過會議建立聯(lián)系的途徑少、效率低。
[0003]智能會議室是一種分析會議交互數(shù)據(jù)，以提高會議的組織和參與效率的系統(tǒng)。該類系統(tǒng)錄制會場語音和視頻，進(jìn)行發(fā)言人識別和交互分析等。由于會場錄音中，多個發(fā)言人同時或相間發(fā)言，導(dǎo)致發(fā)言人識別過程中需使用語音識別、聲音定位等復(fù)雜算法。若將每個發(fā)言人的語音數(shù)據(jù)分別存放，同時綁定發(fā)言人信息，則可免去發(fā)言人識別，同時簡化交互分析過程。
[0004]隨著智能移動設(shè)備和無線網(wǎng)絡(luò)技術(shù)的發(fā)展和普及，會議室普遍配備無線W1-Fi網(wǎng)絡(luò)和投影顯示設(shè)備，智能手機(jī)成為人們普遍使用的通訊工具。利用智能移動設(shè)備提供的麥克風(fēng)、用戶界面和無線通信功能，結(jié)合會議場所的基礎(chǔ)通信設(shè)施，可以更好的提升與會者的會議體驗(yàn)，簡化與會者發(fā)言方式，促進(jìn)與會者間交流，提高會議效率，為智能會議室系統(tǒng)提供包含語音的會議記錄數(shù)據(jù)，簡化發(fā)言人識別以及交互分析等步驟。
[0005]鑒于上述原因，本發(fā)明創(chuàng)作者經(jīng)過長時間的研究和實(shí)踐終于獲得了本創(chuàng)作。

【發(fā)明內(nèi)容】

[0006]本發(fā)明的目的在于提供一種智能會議室前端交互設(shè)計方法，以簡化與會者發(fā)言方式，促進(jìn)與會者間交流，提高會議效率，為智能會議室系統(tǒng)提供包含語音的會議記錄數(shù)據(jù)，簡化發(fā)言人識別以及交互分析等步驟。
[0007]為實(shí)現(xiàn)上述目的，本發(fā)明提供一種智能會議室前端交互設(shè)計方法，其所述方法的步驟如下:
[0008]S1、開放W1-Fi接入信號，接入計算機(jī)和與會者使用的智能手機(jī)；
[0009]S2、計算機(jī)和與會者使用的智能手機(jī)運(yùn)行服務(wù)器軟件；
[0010]S3、與會者發(fā)言前點(diǎn)擊軟件發(fā)言按鈕，通過手機(jī)麥克風(fēng)發(fā)言，服務(wù)器通過會議室音響設(shè)備播放發(fā)言，同時顯示發(fā)言人信息；
[0011]S4、與會者通過手機(jī)客戶端查看發(fā)言人信息，同時可存儲發(fā)言人信息，與會者間可通過手機(jī)客戶端互相交流；
[0012]S5、服務(wù)器將每個發(fā)言人的語音和個人信息以及與會者間的交互信息、分別存放至?xí)h記錄數(shù)據(jù)庫，并為智能會議室系統(tǒng)提供訪問接口 ；
[0013]S6、智能會議室系統(tǒng)通過接口訪問會議記錄數(shù)據(jù)庫，作為其語音數(shù)據(jù)記錄，可簡化發(fā)言人識別，交互分析等步驟。
[0014]所述SI中的會場包括封閉的會議室和開放環(huán)境的會議場所等。與計算機(jī)互聯(lián)的投影儀或顯示屏是現(xiàn)代會議場所常用設(shè)備。W1-Fi接入是指會場通過無線路由器或者其它無線網(wǎng)絡(luò)設(shè)備提供無線接入方法，使得其它無線接入設(shè)備連接該網(wǎng)絡(luò)后，接入同一個局域網(wǎng)。本專利應(yīng)用時要求會場計算機(jī)接入上述W1-Fi局域網(wǎng)。
[0015]所述S2中的智能手機(jī)指運(yùn)行Android或1S等智能操作系統(tǒng)的手機(jī)，其必備的硬件包括:顯示屏、麥克風(fēng)、無線網(wǎng)絡(luò)調(diào)制解調(diào)器等。
[0016]本發(fā)明客戶端軟件運(yùn)行于智能手機(jī)平臺，包含語音傳遞、發(fā)言人信息查詢及即時通信功能，通過手機(jī)麥克風(fēng)采集用戶語音并由W1-Fi傳遞至服務(wù)器，用戶可通過客戶端軟件互相發(fā)送消息。本專利服務(wù)器運(yùn)行于PC，通過TCP協(xié)議監(jiān)聽來自客戶端的用戶連接請求，包含信息展示界面、語音播放和數(shù)據(jù)存儲功能，接收來自客戶端的用戶信息并展示，實(shí)時播放客戶端發(fā)送的語音流，整理并存儲用戶和語音信息。
[0017]所述SI中對應(yīng)服務(wù)器軟件，通過TCP協(xié)議獲取客戶端用戶信息并在軟件界面上顯示，通過RTP協(xié)議監(jiān)聽來自客戶端的實(shí)時語音請求并在服務(wù)器運(yùn)行的計算機(jī)上播放。本專利對應(yīng)客戶端軟件，通過TCP協(xié)議向服務(wù)器發(fā)送用戶自定義信息，通過RTP協(xié)議向服務(wù)器發(fā)送從手機(jī)麥克風(fēng)米集的實(shí)時語音信息。
[0018]用戶自定義信息由用戶在客戶端界面上編輯設(shè)置。
[0019]所述S4中的發(fā)言人信息由服務(wù)器通過TCP協(xié)議向客戶端推送，客戶端同時通過TCP協(xié)議定時向服務(wù)器查詢發(fā)言人信息?？蛻舳私缑嫱斤@示發(fā)言人信息，用戶可存儲該信息備用。與會者可通過手機(jī)客戶端向其它與會者發(fā)送消息，與會者間通過客戶端可進(jìn)行文字交流。
[0020]所述S5中的服務(wù)器將發(fā)言人的音軌和其個人信息以及發(fā)言時間綁定，對每個發(fā)言人分別形成一個track，存放至數(shù)據(jù)庫。同時，用戶通過客戶端進(jìn)行交互的信息由客戶端發(fā)送至服務(wù)器，服務(wù)器存儲至數(shù)據(jù)庫。服務(wù)器提供所有數(shù)據(jù)訪問接口。
[0021]所述S6中的智能會議室系統(tǒng)在進(jìn)行會議分析時，需記錄會場語音和交互視頻，進(jìn)行發(fā)言人識別以及交互分析。本專利為智能會議系統(tǒng)提供數(shù)據(jù)訪問接口，可作為其語音記錄庫。因數(shù)據(jù)庫中發(fā)言和交互數(shù)據(jù)均與與會者個人信息綁定，因此不再需要進(jìn)行發(fā)言人識另IJ，同時，可以簡化交互分析過程。
[0022]與現(xiàn)有技術(shù)相比較本發(fā)明的有益效果在于:本發(fā)明提出了一種智能會議室前端交互設(shè)計方法，與傳統(tǒng)會議交互方法相比，可以更好的提升與會者的會議體驗(yàn)，簡化與會者發(fā)言方式，促進(jìn)與會者間交流，提高會議效率，為智能會議室系統(tǒng)提供包含語音的會議記錄數(shù)據(jù)，簡化發(fā)言人識別以及交互分析等步驟。
【專利附圖】

【附圖說明】
[0023]圖1為本發(fā)明實(shí)例中智能會議室前端交互設(shè)計示意圖；
[0024]圖2為本發(fā)明實(shí)例中的客戶端連接服務(wù)器界面圖；
[0025]圖3為本發(fā)明實(shí)例中的客戶端用戶信息編輯界面圖；
[0026]圖4為本發(fā)明實(shí)例中的客戶端發(fā)言人信息界面圖；
[0027]圖5為本發(fā)明實(shí)例中的客戶端聯(lián)系人信息界面圖；[0028]圖6為本發(fā)明實(shí)例中的客戶端用戶間交互信息界面圖；
[0029]圖7為智能會議室系統(tǒng)結(jié)構(gòu)圖；
[0030]圖8為本發(fā)明對應(yīng)系統(tǒng)結(jié)構(gòu)圖。
【具體實(shí)施方式】
[0031]以下結(jié)合附圖，對本發(fā)明上述的和另外的技術(shù)特征和優(yōu)點(diǎn)作更詳細(xì)的說明。
[0032]請參閱圖1所示，本發(fā)明智能會議室前端交互設(shè)計方法的具體過程為:
[0033]步驟1，會場開放W1-Fi接入信號，并將連接投影或顯示屏設(shè)備的計算機(jī)接入該W1-Fi所屬局域網(wǎng)。
[0034]會場包括封閉的會議室和開放環(huán)境的會議場所等。與計算機(jī)互聯(lián)的投影儀或顯示屏是現(xiàn)代會議場所常用設(shè)備。W1-Fi接入是指會場通過無線路由器或者其它無線網(wǎng)絡(luò)設(shè)備提供無線接入方法，使得其它無線接入設(shè)備連接該網(wǎng)絡(luò)后，接入同一個局域網(wǎng)。本專利應(yīng)用時要求會場計算機(jī)接入上述W1-Fi局域網(wǎng)。
[0035]步驟2，本發(fā)明對應(yīng)的智能會議室前端系統(tǒng)由服務(wù)器和客戶端共同構(gòu)成，系統(tǒng)結(jié)構(gòu)圖如附圖8所示。會議室計算機(jī)運(yùn)行服務(wù)器軟件，與會者使用智能手機(jī)接入上述W1-Fi局域網(wǎng)，并運(yùn)行客戶端軟件，會議室計算機(jī)同步顯示已連接用戶信息。本發(fā)明客戶端軟件運(yùn)行于智能手機(jī)平臺，包含語音傳遞、發(fā)言人信息查詢及即時通信功能，通過手機(jī)麥克風(fēng)采集用戶語音并由W1-Fi傳遞至服務(wù)器，用戶可通過客戶端軟件互相發(fā)送消息。本專利服務(wù)器運(yùn)行于PC，包含信息展示界面、語音播放和數(shù)據(jù)存儲功能，接收來自客戶端的用戶信息并展示，實(shí)時播放客戶端發(fā)送的語音流，整理并存儲用戶和語音信息。
[0036]智能手機(jī)指運(yùn)行Android或1S等智能操作系統(tǒng)的手機(jī)，其必備的硬件包括:顯示屏、麥克風(fēng)、無線網(wǎng)絡(luò)調(diào)制解調(diào)器等。
[0037]本發(fā)明客戶端軟件運(yùn)行于智能手機(jī)平臺，包含語音傳遞、發(fā)言人信息查詢及即時通信功能，通過手機(jī)麥克風(fēng)采集用戶語音并由W1-Fi傳遞至服務(wù)器，用戶可通過客戶端軟件互相發(fā)送消息。本專利服務(wù)器運(yùn)行于PC，通過TCP協(xié)議監(jiān)聽來自客戶端的用戶連接請求，包含信息展示界面、語音播放和數(shù)據(jù)存儲功能，接收來自客戶端的用戶信息并展示，實(shí)時播放客戶端發(fā)送的語音流，整理并存儲用戶和語音信息。
[0038]與會者連接會場服務(wù)器后，客戶端界面顯示如附圖2所示。
[0039]步驟3，與會者發(fā)言時點(diǎn)擊軟件發(fā)言按鈕，通過手機(jī)麥克風(fēng)發(fā)言，服務(wù)器通過會議室音響設(shè)備播放發(fā)言，同時顯不發(fā)言人信息。
[0040]本專利對應(yīng)服務(wù)器軟件，通過TCP協(xié)議獲取客戶端用戶信息并在軟件界面上顯示，通過RTP協(xié)議監(jiān)聽來自客戶端的實(shí)時語音請求并在服務(wù)器運(yùn)行的計算機(jī)上播放。本專利對應(yīng)客戶端軟件，通過TCP協(xié)議向服務(wù)器發(fā)送用戶自定義信息，通過RTP協(xié)議向服務(wù)器發(fā)送從手機(jī)麥克風(fēng)采集的實(shí)時語音信息?？蛻舳税l(fā)言人信息顯示如附圖5所示。
[0041]用戶自定義信息由用戶在客戶端界面上編輯設(shè)置，編輯界面如附圖3所示。
[0042]步驟4，與會者通過手機(jī)客戶端查看發(fā)言人信息，同時可存儲發(fā)言人信息，與會者間可通過手機(jī)客戶端互相交流。
[0043]發(fā)言人信息由服務(wù)器通過TCP協(xié)議向客戶端推送，客戶端同時通過TCP協(xié)議定時向服務(wù)器查詢發(fā)言人信息?？蛻舳私缑嫱斤@示發(fā)言人信息，用戶可存儲發(fā)言人信息備用，存儲的發(fā)言人信息以列表的方式呈現(xiàn)，如附圖5所示。與會者可通過手機(jī)客戶端向其它與會者發(fā)送消息，與會者間通過客戶端可進(jìn)行文字交流，交流的方式如附圖6所示。
[0044]步驟5，服務(wù)器將每個發(fā)言人的語音和個人信息以及與會者間的交互信息分別存放至?xí)h記錄數(shù)據(jù)庫，并為智能會議室系統(tǒng)提供訪問接口。
[0045]服務(wù)器將發(fā)言人的音軌和其個人信息以及發(fā)言時間綁定，對每個發(fā)言人分別形成一個track，存放至數(shù)據(jù)庫。同時，用戶通過客戶端進(jìn)行交互的信息由客戶端發(fā)送至服務(wù)器，服務(wù)器存儲至數(shù)據(jù)庫。服務(wù)器提供所有數(shù)據(jù)訪問接口。
[0046]步驟6，智能會議室系統(tǒng)的通用架構(gòu)如附圖7所示，包括信息獲取、會議識別和信息獲取等三個主要模塊，系統(tǒng)的主要功能為，通過分析會議現(xiàn)場記錄，對會議內(nèi)容進(jìn)行索引和注釋等，幫助會議組織者和參與者提高會議效率。智能會議室系統(tǒng)在進(jìn)行會議分析時，需通過麥克風(fēng)和攝像頭記錄會場語音和交互視頻，并進(jìn)行發(fā)言人識別以及交互分析。本專利為智能會議系統(tǒng)提供數(shù)據(jù)訪問接口，可作為其語音記錄庫。因數(shù)據(jù)庫中發(fā)言和交互數(shù)據(jù)均與與會者個人信息綁定，因此不再需要進(jìn)行發(fā)言人識別，且發(fā)言人辨別正確率為100%，從而可以簡化會議交互分析過程。
[0047]本發(fā)明提出了一種智能會議室前端交互設(shè)計方法，與傳統(tǒng)會議交互方法相比，可以更好的提升與會者的會議體驗(yàn)，簡化與會者發(fā)言方式，促進(jìn)與會者間交流，提高會議效率，為智能會議室系統(tǒng)提供包含語音的會議記錄數(shù)據(jù)，簡化發(fā)言人識別以及交互分析等步驟。
[0048]以上所述僅是本發(fā)明的優(yōu)選實(shí)施方式，應(yīng)當(dāng)指出，對于本【技術(shù)領(lǐng)域】的普通技術(shù)人員來說，在不脫離本發(fā)明原理的前提下，還可以作出若干改進(jìn)和潤飾，這些改進(jìn)和潤飾也應(yīng)視為本發(fā)明的保護(hù)范圍。
【權(quán)利要求】
1.一種智能會議室前端交互設(shè)計方法，其特征在于，所述方法的步驟如下: 51、開放W1-Fi接入信號，接入計算機(jī)和與會者使用的智能手機(jī)； 52、計算機(jī)和與會者使用的智能手機(jī)運(yùn)行服務(wù)器軟件； 53、與會者發(fā)言前點(diǎn)擊軟件發(fā)言按鈕，通過手機(jī)麥克風(fēng)發(fā)言，服務(wù)器通過會議室音響設(shè)備播放發(fā)言，同時顯示發(fā)言人信息； 54、與會者通過手機(jī)客戶端查看發(fā)言人信息，同時可存儲發(fā)言人信息，與會者間可通過手機(jī)客戶端互相交流； 55、服務(wù)器將每個發(fā)言人的語音和個人信息以及與會者間的交互信息分別存放至?xí)h記錄數(shù)據(jù)庫，并為智能會議室系統(tǒng)提供訪問接口 ； 56、智能會議室系統(tǒng)通過接口訪問會議記錄數(shù)據(jù)庫，作為其語音數(shù)據(jù)記錄，可簡化發(fā)言人識別，交互分析等步驟。
2.根據(jù)權(quán)利要求1所述的一種基于智能手機(jī)的會議交互方法，其特征在于，所述SI中的計算機(jī)連接有投影或顯示屏設(shè)備。
3.根據(jù)權(quán)利要求1所述的一種智能會議室前端交互設(shè)計方法，其特征在于，所述S2中的智能手機(jī)指運(yùn)行Android或1S等智能操作系統(tǒng)的手機(jī)。
4.根據(jù)權(quán)利要求1所述的一種智能會議室前端交互設(shè)計方法，其特征在于，所述S2中的服務(wù)器軟件包含語音傳遞、發(fā)言人信息查詢及即時通信功能，通過手機(jī)麥克風(fēng)采集用戶語音并由W1-Fi發(fā)送至服務(wù)器，用戶可通過客戶端軟件互相發(fā)送消息。
5.根據(jù)權(quán)利要求1所述的一種智能會議室前端交互設(shè)計方法，其特征在于，所述S5中的服務(wù)器將發(fā)言人的音軌和其個人信息以及發(fā)言時間綁定，對每個發(fā)言人分別形成一個track，存放至數(shù)據(jù)庫；同時，用戶通過客戶端進(jìn)行交互的信息由客戶端發(fā)送至服務(wù)器，月艮務(wù)器存儲至數(shù)據(jù)庫；服務(wù)器提供所有數(shù)據(jù)訪問接口。
6.根據(jù)權(quán)利要求1所述的一種智能會議室前端交互設(shè)計方法，其特征在于，所述S6中智能會議室系統(tǒng)在進(jìn)行交互分析時，需記錄會場語音和交互視頻，進(jìn)行發(fā)言人識別以及交互分析。
【文檔編號】H04L12/18GK104038354SQ201410178026
【公開日】2014年9月10日 申請日期:2014年4月25日 優(yōu)先權(quán)日:2014年4月25日
【發(fā)明者】於志文, 胥皇, 王柱, 倪紅波, 郭斌, 周興社 申請人:西北工業(yè)大學(xué)