應(yīng)的文字信息發(fā)送到受控端，所述受控端與本端間建立有遠(yuǎn)程 桌面協(xié)議，以使所述受控端通過(guò)對(duì)所述文字信息進(jìn)行語(yǔ)義解析獲取目標(biāo)操作指令，并根據(jù) 所述目標(biāo)操作指令對(duì)所述受控端的桌面進(jìn)行控制。
[0072] 或用于執(zhí)行以下操作：
[0073] 獲取用戶輸入的命令語(yǔ)音；
[0074] 將所述命令語(yǔ)音對(duì)應(yīng)的文字信息發(fā)送到受控端，所述受控端與本端間建立有遠(yuǎn)程 桌面協(xié)議，以使所述受控端通過(guò)對(duì)所述命令語(yǔ)音進(jìn)行語(yǔ)音識(shí)別獲取所述命令語(yǔ)音對(duì)應(yīng)的文 字信息，并通過(guò)對(duì)所述文字信息進(jìn)行語(yǔ)義解析獲取目標(biāo)操作指令，進(jìn)而根據(jù)所述目標(biāo)操作 指令對(duì)所述受控端的桌面進(jìn)行控制。
[0075] 由上可見(jiàn)，本發(fā)明實(shí)施例中的控制端獲取到用戶輸入的命令語(yǔ)音后，或通過(guò)語(yǔ)音 識(shí)別獲取命令語(yǔ)音對(duì)應(yīng)的文字信息并發(fā)送給受控端，或直接將命令語(yǔ)音發(fā)送到受控端由受 控端通過(guò)語(yǔ)音識(shí)別獲取命令語(yǔ)音對(duì)應(yīng)的文字信息，進(jìn)而受控端通過(guò)對(duì)文字信息進(jìn)行語(yǔ)義解 析獲取目標(biāo)操作指令，并根據(jù)目標(biāo)操作指令對(duì)本端的桌面進(jìn)行控制，實(shí)現(xiàn)了通過(guò)語(yǔ)音控制 遠(yuǎn)程桌面的功能，提高便捷性，增強(qiáng)用戶的使用體驗(yàn)。
【附圖說(shuō)明】
[0076] 為了更清楚地說(shuō)明本發(fā)明實(shí)施例，下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用 的附圖作簡(jiǎn)單地介紹，顯而易見(jiàn)地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本 領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他的 附圖。
[0077] 圖1是本發(fā)明實(shí)施例提供的一種遠(yuǎn)程桌面的控制方法的流程示意圖；
[0078] 圖2是本發(fā)明實(shí)施例提供的一種遠(yuǎn)程桌面的架構(gòu)示意圖；
[0079] 圖3是本發(fā)明實(shí)施例提供的另一種遠(yuǎn)程桌面的控制方法的流程示意圖；
[0080] 圖4是本發(fā)明實(shí)施例提供的又一種遠(yuǎn)程桌面的控制方法的流程示意圖；
[0081] 圖5是本發(fā)明實(shí)施例提供的一種遠(yuǎn)程桌面的受控端的結(jié)構(gòu)示意圖；
[0082] 圖6是本發(fā)明實(shí)施例提供的一種指令獲取模塊的結(jié)構(gòu)示意圖；
[0083] 圖7是本發(fā)明實(shí)施例提供的另一種遠(yuǎn)程桌面的受控端的結(jié)構(gòu)示意圖；
[0084] 圖8是本發(fā)明實(shí)施例提供的另一種指令獲取模塊的結(jié)構(gòu)示意圖；
[0085] 圖9是本發(fā)明實(shí)施例提供的一種遠(yuǎn)程桌面的控制系統(tǒng)的結(jié)構(gòu)示意圖；
[0086] 圖10是本發(fā)明實(shí)施例提供的又一種遠(yuǎn)程桌面的受控端的結(jié)構(gòu)示意圖；
[0087] 圖11是本發(fā)明實(shí)施例提供的一種遠(yuǎn)程桌面的控制端的結(jié)構(gòu)示意圖；
[0088] 圖12是本發(fā)明實(shí)施例提供的一種遠(yuǎn)程桌面的應(yīng)用場(chǎng)景的示意圖。
【具體實(shí)施方式】
[0089] 下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完 整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例。基于 本發(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒(méi)有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他 實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。
[0090] 本發(fā)明實(shí)施例中的控制端，可以包括平板電腦、智能手機(jī)、筆記本電腦以及智能錄 音機(jī)等移動(dòng)電子設(shè)備，可接收用戶輸入的語(yǔ)音。本發(fā)明實(shí)施例中的受控端包括各種受控設(shè) 備，受控端的桌面（desktop，用戶交互界面）可存在于受控端的虛擬機(jī)，也可存在于受控端 的物理機(jī)，這里不作限定。
[0091] 應(yīng)理解的，本發(fā)明實(shí)施例中的控制端與受控端之間建立有遠(yuǎn)程桌面協(xié)議，兩者可 通過(guò)遠(yuǎn)程桌面協(xié)議進(jìn)行數(shù)據(jù)交互，需要指出的是，上述遠(yuǎn)程桌面協(xié)議并不限定于微軟提供 的RDP(RemoteDesktopProtocol,遠(yuǎn)程桌面協(xié)議）。具體實(shí)現(xiàn)過(guò)程中，受控端將其桌面重 定向到控制端，即在控制端的顯示界面顯示受控端的桌面，同時(shí)控制端將用戶對(duì)其輸入的 指令重定向到受控端，以實(shí)現(xiàn)對(duì)受控端的遠(yuǎn)程操控。
[0092] 為了便于理解本發(fā)明實(shí)施例的應(yīng)用場(chǎng)景，請(qǐng)參閱圖12所示的一種遠(yuǎn)程桌面的應(yīng) 用場(chǎng)景的示意圖，本發(fā)明實(shí)施例中的控制端10與受控端20通過(guò)網(wǎng)絡(luò)（Network)40相連，控 制端10和受控端20還可以通過(guò)網(wǎng)絡(luò)40與服務(wù)器30相連，所述服務(wù)器30可用于語(yǔ)音識(shí)別， 即將語(yǔ)音識(shí)別為其對(duì)應(yīng)的文字信息。其中，接入網(wǎng)關(guān)（AG，AccessGateway)50作為控制端 和服務(wù)器的傳輸接口，接入網(wǎng)關(guān)60作為控制端和受控端的傳輸接口。需要指出的是，受控 端20可包括至少一個(gè)受控設(shè)備21 (如21a、21b和21c)，受控設(shè)備21可包括至少一個(gè)桌面 (以虛擬機(jī)的桌面為例，如VD1、VD2和VDn，VD表示VirtualDesktop)。另外，桌面?zhèn)鬏斂?制器（DDC，DesktopDeliverController) 70 和活動(dòng)目錄器（AD，ActiveDirectory) 80 置 于受控端20的后臺(tái)，桌面?zhèn)鬏斂刂破?0用于集中管理和分配受控端20中的受控設(shè)備21， 活動(dòng)目錄器80用于對(duì)控制端10的身份權(quán)限進(jìn)行驗(yàn)證和受控設(shè)備21的域管理。
[0093] 圖1是本發(fā)明實(shí)施例中一種遠(yuǎn)程桌面的控制方法的流程示意圖。如圖所示本實(shí)施 例中的遠(yuǎn)程桌面的控制方法的流程可以包括：
[0094]S101，接收控制端發(fā)送來(lái)的命令語(yǔ)音對(duì)應(yīng)的文字信息，所述文字信息是由所述控 制端通過(guò)對(duì)用戶輸入的所述命令語(yǔ)音進(jìn)行語(yǔ)音識(shí)別獲取的，所述控制端與本端間建立有遠(yuǎn) 程桌面協(xié)議。
[0095]所述命令語(yǔ)音由用戶發(fā)出，控制端將用戶輸入的命令語(yǔ)音保存為音頻。例如：用戶 對(duì)著控制端的麥克風(fēng)輸入"打開(kāi)PPT"的命令語(yǔ)音，控制端將"打開(kāi)PPT"這一命令語(yǔ)音保存 為音頻。
[0096] 進(jìn)一步的，控制端通過(guò)對(duì)命令語(yǔ)音進(jìn)行語(yǔ)音識(shí)別，獲取命令語(yǔ)音對(duì)應(yīng)的文字信息。 具體實(shí)現(xiàn)過(guò)程中，控制端先判斷本端是否具備語(yǔ)音識(shí)別功能，可選的，控制端可根據(jù)本端的 硬件中是否具有可將音頻轉(zhuǎn)換為文字信息的語(yǔ)音識(shí)別組件來(lái)判斷是否具備語(yǔ)音識(shí)別功能。 一方面，若判斷得知本端具備語(yǔ)音識(shí)別功能，則控制端對(duì)命令語(yǔ)音進(jìn)行語(yǔ)音識(shí)別，獲取命令 語(yǔ)音對(duì)應(yīng)的文字信息，例如，控制端對(duì)某命令語(yǔ)音的音頻進(jìn)行語(yǔ)音識(shí)別，獲取該命令語(yǔ)音對(duì) 應(yīng)的文字信息是"打開(kāi)PPT"。另一方面，若判斷得知本端不具備語(yǔ)音識(shí)別功能，則控制端將 命令語(yǔ)音通過(guò)網(wǎng)絡(luò)發(fā)送至服務(wù)器，由于服務(wù)器預(yù)先設(shè)有可將音頻轉(zhuǎn)換為文字信息的語(yǔ)音識(shí) 別組件，因此服務(wù)器可對(duì)命令語(yǔ)音進(jìn)行語(yǔ)音識(shí)別，以獲取命令語(yǔ)音對(duì)應(yīng)的文字信息，并向控 制端返回獲取的命令語(yǔ)音對(duì)應(yīng)的文字信息，例如，控制端將某命令語(yǔ)音的音頻發(fā)送至服務(wù) 器，服務(wù)器對(duì)命令語(yǔ)音進(jìn)行識(shí)別，獲取命令語(yǔ)音對(duì)應(yīng)的文字信息是"打開(kāi)PPT"，服務(wù)器再將 文字信息"打開(kāi)PPT"打包為文本數(shù)據(jù)發(fā)送回受控端。
[0097]更進(jìn)一步的，控制端將命令語(yǔ)音對(duì)應(yīng)的文字信息通過(guò)網(wǎng)絡(luò)發(fā)送到受控端。
[0098]具體的，受控端接收控制端通過(guò)網(wǎng)絡(luò)發(fā)送來(lái)的命令語(yǔ)音對(duì)應(yīng)的文字信息。
[0099]S102,通過(guò)對(duì)所述命令語(yǔ)音對(duì)應(yīng)的文字信息進(jìn)行語(yǔ)義解析，獲取目標(biāo)操作指令。
[0100] 具體的，受控端接收控制端發(fā)送來(lái)的命令語(yǔ)音對(duì)應(yīng)的文字信息，并對(duì)文字信息進(jìn) 行語(yǔ)義解析，進(jìn)而獲取目標(biāo)操作指令。具體實(shí)現(xiàn)過(guò)程中，受控端通過(guò)語(yǔ)義解析獲取目標(biāo)操作 指令的方法可以由以下步驟實(shí)現(xiàn)：
[0101] 步驟1，受控端通過(guò)對(duì)命令語(yǔ)音對(duì)應(yīng)的文字信息進(jìn)行分詞處理，獲取文字信息中的 動(dòng)詞。
[0102] 例如：假設(shè)命令語(yǔ)音對(duì)應(yīng)的文字信息是"現(xiàn)在，我們保存一下，換行另起一段，然 后粘貼"，那么受控端將其進(jìn)行分詞處理，得到"現(xiàn)在"、"我們"、"保存"、"一下"、"換行"、"另 起"、"一段"、"然后"和"粘貼"若干個(gè)詞語(yǔ)，并通過(guò)查詢預(yù)設(shè)的詞匯庫(kù)獲取其中的動(dòng)詞"保 存"、"換行"和"粘貼"。
[0103] 步驟2,受控端生成包括執(zhí)行動(dòng)詞對(duì)應(yīng)的操作的目標(biāo)操作指令?？蛇x的一個(gè)實(shí)施方 式，預(yù)先在受控端存儲(chǔ)一個(gè)語(yǔ)義操作表，語(yǔ)義操作表中記錄有動(dòng)詞和操作指令的映射關(guān)系， 并可不斷更新，受控端通過(guò)查詢語(yǔ)義操作表獲取動(dòng)詞所對(duì)應(yīng)的目標(biāo)操作指令。例如，假設(shè)語(yǔ) 義操作表如表1所示，以及從文字信息中獲取的動(dòng)詞是"換行"，則受控端通過(guò)查詢語(yǔ)義操 作表可獲知目標(biāo)操作指令是"在當(dāng)前焦點(diǎn)處執(zhí)行物理按鍵'Enter'的操作"。
[0104]表1
[0106]其中，焦點(diǎn)是指鼠標(biāo)的光標(biāo)指向的位置，可選的，受控端的顯示屏的焦點(diǎn)可由用戶 在控制端的觸摸屏上觸摸的位置確定。
[0107] 可選的，在上述步驟1中，受控端可進(jìn)一步地對(duì)命令語(yǔ)音對(duì)應(yīng)的文字信息進(jìn)行分 詞處理，獲取文字信息中的動(dòng)詞和在所述動(dòng)詞后的名詞，例如"打開(kāi)+PPT"、"最小化+文件 夾"和"輸入+XXXX"等。
[0108]相應(yīng)可選的，在上述步驟2中，受控端可進(jìn)一步地生成包括對(duì)名詞對(duì)應(yīng)的對(duì)象執(zhí) 行動(dòng)詞對(duì)應(yīng)的操作的目標(biāo)操作指令。相應(yīng)的，在受控端預(yù)先存儲(chǔ)的語(yǔ)義操作表中記錄有動(dòng) 詞、名詞和操作指令的映射關(guān)系，并可不斷更新，受控端通過(guò)查詢語(yǔ)義操作表獲取目標(biāo)操作 指令。例如，假設(shè)語(yǔ)義操作表如表2所示，以及從文字信息中獲取的動(dòng)詞和名詞是"打開(kāi) +PPT"，則受控端通過(guò)查詢語(yǔ)義操作表可獲知目標(biāo)操作指令是"執(zhí)行鼠標(biāo)雙擊焦點(diǎn)處'PPT' 的操作"。
[0109]表 2
[0110]
[0111]
[0112] S103,根據(jù)所述目標(biāo)操作指令對(duì)本端的桌面進(jìn)行控制。
[0113] 具體的，受控端調(diào)用相應(yīng)的進(jìn)程在本端的桌面執(zhí)行目標(biāo)操作指令。
[0114] 本發(fā)明實(shí)施例中的控制端獲取到用戶輸入的命令語(yǔ)音后，通過(guò)語(yǔ)音識(shí)別獲取命令 語(yǔ)音對(duì)應(yīng)的文字信息并發(fā)送給受控端，進(jìn)而受控端通過(guò)對(duì)文字信息進(jìn)行語(yǔ)義解析獲取目標(biāo) 操作指令，并根據(jù)目標(biāo)操作指令對(duì)本端的桌面進(jìn)行控制，實(shí)現(xiàn)了通過(guò)語(yǔ)音控制遠(yuǎn)程桌面的 功能，提高便捷性，增強(qiáng)用戶的使用體驗(yàn)。
[0115] 圖2是本發(fā)明實(shí)施例中一種遠(yuǎn)程桌面的架構(gòu)示意圖。在具體實(shí)現(xiàn)過(guò)程中，本 發(fā)明實(shí)施例中的控制端可以如圖所示包括客戶端（Client)201和本地語(yǔ)音識(shí)別組件 (LocalSpeechRecognitionModule) 202,服務(wù)器可如圖所示包括遠(yuǎn)端語(yǔ)音識(shí)別組件 (DistalSpeechRecognitionModule) 203,受控端可如圖所示包括語(yǔ)音服務(wù)組件（Speech Server) 204、本地語(yǔ)音識(shí)別組件（LocalSpeechRecognitionModule) 205和語(yǔ)義解析工廠 (RuleFactory)206〇
[0116] 客戶端201用于獲取用戶輸入的命令語(yǔ)音，命令語(yǔ)音可以是被轉(zhuǎn)換為PCM波的語(yǔ) 音信號(hào)。在獲取到命令語(yǔ)音后，一方面，客戶端201可將命令語(yǔ)音以音頻流形式發(fā)送到本地 語(yǔ)音識(shí)別組件202或通過(guò)網(wǎng)絡(luò)發(fā)送到遠(yuǎn)端語(yǔ)音識(shí)別組件203進(jìn)行語(yǔ)音識(shí)別以獲取命令語(yǔ)音 對(duì)應(yīng)的文字信息，需要指出的是，客戶端201可根據(jù)預(yù)設(shè)的策略，如優(yōu)先級(jí)策略，來(lái)確定在 本地語(yǔ)音識(shí)別組件202還是在遠(yuǎn)端語(yǔ)音識(shí)別組件203進(jìn)行語(yǔ)音識(shí)別?？蛻舳?01在獲取 到命令語(yǔ)音對(duì)應(yīng)的文字信息后，將其通過(guò)網(wǎng)絡(luò)發(fā)送至語(yǔ)音服務(wù)組件204。另一方面，客戶端 201也可將命令語(yǔ)音直接通過(guò)網(wǎng)絡(luò)發(fā)送至語(yǔ)音服務(wù)組件204。
[0117] 語(yǔ)音服務(wù)組件204用于接收客戶端201發(fā)送來(lái)的命令語(yǔ)