專利名稱：信息仿真處理系統(tǒng)、裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種信息仿真處理系統(tǒng)、裝置及方法，且特別是涉及一種可依據(jù)信息 內(nèi)容進(jìn)行特征分析，而標(biāo)注此信息內(nèi)容的仿真標(biāo)簽，后由一仿真表達(dá)裝置進(jìn)行仿真表達(dá)的 系統(tǒng)、裝置和方法。
背景技術(shù)：
現(xiàn)行的互動娛樂裝置(例如電子公仔、電子寵物或機(jī)器人等低運(yùn)算能力的裝置) 可與使用者進(jìn)行互動，藉以達(dá)到娛樂效果。例如，電子雞或電子狗等電子寵物可偵測使用者 的聲音或肢體動作，而對應(yīng)變換表情或做出回應(yīng)動作，因此可以即時(shí)反應(yīng)使用者的行為，達(dá) 到與使用者互動的效果。使用者還可利用定時(shí)喂食或陪伴游玩等附加功能，來培養(yǎng)或建立 其與電子寵物的互動關(guān)系。然而，這些互動娛樂裝置的動作或回應(yīng)都必須預(yù)先定義，且在與使用者互動的過 程中，也只能針對特定的指示(例如按下按鍵或發(fā)出聲音)做出簡單的動作，并無法依據(jù)使 用者所表達(dá)信息(例如文字信息、語音或影像)的實(shí)際內(nèi)容進(jìn)行仿真回饋。部分的互動娛 樂裝置雖提供使用者可自行設(shè)定互動效果，但也僅止于表現(xiàn)在使用者端的硬件，并無法與 其他使用者分享，因而失去了與他人互動的樂趣。

發(fā)明內(nèi)容
有鑒于此，本發(fā)明提供一種信息仿真處理系統(tǒng)，藉由設(shè)置網(wǎng)絡(luò)平臺以管理仿真指 令，并可提供系統(tǒng)廠商或使用者一個(gè)更新或分享仿真指令的管道。本發(fā)明提供一種信息仿真處理裝置，整合特征分析、仿真指令搜尋以及仿真回饋 等功能于獨(dú)立的裝置中，使得裝置可獨(dú)立做出對應(yīng)于信息內(nèi)容的仿真回饋。本發(fā)明提供一種信息仿真處理方法，藉由分析所獲取信息的內(nèi)容，據(jù)以標(biāo)注仿真 標(biāo)簽并搜尋仿真指令，使得仿真表達(dá)裝置能夠做出可對應(yīng)信息內(nèi)容的仿真回饋動作。本發(fā)明提出一種信息仿真處理系統(tǒng)，其包括網(wǎng)絡(luò)平臺端和至少一個(gè)用戶端，其中 網(wǎng)絡(luò)平臺端和用戶端經(jīng)由一通訊網(wǎng)絡(luò)進(jìn)行通訊。其中，網(wǎng)絡(luò)平臺端包括信息獲取模塊、特征 分析模塊及仿真信息產(chǎn)生模塊，而信息獲取模塊用以獲取使用者信息，特征分析模塊對此 使用者信息的內(nèi)容進(jìn)行特征分析，以標(biāo)注對應(yīng)此信息內(nèi)容的仿真標(biāo)簽，仿真信息產(chǎn)生模塊 則會為每一個(gè)仿真標(biāo)簽取得對應(yīng)的仿真指令，并與信息內(nèi)容結(jié)合以產(chǎn)生仿真信息。另一方 面，用戶端包括用戶裝置及仿真表達(dá)裝置，其中用戶裝置包括網(wǎng)絡(luò)模塊以經(jīng)由通訊網(wǎng)絡(luò)接 收仿真信息，以及驅(qū)動模塊以輸出仿真信息中所包含的信息內(nèi)容及仿真指令至仿真表達(dá)裝 置。仿真表達(dá)裝置接收信息內(nèi)容及仿真指令，而據(jù)以播放信息內(nèi)容并執(zhí)行對應(yīng)的仿真指令。本發(fā)明提出一種信息仿真處理裝置，其包括處理單元及輸出單元。處理單元包括 信息獲取模塊、特征分析模塊及仿真信息產(chǎn)生模塊，其中的信息獲取模塊用以連結(jié)網(wǎng)絡(luò)服 務(wù)，并經(jīng)由網(wǎng)絡(luò)服務(wù)獲取使用者信息，特征分析模塊對使用者信息的信息內(nèi)容進(jìn)行特征分 析，以標(biāo)注對應(yīng)此信息內(nèi)容的仿真標(biāo)簽。仿真信息產(chǎn)生模塊則是用以為每一個(gè)仿真標(biāo)簽取得對應(yīng)的仿真指令，并和信息內(nèi)容結(jié)合以產(chǎn)生仿真信息。輸出單元依據(jù)仿真信息中所包含的信息內(nèi)容及仿真指令，據(jù)以播放信息內(nèi)容并執(zhí)行對應(yīng)的仿真指令。本發(fā)明提出一種信息仿真處理方法，適用于網(wǎng)絡(luò)平臺端，此網(wǎng)絡(luò)平臺端經(jīng)由通訊 網(wǎng)絡(luò)和至少一個(gè)用戶端進(jìn)行通訊，此方法獲取使用者信息，而對此使用者信息的內(nèi)容進(jìn)行 特征分析，以標(biāo)注此信息內(nèi)容的至少一個(gè)仿真標(biāo)簽。接著再為每一個(gè)仿真標(biāo)簽取得對應(yīng)的 仿真指令，并與信息內(nèi)容結(jié)合以產(chǎn)生仿真信息。最后則將此仿真信息傳送至用戶端的仿真 表達(dá)裝置，以令仿真表達(dá)裝置執(zhí)行以產(chǎn)生至少一個(gè)仿真回饋動作?；谏鲜?，本發(fā)明的信息仿真處理系統(tǒng)、裝置及方法藉由在網(wǎng)絡(luò)平臺或獨(dú)立的仿 真表達(dá)裝置上記錄客制化的仿真指令，并對所獲取信息的內(nèi)容進(jìn)行特征分析以決定所要 執(zhí)行的仿真指令，而在播放信息內(nèi)容的同時(shí)，也執(zhí)行對應(yīng)的仿真指令，而達(dá)到仿真回饋的功 效。為讓本發(fā)明的上述特征和優(yōu)點(diǎn)能更明顯易懂，下面特舉實(shí)施例，并配合附圖作詳 細(xì)說明如下。


圖1是本發(fā)明第一實(shí)施例的信息仿真處理系統(tǒng)的方塊圖。圖2是本發(fā)明第一實(shí)施例的信息仿真處理方法的流程圖。圖3是本發(fā)明第一實(shí)施例的特征分析模塊的方塊圖。圖4是本發(fā)明第一實(shí)施例的語音情緒辨識的范例。圖5是本發(fā)明第一實(shí)施例的臉部表情辨識的范例。圖6是本發(fā)明第一實(shí)施例的仿真信息的范例。圖7 (a) 7 (e)是本發(fā)明第一實(shí)施例的仿真表達(dá)裝置執(zhí)行仿真指令的范例。圖8是本發(fā)明第二實(shí)施例的信息仿真處理系統(tǒng)的方塊圖。圖9是本發(fā)明第三實(shí)施例的信息仿真處理裝置的方塊圖。圖10是本發(fā)明第四實(shí)施例的信息仿真處理裝置的方塊圖。主要元件符號說明100、800 信息仿真處理系統(tǒng)；110、810 網(wǎng)絡(luò)平臺端；102,812,912 信息獲取模塊；104、814、914 特征分析模塊；106,816,916 仿真信息產(chǎn)生模108、818、918 仿真指令數(shù)據(jù)庫；塊；120:用戶裝置；122、822 網(wǎng)絡(luò)模塊；124、824、924 驅(qū)動模塊；130、820 仿真表達(dá)裝置；132、832、932 音效模塊；134、834、934 顯示模塊；136、836、936 動作模塊；138、838、938 轉(zhuǎn)換模塊；300 特征分析模塊；310 情緒特征辨識單元；312 文字情緒辨識單元；314 語音情緒辨識單元；316 臉部表情辨識單元；320 仿真標(biāo)簽標(biāo)注單元；400 語音信息；410 音框；420 特征值；430 情緒特征；500 影像；510 眉毛；
520:嘴巴；540 臉部表情；620 信息內(nèi)容種類；900、1000 信息仿真處理裝置；920、1020 輸出單元；
530 數(shù)據(jù)； 610:信息內(nèi)容； 630、640、650、660 仿真指令； 910,1010 處理單元； 用戶端1 12;S202 S212 本發(fā)明第一實(shí)施例所繪示的信息仿真處理方法的各步驟。
具體實(shí)施例方式本發(fā)明可應(yīng)用于現(xiàn)行的社群、即時(shí)通訊、虛擬寵物、影音郵件等網(wǎng)絡(luò)服務(wù)，建立一 個(gè)網(wǎng)絡(luò)平臺即網(wǎng)絡(luò)平臺端，并針對所接收的文字、語音或影像等使用者信息進(jìn)行信息的仿 真處理以產(chǎn)生仿真信息，進(jìn)而將該仿真信息傳送至另一使用者端即用戶端，使得在另一使 用者端的仿真表達(dá)裝置能依據(jù)該使用者信息的內(nèi)容而進(jìn)行仿真表達(dá)(例如依據(jù)信息所對 應(yīng)的情緒而有不同的表達(dá)方式)，藉此達(dá)到仿真互動，增加互動娛樂的效果。以下即依據(jù)上 述概念，提供多個(gè)實(shí)施例分別說明本發(fā)明的信息仿真處理方法的詳細(xì)步驟以及信息仿真處 理系統(tǒng)與裝置的詳細(xì)功能。第一實(shí)施例圖1是本發(fā)明第一實(shí)施例的信息仿真處理系統(tǒng)的方塊圖，圖2是本發(fā)明第一實(shí)施 例的信息仿真處理方法的流程圖。請同時(shí)參照圖1及圖2，信息仿真處理系統(tǒng)100主要包括 一網(wǎng)絡(luò)平臺端110和至少一用戶端112，經(jīng)由一通訊網(wǎng)絡(luò)進(jìn)行通訊，其中，網(wǎng)絡(luò)平臺端110主 要包括一信息獲取模塊102，獲取一使用者信息；一特征分析模塊104，對該使用者信息的 一信息內(nèi)容進(jìn)行一特征分析，以標(biāo)注對應(yīng)該信息內(nèi)容的至少一仿真標(biāo)簽；以及一仿真信息 產(chǎn)生模塊106，為每一該至少一仿真標(biāo)簽取得對應(yīng)的一仿真指令，結(jié)合該信息內(nèi)容以產(chǎn)生一 仿真信息；而用戶端112包括一用戶裝置120以及一仿真表達(dá)裝置130，用戶裝置120包括 一網(wǎng)絡(luò)模塊122以經(jīng)由該通訊網(wǎng)絡(luò)接收該仿真信息，以及一驅(qū)動模塊124以輸出該仿真信 息中的該信息內(nèi)容及所述至少一對應(yīng)的仿真指令至一仿真表達(dá)裝置，仿真表達(dá)裝置130則 接收該信息內(nèi)容及所述至少一仿真指令，據(jù)以播放該信息內(nèi)容并執(zhí)行所述至少一對應(yīng)的仿 真指令。網(wǎng)絡(luò)平臺端110可經(jīng)由一個(gè)以上的伺服器、電腦或工作站來實(shí)現(xiàn)，用戶裝置120可 以是一個(gè)人電腦、筆記本電腦、手持通訊裝置等各種計(jì)算機(jī)，而仿真表達(dá)裝置130可以是用 以進(jìn)行仿真表達(dá)的各種裝置，例如燈光顯示裝置、聲音播放裝置、顯示器、電子公仔、電子寵 物機(jī)、機(jī)器人等。在一些實(shí)施例中，信息獲取模塊102可鏈結(jié)至一網(wǎng)絡(luò)服務(wù)來獲取該使用者信息， 例如社群、即時(shí)通訊、虛擬寵物、影音郵件等，在另一些實(shí)施例中，網(wǎng)絡(luò)平臺端110還包含有 一網(wǎng)絡(luò)服務(wù)模塊(圖1未顯示)，可直接提供至少一用戶端112的間進(jìn)行通訊，而信息獲取 模塊102可經(jīng)由該網(wǎng)絡(luò)服務(wù)模塊來獲取該使用者信息。以下即搭配圖1所示的元件說明本實(shí)施例的信息仿真處理方法的詳細(xì)步驟首先，網(wǎng)絡(luò)平臺端110會利用信息獲取模塊102來獲取一則使用者信息(步驟 S202)。其中，網(wǎng)絡(luò)平臺端110例如是經(jīng)由社群、即時(shí)通訊、虛擬寵物或影音郵件等網(wǎng)絡(luò)服務(wù) 來獲取該網(wǎng)絡(luò)服務(wù)所提供的文字、語音或影像等形式的使用者信息，藉以對該使用者信息 進(jìn)行仿真處理。舉例來說，網(wǎng)絡(luò)平臺端110可自動獲取網(wǎng)絡(luò)上某個(gè)部落格發(fā)表的文章或是某個(gè)聯(lián)絡(luò)人發(fā)出的即時(shí)信息，藉以對此文章或信息進(jìn)行仿真處理。接著，網(wǎng)絡(luò)平臺端110會利用特征分析模塊104對所獲取的使用者信息的信息內(nèi) 容進(jìn)行特征分析，進(jìn)而對此信息內(nèi)容標(biāo)注至少一個(gè)仿真標(biāo)簽(步驟S204)。其中，特征分析 模塊104例如是根據(jù)信息獲取模塊102所獲取的使用者信息的類型，分別采用文字情緒辨 識、語音情緒辨識或臉部表情辨識等辨識方法來辨識情緒特征，并針對這些情緒特征來標(biāo) 注對應(yīng)的仿真標(biāo)簽。詳細(xì)地說，圖3是本發(fā)明第一實(shí)施例的特征分析模塊的方塊圖。請參照圖3，本實(shí) 施例的特征分析模塊300包括情緒特征辨識單元310及仿真標(biāo)簽標(biāo)注單元320兩部分，而 情緒特征辨識單元310則還依據(jù)信息種類而區(qū)分為文字情緒辨識單元312、語音情緒辨識 單元314及臉部表情辨識單元316，以下則分別說明這些單元的功能當(dāng)所獲取的使用者信息為文字信息時(shí)，該信息即會送入文字情緒辨識單元312。此 時(shí)文字情緒辨識單元312會針對此使用者信息的內(nèi)容進(jìn)行文字情緒辨識，藉以辨識出多個(gè) 文字情緒特征(例如喜、怒、哀、樂、一般)。之后仿真標(biāo)簽標(biāo)注單元320則會針對這些文字 情緒特征標(biāo)注對應(yīng)的仿真標(biāo)簽。在一些實(shí)施例中，文字情緒辨識單元312例如透過中文同 義詞林及斷詞系統(tǒng)的協(xié)助分析詞組，并透過情緒語料庫比對，取得原始語料的情緒關(guān)鍵字， 將原始語料加注成具有各種情緒的情緒案例庫，然后再分析此情緒案例庫，建立情感模型 及情緒相關(guān)本體知識，最后將此情緒案例庫作為案例式推理系統(tǒng)的訓(xùn)練建構(gòu)模型，使得推 理系統(tǒng)能動態(tài)辨識使用者信息中的情緒特征，并標(biāo)注仿真標(biāo)簽。在另一些實(shí)施例中，文字情 緒辨識單元312可依據(jù)一語意分析功能及其分析結(jié)果對應(yīng)情緒特征的決策樹，以取得該情 緒特征并標(biāo)注仿真標(biāo)簽。舉例來說，下表1列示文字情緒辨識單元312針對文字信息「哈啰，很高興跟大 家說我要在上海辦演唱會啰」進(jìn)行文字辨識的結(jié)果。如表1所示，經(jīng)由語意分析，文字情 緒辨識單元312可直接在文字信息中找出「一般」與「開心」的情緒特征，而仿真標(biāo)簽標(biāo)注 單元320則會針對這些情緒特征標(biāo)注對應(yīng)的仿真標(biāo)簽。
哈口羅5很高興跟大家說我要在上海辦演唱會口羅一般開心一般開心 表 1當(dāng)所獲取的使用者信息為語音信息時(shí)，該信息則會送入語音情緒辨識單元314。由 于語音對話內(nèi)容中經(jīng)常夾帶著所要表達(dá)的情緒(例如生氣、快樂、厭煩、傷心)，或者語音 特征如音高、音頻、音量等也能夠進(jìn)行分析以判斷出情緒特征，因此本實(shí)施例的語音情緒辨 識單元314即會針對使用者信息的內(nèi)容或者語音特征等進(jìn)行語音情緒辨識，藉以辨識出語 音情緒特征。之后仿真標(biāo)簽標(biāo)注單元320則會針對這些語音情緒特征標(biāo)注對應(yīng)的仿真標(biāo) 簽。詳細(xì)地說，圖4是本發(fā)明第一實(shí)施例的語音情緒辨識的范例。請參照圖4，語音情 緒辨識單元314采用一個(gè)固定的時(shí)間間隔(例如0. 2毫秒)將所接收的語音信息400切分 為多個(gè)音框以進(jìn)行分析。以音框410為例，語音情緒辨識單元314針對音框410取出音高(pitch)或能量等特征值420，如圖4所示的音高為63. 837，能量為3. 473e+005,并將所取 得的特征值與數(shù)據(jù)庫作K個(gè)最近鄰居(K Nearest Neighbor, KNN)比對，最后則分析此K筆 數(shù)據(jù)，而判斷出音框410的情緒特征430為生氣。以此類推，語音情緒辨識單元314可判斷 出其他音框所對應(yīng)的情緒特征。當(dāng)所獲取的使用者信息為影像信息時(shí)，該信息則會送入臉部表情辨識單元316。此 時(shí)臉部表情辨識單元316會針對此使用者信息所包含的多張影像分別進(jìn)行臉部特征辨識， 藉以取得各張影像的多個(gè)臉部特征，并根據(jù)這些臉部特征，判斷出該影像的至少一個(gè)臉部 表情特征。之后仿真標(biāo)簽標(biāo)注單元320同樣會針對這些臉部表情特征標(biāo)注對應(yīng)的仿真標(biāo)簽。詳細(xì)地說，圖5是本發(fā)明第一實(shí)施例的臉部表情辨識的范例。請參照圖5，臉部表 情辨識單元316例如是針對影像500進(jìn)行辨識，而辨識出影像500中的眉毛510及嘴巴520 的位置，然后將所辨識的眉毛510及嘴巴520與數(shù)據(jù)庫內(nèi)的數(shù)據(jù)進(jìn)行比對，而找出3筆最相 近的數(shù)據(jù)530(包括高興99%、高興95%及一般85%)，最后則分析這3筆數(shù)據(jù)而判斷出影 像500的臉部表情540為高興?；氐讲襟ES204，在標(biāo)注完仿真標(biāo)簽后，網(wǎng)絡(luò)平臺端110即利用仿真信息產(chǎn)生模塊 106搜尋每一個(gè)仿真標(biāo)簽對應(yīng)的仿真指令，并將此些仿真指令與信息內(nèi)容結(jié)合，進(jìn)而產(chǎn)生仿 真信息(步驟S206)。詳細(xì)地說，仿真信息產(chǎn)生模塊106例如是參照一個(gè)記錄有對應(yīng)于各種 仿真標(biāo)簽的仿真指令的仿真指令數(shù)據(jù)庫108，藉以取得各仿真標(biāo)簽對應(yīng)的仿真指令。仿真指 令可以使仿真表達(dá)裝置130據(jù)以執(zhí)行一仿真回饋動作或是一連串的仿真回饋動作，例如， 仿真回饋動作可以是閃爍燈光、旋轉(zhuǎn)、搖擺、機(jī)械動作、發(fā)出聲音、屏幕顯示特定影像等等。在另一些實(shí)施例中，不同的用戶端可能具有不同的仿真表達(dá)裝置130，每一仿真表 達(dá)裝置130可接受的仿真指令和可執(zhí)行的仿真回饋動作可能亦不相同。因此，該網(wǎng)絡(luò)平臺 端110還可包括一用戶數(shù)據(jù)庫，記錄各用戶端所對應(yīng)的仿真表達(dá)裝置，例如機(jī)型、種類、或 編號代碼等，而仿真指令數(shù)據(jù)庫還包含記錄數(shù)種仿真表達(dá)裝置對應(yīng)于各所述至少一仿真標(biāo) 簽的至少一仿真指令，仿真信息產(chǎn)生模塊106則可依據(jù)用戶數(shù)據(jù)庫和該仿真指令數(shù)據(jù)庫， 分別為各該用戶端所對應(yīng)仿真表達(dá)裝置的每一該至少一仿真標(biāo)簽，來取得對應(yīng)的一仿真指 令，以結(jié)合該信息內(nèi)容以產(chǎn)生一仿真信息。需說明的是，仿真信息產(chǎn)生模塊106在搜尋仿真指令以產(chǎn)生仿真信息的同時(shí)，也 會在各個(gè)仿真指令中注記其對應(yīng)的情緒特征在信息內(nèi)容中出現(xiàn)的時(shí)間點(diǎn)，藉以在后續(xù)播放 使用者信息內(nèi)容的過程中，能夠在適當(dāng)?shù)臅r(shí)間點(diǎn)執(zhí)行對應(yīng)的仿真指令。舉例來說，圖6是本發(fā)明第一實(shí)施例的仿真信息的范例。請參照圖6，本實(shí)施例列 出一則仿真信息的程序碼，其包括信息內(nèi)容610、信息內(nèi)容種類620，以及仿真指令630 660。其中，仿真指令630 660除了注記情緒特征的仿真標(biāo)簽(即一般、開心)外，也注記 了情緒特征在信息內(nèi)容中出現(xiàn)的時(shí)間點(diǎn)。例如，仿真指令630即注記「一般」的仿真標(biāo)簽， 且注記情緒特征在信息內(nèi)容中出現(xiàn)的起始時(shí)間「0」以及結(jié)束時(shí)間「6」。據(jù)此，本實(shí)施例的仿 真信息即可表達(dá)出完整的信息內(nèi)容及其對應(yīng)的仿真回饋動作。在產(chǎn)生仿真信息之后，網(wǎng)絡(luò)平臺端110隨即將此仿真信息傳送至用戶裝置120 (步 驟S208)。其中，網(wǎng)絡(luò)平臺端110還包含有一網(wǎng)絡(luò)服務(wù)模塊(未繪出)，而提供用戶端112 中的用戶裝置120進(jìn)行通訊，用戶裝置120例如是藉由網(wǎng)絡(luò)模塊122連結(jié)至網(wǎng)絡(luò)，并透過網(wǎng)絡(luò)接收由網(wǎng)絡(luò)平臺端110輸出的仿真信息。此外，用戶裝置120也藉由驅(qū)動模塊124來將 所接收仿真信息中的信息內(nèi)容及仿真指令輸出至仿真表達(dá)裝置130(步驟S210)。最后，仿真表達(dá)裝置130即播放由用戶裝置120解讀的信息內(nèi)容，并執(zhí)行對應(yīng)的 仿真指令(步驟S212)。詳細(xì)地說，仿真表達(dá)裝置130例如包括一個(gè)音效模塊132，而用以 播放仿真信息中的信息內(nèi)容；仿真表達(dá)裝置130可包括一個(gè)顯示模塊134，其在音效模塊 132播放到仿真信息中各個(gè)仿真指令注記的時(shí)間點(diǎn)，執(zhí)行該仿真指令以顯示出仿真表情； 仿真表達(dá)裝置130中可包括一個(gè)動作模塊136，其同樣是在音效模塊132播放到仿真信息中 各個(gè)仿真指令注記的時(shí)間點(diǎn)，執(zhí)行該仿真指令以表現(xiàn)出仿真回饋動作；仿真表達(dá)裝置130 中也可包括一個(gè)轉(zhuǎn)換模塊138，其在所接收的使用者信息為文字信息時(shí)，透過文字轉(zhuǎn)聲音 (Text-To-Speech, TTS)技術(shù)將此文字信息的內(nèi)容轉(zhuǎn)換為語音信息，以提供給音效模塊132 進(jìn)行播放。舉例來說，圖7 (a) 7 (e)是本發(fā)明第一實(shí)施例的仿真表達(dá)裝置執(zhí)行仿真指令的 范例。請參照圖7(a) 7(e)，本實(shí)施例的仿真表達(dá)裝置為一個(gè)機(jī)器人，而在機(jī)器人的面部 則配置有一個(gè)顯示屏幕。當(dāng)仿真表達(dá)裝置接收到用戶裝置(未繪)輸出的信息內(nèi)容及仿真 指令時(shí)，即會利用內(nèi)建的揚(yáng)聲器來播放信息內(nèi)容，而在播放的過程中，仿真表達(dá)裝置還會在 接收的仿真指令注記的時(shí)間點(diǎn)，控制顯示屏幕來顯示不同的表情，藉以表達(dá)使用者的情緒。 例如，圖7(a)即為仿真表達(dá)裝置接收到仿真標(biāo)簽注記為「一般」的仿真指令時(shí)所顯示的一 般表情；圖7(b)為仿真表達(dá)裝置接收到仿真標(biāo)簽注記為「驚訝」的仿真指令時(shí)所顯示的驚 訝表情；以此類推，圖7(c) 圖7(e)分別為仿真表達(dá)裝置所表達(dá)的生氣、開心、害怕表情。 值得一提的是，仿真表達(dá)裝置除了利用顯示屏幕來表現(xiàn)使用者的表情外，也可以利用其肢 體的擺動來表現(xiàn)使用者的動作，而能夠使仿真表達(dá)裝置做出的仿真回饋還貼近使用者的目 前情緒。綜上所述，本實(shí)施例信息仿真處理系統(tǒng)100藉由在網(wǎng)絡(luò)上建立網(wǎng)絡(luò)平臺端110并 設(shè)置仿真指令數(shù)據(jù)庫108，不僅可提供客制化的仿真指令以供仿真表達(dá)裝置130執(zhí)行多樣 化的仿真回饋動作，系統(tǒng)廠商還可以透過網(wǎng)絡(luò)平臺端110來更新仿真指令數(shù)據(jù)庫108，藉以 分享不同的仿真指令。此外，仿真表達(dá)裝置130的使用者也可透過用戶裝置120上的用戶 接口自訂仿真指令，并上傳至仿真指令數(shù)據(jù)庫108，藉以將其自訂的仿真指令分享給其相關(guān) 的聯(lián)絡(luò)人，使得這些聯(lián)絡(luò)人在接收到該使用者發(fā)出的信息時(shí)，也可以透過仿真表達(dá)裝置130 觀看到使用者所欲表達(dá)的仿真動作，而達(dá)到仿真指令分享的目的。需說明的是，在本實(shí)施例的信息仿真處理系統(tǒng)100中，仿真表達(dá)裝置130為獨(dú)立于 用戶裝置120之外的實(shí)體裝置，然而在另一實(shí)施例中，仿真表達(dá)裝置130也可以是配置在用 戶裝置120內(nèi)部的虛擬裝置。具體言之，仿真表達(dá)裝置130可以是顯示在用戶裝置120的 屏幕上的一個(gè)虛擬公仔，其同樣可依照用戶裝置120所接收的信息內(nèi)容及仿真指令，利用 用戶裝置120的喇叭來播放信息內(nèi)容，同時(shí)利用顯示在用戶裝置120的屏幕上的虛擬公仔 來做出仿真指令所定義的仿真回饋動作。值得注意的是，在另一實(shí)施例中，仿真表達(dá)裝置130也可與用戶裝置120整合為一 個(gè)實(shí)體裝置。意即，仿真表達(dá)裝置130與用戶裝置120合而為一個(gè)電子公仔，其同樣可以接 收由網(wǎng)絡(luò)平臺端110輸出的仿真信息，而播放其中的信息內(nèi)容并執(zhí)行仿真指令，以下則再 舉一實(shí)施例詳細(xì)說明。
10
第二實(shí)施例圖8是本發(fā)明第二實(shí)施例的信息仿真處理系統(tǒng)的方塊圖。請參照圖8，本實(shí)施例的 信息仿真處理系統(tǒng)800分為網(wǎng)絡(luò)平臺端810及仿真表達(dá)裝置820兩個(gè)部分。其中，網(wǎng)絡(luò)平 臺端810包括信息獲取模塊812、特征分析模塊814、仿真信息產(chǎn)生模塊816及仿真指令數(shù) 據(jù)庫818，而其功能與第一實(shí)施例中的信息獲取模塊102、特征分析模塊104、仿真信息產(chǎn)生 模塊106及仿真指令數(shù)據(jù)庫108的功能相同或相似，故在此不再贅述。然而，與第一實(shí)施例不同的是，本實(shí)施例的仿真表達(dá)裝置820結(jié)合第一實(shí)施例的 用戶裝置120與仿真表達(dá)裝置130內(nèi)的所有元件，包括網(wǎng)絡(luò)模塊822、驅(qū)動模塊824、音效模 塊832、顯示模塊834、動作模塊836及轉(zhuǎn)換模塊838，仿真表達(dá)裝置820也進(jìn)一步整合這些 模塊的功能，其中包括利用網(wǎng)絡(luò)模塊822連結(jié)至網(wǎng)絡(luò)，并透過網(wǎng)絡(luò)接收由網(wǎng)絡(luò)平臺端810輸 出的仿真信息；利用驅(qū)動模塊824來解讀仿真信息中所包含的信息內(nèi)容及仿真指令；利用 音效模塊832播放仿真信息中的信息內(nèi)容；在音效模塊832播放到仿真信息中各個(gè)仿真指 令注記的時(shí)間點(diǎn)時(shí)，利用顯示模塊834執(zhí)行仿真指令以顯示出仿真表情，或利用動作模塊 836執(zhí)行仿真指令以表現(xiàn)出仿真回饋動作；利用轉(zhuǎn)換模塊838透過文字轉(zhuǎn)聲音技術(shù)將文字 信息的內(nèi)容轉(zhuǎn)換為語音信息，以提供給音效模塊832進(jìn)行播放。綜上所述，本實(shí)施例的信息仿真處理系統(tǒng)800同樣可藉由網(wǎng)絡(luò)上的網(wǎng)絡(luò)平臺端 810提供客制化的仿真指令，并分享不同的仿真指令，然而其中的仿真表達(dá)裝置820則可獨(dú) 立地接收仿真信息，并直接地播放信息內(nèi)容，以及執(zhí)行仿真指令，而達(dá)到仿真回饋的目的。在另一實(shí)施例中，該仿真表達(dá)裝置820亦可再整合部分網(wǎng)絡(luò)平臺端810中的功能， 使網(wǎng)絡(luò)平臺端810僅提供與該至少一用戶端進(jìn)行通訊、傳送該至少一用戶端信息的功能， 而仿真表達(dá)裝置820則包括網(wǎng)絡(luò)模塊、特征分析模塊、仿真信息產(chǎn)生模塊、驅(qū)動模塊、仿真 表達(dá)裝置等各項(xiàng)功能，其皆與前述功能相同或相似，在此不再重復(fù)贅述。需說明的是，上述第一實(shí)施例及第二實(shí)施例均在網(wǎng)絡(luò)上設(shè)置網(wǎng)絡(luò)平臺端藉以達(dá)到 仿真指令的管理及更新。然而，在硬件資源容許的情況下，網(wǎng)絡(luò)平臺端的功能其實(shí)也能整合 到仿真表達(dá)裝置中，而提供更直接的方式進(jìn)行信息的仿真處理，以下則再舉一實(shí)施例詳細(xì) 說明。第三實(shí)施例圖9是本發(fā)明第三實(shí)施例的信息仿真處理裝置的方塊圖。請參照圖9，本實(shí)施例的 信息仿真處理裝置900分為處理單元910及輸出單元920兩個(gè)部分，而處理單元910及輸 出單元920之間例如是藉由有線連結(jié)或無線連結(jié)的方式互相通訊。其中，處理單元910包 括信息獲取模塊912、特征分析模塊914、仿真信息產(chǎn)生模塊916及仿真指令數(shù)據(jù)庫918，而 其功能與第一實(shí)施例中的信息獲取模塊102、特征分析模塊104、仿真信息產(chǎn)生模塊106及 仿真指令數(shù)據(jù)庫108的功能相同或相似，故在此不再贅述。然而，與第一實(shí)施例不同的是，本實(shí)施例的輸出單元920中僅配置驅(qū)動模塊924、 音效模塊932、顯示模塊934、動作模塊936及轉(zhuǎn)換模塊938。輸出單元920即整合這些模塊 的功能，其中包括利用驅(qū)動模塊924來解讀處理單元910輸出的仿真信息中所包含的信息 內(nèi)容及仿真指令；利用音效模塊932播放仿真信息中的信息內(nèi)容；利用顯示模塊934在音 效模塊932播放到仿真信息中各個(gè)仿真指令注記的時(shí)間點(diǎn)時(shí)，執(zhí)行仿真指令以顯示出仿真 表情；利用動作模塊936在音效模塊932播放到仿真信息中各個(gè)仿真指令注記的時(shí)間點(diǎn)時(shí)，執(zhí)行仿真指令以表現(xiàn)出仿真回饋動作；利用轉(zhuǎn)換模塊938透過文字轉(zhuǎn)聲音技術(shù)將文字信息 的內(nèi)容轉(zhuǎn)換為語音信息，以提供給音效模塊932進(jìn)行播放。需說明的是，在本實(shí)施例的信息仿真處理裝置900中，輸出單元920為獨(dú)立于處理 單元910之外的實(shí)體裝置，然而在另一實(shí)施例中，輸出單元920也可以是配置在處理單元 910內(nèi)部的虛擬裝置。具體言之，輸出單元920可以是顯示在信息仿真處理裝置900的屏幕 上的一個(gè)虛擬公仔，其同樣可依照處理單元910所接收及解讀的信息內(nèi)容及仿真指令，利 用信息仿真處理裝置900的喇叭來播放信息內(nèi)容，同時(shí)利用顯示在信息仿真處理裝置900 的屏幕上的虛擬公仔來做出仿真指令所定義的仿真回饋動作。值得注意的是，在另一實(shí)施例中，輸出單元920也可與處理單元910整合為一個(gè)實(shí) 體裝置。意即，輸出單元920與處理單元910合而為一個(gè)電子公仔，其同樣可對所接收的信 息內(nèi)容進(jìn)行特征分析以取得仿真指令，并直接播放信息內(nèi)容以及執(zhí)行仿真指令，以下則再 舉一實(shí)施例詳細(xì)說明。第四實(shí)施例圖10是本發(fā)明第四實(shí)施例的信息仿真處理裝置的方塊圖。請參照圖10，本實(shí)施 例的信息仿真處理裝置1000將處理單元1010及輸出單元1020整合為一個(gè)實(shí)體裝置，而處 理單元1010及輸出單元1020中各個(gè)元件的功能與第三實(shí)施例的處理單元910及輸出單元 920中各個(gè)元件的功能相同或相似。然而，本實(shí)施例與第三實(shí)施例不同之處在于本實(shí)施例的信息仿真處理裝置1000 本身即具備本發(fā)明信息仿真處理的所有功能，其不僅能夠?qū)λ邮盏男畔?nèi)容進(jìn)行特征分 析、標(biāo)注仿真標(biāo)簽并搜尋仿真指令藉以產(chǎn)生仿真信息，也能夠解讀仿真信息、播放信息內(nèi)容 并執(zhí)行仿真指令，而達(dá)到仿真回饋。綜上所述，本發(fā)明的信息仿真處理系統(tǒng)、裝置及方法藉由分析使用者的文字、聲 音、臉部表情來感應(yīng)使用者的情緒，并結(jié)合現(xiàn)行文字及聲音服務(wù)，提供仿真互動，因此能夠 讓使用者透過電子公仔等仿真表達(dá)裝置與他人互動，而增加互動的娛樂性及真實(shí)性。最后應(yīng)說明的是以上實(shí)施例僅用以說明本發(fā)明的技術(shù)方案，而非對其限制；盡 管參照前述實(shí)施例對本發(fā)明進(jìn)行了詳細(xì)的說明，本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解其依然 可以對前述各實(shí)施例所記載的技術(shù)方案進(jìn)行修改，或者對其中部分技術(shù)特征進(jìn)行等同替 換；而這些修改或者替換，并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明各實(shí)施例技術(shù)方案的精 神和范圍。
權(quán)利要求
1.一種信息仿真處理系統(tǒng)，包括一網(wǎng)絡(luò)平臺端和至少一用戶端，該網(wǎng)絡(luò)平臺端和該至 少一用戶端經(jīng)由一通訊網(wǎng)絡(luò)進(jìn)行通訊，其中該網(wǎng)絡(luò)平臺端包括 一信息獲取模塊，獲取一使用者信息；一特征分析模塊，對該使用者信息的一信息內(nèi)容進(jìn)行一特征分析，以標(biāo)注對應(yīng)該信息 內(nèi)容的至少一仿真標(biāo)簽；以及一仿真信息產(chǎn)生模塊，為每一該至少一仿真標(biāo)簽取得對應(yīng)的一仿真指令，結(jié)合該信息 內(nèi)容以產(chǎn)生一仿真信息；且 該用戶端包括一用戶裝置，包括一網(wǎng)絡(luò)模塊以經(jīng)由該通訊網(wǎng)絡(luò)接收該仿真信息，以及一驅(qū)動模塊以 輸出該仿真信息中的該信息內(nèi)容及所述至少一對應(yīng)的仿真指令至一仿真表達(dá)裝置；以及一仿真表達(dá)裝置，接收該信息內(nèi)容及所述至少一仿真指令，據(jù)以播放該信息內(nèi)容并執(zhí) 行所述至少一對應(yīng)的仿真指令。
2.根據(jù)權(quán)利要求1所述的信息仿真處理系統(tǒng)，其中，該特征分析模塊包括 一情緒特征辨識單元，辨識該信息內(nèi)容中的至少一情緒特征；以及一仿真標(biāo)簽標(biāo)注單元，針對各該至少一情緒特征標(biāo)注對應(yīng)的仿真標(biāo)簽，該仿真標(biāo)簽包 含有所對應(yīng)情緒特征在該信息內(nèi)容中的一出現(xiàn)時(shí)間。
3.根據(jù)權(quán)利要求2所述的信息仿真處理系統(tǒng)，其中，該仿真表達(dá)裝置于播放該信息內(nèi) 容時(shí)，依據(jù)該仿真標(biāo)簽的該出現(xiàn)時(shí)間以執(zhí)行所述至少一對應(yīng)的仿真指令。
4.根據(jù)權(quán)利要求1所述的信息仿真處理系統(tǒng)，其中，該網(wǎng)絡(luò)平臺端還包括 一仿真指令數(shù)據(jù)庫，記錄對應(yīng)于各所述至少一仿真標(biāo)簽的至少一仿真指令。
5.根據(jù)權(quán)利要求4所述的信息仿真處理系統(tǒng)，其中，各該仿真指令用以令該仿真表達(dá) 裝置執(zhí)行以產(chǎn)生至少一仿真回饋動作。
6.根據(jù)權(quán)利要求4所述的信息仿真處理系統(tǒng)，其中，該網(wǎng)絡(luò)平臺端還包括 一用戶數(shù)據(jù)庫，記錄至少一用戶端所對應(yīng)的仿真表達(dá)裝置；且其中，該仿真指令數(shù)據(jù)庫還包含記錄數(shù)種仿真表達(dá)裝置對應(yīng)于各所述至少一仿真標(biāo)簽的至 少一仿真指令；以及該仿真信息產(chǎn)生模塊依據(jù)用戶數(shù)據(jù)庫和該仿真指令數(shù)據(jù)庫，分別為各該用戶端所對應(yīng) 仿真表達(dá)裝置的每一該至少一仿真標(biāo)簽取得對應(yīng)的一仿真指令，結(jié)合該信息內(nèi)容以產(chǎn)生一 仿真信息。
7.根據(jù)權(quán)利要求1所述的信息仿真處理系統(tǒng)，其中，該仿真信息產(chǎn)生模塊還包括在各 所述至少一仿真指令中注記所對應(yīng)情緒特征在該信息內(nèi)容中出現(xiàn)的一時(shí)間點(diǎn)，且該仿真表 達(dá)裝置于播放該信息內(nèi)容時(shí)，依據(jù)該時(shí)間點(diǎn)以執(zhí)行該些對應(yīng)的仿真指令。
8.根據(jù)權(quán)利要求1所述的信息仿真處理系統(tǒng)，其中，該仿真表達(dá)裝置為該用戶裝置外 部的一實(shí)體裝置或該用戶裝置內(nèi)部的一虛擬裝置。
9.根據(jù)權(quán)利要求8所述的信息仿真處理系統(tǒng)，其中該仿真表達(dá)裝置與該用戶裝置整合 為一實(shí)體裝置，而由該實(shí)體裝置播放該信息內(nèi)容及執(zhí)行所述至少一仿真指令。
10.一種信息仿真處理裝置，包括 一處理單元，包括一信息獲取模塊，連結(jié)一網(wǎng)絡(luò)服務(wù)，并經(jīng)由該網(wǎng)絡(luò)服務(wù)獲取一使用者信息；一特征分析模塊，對該使用者信息的一信息內(nèi)容進(jìn)行一特征分析，以標(biāo)注對應(yīng)該信息 內(nèi)容的至少一仿真標(biāo)簽；以及一仿真信息產(chǎn)生模塊，為每一該至少一仿真標(biāo)簽取得對應(yīng)的一仿真指令，結(jié)合該信息 內(nèi)容以產(chǎn)生一仿真信息；以及一輸出單元，電性鏈結(jié)至該處理單元，依據(jù)該仿真信息中所包含的該信息內(nèi)容及所述 至少一仿真指令，據(jù)以播放該信息內(nèi)容并執(zhí)行對應(yīng)的所述至少一仿真指令。
11.根據(jù)權(quán)利要求10所述的信息仿真處理裝置，其中該特征分析模塊包括一情緒特征辨識單元，辨識該信息內(nèi)容中的至少一情緒特征；以及一仿真標(biāo)簽標(biāo)注單元，針對各該至少一情緒特征標(biāo)注對應(yīng)的仿真標(biāo)簽，該仿真標(biāo)簽包 含所對應(yīng)情緒特征在該信息內(nèi)容中的一出現(xiàn)時(shí)間。
12.根據(jù)權(quán)利要求11所述的信息仿真處理裝置，其中，該輸出單元于播放該信息內(nèi)容 時(shí)，依據(jù)該仿真標(biāo)簽的出現(xiàn)時(shí)間以執(zhí)行所述至少一對應(yīng)的仿真指令。
13.根據(jù)權(quán)利要求10所述的信息仿真處理裝置，其中，各該仿真指令用以令該輸出單 元執(zhí)行以產(chǎn)生至少一仿真回饋動作。
14.根據(jù)權(quán)利要求10所述的信息仿真處理裝置，其中，該處理單元還包括一仿真指令數(shù)據(jù)庫，記錄對應(yīng)于各所述至少一仿真標(biāo)簽的至少一仿真指令。
15.根據(jù)權(quán)利要求14所述的信息仿真處理裝置，其中，該仿真指令數(shù)據(jù)庫還包含用以 供一使用者予以更新各所述至少一仿真標(biāo)簽所對應(yīng)的至少一仿真指令。
16.一種信息仿真處理方法，適用于一網(wǎng)絡(luò)平臺端，該網(wǎng)絡(luò)平臺端經(jīng)由一通訊網(wǎng)絡(luò)和至 少一用戶端進(jìn)行通訊，該方法包括下列步驟獲取一使用者信息；對該使用者信息的一信息內(nèi)容進(jìn)行一特征分析，以標(biāo)注對應(yīng)該信息內(nèi)容的至少一仿真 標(biāo)簽；為每一該至少一仿真標(biāo)簽取得對應(yīng)的一仿真指令，結(jié)合該信息內(nèi)容以產(chǎn)生一仿真信 息；以及傳送該仿真信息至該至少一用戶端的一仿真表達(dá)裝置，以令該仿真表達(dá)裝置執(zhí)行以產(chǎn) 生至少一仿真回饋動作。
17.根據(jù)權(quán)利要求16所述的信息仿真處理方法，其中對該使用者信息的該信息內(nèi)容進(jìn) 行該特征分析，以標(biāo)注對應(yīng)該信息內(nèi)容的該至少一仿真標(biāo)簽的步驟包括辨識該信息內(nèi)容中的至少一情緒特征；以及針對各該至少一情緒特征標(biāo)注對應(yīng)的仿真標(biāo)簽，該仿真標(biāo)簽包含有所對應(yīng)情緒特征在 該信息內(nèi)容中的一出現(xiàn)時(shí)間。
18.根據(jù)權(quán)利要求16所述的信息仿真處理方法，其中為每一該至少一仿真標(biāo)簽取得對 應(yīng)的該仿真指令的步驟包括查詢一仿真指令數(shù)據(jù)庫以搜尋該仿真指令，該仿真指令數(shù)據(jù)庫包括記錄對應(yīng)于各所述 至少一仿真標(biāo)簽的至少一仿真指令。
19.根據(jù)權(quán)利要求16所述的信息仿真處理方法，其中產(chǎn)生該仿真信息的步驟還包括在各所述至少一仿真指令中注記所對應(yīng)情緒特征在該信息內(nèi)容中出現(xiàn)的一時(shí)間點(diǎn)。
20.根據(jù)權(quán)利要求19所述的信息仿真處理方法，其中該仿真表達(dá)裝置執(zhí)行該仿真信息 以產(chǎn)生該至少一仿真回饋動作的步驟包括播放該仿真信息中的該信息內(nèi)容，并依據(jù)該時(shí)間點(diǎn)以執(zhí)行所述至少一對應(yīng)的仿真指令。
全文摘要
本發(fā)明提供一種信息仿真處理系統(tǒng)、裝置及方法。此系統(tǒng)包括經(jīng)由一通訊網(wǎng)絡(luò)進(jìn)行通訊的網(wǎng)絡(luò)平臺端和至少一個(gè)用戶端。網(wǎng)絡(luò)平臺端包括信息獲取模塊，用以獲取使用者信息；特征分析模塊，用以對此使用者信息的內(nèi)容進(jìn)行特征分析，以標(biāo)注對應(yīng)此信息內(nèi)容的仿真標(biāo)簽；仿真信息產(chǎn)生模塊，用以為每一個(gè)仿真標(biāo)簽取得對應(yīng)的仿真指令，并與信息內(nèi)容結(jié)合以產(chǎn)生仿真信息。此外，用戶端包括用戶裝置，由通訊網(wǎng)絡(luò)接收仿真信息，并輸出仿真信息中所包含的信息內(nèi)容及仿真指令至仿真表達(dá)裝置；仿真表達(dá)裝置，用以播放所接收的信息內(nèi)容并執(zhí)行對應(yīng)的仿真指令。
文檔編號G06F19/00GK102073780SQ200910221958
公開日2011年5月25日 申請日期2009年11月23日 優(yōu)先權(quán)日2009年11月23日
發(fā)明者徐志浩, 李鎮(zhèn)樟, 王文男, 蔡子宸, 陳維德 申請人:財(cái)團(tuán)法人資訊工業(yè)策進(jìn)會