觸覺設(shè)計創(chuàng)作工具的制作方法
【技術(shù)領(lǐng)域】
[0001]—個實施例總體針對于一種系統(tǒng)，并且更具體地針對于一種推薦觸覺設(shè)計的系統(tǒng)。
【背景技術(shù)】
[0002]觸覺是通過向用戶施加諸如力、振動和運動之類的觸覺反饋效果(即，“觸覺效果”)來利用用戶對觸摸的感知的觸覺和力反饋技術(shù)。諸如移動設(shè)備、觸摸屏設(shè)備和個人計算機之類的設(shè)備可以被配置為生成觸覺效果。一般而言，對能夠生成觸覺效果的嵌入式硬件(諸如致動器)的調(diào)用可以被編程在設(shè)備的操作系統(tǒng)(“OS”)內(nèi)。這些調(diào)用可以指定要播放哪個觸覺效果。例如，當(dāng)用戶例如使用按鈕、觸摸屏、控制桿、控制手柄、方向盤或者某個其他控制裝置來與設(shè)備交互時，設(shè)備的OS可以通過控制電路向嵌入式硬件發(fā)送播放命令。嵌入式硬件然后產(chǎn)生適當(dāng)?shù)挠|覺效果。
[0003]設(shè)備可以被配置為使觸覺效果的輸出與諸如音頻之類的其他內(nèi)容的輸出相協(xié)調(diào)，以使得觸覺效果被合并到其他內(nèi)容中。例如，音頻效果開發(fā)者可以開發(fā)可被設(shè)備輸出的音頻效果，諸如機關(guān)槍火力、爆炸或者撞車。另外，諸如視頻效果之類的其他類型的內(nèi)容可以被開發(fā)并且隨后被設(shè)備輸出。觸覺效果開發(fā)者可以隨后創(chuàng)作(author)設(shè)備的觸覺效果，并且設(shè)備可以被配置為將觸覺效果與其他內(nèi)容一起輸出。然而，這種處理通常需要觸覺效果開發(fā)者的手動輸入來創(chuàng)作補充音頻效果或者其他類型內(nèi)容的觸覺效果。這種手動處理可能是沉悶的并且可能是耗時的。

【發(fā)明內(nèi)容】

[0004]一個實施例是一種推薦一個或多個觸覺效果的系統(tǒng)。該系統(tǒng)提供通過學(xué)習(xí)人類觸覺設(shè)計者風(fēng)格而生成的觸覺化(haptificat1n)模型。該系統(tǒng)接收包括音頻和視頻中的至少一種以及多個事件的輸入。該系統(tǒng)然后基于學(xué)習(xí)的觸覺化模型來推薦將與來自輸入的對應(yīng)事件相關(guān)聯(lián)的觸覺效果類型。
【附圖說明】
[0005]另外的實施例、細節(jié)、優(yōu)點和修改從將結(jié)合附圖來理解的對優(yōu)選實施例的以下詳細描述將變得明顯。
[0006]圖1示出了根據(jù)本發(fā)明一個實施例的系統(tǒng)的框圖。
[0007]圖2示出了根據(jù)本發(fā)明一個實施例的觸覺設(shè)計系統(tǒng)的框圖。
[0008]圖3示出了根據(jù)本發(fā)明一個實施例的觸覺設(shè)計模塊的流程圖。
[0009]圖4示出了根據(jù)本發(fā)明一個實施例的使用高層語義描述符的貝葉斯網(wǎng)絡(luò)。
[0010]圖5示出了根據(jù)本發(fā)明一個實施例的使用低層描述符的貝葉斯網(wǎng)絡(luò)。
【具體實施方式】
[0011]一個實施例是一種學(xué)習(xí)基于觸覺效果開發(fā)者的先前觸覺設(shè)計的觸覺化模型并且使用學(xué)習(xí)的觸覺化模型來為諸如新多媒體片段(multimedia clip)之類的新內(nèi)容推薦新觸覺設(shè)計的系統(tǒng)。
[0012]圖1示出了根據(jù)本發(fā)明一個實施例的系統(tǒng)10的框圖。在一個實施例中，系統(tǒng)10是觸覺創(chuàng)作設(shè)備的一部分，并且系統(tǒng)10提供觸覺創(chuàng)作設(shè)備的觸覺設(shè)計功能。盡管被示出為單個系統(tǒng)，但是系統(tǒng)10的功能可以被實現(xiàn)為分布式系統(tǒng)。系統(tǒng)10包括總線12或者用于傳送信息的其他通信機構(gòu)，以及與總線12相耦合的用于處理信息的處理器22。處理器22可以是任何類型的通用或者專用處理器。系統(tǒng)10還包括用于存儲信息以及將由處理器22執(zhí)行的指令的存儲器14。存儲器14可以由隨機存取存儲器(“RAM”)、只讀存儲器(“R0M”)、諸如磁盤或者光盤之類的靜態(tài)存儲裝置或者任何其他類型的計算機可讀介質(zhì)的任何組合組成。
[0013]計算機可讀介質(zhì)可以是可被處理器22存取的任何可用介質(zhì)并且可以包括易失性和非易失性介質(zhì)兩者、可移動和不可移動介質(zhì)、通信介質(zhì)和存儲介質(zhì)。通信介質(zhì)可以包括計算機可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊或者諸如載波或其他傳輸機構(gòu)的調(diào)制數(shù)據(jù)信號中的其他數(shù)據(jù)，并且可以包括本領(lǐng)域已知的任何其他形式的信息遞送介質(zhì)。存儲介質(zhì)可以包括RAM、閃存、R0M、可擦可編程只讀存儲器(“EPR0M”)、電可擦可編程只讀存儲器(“EEPR0M”)、寄存器、硬盤、可移動盤、緊湊盤只讀存儲器(“CD-ROM”)或者本領(lǐng)域已知的任何其他形式的存儲介質(zhì)。
[0014]在一個實施例中，存儲器14存儲當(dāng)被處理器22執(zhí)行時提供功能的軟件模塊。這些模塊在一個實施例中包括提供系統(tǒng)10的操作系統(tǒng)功能的操作系統(tǒng)15，以及觸覺創(chuàng)作設(shè)備的剩余部分。這些模塊還包括響應(yīng)于輸入而推薦觸覺設(shè)計的觸覺設(shè)計模塊16，如在下面更詳細公開的。在某些實施例中，觸覺設(shè)計模塊16可以包括多個模塊，其中每個模塊提供用于推薦或者生成觸覺設(shè)計的特定單獨功能。系統(tǒng)10將通常包括一個或多個附加的應(yīng)用模塊18以包括附加功能，諸如Immers1n公司的Haptic Stud1?軟件。
[0015]系統(tǒng)10在發(fā)送和/或接收來自遠程源的數(shù)據(jù)的實施例中還包括諸如網(wǎng)絡(luò)接口卡之類的通信設(shè)備20以提供諸如紅外、無線電、W1-Fi或者蜂窩網(wǎng)絡(luò)通信之類的移動無線網(wǎng)絡(luò)通信。在其他實施例中，通信設(shè)備20提供諸如以太網(wǎng)連接或者調(diào)制解調(diào)器之類的有線網(wǎng)絡(luò)連接。
[0016]處理器22還經(jīng)由總線12而被耦合到諸如液晶顯示器(“IXD”)之類的用于向用戶顯示圖形表示或者用戶界面的顯示器24。顯示器24可以是諸如觸摸屏之類的配置為發(fā)送和接收來自處理器22的信號的觸敏輸入設(shè)備，并且可以是多點觸摸觸摸屏。
[0017]系統(tǒng)10在一個實施例中還包括致動器26。致動器26用于其中在同一系統(tǒng)上生成觸覺效果的實施例?；蛘?，致動器26可以是另一設(shè)備的一部分。處理器22可以向致動器26發(fā)送與生成的觸覺效果相關(guān)聯(lián)的觸覺信號，致動器26繼而輸出諸如振動觸覺(vibrotactile)觸覺效果、靜電摩擦觸覺效果或者變形觸覺效果之類的觸覺效果。致動器26包括致動器驅(qū)動電路。致動器26例如可以是電動機、電磁致動器、音圈、形狀記憶合金、電活性聚合物、螺線管、偏心旋轉(zhuǎn)質(zhì)量電機(“ERM”)、線性諧振致動器(“LRA”)、壓電致動器、高帶寬致動器、電活性聚合物(“ΕΑΡ”)致動器、靜電摩擦顯示器或者超聲振動發(fā)生器。在替代實施例中，系統(tǒng)10可以包括除致動器26 (未在圖1中示出)之外的一個或多個附加的致動器。致動器26是觸覺輸出設(shè)備的一個示例，其中觸覺輸出設(shè)備是配置為響應(yīng)于驅(qū)動信號而輸出諸如振動觸覺觸覺效果、靜電摩擦觸覺效果或者變形觸覺效果之類的觸覺效果的設(shè)備。在替代實施例中，致動器26可以被某個其他類型的觸覺輸出設(shè)備代替。另外，在其他替代實施例中，系統(tǒng)10可以不包括致動器26，并且單獨于系統(tǒng)10的設(shè)備包括致動器或者生成觸覺效果的其他觸覺輸出設(shè)備，并且系統(tǒng)10通過通信設(shè)備20向該設(shè)備發(fā)送生成的觸覺信號。
[0018]系統(tǒng)10在一個實施例中還包括揚聲器28。揚聲器28用于其中在同一系統(tǒng)上生成音頻的實施例?；蛘?，揚聲器28可以是另一設(shè)備的一部分。處理器22可以向揚聲器28發(fā)送音頻信號，揚聲器28繼而輸出音頻效果。揚聲器28例如可以是動態(tài)揚聲器、電動力式揚聲器、壓電揚聲器、磁致伸縮揚聲器、靜電揚聲器、帶式和平面磁性揚聲器、彎曲波揚聲器、平板揚聲器、Heil氣動換能器、等離子弧揚聲器以及數(shù)字揚聲器。在替代實施例中，系統(tǒng)10可以包括除揚聲器28 (未在圖1中不出)之外的一個或多個附加的揚聲器。另外，在其他替代實施例中，系統(tǒng)10可以不包括揚聲器28，并且單獨于系統(tǒng)10的設(shè)備包括輸出音頻效果的揚聲器，并且系統(tǒng)10通過通信設(shè)備20向該設(shè)備發(fā)送音頻信號。
[0019]系統(tǒng)10在一個實施例中還包括數(shù)據(jù)庫30。數(shù)據(jù)庫30可以被配置為提供觸覺設(shè)計模塊16的存儲并且存儲觸覺設(shè)計數(shù)據(jù)等。
[0020]圖2示出了根據(jù)本發(fā)明一個實施例的觸覺設(shè)計系統(tǒng)200的框圖。觸覺設(shè)計系統(tǒng)200包括觸覺創(chuàng)作系統(tǒng)210、數(shù)據(jù)庫220和觸覺設(shè)計推薦器230。觸覺設(shè)計推薦器230可以使用圖1中的觸覺設(shè)計模塊16來實現(xiàn)。
[0021]在操作中，設(shè)計者可以最初操作觸覺創(chuàng)作系統(tǒng)210，例如使用在觸覺創(chuàng)作系統(tǒng)210上運行的觸覺設(shè)計軟件來為多媒體片段(例如，視頻中的場景或者音頻的部分)