離線觸覺轉(zhuǎn)換系統(tǒng)的制作方法
【專利摘要】本發(fā)明提供了一種控制離線觸覺轉(zhuǎn)換的系統(tǒng)。該系統(tǒng)從源接收輸入。該系統(tǒng)進(jìn)一步將輸入轉(zhuǎn)換為觸覺信號。該系統(tǒng)進(jìn)一步對觸覺信號進(jìn)行編碼。該系統(tǒng)進(jìn)一步將觸覺信號存儲在源內(nèi),其中,在該源內(nèi)將觸覺信號與輸入組合??商娲兀皇菍τ|覺信號進(jìn)行編碼并且將觸覺信號存儲在源內(nèi),該系統(tǒng)而是獨(dú)立于源,單獨(dú)地對觸覺信號進(jìn)行處理。
【專利說明】離線觸覺轉(zhuǎn)換系統(tǒng)
[0001] 相關(guān)申請的交叉引用
[0002] 本申請要求于2013年4月9日提交的序號為61/810, 196的美國臨時專利申請 (其公開內(nèi)容特此通過引用并入)的優(yōu)先權(quán),并且還要求于2013年5月24日提交的序號為 61/827, 341的美國臨時專利申請(其公開內(nèi)容特此通過引用并入)的優(yōu)先權(quán)。
【技術(shù)領(lǐng)域】
[0003] -個實(shí)施例一般涉及一種裝置,并尤其涉及一種生成觸覺效果的裝置。
【背景技術(shù)】
[0004] 觸覺是通過向用戶施加觸覺反饋效果(即,"觸覺效果")來利用用戶的觸摸感覺的 觸感和力反饋技術(shù),觸覺效果諸如力、振動和運(yùn)動。諸如移動裝置、觸摸屏裝置和個人計(jì)算 機(jī)的裝置可以被配置為產(chǎn)生觸覺效果。通常,可以在裝置的操作系統(tǒng)("0S")內(nèi)對對于能夠 產(chǎn)生觸覺效果的嵌入式硬件(諸如致動器)的調(diào)用進(jìn)行編程。這些調(diào)用指定要播放哪種觸覺 效果。例如,當(dāng)用戶使用例如按鈕、觸摸屏、杠桿、控制桿、輪盤或一些其他控件來與裝置交 互時,裝置的0S可以通過控制電路系統(tǒng)將播放命令發(fā)送到嵌入式硬件。嵌入式硬件然后生 成適當(dāng)?shù)挠|覺效果。
[0005] 裝置可以被配置為協(xié)調(diào)觸覺效果的輸出與諸如音頻的其他內(nèi)容的輸出,以使得觸 覺效果被合并到所述其他內(nèi)容中。例如,音頻效果開發(fā)者可以開發(fā)裝置可以輸出的音頻效 果,諸如機(jī)關(guān)槍炮火、爆炸或撞車。此外,可以開發(fā)其他類型的內(nèi)容,諸如視頻效果,隨后裝 置可以輸出該內(nèi)容。觸覺效果開發(fā)者隨后可以為裝置制作觸覺效果,并且該裝置可以被配 置為將該觸覺效果與其他內(nèi)容一起輸出。然而,這種處理通常需要觸覺效果開發(fā)者的個人 判斷來制作正確地美化音頻效果或其他類型的內(nèi)容的觸覺效果。沒有美化音頻效果或其 他類型的內(nèi)容的制作不良的觸覺效果可以生成其中觸覺效果與音頻效果或其他內(nèi)容不"配 合"的整體不諧和的效果。這種類型的用戶體驗(yàn)通常并不是所期望的。
【發(fā)明內(nèi)容】
[0006] -個實(shí)施例是一種控制離線觸覺轉(zhuǎn)換的系統(tǒng)。該系統(tǒng)從源接收輸入。該系統(tǒng)進(jìn)一 步將所述輸入轉(zhuǎn)換為觸覺信號。該系統(tǒng)進(jìn)一步對觸覺信號進(jìn)行編碼。該系統(tǒng)進(jìn)一步將觸覺 信號存儲在所述源內(nèi),其中,在所述源內(nèi)將觸覺信號與所述輸入組合。在替代實(shí)施例中,不 是對觸覺信號進(jìn)行編碼并且將觸覺信號存儲在所述源內(nèi),該系統(tǒng)而是獨(dú)立于所述源,單獨(dú) 地對觸覺信號進(jìn)行處理。
【專利附圖】
【附圖說明】
[0007] 從以下對優(yōu)選實(shí)施例的詳細(xì)描述,更多實(shí)施例、細(xì)節(jié)、優(yōu)點(diǎn)和修改將變得清楚,以 下詳細(xì)描述是結(jié)合附圖進(jìn)行的。
[0008] 圖1例示根據(jù)本發(fā)明的一個實(shí)施例的系統(tǒng)的框圖。
[0009] 圖2例示根據(jù)本發(fā)明的實(shí)施例的執(zhí)行輸入信號到觸覺信號的離線觸覺轉(zhuǎn)換和觸 覺信號的編碼的系統(tǒng)。
[0010] 圖3例示根據(jù)本發(fā)明的實(shí)施例的執(zhí)行觸覺信號的解碼和基于觸覺信號對一個或 多個觸覺效果的回放的系統(tǒng)。
[0011] 圖4例示根據(jù)本發(fā)明的實(shí)施例的輸入信號到觸覺信號的離線觸覺轉(zhuǎn)換和觸覺信 號的編碼的流程圖。
[0012] 圖5例示根據(jù)本發(fā)明的實(shí)施例的觸覺信號的解碼和基于觸覺信號對一個或多個 觸覺效果的回放的流程圖。
[0013] 圖6例示根據(jù)本發(fā)明的實(shí)施例的用于編碼的多媒體信號的音頻分量的處理器箱 式結(jié)構(gòu)。
[0014] 圖7例示根據(jù)本發(fā)明的實(shí)施例的用于編碼的多媒體信號的視頻分量的處理器箱 式結(jié)構(gòu)。
[0015] 圖8例示根據(jù)本發(fā)明的實(shí)施例的用于編碼的多媒體信號的觸覺分量的處理器箱 式結(jié)構(gòu)。
[0016] 圖9例示根據(jù)本發(fā)明的實(shí)施例的用于編碼的多媒體信號的音頻分量、視頻分量和 觸覺分量的處理器箱式結(jié)構(gòu)。
[0017] 圖10例示根據(jù)本發(fā)明的實(shí)施例的用于編碼的多媒體信號的觸覺分量的有效對象 配置文件類型。
[0018] 圖11例示根據(jù)本發(fā)明的實(shí)施例的用于編碼的多媒體信號的觸覺分量的無效對象 配置文件類型。
[0019] 圖12例示根據(jù)本發(fā)明的實(shí)施例的離線觸覺轉(zhuǎn)換模塊的功能的流程圖。
【具體實(shí)施方式】
[0020] 一個實(shí)施例是一種可以執(zhí)行諸如音頻信號、視頻信號或多媒體信號的輸入到觸覺 信號的"離線"轉(zhuǎn)換的系統(tǒng),其中,觸覺信號可以使諸如致動器的觸覺輸出裝置輸出一個或 多個觸覺效果。在"離線地"執(zhí)行觸覺轉(zhuǎn)換時,與"實(shí)時地"或者在回放輸入期間執(zhí)行觸覺轉(zhuǎn) 換完全不同,該系統(tǒng)可以在回放輸入之前執(zhí)行觸覺轉(zhuǎn)換。在執(zhí)行離線觸覺轉(zhuǎn)換時,該系統(tǒng)可 以首先從源接收輸入,諸如多媒體文件或一些其他類型的計(jì)算機(jī)文件。該系統(tǒng)然后可以將 輸入轉(zhuǎn)換為觸覺信號。該系統(tǒng)隨后可以對觸覺信號進(jìn)行編碼,其中,該系統(tǒng)可以將觸覺信號 嵌入在原始信號的源內(nèi),并且其中,該系統(tǒng)可以在該源內(nèi)將觸覺信號與原始輸入組合??商?代地,在對觸覺信號進(jìn)行編碼之后,該系統(tǒng)可以將觸覺信號嵌入在單獨(dú)的源內(nèi)。此外,該系 統(tǒng)可以從源提取編碼的觸覺信號并且對該編碼的觸覺信號進(jìn)行解碼。該系統(tǒng)然后可以將解 碼的觸覺信號發(fā)送到一個觸覺輸出裝置或一組觸覺輸出裝置(諸如一個致動器或一組致動 器),并且使觸覺輸出裝置基于解碼的觸覺信號產(chǎn)生觸覺效果。該系統(tǒng)可以進(jìn)一步來使觸覺 效果的回放與基于輸入或利用輸入由系統(tǒng)產(chǎn)生的其他效果(諸如音頻效果和視頻效果)的 回放同步。
[0021] 圖1例示根據(jù)本發(fā)明的一個實(shí)施例的系統(tǒng)10的框圖。在一個實(shí)施例中,系統(tǒng)10是 移動裝置的一部分,并且系統(tǒng)10為該移動裝置提供離線觸覺轉(zhuǎn)換功能。在另一實(shí)施例中, 系統(tǒng)10是可佩戴裝置的一部分,并且系統(tǒng)10為該可佩戴裝置提供觸覺效果模式變換功能。 可佩戴裝置的例子包括護(hù)腕、發(fā)箍、眼鏡、環(huán)形飾物、腳環(huán)、與衣物形成一體的衣飾、或用戶 可以佩戴在身體上或者可以由用戶持有的任何其他類型的裝置。一些可佩戴裝置可以"以 觸覺的方式啟用",這意味著它們包括產(chǎn)生觸覺效果的機(jī)制。在另一實(shí)施例中,系統(tǒng)10與裝 置(例如,移動裝置或可佩戴裝置)分離,并且遠(yuǎn)程地向該裝置提供觸覺效果模式變換功能。 盡管被示為單個系統(tǒng),但是可以將系統(tǒng)10的功能實(shí)現(xiàn)為分布式系統(tǒng)。系統(tǒng)10包括用于傳 送信息的總線12或其他通信機(jī)制、以及耦合到總線12的用于對信息進(jìn)行處理的處理器22。 處理器22可以是任何類型的通用或?qū)S锰幚砥鳌O到y(tǒng)10還包括用于存儲將被處理器22 執(zhí)行的信息和指令的存儲器14。存儲器14可以由隨機(jī)存取存儲器("狀1〇、只讀存儲器 ("1?01〇、諸如磁盤或光學(xué)盤的靜態(tài)儲存器、或任何其他類型的計(jì)算機(jī)可讀介質(zhì)的任何組合 組成。
[0022] 計(jì)算機(jī)可讀介質(zhì)可以是可以被處理器22訪問的任何可用介質(zhì),并且可以包括易 失性介質(zhì)和非易失性介質(zhì)、可移動介質(zhì)和非可移動介質(zhì)、通信介質(zhì)以及存儲介質(zhì)。通信介質(zhì) 可以包括計(jì)算機(jī)可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊、或諸如載波或其他傳輸機(jī)制的調(diào)制數(shù)據(jù)信 號中的其他數(shù)據(jù),并且可以包括本領(lǐng)域中已知的任何其他形式的信息遞送介質(zhì)。存儲介質(zhì) 可以包括RAM、閃存、ROM、可擦式可編程只讀存儲器("EPROM")、電可擦式可編程只讀存儲 器("EEPR0M")、寄存器、硬盤、可移動盤、緊湊盤只讀存儲器("⑶-ROM")、或本領(lǐng)域中已知 的任何其他形式的存儲介質(zhì)。
[0023] 在一個實(shí)施例中,存儲器14存儲當(dāng)被處理器22執(zhí)行時提供功能的軟件模塊。在 一個實(shí)施例中,這些模塊包括向系統(tǒng)10以及移動裝置的其余部分提供操作系統(tǒng)功能的操 作系統(tǒng)15。這些模塊還包括如下面更詳細(xì)地公開的離線觸覺轉(zhuǎn)換模塊16,其控制輸入到觸 覺信號的轉(zhuǎn)換、觸覺信號的編碼、觸覺信號的解碼、以及基于觸覺信號對一個或多個觸覺效 果的回放。在某些實(shí)施例中,離線觸覺轉(zhuǎn)換模塊16可以包括多個模塊,其中,每個模塊提供 用于控制輸入到觸覺信號的轉(zhuǎn)換、觸覺信號的編碼、觸覺信號的解碼、以及基于觸覺信號對 一個或多個觸覺效果的回放的特定的個人功能。系統(tǒng)10通常將包括包括附加功能的一個 或多個附加應(yīng)用模塊18,諸如Immersion Corporation的Integrator?軟件。
[0024] 從遠(yuǎn)程源發(fā)送和/或接收數(shù)據(jù)的實(shí)施例中,系統(tǒng)10還包括提供移動無線網(wǎng)絡(luò)通信 的通信裝置20,諸如網(wǎng)絡(luò)接口卡,移動無線網(wǎng)絡(luò)通信諸如紅外線、無線電、Wi-Fi或蜂窩網(wǎng) 絡(luò)通信。在其他實(shí)施例中,通信裝置20提供有線網(wǎng)絡(luò)連接,諸如以太網(wǎng)連接或調(diào)制解調(diào)器。
[0025] 處理器22進(jìn)一步經(jīng)由總線12耦合到用于向用戶顯示圖形表示或用戶界面的顯示 器24,諸如液晶顯示器("IXD")。顯示器24可以是被配置為從處理器22發(fā)送和接收信號 的觸摸敏感的輸入裝置,諸如觸摸屏,并且可以是多觸摸觸摸屏。
[0026] 在一個實(shí)施例中,系統(tǒng)10還包括致動器26。處理器22可以將與所產(chǎn)生的觸覺效 果相關(guān)聯(lián)的觸覺信號發(fā)送到致動器26,致動器26繼而輸出觸覺效果,諸如振動觸感的觸覺 效果、靜電摩擦觸覺效果、或變形觸覺效果。致動器26包括致動器驅(qū)動電路。致動器26可 以是例如電機(jī)、靜電致動器、音圈、形狀記憶合金、電活性聚合物、螺線管、偏心旋轉(zhuǎn)質(zhì)量電 機(jī)("ERM")、線性共振致動器("LRA")、壓電致動器、高帶寬致動器、電活性聚合物("ΕΑΡ") 致動器、靜電摩擦顯示器、或超聲振動發(fā)生器。在替代實(shí)施例中,除了致動器26 (圖1中未 示出)之外,系統(tǒng)10還可以包括一個或多個附加致動器。致動器26是觸覺輸出裝置的例 子,其中,觸覺輸出裝置是被配置為響應(yīng)于驅(qū)動信號輸出觸覺效果的裝置,觸覺效果諸如振 動觸感觸覺效果、靜電摩擦觸覺效果或變形觸覺效果。在替代實(shí)施例中,致動器26可以用 一些其他類型的觸覺輸出裝置取代。此外,在其他替代實(shí)施例中,系統(tǒng)10可以不包括致動 器26,而是與系統(tǒng)10分離的裝置包括致動器或產(chǎn)生觸覺效果的其他觸覺輸出裝置,并且系 統(tǒng)10通過通信裝置20將所產(chǎn)生的觸覺信號發(fā)送到該裝置。
[0027] 在一個實(shí)施例中,系統(tǒng)10還包括揚(yáng)聲器28。處理器22可以將音頻信號發(fā)送到揚(yáng) 聲器28,揚(yáng)聲器28繼而輸出音頻效果。揚(yáng)聲器28可以是例如動態(tài)擴(kuò)音器、電動態(tài)擴(kuò)音器壓 電擴(kuò)音器、磁致伸縮擴(kuò)音器、靜電擴(kuò)音器、帶式或平面式磁性擴(kuò)音器、彎曲波擴(kuò)音器、平板擴(kuò) 音器、海爾空氣運(yùn)動換能器、等離子體弧揚(yáng)聲器、以及數(shù)字?jǐn)U音器。在替代實(shí)施例中,除了揚(yáng) 聲器28 (圖1中未不出)之外,系統(tǒng)10還可以包括一個或多個附加揚(yáng)聲器。此外,在其他 替代實(shí)施例中,系統(tǒng)10可以不包括揚(yáng)聲器28,而是與系統(tǒng)10分離的系統(tǒng)包括輸出音頻效果 的揚(yáng)聲器,并且系統(tǒng)10通過通信裝置20將音頻信號發(fā)送到該裝置。
[0028] 在一個實(shí)施例中,系統(tǒng)10還包括傳感器30。傳感器30可以被配置為檢測能量形式 或其他物理性質(zhì),諸如,但不限于,聲音、移動、加速度、生物信號、距離、流、力/壓力/應(yīng)變/ 彎曲、濕度、直線位置、方位/傾角、射頻、旋轉(zhuǎn)位置、旋轉(zhuǎn)速度、開關(guān)操縱、溫度、振動或可見 光強(qiáng)度。傳感器30可以進(jìn)一步被配置為將所檢測的能量或其他物理性質(zhì)轉(zhuǎn)換為電信號或 表示視覺傳感器信息的任何信號。傳感器30可以是任何裝置,諸如,但不限于,加速度計(jì)、 心電圖描記器、腦電圖描記器、肌電圖描記器、眼電圖描記器、電腭動描記器、皮膚電反應(yīng)傳 感器、電容傳感器、霍爾效應(yīng)傳感器、紅外線傳感器、超聲傳感器、壓力傳感器、光纖傳感器、 屈曲傳感器(或彎曲傳感器)、力敏感電阻器、稱重傳感器、LuSense CPS2155、微型壓力換能 器、壓電傳感器、應(yīng)變計(jì)、濕度計(jì)、線性位置觸摸傳感器、線性電位計(jì)(或滑動器)、線性可變 差動變壓器、指南針、傾角計(jì)、磁性標(biāo)簽(或射頻標(biāo)識標(biāo)簽)、旋轉(zhuǎn)編碼器、旋轉(zhuǎn)電位計(jì)、陀螺 儀、開關(guān)開關(guān)、溫度傳感器(諸如溫度計(jì)、熱電偶、電阻溫度檢測器、熱敏電阻或溫度換能集 成電路)、麥克風(fēng)、光度計(jì)、高度計(jì)、生物監(jiān)視器、照相機(jī)或光相關(guān)電阻器。在替代實(shí)施例中, 除了傳感器30 (圖1中未示出)之外,系統(tǒng)10還可以包括一個或多個附加傳感器。在這些 實(shí)施例中的一些中,傳感器30和所述一個或多個附加傳感器可以是傳感器陣列的一部分、 或一些其他類型的傳感器集合。此外,在其他替代實(shí)施例中,系統(tǒng)10可以不包括傳感器30, 而是與系統(tǒng)10分離的裝置包括傳感器,該傳感器檢測某一形式的能量或其他物理性質(zhì),將 所檢測的能量或其他物理性質(zhì)轉(zhuǎn)換為電信號或表示視覺傳感器信息的其他類型的信號。該 裝置然后可以通過通信裝置20將轉(zhuǎn)換的信號發(fā)送到系統(tǒng)10。
[0029] 圖2例示根據(jù)本發(fā)明的實(shí)施例的執(zhí)行輸入信號到觸覺信號的離線觸覺轉(zhuǎn)換和觸 覺信號的編碼的系統(tǒng)。在一個實(shí)施例中,圖2的功能以及下述圖3、4、5和12的功能用存儲 在存儲器或其他計(jì)算機(jī)可讀或有形介質(zhì)中的軟件實(shí)現(xiàn),并且被處理器執(zhí)行。在其他實(shí)施例 中,每個功能可以由硬件(例如,通過使用專用集成電路("ASIC")、可編程門陣列("PGA")、 現(xiàn)場可編程門陣列("FPGA")等)或硬件和軟件的任何組合執(zhí)行。在某些實(shí)施例中,可以略 去該功能中的一些。
[0030] 圖2中所示的系統(tǒng)包括媒體編輯應(yīng)用200。媒體編輯應(yīng)用200是被配置為執(zhí)行編輯 輸入信號的功能的應(yīng)用,輸入信號諸如包括音頻數(shù)據(jù)的音頻信號、包括視頻數(shù)據(jù)的視頻信 號、或包括音頻信號和視頻信號兩者的多媒體信號。在執(zhí)行編輯輸入信號的功能時,媒體編 輯應(yīng)用200可以向用戶顯示用戶界面,其中,該用戶界面包括輸入信號的視覺表示,并且其 中,用戶可以通過與該用戶界面交互來修改輸入信號的一個或多個部分、或整個輸入信號。 在所示的實(shí)施例中,輸入信號是包括一個視頻信號和兩個音頻信號的多媒體信號。然而,這 是示例實(shí)施例,在替代實(shí)施例中,多媒體信號可以包括任何數(shù)量的音頻信號,并且可以包括 任何數(shù)量的視頻信號。在替代實(shí)施例中,輸入信號可以是另一類型的輸入信號,諸如音頻信 號、視頻信號、加速度信號、方位信號、周圍光信號、或可以包括用傳感器捕捉的數(shù)據(jù)的另一 類型的信號。此外,在輸入信號是多媒體信號的其他替代實(shí)施例中,除了音頻信號和視頻信 號之外,多媒體信號還可以包括其他類型的信號,諸如加速度信號、方位信號、周圍光信號、 或可以包括用傳感器捕捉的數(shù)據(jù)的其他類型的信號。
[0031] 媒體編輯應(yīng)用200可以通過從多媒體文件210提取編碼的多媒體信號并且對該編 碼的多媒體信號進(jìn)行解碼來接收多媒體信號。多媒體文件210是存儲數(shù)據(jù)的計(jì)算機(jī)文件, 所述數(shù)據(jù)諸如編碼的多媒體信號或其他類型的編碼信號。在一個示例實(shí)施例中,多媒體文 件 210 可以 MPEG-4Partl4 ("MP4")文件??梢栽?MPEG-4Partl4 標(biāo)準(zhǔn)(IS0/IEC14496-1 系 統(tǒng))、MPEG4Part-3 標(biāo)準(zhǔn)(IS0/IEC14496-3 音頻)以及 MPEG4Part-12 標(biāo)準(zhǔn)(IS0/IEC14496-12 媒體文件格式)中找到關(guān)于MP4文件的具體細(xì)節(jié),這些標(biāo)準(zhǔn)的全部內(nèi)容通過引用并入本文。
[0032] 在1,用戶選擇多媒體信號內(nèi)所包含的音頻信號的一個或多個部分(在圖2中被標(biāo) 識為"音頻區(qū)域")。系統(tǒng)創(chuàng)建編輯列表220,其是包括所述音頻信號的所述一個或多個部分 的列表。在替代實(shí)施例中,不是選擇音頻信號的一個或多個部分,而是用戶可以選擇整個音 頻信號。此外,在替代實(shí)施例中,用戶可以選擇多媒體信號內(nèi)所包含的另一類型的信號,諸 如視頻信號。
[0033] 在2,用戶指示系統(tǒng)將音頻信號的所述一個或多個部分轉(zhuǎn)換為一個或多個觸覺信 號(在圖2中被標(biāo)識為"啟動'產(chǎn)生觸覺'特征")。觸覺信號是可以與一個或多個觸覺效果 相關(guān)聯(lián)的信號,可以將觸覺信號發(fā)送到諸如致動器的觸覺輸出裝置,其中,觸覺輸出裝置可 以基于觸覺信號輸出一個或多個觸覺效果。觸覺效果的例子是可以生成被觸覺輸出裝置的 用戶感覺到的振動的振動觸感觸覺效果。觸覺效果的其他例子可以包括靜電摩擦觸覺效果 或變形觸覺效果。觸覺信號可以包括諸如波形的數(shù)據(jù),其中,波形是脈沖編碼調(diào)制("PCM") 格式的一個或多個信號值的集合。根據(jù)實(shí)施例,系統(tǒng)調(diào)用觸覺管理控制臺模塊230,其中,觸 覺管理控制臺模塊230是控制音頻信號的一個或多個部分到一個或多個觸覺信號的轉(zhuǎn)換、 并且還控制所述一個或多個觸覺信號的編碼的模塊。在用戶選擇整個音頻信號的替代實(shí)施 例中,用戶可以指示系統(tǒng)將整個音頻信號轉(zhuǎn)換為一個或多個觸覺信號,觸覺管理控制臺模 塊230可以控制整個音頻信號到一個或多個觸覺信號的轉(zhuǎn)換。
[0034] 在3,觸覺管理控制臺模塊230讀取編輯列表220,從編輯列表220選擇第一項(xiàng) (即,音頻信號的第一部分),并調(diào)用離線觸覺轉(zhuǎn)換器模塊240。離線觸覺轉(zhuǎn)換器模塊240是 將諸如音頻信號或音頻信號的一部分的輸入轉(zhuǎn)換為一個或多個觸覺信號的模塊。離線觸 覺轉(zhuǎn)換器模塊240可以采取下列作為輸入:(1)包括數(shù)據(jù)的任意大小的數(shù)據(jù)緩沖器,所述數(shù) 據(jù)諸如PCM音頻數(shù)據(jù);(2)數(shù)據(jù)緩沖器中的若干個通道;(3)數(shù)據(jù)緩沖器的每采樣比特;以 及(4)數(shù)據(jù)緩沖器的采樣速率。離線觸覺轉(zhuǎn)換器模塊240可以進(jìn)一步生成下列作為輸出: 包含包括觸覺數(shù)據(jù)的觸覺信號的數(shù)據(jù)緩沖器,所述觸覺數(shù)據(jù)控制經(jīng)由觸覺輸出裝置的一個 或多個觸覺效果的產(chǎn)生。在一個實(shí)施例中,觸覺信號可以是包括以"觸覺幀率"改變的幅值 的序列的單個通道。觸覺幀率定義離線觸覺轉(zhuǎn)換器模塊240輸出觸覺數(shù)據(jù)的速率。可以將 觸覺幀率設(shè)置為與輸入信號的音頻幀率或視頻幀率匹配的速率,所述輸入信號諸如音頻信 號、視頻信號或多媒體信號。可替代地,可以將觸覺幀率定義為每一觸覺采樣的音頻(或視 頻)采樣的數(shù)量。在一個實(shí)施例中,離線觸覺轉(zhuǎn)換器模塊240可以包括使得用戶可以設(shè)置觸 覺幀率(例如,從每秒15幀到每秒60幀)的配置界面。此外,在一個實(shí)施例中,離線觸覺轉(zhuǎn) 換器模塊240還可以披露使得用戶可以在觸覺轉(zhuǎn)換操作開始之前改變現(xiàn)有觸覺參數(shù)(諸如 強(qiáng)度、密度或清晰度)的方法。
[0035] 離線觸覺轉(zhuǎn)換器模塊240可以使用相關(guān)領(lǐng)域中的普通技術(shù)人員已知的將輸入轉(zhuǎn) 換為一個或多個觸覺信號的任何觸覺轉(zhuǎn)換算法。例如,離線觸覺轉(zhuǎn)換器模塊240可以使 用識別輸入的每個部分的最大振幅值的觸覺轉(zhuǎn)換算法,并基于所識別的最大振幅值來產(chǎn)生 輸入的每個部分的觸覺信號,其中,所識別的最大振幅值定義觸覺信號的幅度。在以下專 利或?qū)@暾?這些專利或?qū)@暾埖娜績?nèi)容全都特此通過引用并入)中描述了示例觸 覺轉(zhuǎn)換算法:美國專利No. 7, 979, 146 ;美國專利No. 8, 000, 825 ;美國專利No. 8, 378, 964 ; 美國專利申請公開No. 2011/0202155 ;美國專利申請公開No. 2011/0215913 ;美國 專利申請公開No. 2012/0206246 ;美國專利申請公開No. 2012/0206247 ;美國專利 申請公開No. 2013/0265286 ;美國專利申請公開No. 2013/0131851 ;美國專利申請 公開No. 2013/0207917 ;美國專利申請公開No. 2013/0335209 ;美國專利申請公開 No. 2014/0064516 ;美國專利申請序號No. 13/661,140 ;美國專利申請序號No. 13/785, 166 ; 美國專利申請序號No. 13/788, 487 ;美國專利申請序號No. 14/078, 438 ;美國專利申請序號 No. 14/078, 442 ;美國專利申請序號No. 14/078, 445 ;美國專利申請序號No. 14/051,933 ;美 國專利申請序號14/020, 461 ;以及美國專利申請序號No. 14/020, 502。
[0036] 在一個實(shí)施例中,可以從多媒體文件210提取編碼的音頻信號或其他類型的信號 的一個或多個部分,對這些部分進(jìn)行解碼,并經(jīng)由離線觸覺轉(zhuǎn)換器模塊240的一次或多次 調(diào)用將這些部分發(fā)送到離線觸覺轉(zhuǎn)換器模塊240,其中,離線觸覺轉(zhuǎn)換器模塊240可以將音 頻信號的每個部分轉(zhuǎn)換為一個或多個觸覺信號,并且可以輸出所述一個或多個觸覺信號。 這被標(biāo)識為"逐步轉(zhuǎn)換",并且在圖2中示出。在替代實(shí)施例中,可以從多媒體文件210提取 整個音頻信號或其他類型的信號,對該信號進(jìn)行解碼,并經(jīng)由離線觸覺轉(zhuǎn)換器模塊240的 單次調(diào)用將該信號發(fā)送到離線觸覺轉(zhuǎn)換器模塊240,其中,離線觸覺轉(zhuǎn)換器模塊240可以將 整個音頻信號轉(zhuǎn)換為一個或多個觸覺信號,并且可以輸出所述一個或多個觸覺信號。這被 標(biāo)識為"整個轉(zhuǎn)換"。
[0037] 根據(jù)實(shí)施例,離線觸覺轉(zhuǎn)換模塊240可以"離線地"執(zhí)行整個輸入信號(或輸入信 號的一個或多個部分)到一個或多個觸覺信號的觸覺轉(zhuǎn)換。在"離線地"執(zhí)行觸覺轉(zhuǎn)換時, 離線觸覺轉(zhuǎn)換模塊240可以在媒體編輯應(yīng)用200回放輸入信號之前執(zhí)行觸覺轉(zhuǎn)換。
[0038] 在4,觸覺管理控制臺模塊230調(diào)用觸覺編碼器模塊250。觸覺編碼器模塊250是 將一個或多個觸覺信號編碼為編碼格式并且將編碼的一個或多個觸覺信號存儲在多媒體 文件210內(nèi)的模塊。在將編碼的一個或多個觸覺信號存儲在多媒體文件210內(nèi)過程中,觸 覺編碼器模塊250可以定義所述一個或多個觸覺信號的每個觸覺信號,并將該觸覺信號放 置在多媒體文件210內(nèi)。因此,可以將所述一個或多個觸覺信號嵌入在多媒體文件210內(nèi), 其中,將所述一個或多個觸覺信號與原始多媒體信號組合。在替代實(shí)施例中,觸覺編碼器模 塊250可以將編碼的一個或多個觸覺信號存儲在與多媒體文件210分開的多媒體文件(圖 2中未示出)內(nèi)。此外,在另一替代實(shí)施例中,觸覺編碼器模塊250可以另外將基于一個或 多個預(yù)定義觸覺效果的一個或多個編碼的觸覺信號存儲在多媒體文件210或單獨(dú)的多媒 體文件內(nèi)。下面結(jié)合圖6-11更詳細(xì)地進(jìn)一步描述對觸覺信號進(jìn)行編碼并且將編碼的觸覺 信號存儲在多媒體文件內(nèi)的功能。此外,系統(tǒng)對于編輯列表220中的每項(xiàng)(S卩,音頻信號的 每個部分)重復(fù)3和4。
[0039] 在5,媒體編輯應(yīng)用200更新多媒體信號的視覺表示以包括所產(chǎn)生的一個或多個 觸覺信號的表示。
[0040] 圖3例示根據(jù)本發(fā)明的實(shí)施例的執(zhí)行觸覺信號的解碼和基于觸覺信號對一個或 多個觸覺效果的回放的系統(tǒng)。圖3中所示的系統(tǒng)包括媒體編輯應(yīng)用200和/或媒體播放器 應(yīng)用300。先前在上面結(jié)合圖2描述了媒體編輯應(yīng)用200。媒體播放器應(yīng)用300是被配置 為執(zhí)行播放輸入信號的功能的應(yīng)用,輸入信號諸如包括音頻數(shù)據(jù)的音頻信號、包括視頻數(shù) 據(jù)的視頻信號、或包括音頻信號和視頻信號兩者的多媒體信號。
[0041] 在1,用戶指示系統(tǒng)播放被編碼并且被存儲在多媒體文件210內(nèi)的輸入信號,諸如 包括音頻數(shù)據(jù)的音頻信號、包括視頻數(shù)據(jù)的視頻信號、或包括音頻信號和視頻信號兩者的 多媒體信號。在所示的實(shí)施例中,存儲在多媒體文件210內(nèi)的編碼的輸入信號是編碼的多 媒體信號。先前在上面結(jié)合圖2描述了多媒體文件210。根據(jù)實(shí)施例,多媒體文件210還包 括在多媒體文件210內(nèi)與編碼的多媒體信號組合的一個或多個編碼的觸覺信號。在一個實(shí) 施例中,用戶可以通過與媒體編輯應(yīng)用200的用戶界面進(jìn)行交互來指示系統(tǒng)播放多媒體信 號。在替代實(shí)施例中,用戶可以通過與媒體播放器應(yīng)用300的用戶界面進(jìn)行交互來指示系 統(tǒng)播放多媒體信號。
[0042] 在2,媒體編輯應(yīng)用200或媒體播放器應(yīng)用300播放多媒體信號。根據(jù)實(shí)施例,媒 體編輯應(yīng)用200或媒體播放器應(yīng)用300從多媒體文件210檢索編碼的多媒體信號,對該編 碼的多媒體信號進(jìn)行解碼,并播放解碼的多媒體信號。
[0043] 在3,操作系統(tǒng)模塊310調(diào)用觸覺解碼器模塊320,操作系統(tǒng)模塊310是被配置為 提供操作系統(tǒng)功能的模塊。觸覺解碼器模塊320是被配置為從多媒體文件210提取一個或 多個編碼的觸覺信號并且對所述一個或多個編碼的觸覺信號進(jìn)行解碼的模塊。下面結(jié)合圖 6-11更詳細(xì)地進(jìn)一步描述對編碼的觸覺信號進(jìn)行解碼的功能。
[0044] 在4,觸覺解碼器模塊320生成觸覺輸出330。觸覺解碼器模塊320可以通過將 所述一個或多個觸覺信號發(fā)送到諸如致動器的一個或多個觸覺輸出裝置來生成觸覺輸出 330,其中,所述一個或多個觸覺信號使所述一個或多個觸覺輸出裝置生成一個或多個觸覺 效果。觸覺輸出330可以包括振動觸感效果,諸如振動觸感效果340和350。
[0045] 觸覺解碼器模塊320進(jìn)一步使觸覺輸出的回放與諸如音頻效果360和視頻效果 370的音頻輸出和/或視頻輸出的回放同步。因此,觸覺解碼器模塊320可以使所述一個或 多個觸覺信號到一個或多個觸覺輸出裝置的發(fā)送與一個或多個音頻信號到諸如揚(yáng)聲器的 音頻輸出裝置的發(fā)送、和/或一個或多個視頻信號到諸如顯示器的視頻輸出裝置的發(fā)送同 步。為了便利于這個同步,觸覺解碼器模塊320可以使所述一個或多個觸覺信號的觸覺數(shù) 據(jù)與所述一個或多個音頻信號的音頻數(shù)據(jù)和/或所述一個或多個觸覺信號的視頻數(shù)據(jù)同 步。更具體地,觸覺解碼器模塊320可以重復(fù)地調(diào)用被配置為以等于觸覺幀率的速率將觸 覺信號發(fā)送到觸覺輸出裝置的模塊,其中,觸覺幀率被定義為與用于將音頻信號發(fā)送到音 頻輸出裝置的音頻幀率或用于將視頻信號發(fā)送到視頻輸出裝置的視頻幀率相同的速率。因 此,因?yàn)橛|覺幀率與音頻幀率和/或視頻幀率相同,所以可以在與當(dāng)輸出觸覺效果時的時 間相同或基本上相同的時間輸出音頻效果和/或視頻效果。
[0046] 圖4例示根據(jù)本發(fā)明的實(shí)施例的輸入信號到觸覺信號的離線觸覺轉(zhuǎn)換和觸覺信 號的編碼的流程圖。根據(jù)實(shí)施例,輸入信號是包括音頻信號和視頻信號的多媒體信號405。 然而,在替代實(shí)施例中,輸入信號可以是另一類型的輸入信號,諸如音頻信號、視頻信號、力口 速度信號、方位信號、周圍光信號、或可以包括用傳感器捕捉的數(shù)據(jù)的另一類型的信號。此 夕卜,在其中輸入信號是多媒體信號的替代實(shí)施例中,多媒體信號可以包括任何數(shù)量的音頻 信號,可以包括任何數(shù)量的視頻信號,和/或除了音頻信號和視頻信號之外,還可以包括其 他類型的信號,諸如加速度信號、方位信號、周圍光信號、或可以包括用傳感器捕捉的數(shù)據(jù) 的其他類型的信號。根據(jù)實(shí)施例,多媒體信號405可以是編碼的多媒體信號,并且可以被存 儲在諸如多媒體文件的源內(nèi)。
[0047] 在410,提取多媒體信號405的音頻信號,并將該音頻信號解碼為音頻信號415。然 后將音頻信號415作為輸入發(fā)送到離線觸覺轉(zhuǎn)換器模塊420。離線觸覺轉(zhuǎn)換器模塊420將 音頻信號415轉(zhuǎn)換為觸覺信號425。觸覺信號425是包括觸覺數(shù)據(jù)的信號,其中,觸覺數(shù)據(jù) 包括PCM流或振幅值序列。根據(jù)實(shí)施例,離線觸覺轉(zhuǎn)換器模塊415可以使用相關(guān)領(lǐng)域中的 普通技術(shù)人員已知的將音頻信號415轉(zhuǎn)換為觸覺信號425的任何觸覺轉(zhuǎn)換算法。此外,在 實(shí)施例中,離線觸覺轉(zhuǎn)換器模塊415可以"離線地"執(zhí)行觸覺轉(zhuǎn)換,其中,離線觸覺轉(zhuǎn)換模塊 420可以在回放音頻信號之前執(zhí)行觸覺轉(zhuǎn)換。
[0048] 在430,將觸覺信號425編碼為編碼的觸覺信號435。此外,在440,將編碼的觸覺 信號435和多媒體信號450復(fù)用(S卩,組合)為多媒體信號445,其中,多媒體信號445包括 音頻信號、視頻信號和觸覺信號(即,編碼的觸覺信號435)。下面結(jié)合圖6-11更詳細(xì)地進(jìn)一 步描述觸覺信號425到編碼的觸覺信號435的編碼、以及編碼的觸覺信號435和多媒體信 號405的復(fù)用。
[0049] 圖5例示根據(jù)本發(fā)明的實(shí)施例的觸覺信號的解碼和基于觸覺信號的一個或多個 觸覺效果的回放的流程圖。在510,將多媒體信號445解復(fù)用(S卩,分割)為音頻信號511、視 頻信號512和觸覺信號513。先前在上面結(jié)合圖4描述了多媒體信號445,不再對多媒體信 號445進(jìn)行描述。
[0050] 在520,對音頻信號511、視頻信號512和觸覺信號513均進(jìn)行解碼。此外,在對音 頻信號511和視頻信號512進(jìn)行解碼之后,將它們發(fā)送到音頻/視頻呈現(xiàn)器530,其中,音 頻/視頻呈現(xiàn)器530控制一個或多個音頻輸出裝置處的一個或多個音頻效果的輸出、以及 一個或多個視頻輸出裝置處的一個或多個視頻效果的輸出。根據(jù)實(shí)施例,基于音頻信號511 輸出所述一個或多個音頻效果,并且基于視頻信號512輸出所述一個或多個視頻效果。在 某些實(shí)施例中,每個音頻輸出裝置是揚(yáng)聲器,每個視頻輸出裝置是顯示器。此外,將觸覺信 號513解碼為解碼的觸覺信號525。根據(jù)實(shí)施例,解碼的觸覺信號525是包括解碼的觸覺 數(shù)據(jù)的信號,其中,解碼的觸覺數(shù)據(jù)包括PCM流或振幅值序列。在觸覺信號513被解碼為解 碼的觸覺信號525之后,將解碼的觸覺信號525發(fā)送到振動呈現(xiàn)器570,其中,下面更詳細(xì) 地進(jìn)一步描述觸覺信號525到振動呈現(xiàn)器570的發(fā)送。根據(jù)實(shí)施例,振動呈現(xiàn)器570控制 觸覺輸出裝置處的一個或多個觸覺效果的輸出,其中,下面更詳細(xì)地進(jìn)一步描述所述一個 或多個觸覺效果的輸出。此外,可以使音頻信號511和視頻信號512到音頻/視頻呈現(xiàn)器 530的發(fā)送、以及解碼的觸覺信號520到振動呈現(xiàn)器570的發(fā)送同步,以使得在與當(dāng)輸出所 述一個或多個觸覺效果時的時間相同或基本上相同的時間輸出所述一個或多個音頻效果 和所述一個或多個視頻效果。
[0051] 在540,選擇一個或多個觸覺輸出裝置。在550,對解碼的觸覺信號525的振幅觸 覺參數(shù)進(jìn)行調(diào)制,該參數(shù)配置用于所選觸覺輸出裝置的解碼的觸覺信號525。在560,對其 他觸覺參數(shù)進(jìn)行調(diào)制,以使得解碼的觸覺信號525被配置用于所選觸覺輸出裝置,所述其 他觸覺參數(shù)諸如強(qiáng)度觸覺參數(shù)、密度觸覺參數(shù)或清晰度觸覺參數(shù)。在某些實(shí)施例中,可以略 去在540、550和560執(zhí)行的功能。此外,在解碼的觸覺信號525被調(diào)制之后,將解碼的觸覺 信號525發(fā)送到振動呈現(xiàn)器570,其中,振動呈現(xiàn)器570控制致動器580處的一個或多個觸 覺效果的輸出,其中,該致動器是觸覺輸出裝置的例子。根據(jù)實(shí)施例,基于解碼的觸覺信號 525輸出一個或多個觸覺效果。
[0052] 現(xiàn)在更詳細(xì)地描述根據(jù)示例實(shí)施例的對觸覺信號進(jìn)行編碼并且將編碼的觸覺信 號存儲在諸如MP4文件的多媒體文件內(nèi)的功能。盡管描述了對觸覺信號進(jìn)行編碼并且將編 碼的觸覺信號存儲在多媒體文件內(nèi)的示例實(shí)現(xiàn),但是相關(guān)領(lǐng)域中的普通技術(shù)人員將容易意 識到,在其他替代實(shí)施例中可以不同地實(shí)現(xiàn)觸覺信號的編碼以及編碼的觸覺信號在多媒體 文件內(nèi)的存儲。如前所述,多媒體文件可以包括編碼的多媒體信號,其中,編碼的多媒體信 號可以包括任何數(shù)量的編碼信號,諸如編碼的音頻信號和編碼的視頻信號。根據(jù)實(shí)施例,可 以對觸覺信號進(jìn)行編碼,并將該觸覺信號存儲在多媒體文件內(nèi),其中,對編碼的觸覺信號進(jìn) 行交織、或?qū)⒕幋a的觸覺信號與存儲在該多媒體文件內(nèi)的其他編碼的音頻信號和/或編碼 的視頻信號組合。
[0053] 根據(jù)實(shí)施例,編碼的觸覺信號類似于編碼的音頻信號(或另一類型的編碼信號), 因?yàn)檫@兩個編碼信號都包括諸如波形的數(shù)據(jù),其中,波形是PCM格式的一個或多個信號值 的集合。因此,重要的是,在多媒體文件內(nèi)對編碼的觸覺信號進(jìn)行格式化,以使得編碼的觸 覺信號不被誤認(rèn)為另一類型的編碼信號(諸如編碼的音頻信號),反之亦然。此外,多媒體文 件是被標(biāo)識為箱的一系列對象。所有數(shù)據(jù)都被存儲在箱中;不存在存儲在多媒體文件內(nèi)的 其他數(shù)據(jù)。因此,多媒體文件的編碼信號被存儲在多媒體文件的箱中。因此,根據(jù)實(shí)施例, 編碼的觸覺信號與為音頻和視頻而存在的其他trak箱一起被存儲在標(biāo)準(zhǔn)"moov"箱內(nèi)的單 獨(dú)的"trak"箱內(nèi)。下表例示了觸覺箱結(jié)構(gòu):
[0054]
【權(quán)利要求】
1. 一種用于控制離線觸覺轉(zhuǎn)換的方法,所述方法包括: 從源接收輸入; 將所述輸入轉(zhuǎn)換為一個或多個觸覺信號,其中,在回放所述輸入之前執(zhí)行將所述輸入 轉(zhuǎn)換為所述一個或多個觸覺信號; 對所述一個或多個觸覺信號進(jìn)行編碼;和 存儲所述一個或多個觸覺信號。
2. 根據(jù)權(quán)利要求1所述的方法,還包括: 提取所述一個或多個觸覺信號; 對所述一個或多個觸覺信號進(jìn)行解碼; 基于所述一個或多個觸覺信號來產(chǎn)生一個或多個觸覺效果;和 使所述一個或多個觸覺效果與所述輸入同步。
3. 根據(jù)權(quán)利要求2所述的方法,其中,產(chǎn)生所述一個或多個觸覺效果還包括將所述一 個或多個觸覺信號發(fā)送到觸覺輸出裝置以產(chǎn)生所述一個或多個觸覺效果。
4. 根據(jù)權(quán)利要求3所述的方法,其中,所述觸覺輸出裝置包括致動器。
5. 根據(jù)權(quán)利要求3所述的方法,其中,所述一個或多個觸覺信號均包括一個或多個幅 值的序列; 所述控制還包括配置觸覺幀率,所述觸覺幀率定義所述一個或多個幅值的序列中每秒 發(fā)送到觸覺輸出裝置的部分。
6. 根據(jù)權(quán)利要求1所述的方法,其中,將所述輸入轉(zhuǎn)換為所述一個或多個觸覺信號還 包括: 從所述源提取輸入信號;和 將所述輸入信號轉(zhuǎn)換為所述一個或多個觸覺信號。
7. 根據(jù)權(quán)利要求1所述的方法,其中,將所述輸入轉(zhuǎn)換為所述一個或多個觸覺信號還 包括: 從所述源提取輸入信號的一個或多個部分;和 將所述輸入信號的所述一個或多個部分轉(zhuǎn)換為所述一個或多個觸覺信號。
8. 根據(jù)權(quán)利要求1所述的方法,其中,所述輸入包括以下之一:音頻信號的至少一部 分;視頻信號的至少一部分;或包括音頻信號和視頻信號兩者的多媒體信號的至少一部 分。
9. 根據(jù)權(quán)利要求1所述的方法,其中,所述源包括多媒體文件。
10. 根據(jù)權(quán)利要求1所述的方法,其中,存儲所述一個或多個觸覺信號還包括將所述一 個或多個觸覺信號存儲在所述源內(nèi),其中,在所述源的容器內(nèi)將所述一個或多個觸覺信號 與所述輸入組合。
11. 根據(jù)權(quán)利要求1所述的方法,其中,存儲所述一個或多個觸覺信號還包括將所述一 個或多個觸覺信號存儲在單獨(dú)的文件或流內(nèi)。
12. -種用于控制離線觸覺轉(zhuǎn)換的系統(tǒng),所述系統(tǒng)包括: 存儲器,所述存儲器被配置為存儲離線觸覺轉(zhuǎn)換模塊;和 處理器,所述處理器被配置為執(zhí)行存儲在所述存儲器上的離線觸覺轉(zhuǎn)換; 其中,所述離線觸覺轉(zhuǎn)換模塊被配置為從源接收輸入; 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為在回放所述輸入之前將所述輸入轉(zhuǎn)換為 一個或多個觸覺信號; 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為對所述一個或多個觸覺信號進(jìn)行編碼; 和 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為存儲所述一個或多個觸覺信號。
13. 根據(jù)權(quán)利要求12所述的系統(tǒng), 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為提取所述一個或多個觸覺信號; 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為對所述一個或多個觸覺信號進(jìn)行解碼; 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為基于所述一個或多個觸覺信號來產(chǎn)生一 個或多個觸覺效果;和 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為使所述一個或多個觸覺效果與所述輸入 同步。
14. 根據(jù)權(quán)利要求12所述的系統(tǒng), 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為從所述源提取輸入信號;和 其中,所述離線觸覺轉(zhuǎn)換模塊被進(jìn)一步配置為將所述輸入信號轉(zhuǎn)換為所述一個或多個 觸覺信號。
15. -種用于控制離線觸覺轉(zhuǎn)換的設(shè)備,所述設(shè)備包括: 從源接收輸入的裝置; 將所述輸入轉(zhuǎn)換為一個或多個觸覺信號的裝置,其中,在回放所述輸入之前執(zhí)行將所 述輸入轉(zhuǎn)換為所述一個或多個觸覺信號; 對所述一個或多個觸覺信號進(jìn)行編碼的裝置;和 存儲所述一個或多個觸覺信號的裝置。
【文檔編號】G06F3/01GK104102341SQ201410140291
【公開日】2014年10月15日 申請日期:2014年4月9日 優(yōu)先權(quán)日:2013年4月9日
【發(fā)明者】R·拉克羅伊克斯, S·S·巴哈迪亞, J·F·布朗夏爾迪翁, S·D·蘭克, C·J·奧瑞奇, L·T·番 申請人:意美森公司