其他形式的信息可以經(jīng)由計(jì)算機(jī)可讀通信介質(zhì)通過(guò)純信號(hào)來(lái)傳播。
[0077]在被包括時(shí)，顯示子系統(tǒng)612可用于呈現(xiàn)由存儲(chǔ)子系統(tǒng)608保存的數(shù)據(jù)的視覺表示。由于以上所描述的方法和過(guò)程改變了由存儲(chǔ)子系統(tǒng)608保持的數(shù)據(jù)，并由此變換了存儲(chǔ)子系統(tǒng)的狀態(tài)，因此同樣可以轉(zhuǎn)變顯示子系統(tǒng)612的狀態(tài)以在視覺上表示底層數(shù)據(jù)的改變。顯示子系統(tǒng)612可包括利用幾乎任何類型的技術(shù)的一個(gè)或多個(gè)顯示設(shè)備。可將此類顯示設(shè)備與邏輯子系統(tǒng)604和/或存儲(chǔ)子系統(tǒng)608組合在共享封裝中，或此類顯示設(shè)備可以是外圍顯示設(shè)備。顯示子系統(tǒng)612可包括例如HMD設(shè)備34的顯示系統(tǒng)40。
[0078]在被包括時(shí)，通信子系統(tǒng)616可以被配置成將計(jì)算系統(tǒng)600與一個(gè)或多個(gè)網(wǎng)絡(luò)和/或一個(gè)或多個(gè)其他計(jì)算設(shè)備可通信地耦合。通信子系統(tǒng)616可包括與一個(gè)或多個(gè)不同的通信協(xié)議兼容的有線和/或無(wú)線通信設(shè)備。作為非限制性示例，通信子系統(tǒng)616可被配置為經(jīng)由無(wú)線電話網(wǎng)、無(wú)線局域網(wǎng)、有線局域網(wǎng)、無(wú)線廣域網(wǎng)、有線廣域網(wǎng)等進(jìn)行通信。在一些實(shí)施例中，通信子系統(tǒng)可允許計(jì)算系統(tǒng)600經(jīng)由諸如因特網(wǎng)之類的網(wǎng)絡(luò)發(fā)送消息至其他設(shè)備和/或從其他設(shè)備接收消息。
[0079]傳感器子系統(tǒng)620可包括被配置成感測(cè)不同的物理現(xiàn)象(例如，可見光、紅外光、聲音、加速度、取向、位置等)的一個(gè)或多個(gè)傳感器，如上所述。傳感器子系統(tǒng)620例如可以被配置為向邏輯子系統(tǒng)604提供傳感器數(shù)據(jù)。此類數(shù)據(jù)可包括例如圖像信息、音頻信息、環(huán)境光信息、深度信息、位置信息、運(yùn)動(dòng)信息，用戶位置信息、眼睛跟蹤信息和/或可被用來(lái)執(zhí)行上述方法和過(guò)程的任何其他合適的傳感器數(shù)據(jù)。
[0080]在被包括時(shí)，輸入子系統(tǒng)622可包括一個(gè)或多個(gè)傳感器或用戶輸入設(shè)備(諸如游戲控制器、姿勢(shì)輸入檢測(cè)設(shè)備、語(yǔ)音識(shí)別器、慣性測(cè)量單元、鍵盤、鼠標(biāo)、或觸摸屏)或與它們對(duì)接。在某些實(shí)施例中，輸入子系統(tǒng)622可以包括所選的自然用戶輸入(NUI)部件或與其結(jié)合。這樣的部件可以是集成式的或者是外設(shè)，并且輸入動(dòng)作的轉(zhuǎn)換和/或處理可以在板上或板下處理。NUI部件的示例可包括用于語(yǔ)言和/或語(yǔ)音識(shí)別的微電話；用于機(jī)器版本和/或姿勢(shì)識(shí)別的紅外、色彩、超聲波和/或深度相機(jī)；用于運(yùn)動(dòng)檢測(cè)和/或意圖識(shí)別的頭部跟蹤器、眼睛跟蹤器、加速計(jì)和/或陀螺儀；以及用于評(píng)估腦部活動(dòng)的電場(chǎng)感測(cè)部件。
[0081]術(shù)語(yǔ)“程序”可用于描述被實(shí)現(xiàn)來(lái)執(zhí)行一個(gè)或多個(gè)特定功能的混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)10的一個(gè)方面。在某些情況下，可以經(jīng)由執(zhí)行存儲(chǔ)子系統(tǒng)608所保持的指令的邏輯子系統(tǒng)604來(lái)實(shí)例化這樣的程序。將理解，可以從同一應(yīng)用、服務(wù)、代碼塊、對(duì)象、庫(kù)、例程、AP1、函數(shù)等實(shí)例化不同的程序。類似地，相同的模塊可由不同的應(yīng)用、服務(wù)、代碼塊、對(duì)象、例程、AP1、功能等來(lái)實(shí)例化。術(shù)語(yǔ)“程序”意在涵蓋單個(gè)或成組的可執(zhí)行文件、數(shù)據(jù)文件、庫(kù)、驅(qū)動(dòng)程序、腳本、數(shù)據(jù)庫(kù)記錄等。
[0082]應(yīng)該理解，此處所述的配置和/或方法在本質(zhì)上是示例性的，并且這些具體實(shí)施例或示例不應(yīng)被認(rèn)為是局限性的，因?yàn)槎鄠€(gè)變體是可能的。此處所述的具體例程或方法可表示任何數(shù)量的處理策略中的一個(gè)或多個(gè)。由此，所示出的各個(gè)動(dòng)作可以按所示次序執(zhí)行、按其他次序執(zhí)行、并行地執(zhí)行，或者在某些情況下被省略。同樣，可以改變上述過(guò)程的次序。
[0083]本公開的主題包括各種過(guò)程、系統(tǒng)和配置、此處所公開的其他特征、功能、動(dòng)作，和/或特性，以及其任何和全部等效方案的所有新穎和非顯而易見的組合和子組合。
【主權(quán)項(xiàng)】
1.一種用于呈現(xiàn)物理環(huán)境的紋理化共享世界模型的混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)，所述紋理化共享世界模型包括地理定位在所述物理環(huán)境處的多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)，以及地理定位在所述物理環(huán)境處的多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)，所述混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)包括: 由計(jì)算設(shè)備的處理器執(zhí)行的混合現(xiàn)實(shí)體驗(yàn)共享程序，所述混合現(xiàn)實(shí)體驗(yàn)共享程序被配置以: 接收包括深度信息的所述多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)； 將所述多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)縫合在一起以生成所述物理環(huán)境的3D空間共享世界模型； 從多個(gè)源接收所述多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)，所述紋理數(shù)據(jù)項(xiàng)中的每一個(gè)包括被打上時(shí)間戳的圖像或視頻； 接收時(shí)間過(guò)濾參數(shù)的用戶輸入； 根據(jù)所述時(shí)間過(guò)濾參數(shù)來(lái)過(guò)濾所述多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)以生成所述眾包的紋理數(shù)據(jù)項(xiàng)的在時(shí)間上過(guò)濾了的子組； 將所述眾包的紋理數(shù)據(jù)項(xiàng)的在時(shí)間上過(guò)濾了的子組應(yīng)用到所述物理環(huán)境的3D空間共享世界模型的表面來(lái)生成所述物理環(huán)境的紋理化共享世界模型；以及 將所述物理環(huán)境的紋理化共享世界模型提供到顯示程序以供顯示設(shè)備顯示。2.如權(quán)利要求1所述的混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)，其特征在于， 所述時(shí)間過(guò)濾參數(shù)對(duì)應(yīng)于早于當(dāng)前時(shí)間的先前時(shí)間。3.如權(quán)利要求2所述的混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)，其特征在于，所述混合現(xiàn)實(shí)體驗(yàn)共享程序還被配置成: 根據(jù)所述時(shí)間過(guò)濾參數(shù)來(lái)過(guò)濾所述多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)以生成所述眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)的在時(shí)間上過(guò)濾了的子組；以及 將所述眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)的在時(shí)間上過(guò)濾了的子組縫合在一起以生成所述物理環(huán)境的3D空間共享世界模型。4.如權(quán)利要求1所述的混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)，其特征在于，所述混合現(xiàn)實(shí)體驗(yàn)共享程序還被配置成根據(jù)一個(gè)或多個(gè)優(yōu)先級(jí)因素來(lái)對(duì)所述多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)排定優(yōu)先級(jí)。5.如權(quán)利要求4所述的混合現(xiàn)實(shí)體驗(yàn)共享系統(tǒng)，其特征在于，所述優(yōu)先級(jí)因素是從包括以下的組中選擇的:保真度、年齡、源的可信度、以及所述眾包的紋理數(shù)據(jù)項(xiàng)的源的社交鄰近度。6.一種用于經(jīng)由顯示設(shè)備來(lái)呈現(xiàn)物理環(huán)境的紋理化共享世界模型的方法，所述方法包括: 接收地理定位在所述物理環(huán)境處并包括深度信息的多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)； 將所述多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)縫合在一起以生成所述物理環(huán)境的3D空間共享世界模型； 從多個(gè)源接收地理定位在所述物理環(huán)境處的多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)，所述紋理數(shù)據(jù)項(xiàng)中的每一個(gè)包括被打上時(shí)間戳的圖像或視頻； 接收時(shí)間過(guò)濾參數(shù)的用戶輸入； 根據(jù)所述時(shí)間過(guò)濾參數(shù)來(lái)過(guò)濾所述多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)以生成所述眾包的紋理數(shù)據(jù)項(xiàng)的在時(shí)間上過(guò)濾了的子組； 將所述眾包的紋理數(shù)據(jù)項(xiàng)的在時(shí)間上過(guò)濾了的子組應(yīng)用到所述物理環(huán)境的3D空間共享世界模型的表面來(lái)生成所述物理環(huán)境的紋理化共享世界模型；以及 將所述物理環(huán)境的紋理化共享世界模型提供到顯示程序以供顯示設(shè)備顯示。7.如權(quán)利要求6所述的方法，其特征在于，進(jìn)一步包括從至少所述顯示設(shè)備的用戶和第三方源接收所述多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)。8.如權(quán)利要求6所述的方法，其特征在于，所述多個(gè)眾包的紋理數(shù)據(jù)項(xiàng)中的每一個(gè)是從包括以下的組中選擇的:照明所述眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)中的一個(gè)或多個(gè)的光、所述物理環(huán)境中一對(duì)象的圖像、所述物理環(huán)境中一對(duì)象的視頻，以及所述物理環(huán)境的音頻。9.如權(quán)利要求6所述的方法，其特征在于，其中所述多個(gè)眾包的紋理化數(shù)據(jù)項(xiàng)包括至少一個(gè)全息圖和描述所述全息圖的元數(shù)據(jù)，并且進(jìn)一步包括在所述物理環(huán)境的紋理化共享世界模型內(nèi)定位所述全息圖。10.如權(quán)利要求6所述的方法，其特征在于，進(jìn)一步包括根據(jù)以下中的一個(gè)或多個(gè)來(lái)對(duì)所述多個(gè)眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)排定優(yōu)先級(jí):保真度、年齡、源的可信度，以及所述眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)的源的社交鄰近度。
【專利摘要】公開了涉及呈現(xiàn)物理環(huán)境的紋理化共享世界模型的實(shí)施例。一個(gè)實(shí)施例包括接收物理環(huán)境的地理定位的眾包的結(jié)構(gòu)數(shù)據(jù)項(xiàng)。結(jié)構(gòu)數(shù)據(jù)項(xiàng)被縫合在一起來(lái)生成3D空間共享世界模型。地理定位的眾包的紋理數(shù)據(jù)項(xiàng)也被接收到并包括被打上時(shí)間戳的圖像或視頻。時(shí)間過(guò)濾參數(shù)的用戶輸入被用于在時(shí)間上過(guò)濾紋理數(shù)據(jù)項(xiàng)。在時(shí)間上過(guò)濾的紋理數(shù)據(jù)項(xiàng)被應(yīng)用到3D空間共享世界模型的表面來(lái)生成物理環(huán)境的紋理化共享世界模型。紋理化共享世界模型接著被提供以供顯示設(shè)備顯示。
【IPC分類】G06T19/00, A63F13/216, A63F13/30, A63F13/335, A63F13/655, A63F13/213
【公開號(hào)】CN105050670
【申請(qǐng)?zhí)枴緾N201480005687
【發(fā)明人】N·卡姆達(dá), P·T·金內(nèi)布魯
【申請(qǐng)人】微軟技術(shù)許可有限責(zé)任公司
【公開日】2015年11月11日
【申請(qǐng)日】2014年1月15日
【公告號(hào)】EP2948227A1, US20140204077, WO2014116467A1