顯示控制方法及顯示控制裝置制造方法
【專利摘要】本發(fā)明實(shí)施例公開了一種顯示控制方法及顯示控制裝置，涉及近眼顯示【技術(shù)領(lǐng)域】。所述方法包括：確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍；根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息。本發(fā)明實(shí)施例的方法及裝置通過使用至少一個(gè)近眼顯示設(shè)備補(bǔ)充用戶適宜觀看的距離顯示時(shí)不能完全填充用戶視野的設(shè)備的顯示，盡可能使用增強(qiáng)信息充滿用戶視野，能夠提供良好的浸入式的媒體觀賞體驗(yàn)。
【專利說明】顯示控制方法及顯示控制裝置
【技術(shù)領(lǐng)域】
[0001]本申請(qǐng)涉及近眼顯示領(lǐng)域，尤其涉及一種顯示控制方法及顯示控制裝置。
【背景技術(shù)】
[0002]伴隨著便攜式設(shè)備(手機(jī)，平板電腦等)的高速普及，以及網(wǎng)絡(luò)連接速度、便攜式計(jì)算能力、顯示質(zhì)量的不斷提高，便攜式設(shè)備已經(jīng)成為了一個(gè)很好的娛樂平臺(tái)，消費(fèi)者花費(fèi)在便攜式設(shè)備上時(shí)間也越來越多，例如，玩游戲、看視頻等。
[0003]消費(fèi)者喜歡通常尺寸較小的便攜式設(shè)備，但不喜歡只能顯示小圖像的小顯示屏。人眼視覺系統(tǒng)在水平方向上的視野(Field of View, F0V)有大約180度，在垂直方向有大約135度。移動(dòng)設(shè)備能夠顯示高質(zhì)量的媒體內(nèi)容，但是受到屏幕尺寸限制，很難填充滿整個(gè)視野范圍。舉例來說，按照目前主流平板電腦顯示屏幕尺寸(20cm xl4cm)，用戶觀看距離為40cm，人眼視野在水平方向只有大概30度范圍被圖像內(nèi)容填充，和人眼180度水平視野范圍相差甚遠(yuǎn)。
【發(fā)明內(nèi)容】
[0004]本申請(qǐng)的目的是:提供一種顯示控制方法及顯示控制裝置，能夠提供良好的觀賞體驗(yàn)。
[0005]第一方面，本發(fā)明實(shí)施例提供了一種顯示控制方法，包括:
[0006]確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍；
[0007]根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息。
[0008]結(jié)合第一方面，在第一種可能的實(shí)現(xiàn)方式中，所述根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息包括:
[0009]根據(jù)所述第一顯示范圍，確定所述至少一個(gè)近眼顯示設(shè)備在用戶視野內(nèi)的第二顯示范圍；
[0010]根據(jù)所述圖像獲取所述增強(qiáng)信息；
[0011]使用所述至少一個(gè)近眼顯示設(shè)備在所述第二顯示范圍顯示所述增強(qiáng)信息。
[0012]結(jié)合第一方面的第一種可能的實(shí)現(xiàn)方式，在第二種可能的實(shí)現(xiàn)方式中，所述第二顯示范圍包括:至少部分第一顯示范圍以及用戶視野內(nèi)除所述第一顯示范圍外的區(qū)域。
[0013]結(jié)合第一方面的第一種可能的實(shí)現(xiàn)方式，在第三種可能的實(shí)現(xiàn)方式中，所述第二顯示范圍包括:用戶視野內(nèi)除所述第一顯示范圍外的區(qū)域。
[0014]結(jié)合第一方面的第三種可能的實(shí)現(xiàn)方式，在第四種可能的實(shí)現(xiàn)方式中，所述第二顯示范圍包括:用戶的邊緣視力區(qū)域。
[0015]結(jié)合第一方面的第一種可能的實(shí)現(xiàn)方式，在第五種可能的實(shí)現(xiàn)方式中，所述根據(jù)所述圖像獲取所述增強(qiáng)信息中:
[0016]根據(jù)所述圖像的特性獲取所述增強(qiáng)信息。[0017]結(jié)合第一方面的第五種可能的實(shí)現(xiàn)方式，在第六種可能的實(shí)現(xiàn)方式中，所述圖像的特性包括以下中的至少一項(xiàng):顏色、亮度、紋理、上下文、運(yùn)動(dòng)、顯示屬性。
[0018]結(jié)合第一方面或第一方面的上述任一種可能的實(shí)現(xiàn)方式，在第七種可能的實(shí)現(xiàn)方式中，所述方法還包括:
[0019]調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0020]結(jié)合第一方面的第七種可能的實(shí)現(xiàn)方式，在第八種可能的實(shí)現(xiàn)方式中，在所述調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)中:
[0021]根據(jù)所述主顯示設(shè)備與用戶眼睛之間的位置關(guān)系調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0022]結(jié)合第一方面的第七種可能的實(shí)現(xiàn)方式，在第九種可能的實(shí)現(xiàn)方式中，在所述調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)中:
[0023]根據(jù)所述主顯示設(shè)備的顯示特性調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0024]結(jié)合第一方面的第九種可能的實(shí)現(xiàn)方式，在第十種可能的實(shí)現(xiàn)方式中，所述顯示特性包括:所述主顯示設(shè)備的顯示屏弧度。
[0025]結(jié)合第一方面的第九種可能的實(shí)現(xiàn)方式，在第十一種可能的實(shí)現(xiàn)方式中，所述顯示特性包括:所述主顯示設(shè)備的分辨率。 [0026]結(jié)合第一方面或第一方面的上述任一種可能的實(shí)現(xiàn)方式，在第十二種可能的實(shí)現(xiàn)方式中，所述增強(qiáng)信息包括以下中的至少一項(xiàng):與所述圖像的內(nèi)容相關(guān)的物體、場(chǎng)景、提示信息。
[0027]第二方面，本發(fā)明實(shí)施例提供了一種顯示控制裝置，所述裝置包括:
[0028]一顯示范圍確定模塊，用于確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍；
[0029]一顯示控制模塊，用于根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息。
[0030]結(jié)合第二方面，在第一種可能的實(shí)現(xiàn)方式中，所述顯示控制模塊包括:
[0031]一顯示范圍確定單元，用于根據(jù)所述第一顯示范圍，確定所述至少一個(gè)近眼顯示設(shè)備在用戶視野內(nèi)的第二顯示范圍；
[0032]一增強(qiáng)信息獲取單元，用于根據(jù)所述圖像獲取所述增強(qiáng)信息；
[0033]一顯示控制單元，用于使用所述至少一個(gè)近眼顯示設(shè)備在所述第二顯示范圍顯示所述增強(qiáng)信息。
[0034]結(jié)合第二方面的第一種可能的實(shí)現(xiàn)方式，在第二種可能的實(shí)現(xiàn)方式中，所述增強(qiáng)信息獲取單元根據(jù)所述圖像的特性獲取所述增強(qiáng)信息。
[0035]結(jié)合第二方面或第二方面的上述任一種可能的實(shí)現(xiàn)方式，在第三種可能的實(shí)現(xiàn)方式中，所述裝置還包括:
[0036]一調(diào)整模塊，用于調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0037]結(jié)合第二方面的第三種可能的實(shí)現(xiàn)方式，在第四種可能的實(shí)現(xiàn)方式中，所述調(diào)整模塊根據(jù)所述主顯示設(shè)備與用戶眼睛之間的位置關(guān)系調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0038]結(jié)合第二方面的第三種可能的實(shí)現(xiàn)方式，在第五種可能的實(shí)現(xiàn)方式中，所述調(diào)整模塊根據(jù)所述主顯示設(shè)備的顯示特性調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0039]第三方面，本發(fā)明實(shí)施例提供了一種近眼顯示設(shè)備，包括第二方面或第二方面的上述任一種可能的實(shí)現(xiàn)方式的顯示控制裝置。
[0040]本發(fā)明實(shí)施例的方法及裝置通過使用至少一個(gè)近眼顯示設(shè)備補(bǔ)充用戶適宜觀看的距離顯示時(shí)不能完全填充用戶視野的設(shè)備的顯示，盡可能使用增強(qiáng)信息充滿用戶視野，為用戶提供良好的浸入式的媒體觀賞體驗(yàn)。
【專利附圖】
【附圖說明】
[0041]圖1為本發(fā)明實(shí)施例的一種顯示控制方法的流程圖；
[0042]圖2為本方面實(shí)施例的一種顯示控制方法中與主顯示設(shè)備的顯示對(duì)應(yīng)的用戶視野示意圖；
[0043]圖3 (a)-圖3 (c)為本方面實(shí)施例的一種顯示控制方法中主顯示設(shè)備與近眼顯示設(shè)備協(xié)同顯示時(shí)對(duì)應(yīng)的用戶視野示意圖；
[0044]圖4為本發(fā)明實(shí)施例的一種顯示控制裝置的結(jié)構(gòu)示意圖；
[0045]圖5為本發(fā)明實(shí)施例的一種顯示控制裝置中顯示控制模塊的結(jié)構(gòu)示意圖；
[0046]圖6為本發(fā)明實(shí)施例的另一種顯示控制裝置的結(jié)構(gòu)示意圖；
[0047]圖7為本發(fā)明實(shí)施例的又一種顯示控制裝置的結(jié)構(gòu)示意圖；
[0048]圖8為本申請(qǐng)實(shí)施例一種近眼顯示設(shè)備的結(jié)構(gòu)示意圖。
【具體實(shí)施方式】
[0049]下面結(jié)合附圖(若干附圖中相同的標(biāo)號(hào)表示相同的元素)和實(shí)施例，對(duì)本申請(qǐng)的【具體實(shí)施方式】作進(jìn)一步詳細(xì)說明。以下實(shí)施例用于說明本申請(qǐng)，但不用來限制本申請(qǐng)的范圍。
[0050]本領(lǐng)域技術(shù)人員可以理解，本申請(qǐng)中的“第一”、“第二”等術(shù)語僅用于區(qū)別不同步驟、設(shè)備或模塊等，既不代表任何特定技術(shù)含義，也不表示它們之間的必然邏輯順序。
[0051]本發(fā)明各實(shí)施例的方法及裝置用于為使用具有顯示功能的設(shè)備觀看圖像(例如，文本、圖案、視頻、游戲等)的用戶提供浸入式的媒體觀賞體驗(yàn)。這樣的設(shè)備在本發(fā)明各實(shí)施例中稱為“主顯示設(shè)備”，為圖像的初始觀看設(shè)備，通常指在用戶適宜觀看的距離顯示時(shí)不能完全填充用戶視野的設(shè)備，這樣的設(shè)備不限于顯示屏尺寸有限的便攜式設(shè)備，例如，手機(jī)、平板電腦等，也可包括與圖像質(zhì)量相比顯示能力相對(duì)有限的任意其他設(shè)備，例如，臺(tái)式機(jī)、電視等。
[0052]如圖1所示，本發(fā)明實(shí)施例的顯示控制方法包括:
[0053]S110.確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍。
[0054]人眼視覺系統(tǒng)在水平方向上的視野FOV有大約180度，在垂直方向有大約135度。在觀看圖像較舒適的觀看距離的前提下，主顯示設(shè)備的顯示很難填充用戶的整個(gè)視野范圍。如圖2所示，主顯示設(shè)備上顯示的圖像填充了用戶視野FOV的第一顯示范圍SI，除該第一顯示范圍SI外，用戶視野FOV內(nèi)還有很大的未填充區(qū)域。在本發(fā)明實(shí)施例的方法中，可通過多種方式來確定該第一顯示范圍SI，例如，通過檢測(cè)主顯示設(shè)備與用戶眼睛之間的相對(duì)位置并結(jié)合主顯示設(shè)備的尺寸，確定該第一顯示范圍SI ;或者，通過采集用戶眼底的成像或使用近眼顯示設(shè)備采集主顯示設(shè)備的圖像，進(jìn)一步采用圖像處理和分析的方法確定該第一顯示范圍SI。
[0055]S120.根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像的內(nèi)容相關(guān)的增強(qiáng)信息，以盡可能的填充整個(gè)用戶視野。
[0056]近眼顯示設(shè)備是能夠在接近用戶眼睛的位置呈現(xiàn)圖像源所提供圖像的設(shè)備。這樣的近眼顯示設(shè)備亦稱為頭戴顯示器(HMD)，例如智能眼鏡、頭盔、護(hù)目鏡等，當(dāng)然也并不限于頭戴，也包括機(jī)載、穿戴等其他可能的攜帶形式。近眼顯示設(shè)備可在近眼位置可穿透式地呈現(xiàn)所述圖像的虛像，通過控制其穿透式呈現(xiàn)虛像的位置，使得最終在用戶視網(wǎng)膜上的成像信息除了包括近眼顯示設(shè)備呈現(xiàn)的圖像外，還包括用戶視野內(nèi)其余顯示范圍中呈現(xiàn)的圖像，例如背景圖像或其他顯示設(shè)備顯示的圖像。近眼顯示設(shè)備具有較大的可視區(qū)域，而且成本和功耗均較低、重量和尺寸也比較小。在本發(fā)明實(shí)施例的方法中，至少一個(gè)近眼顯示設(shè)備包括一個(gè)或多個(gè)近眼顯示設(shè)備的可能，且所述的近眼顯示設(shè)備可為單目或雙目近眼顯示設(shè)備。此外，單個(gè)近眼顯示設(shè)備可具有多種分辨率。
[0057]根據(jù)第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息，能夠補(bǔ)充主顯示設(shè)備有限的顯示，通過盡可能填充用戶視野的方式提高用戶的觀賞體驗(yàn)。增強(qiáng)信息為與所述圖像相關(guān)的物體、場(chǎng)景、提示信息等等，增強(qiáng)信息的顯示能夠進(jìn)一步提供用戶在觀看主顯示設(shè)備顯示的圖像時(shí)的浸入式體驗(yàn)。
[0058]綜上，本發(fā)明實(shí)施例的方法通過使用至少一個(gè)近眼顯示設(shè)備補(bǔ)充用戶適宜觀看的距離顯示時(shí)不能完全填充用戶視野的設(shè)備的顯示，能夠盡可能使用增強(qiáng)信息充滿用戶視野，為用戶提供良好的浸入式的媒體觀賞體驗(yàn)。
[0059]其中，步驟S120可進(jìn)一步包括:
[0060]S121.根據(jù)所述第一顯示范圍確定所述至少一個(gè)近眼顯示設(shè)備在用戶視野內(nèi)的第
二顯示范圍。
[0061]根據(jù)想要提供給用戶的觀賞體驗(yàn)的不同程度，在確定了第一顯示范圍后，可確定多種可能的第二顯示范圍。如圖3 (a)所示的，第二顯示范圍S2可包括:至少部分第一顯示范圍SI (圖3 Ca)中所示為包括第一顯示范圍SI的邊緣部分,也即第二顯示范圍S2與第一顯示范圍SI的邊緣有一定的重疊)以及用戶視野FOV內(nèi)除所述第一顯示范圍SI外的區(qū)域，圖3 (a)中斜線所示。還可如圖3 (b)所示的，僅包括用戶視野FOV內(nèi)除所述第一顯示范圍SI外的區(qū)域。需要說明的是，人眼具有視力的視網(wǎng)膜中央凹特性:在視野范圍FOV內(nèi)人眼視覺的敏感度是不一樣，視網(wǎng)膜上的Foveal Vision (視網(wǎng)膜中央凹視力)區(qū)域具有很高的視覺敏銳度(例如，對(duì)顏色、紋理等較敏感)，而Peripheral Vision (邊緣視力)區(qū)域?qū)τ谶\(yùn)動(dòng)信息更加敏感，也即，中央凹視力區(qū)域較適宜用于觀看主顯示設(shè)備上顯示的圖像，而邊緣視力區(qū)域?qū)υ鰪?qiáng)信息較敏感，因此，第二顯示范圍S2為用戶的邊緣視力區(qū)域能夠?yàn)橛脩籼峁┳罾硐氲挠^賞體驗(yàn)。響應(yīng)于此，第一顯示范圍SI如果正好填充了整個(gè)視網(wǎng)膜中央凹視力區(qū)域，則第二顯示范圍S2位于邊緣視力區(qū)域時(shí)二者緊鄰，如圖3 (b)所示；如果第一顯示范圍SI未填滿整個(gè)視網(wǎng)膜中央凹視力區(qū)域時(shí)，第二顯示范圍S2可與第一顯示范圍SI有一定的間隙，如圖3 (c)所示。
[0062]S122.根據(jù)所述圖像獲取所述增強(qiáng)信息。
[0063]增強(qiáng)信息為與所述圖像相關(guān)的物體、場(chǎng)景、提示信息，增強(qiáng)信息能夠?yàn)橛脩籼峁┯^看圖像時(shí)的浸入式體驗(yàn)。在本發(fā)明實(shí)施例的方法中，可通過多種方式獲取該增強(qiáng)信息，例如，所述圖像中可能已經(jīng)包含了對(duì)應(yīng)的增強(qiáng)信息，可直接從該圖像中讀取增強(qiáng)信息；可根據(jù)所述圖像的內(nèi)容來確定增強(qiáng)信息，例如，根據(jù)所述圖像的特性確定所述增強(qiáng)信息，其中，圖像的特性包括以下內(nèi)容中的至少一項(xiàng):顏色、亮度、紋理、上下文、運(yùn)動(dòng)、顯示屬性(例如，幀頻)等等。根據(jù)圖像的特性確定增強(qiáng)信息可以是利用本領(lǐng)域已成熟的增強(qiáng)現(xiàn)實(shí)技術(shù)(Augmented Reality Technique,AR)相關(guān)的算法來確定增強(qiáng)信息的過程。例如:使用跟蹤算法、光流分析、亮度、形狀感知等檢測(cè)圖像中場(chǎng)景變化，并隨著場(chǎng)景變化結(jié)合外推算法等，確定在主顯示設(shè)備顯示屏外顯示的增強(qiáng)信息；再例如，利用自然語言處理(NLP)偵聽并理解圖像的上下文，利用顏色以及圖像生成營造浸入式故事環(huán)境這樣的增強(qiáng)信息，等等。本發(fā)明各實(shí)施例中的增強(qiáng)信息主要為可視化信息。
[0064]S123.使用所述至少一個(gè)近眼顯示設(shè)備在所述第二顯示范圍顯示所述增強(qiáng)信息。
[0065]確定了所述至少一個(gè)近眼顯示設(shè)備的顯示范圍和顯示內(nèi)容之后，即可使用所述至少一個(gè)近眼顯示設(shè)備在該第二顯示范圍顯示該增強(qiáng)信息，從而為用戶提供浸入式的媒體觀賞體驗(yàn)。
[0066]需要說明的是，為了保障觀賞效果，所述至少一個(gè)近眼顯示設(shè)備所顯示的增強(qiáng)信息必須在空間定位上與主顯示設(shè)備所顯示的內(nèi)容相關(guān)，當(dāng)用戶轉(zhuǎn)動(dòng)或移動(dòng)主顯示設(shè)備時(shí)，第一顯示范圍變動(dòng)，所述至少一個(gè)近眼顯示設(shè)備所顯示的第二顯示范圍也隨之做相應(yīng)的變化。
[0067]使用本發(fā)明實(shí)施例的方法，用戶所看到的是主顯示設(shè)備顯示的實(shí)像以及所述至少一個(gè)近眼顯示設(shè)備顯示的虛像的結(jié)合，為了使近眼顯示設(shè)備的顯示不會(huì)干擾用戶對(duì)主顯示設(shè)備顯示的觀賞，而是起到補(bǔ)充甚至提高觀賞體驗(yàn)的作用，應(yīng)盡可能自然地呈現(xiàn)近眼顯示設(shè)備顯示的虛像。因此，為了保障觀賞效果，本發(fā)明實(shí)施例的方法還包括:
[0068]S130.調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)，以將增強(qiáng)信息清晰地呈現(xiàn)給用戶，優(yōu)化整體顯示效果。
[0069]可根據(jù)所述主顯示設(shè)備與用戶眼睛之間的位置關(guān)系調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。例如，將所述至少一個(gè)近眼顯示設(shè)備顯示的虛像呈現(xiàn)在與主顯示設(shè)備的顯示同一個(gè)平面內(nèi)，響應(yīng)于此，應(yīng)根據(jù)主顯示設(shè)備與用戶眼睛之間的距離調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0070]還可根據(jù)所述主顯示設(shè)備的顯示特性調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0071]所述顯示特性可包括:所述主顯示設(shè)備的顯示屏弧度。例如，當(dāng)主顯示設(shè)備具有呈一定弧度的顯示屏?xí)r，應(yīng)相應(yīng)地調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)，以使所述至少一個(gè)近眼顯示設(shè)備的顯示與主顯示設(shè)備的顯示能夠自然平滑的呈弧度地銜接。
[0072]所述顯示特性還可包括:所述主顯示設(shè)備的分辨率。根據(jù)人眼視力的視網(wǎng)膜中央凹特性，主顯示設(shè)備可以較高的分辨率顯示圖像，而近眼顯示設(shè)備所顯示的增強(qiáng)信息不需要與主顯示設(shè)備同樣高的分辨率，因此，可根據(jù)主顯示設(shè)備的分辨率調(diào)整所述至少一個(gè)近眼顯示設(shè)備的分辨率，例如，調(diào)整所述至少一個(gè)近眼顯示設(shè)備的分辨率低于主顯示設(shè)備的分辨率。
[0073]本領(lǐng)域技術(shù)人員可以理解，在本申請(qǐng)【具體實(shí)施方式】的上述方法中，各步驟的序號(hào)大小并不意味著執(zhí)行順序的先后，各步驟的執(zhí)行順序應(yīng)以其功能和內(nèi)在邏輯確定，而不應(yīng)對(duì)本申請(qǐng)【具體實(shí)施方式】的實(shí)施過程構(gòu)成任何限定。
[0074]本發(fā)明實(shí)施例還提供了 一種顯示控制裝置，該裝置用于為使用主顯示設(shè)備觀看圖像(例如，文本、圖案、視頻、游戲等)的用戶提供浸入式的媒體觀賞體驗(yàn)。該裝置可為主顯示設(shè)備或近眼顯示設(shè)備本身，也可為其一部分，還可為獨(dú)立于主顯示設(shè)備或近眼顯示設(shè)備任一方的第三方設(shè)備，或者部分屬于主顯示設(shè)備或近眼顯示設(shè)備。如圖4所示，本發(fā)明實(shí)施例的顯示控制裝置400包括:
[0075]顯示范圍確定模塊410，用于確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍。
[0076]人眼視覺系統(tǒng)在水平方向上的視野FOV有大約180度，在垂直方向有大約135度。在觀看圖像較舒適的觀看距離的前提下，主顯示設(shè)備的顯示很難填充用戶的整個(gè)視野范圍。如圖2所示，主顯示設(shè)備上顯示的圖像填充了用戶視野FOV的第一顯示范圍SI，除該第一顯示范圍SI外，用戶視野FOV內(nèi)還有很大的未填充區(qū)域。在本發(fā)明實(shí)施例的裝置中，顯示范圍確定模塊410可通過多種方式來確定該第一顯示范圍SI，例如，通過檢測(cè)主顯示設(shè)備與用戶眼睛之間的相對(duì)位置并結(jié)合主顯示設(shè)備的尺寸，確定該第一顯示范圍SI ;或者，通過采集用戶眼底的成像或借助近眼顯示設(shè)備采集主顯示設(shè)備的圖像，采用圖像處理和分析的方法確定該第一顯示范圍SI。
[0077]顯示控制模塊420，用于根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像的內(nèi)容相關(guān)的增強(qiáng)信息，以盡可能的填充整個(gè)用戶視野。
[0078]近眼顯示設(shè)備是能夠在接近用戶眼睛的位置呈現(xiàn)圖像源所提供圖像的設(shè)備。這樣的近眼顯示設(shè)備亦稱為頭戴顯示器(HMD)，例如智能眼鏡、頭盔等，當(dāng)然也并不限于頭戴，也包括機(jī)載、穿戴等其他可能的攜帶形式。近眼顯示設(shè)備可在近眼位置可穿透式地呈現(xiàn)所述圖像的虛像，無論是哪種方式，通過控制其穿透式呈現(xiàn)虛像的位置，使得最終在用戶視網(wǎng)膜上的成像信息除了包括近眼顯示設(shè)備呈現(xiàn)的圖像外，還包括用戶視野內(nèi)其余顯示范圍中呈現(xiàn)的圖像，例如背景圖像或其他顯示設(shè)備顯示的圖像。近眼顯示設(shè)備具有較大的可視區(qū)域，而且成本和功耗均較低、重量和尺寸也比較小。在本發(fā)明實(shí)施例的裝置中，至少一個(gè)近眼顯示設(shè)備包括一個(gè)或多個(gè)近眼顯示設(shè)備的可能，所述的近眼顯示設(shè)備可為單目或雙目近眼顯示設(shè)備。此外，單個(gè)近眼顯示設(shè)備可具有多種分辨率。
[0079]顯示控制模塊420根據(jù)第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息，能夠補(bǔ)充主顯示設(shè)備有限的顯示屏尺寸，通過盡可能填充用戶視野的方式提高用戶的觀賞體驗(yàn)。增強(qiáng)信息為與所述圖像相關(guān)的物體、場(chǎng)景、提示信息等等，增強(qiáng)信息的顯示能夠進(jìn)一步提供用戶在觀看主顯示設(shè)備顯示的圖像信息時(shí)的浸入式體驗(yàn)。
[0080]綜上，本發(fā)明實(shí)施例的裝置通過使用至少一個(gè)近眼顯示設(shè)備補(bǔ)充用戶適宜觀看的距離顯示時(shí)不能完全填充用戶視野的設(shè)備的顯示，能夠盡可能使用增強(qiáng)信息充滿用戶視野，為用戶提供良好的浸入式的媒體觀賞體驗(yàn)。
[0081]其中，如圖5所示，顯示控制模塊420可進(jìn)一步包括:
[0082]顯示范圍確定單元421，用于根據(jù)所述第一顯示范圍確定所述至少一個(gè)近眼顯示設(shè)備在用戶視野內(nèi)的第二顯示范圍。
[0083]根據(jù)想要提供給用戶的觀賞體驗(yàn)的不同程度，顯示范圍確定單元421在確定了第一顯示范圍后，可確定多種可能的第二顯示范圍。如圖3 (a)所示的，第二顯示范圍S2可包括:至少部分第一顯示范圍SI (圖3 Ca)中所示為包括第一顯示范圍SI的邊緣部分,也即第二顯示范圍S2與第一顯示范圍SI的邊緣有一定的重疊)以及用戶視野FOV內(nèi)除所述第一顯示范圍SI外的區(qū)域，圖3 (a)中斜線所示。還可如圖3 (b)所示的，僅包括用戶視野FOV內(nèi)除所述第一顯示范圍SI外的區(qū)域。需要說明的是，人眼具有視力的視網(wǎng)膜中央凹特性:在視野范圍FOV內(nèi)人眼視覺的敏感度是不一樣，視網(wǎng)膜上的Foveal Vision (視網(wǎng)膜中央凹視力)區(qū)域具有很高的視覺敏銳度(例如，對(duì)顏色、紋理等較敏感)，而PeripheralVision (邊緣視力)區(qū)域?qū)τ谶\(yùn)動(dòng)信息更加敏感，也即，中央凹視力區(qū)域較適宜用于觀看主顯示設(shè)備上顯示的圖像，而邊緣視力區(qū)域?qū)υ鰪?qiáng)信息較敏感，因此，第二顯示范圍S2為用戶的邊緣視力區(qū)域能夠?yàn)橛脩籼峁┳罾硐氲挠^賞體驗(yàn)。響應(yīng)于此，第一顯示范圍SI如果正好填充了整個(gè)視網(wǎng)膜中央凹視力區(qū)域，則第二顯示范圍S2位于邊緣視力區(qū)域時(shí)二者緊鄰，如圖3 (b)所示；如果第一顯示范圍SI未填滿整個(gè)視網(wǎng)膜中央凹視力區(qū)域時(shí)，第二顯示范圍S2可與第一顯示范圍SI有一定的間隙，如圖3 (c)所示。
[0084]增強(qiáng)信息獲取單元422，用于根據(jù)所述圖像獲取所述增強(qiáng)信息。
[0085]增強(qiáng)信息為與所述圖像相關(guān)的物體、場(chǎng)景、提示信息，增強(qiáng)信息能夠?yàn)橛脩籼峁┯^看圖像時(shí)的浸入式體驗(yàn)。在本發(fā)明實(shí)施例的裝置中，增強(qiáng)信息獲取單元422可通過多種方式獲取該增強(qiáng)信息，例如，所述圖像中可能已經(jīng)包含了對(duì)應(yīng)的增強(qiáng)信息，則直接從該圖像中讀取增強(qiáng)信息，相應(yīng)地，本發(fā)明實(shí)施例的裝置可包括用于獲取該增強(qiáng)信息的通信模塊，可與主顯示設(shè)備通信，或與所述至少一個(gè)近眼顯示設(shè)備通信獲取該增強(qiáng)信息；可根據(jù)所述圖像的內(nèi)容來確定增強(qiáng)信息，例如，根據(jù)所述圖像的特性確定所述增強(qiáng)信息，其中，圖像的特性包括以下內(nèi)容中的至少一項(xiàng):顏色、亮度、紋理、上下文、運(yùn)動(dòng)、顯示屬性(例如，幀頻)等等。根據(jù)圖像的特性確定增強(qiáng)信息可以是利用本領(lǐng)域已成熟的增強(qiáng)現(xiàn)實(shí)技術(shù)相關(guān)的算法來確定增強(qiáng)信息的過程。例如:使用跟蹤算法、光流分析、亮度、形狀感知等檢測(cè)圖像中場(chǎng)景變化，并隨著場(chǎng)景變化結(jié)合外推算法等，確定在主顯示設(shè)備顯示屏外顯示的增強(qiáng)信息；再例如，利用自然語言處理(NLP)偵聽并理解圖像的上下文，利用顏色以及圖像生成營造浸入式故事環(huán)境這樣的增強(qiáng)信息，等等。相應(yīng)地，為了獲取增強(qiáng)信息，增強(qiáng)信息獲取單元422可包括或利用近眼顯示設(shè)備的部分模塊或單元，獲取主顯示設(shè)備上顯示的圖像，以用于確定增強(qiáng)顯示信息，等等。本發(fā)明各實(shí)施例中的增強(qiáng)信息主要為可視化信息。
[0086]顯示控制單元423，用于使用所述至少一個(gè)近眼顯示設(shè)備在所述第二顯示范圍顯示所述增強(qiáng)信息。
[0087]確定了所述至少一個(gè)近眼顯示設(shè)備的顯示范圍和顯示內(nèi)容之后，即可使用所述至少一個(gè)近眼顯示設(shè)備在該第二顯示范圍顯示該增強(qiáng)信息，從而為用戶提供浸入式的媒體觀賞體驗(yàn)。
[0088]需要說明的是，為了保障觀賞效果，所述至少一個(gè)近眼顯示設(shè)備所顯示的增強(qiáng)信息必須在空間定位上與主顯示設(shè)備所顯示的內(nèi)容相關(guān)，當(dāng)用戶轉(zhuǎn)動(dòng)或移動(dòng)主顯示設(shè)備時(shí)，第一顯示范圍變動(dòng)，所述至少一個(gè)近眼顯示設(shè)備所顯示的第二顯示范圍也隨之做相應(yīng)的變化。
[0089]通過本發(fā)明實(shí)施例的裝置，用戶所看到的是主顯示設(shè)備顯示的實(shí)像以及所述至少一個(gè)近眼顯示設(shè)備顯示的虛像的結(jié)合，為了使近眼顯示設(shè)備的顯示不會(huì)干擾用戶對(duì)主顯示設(shè)備顯示的觀賞，而是起到補(bǔ)充甚至提高觀賞體驗(yàn)的效果，應(yīng)盡可能自然地呈現(xiàn)將所述至少一個(gè)近眼顯示設(shè)備顯示的虛像。因此，為了保障觀賞效果，如圖6所示，本發(fā)明實(shí)施例的裝置還包括:
[0090]調(diào)整模塊430，用于調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)，以將增強(qiáng)信息清晰地呈現(xiàn)給用戶。
[0091]可根據(jù)所述主顯示設(shè)備與用戶眼睛之間的位置關(guān)系調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。例如，將所述至少一個(gè)近眼顯示設(shè)備顯示的虛像呈現(xiàn)在與主顯示設(shè)備的顯示同一個(gè)平面內(nèi)，響應(yīng)于此，應(yīng)根據(jù)主顯示設(shè)備與用戶眼睛之間的距離調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0092]還可根據(jù)所述主顯示設(shè)備的顯示特性調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
[0093]所述顯示特性可包括:所述主顯示設(shè)備的顯示屏弧度。當(dāng)主顯示設(shè)備具有呈一定弧度的顯示屏?xí)r，應(yīng)相應(yīng)地調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)，以使所述至少一個(gè)近眼顯示設(shè)備的顯示與主顯示設(shè)備的顯示能夠自然平滑的銜接。
[0094]所述顯示特性還可包括:所述主顯示設(shè)備的分辨率。根據(jù)人眼視力的視網(wǎng)膜中央凹特性，主顯示設(shè)備可以較高的分辨率顯示圖像，而近眼顯示設(shè)備所顯示的增強(qiáng)信息不一定需要與主顯示設(shè)備同樣高的分辨率，可根據(jù)主顯示設(shè)備的分辨率調(diào)整所述至少一個(gè)近眼顯示設(shè)備的分辨率，例如，調(diào)整所述至少一個(gè)近眼顯示設(shè)備的分辨率小于主顯示設(shè)備的分辨率。
[0095]圖7為本方面實(shí)施例提供的又一種顯示控制裝置700的結(jié)構(gòu)示意圖，本申請(qǐng)具體實(shí)施例并不對(duì)顯示控制裝置700的具體實(shí)現(xiàn)做限定。如圖7所示，該顯示控制裝置700可以包括:
[0096]處理器(processor)710、通信接口(Communications Interface) 720、存儲(chǔ)器(memory) 730、以及通信總線740。其中:
[0097]處理器710、通信接口 720、以及存儲(chǔ)器730通過通信總線740完成相互間的通信。
[0098]通信接口 720，用于與比如客戶端等的網(wǎng)元通信。
[0099]處理器710，用于執(zhí)行程序732，具體可以執(zhí)行上述方法實(shí)施例中的相關(guān)步驟。
[0100]具體地，程序732可以包括程序代碼，所述程序代碼包括計(jì)算機(jī)操作指令。
[0101]處理器710可能是一個(gè)中央處理器CPU，或者是特定集成電路ASIC (ApplicationSpecific Integrated Circuit),或者是被配置成實(shí)施本申請(qǐng)實(shí)施例的一個(gè)或多個(gè)集成電路。
[0102]存儲(chǔ)器730，用于存放程序732。存儲(chǔ)器730可能包含高速RAM存儲(chǔ)器，也可能還包括非易失性存儲(chǔ)器(non-volatile memory),例如至少一個(gè)磁盤存儲(chǔ)器。程序732具體可以用于使得所述顯示控制裝置700執(zhí)行以下步驟:
[0103]確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍；
[0104]根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息。
[0105]程序732中各步驟的具體實(shí)現(xiàn)可以參見上述實(shí)施例中的相應(yīng)步驟和單元中對(duì)應(yīng)的描述，在此不贅述。所屬領(lǐng)域的技術(shù)人員可以清楚地了解到，為描述的方便和簡(jiǎn)潔，上述描述的設(shè)備和模塊的具體工作過程，可以參考前述方法實(shí)施例中的對(duì)應(yīng)過程描述，在此不再贅述。
[0106]如圖8所示，本發(fā)明實(shí)施例還提供了一種近眼顯示設(shè)備800，包括圖4至圖7所示實(shí)施例中所述的顯示控制裝置。
[0107]在本方面實(shí)施例中，所述近眼顯示設(shè)備可例如為智能眼鏡、頭盔、護(hù)目鏡等。
[0108]本領(lǐng)域普通技術(shù)人員可以意識(shí)到，結(jié)合本文中所公開的實(shí)施例描述的各示例的單元及方法步驟，能夠以電子硬件、或者計(jì)算機(jī)軟件和電子硬件的結(jié)合來實(shí)現(xiàn)。這些功能究竟以硬件還是軟件方式來執(zhí)行，取決于技術(shù)方案的特定應(yīng)用和設(shè)計(jì)約束條件。專業(yè)技術(shù)人員可以對(duì)每個(gè)特定的應(yīng)用來使用不同方法來實(shí)現(xiàn)所描述的功能，但是這種實(shí)現(xiàn)不應(yīng)認(rèn)為超出本申請(qǐng)的范圍。
[0109]所述功能如果以軟件功能單元的形式實(shí)現(xiàn)并作為獨(dú)立的產(chǎn)品銷售或使用時(shí)，可以存儲(chǔ)在一個(gè)計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中?；谶@樣的理解，本申請(qǐng)的技術(shù)方案本質(zhì)上或者說對(duì)現(xiàn)有技術(shù)做出貢獻(xiàn)的部分或者該技術(shù)方案的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來，該計(jì)算機(jī)軟件產(chǎn)品存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)中，包括若干指令用以使得一臺(tái)計(jì)算機(jī)設(shè)備(可以是個(gè)人計(jì)算機(jī)，服務(wù)器，或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本申請(qǐng)各個(gè)實(shí)施例所述方法的全部或部分步驟。而前述的存儲(chǔ)介質(zhì)包括:U盤、移動(dòng)硬盤、只讀存儲(chǔ)器(ROM，Read-Only Memory)、隨機(jī)存取存儲(chǔ)器(RAM, Random Access Memory)、磁碟或者光盤等各種可以存儲(chǔ)程序代碼的介質(zhì)。
[0110]以上實(shí)施方式僅用于說明本申請(qǐng)，而并非對(duì)本申請(qǐng)的限制，有關(guān)【技術(shù)領(lǐng)域】的普通技術(shù)人員，在不脫離本申請(qǐng)的精神和范圍的情況下，還可以做出各種變化和變型，因此所有等同的技術(shù)方案也屬于本申請(qǐng)的范疇，本申請(qǐng)的專利保護(hù)范圍應(yīng)由權(quán)利要求限定。
【權(quán)利要求】
1.一種顯示控制方法，其特征在于，所述方法包括: 確定主顯示設(shè)備 上顯示的圖像在用戶視野內(nèi)的第一顯示范圍； 根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息包括: 根據(jù)所述第一顯示范圍，確定所述至少一個(gè)近眼顯示設(shè)備在用戶視野內(nèi)的第二顯示范圍； 根據(jù)所述圖像獲取所述增強(qiáng)信息； 使用所述至少一個(gè)近眼顯示設(shè)備在所述第二顯示范圍顯示所述增強(qiáng)信息。
3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述第二顯示范圍包括:至少部分第一顯示范圍以及用戶視野內(nèi)除所述第一顯示范圍外的區(qū)域。
4.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述第二顯示范圍包括:用戶視野內(nèi)除所述第一顯示范圍外的區(qū)域。
5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述第二顯示范圍包括:用戶的邊緣視力區(qū)域。
6.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述圖像獲取所述增強(qiáng)信息中: 根據(jù)所述圖像的特性獲取所述增強(qiáng)信息。
7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述圖像的特性包括以下中的至少一項(xiàng):顏色、亮度、紋理、上下文、運(yùn)動(dòng)、顯示屬性。
8.根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法，其特征在于，所述方法還包括: 調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
9.根據(jù)權(quán)利要求8所述的方法，其特征在于，在所述調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)中: 根據(jù)所述主顯示設(shè)備與用戶眼睛之間的位置關(guān)系調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
10.根據(jù)權(quán)利要求8所述的方法，其特征在于，在所述調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)中: 根據(jù)所述主顯示設(shè)備的顯示特性調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
11.根據(jù)權(quán)利要求10所述的方法，其特征在于，所述顯示特性包括:所述主顯示設(shè)備的顯示屏弧度。
12.根據(jù)權(quán)利要求10所述的方法，其特征在于，所述顯示特性包括:所述主顯示設(shè)備的分辨率。
13.根據(jù)權(quán)利要求1至12中任一項(xiàng)所述的方法，其特征在于，所述增強(qiáng)信息包括以下中的至少一項(xiàng):與所述圖像的內(nèi)容相關(guān)的物體、場(chǎng)景、提示信息。
14.一種顯示控制裝置，其特征在于，所述裝置包括: 一顯示范圍確定模塊，用于確定主顯示設(shè)備上顯示的圖像在用戶視野內(nèi)的第一顯示范圍； 一顯示控制模塊，用于根據(jù)所述第一顯示范圍使用至少一個(gè)近眼顯示設(shè)備顯示與所述圖像相關(guān)的增強(qiáng)信息。
15.根據(jù)權(quán)利要求14所述的裝置，其特征在于，所述顯示控制模塊包括: 一顯示范圍確定單元，用于根據(jù)所述第一顯示范圍，確定所述至少一個(gè)近眼顯示設(shè)備在用戶視野內(nèi)的第二顯示范圍； 一增強(qiáng)信息獲取單元，用于根據(jù)所述圖像獲取所述增強(qiáng)信息； 一顯示控制單元，用于使用所述至少一個(gè)近眼顯示設(shè)備在所述第二顯示范圍顯示所述增強(qiáng)信息。
16.根據(jù)權(quán)利要求15所述的裝置，其特征在于，所述增強(qiáng)信息獲取單元根據(jù)所述圖像的特性獲取所述增強(qiáng)信息。
17.根據(jù)權(quán)利要求14至16中任一項(xiàng)所述的裝置，其特征在于，所述裝置還包括: 一調(diào)整模塊，用于調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
18.根據(jù)權(quán)利要求17所述的裝置，其特征在于，所述調(diào)整模塊根據(jù)所述主顯示設(shè)備與用戶眼睛之間的位置關(guān)系調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
19.根據(jù)權(quán)利要求17所述的裝置，其特征在于，所述調(diào)整模塊根據(jù)所述主顯示設(shè)備的顯示特性調(diào)整所述至少一個(gè)近眼顯示設(shè)備的顯示參數(shù)。
20.一種近眼顯示設(shè)備，其特征在于，包括權(quán)利要求14至19中任一項(xiàng)所述的顯示控制裝置。
【文檔編號(hào)】G09G3/20GK103927966SQ201410132376
【公開日】2014年7月16日 申請(qǐng)日期:2014年4月2日 優(yōu)先權(quán)日:2014年4月2日
【發(fā)明者】周梁 申請(qǐng)人:北京智谷睿拓技術(shù)服務(wù)有限公司