光盤11上記錄音頻數(shù)據(jù)時,還從再現(xiàn)裝置2中傳輸音頻數(shù)據(jù)。顯示裝置3基于從再現(xiàn)裝置2中傳輸?shù)囊纛l數(shù)據(jù),從揚(yáng)聲器中輸出音頻。
[0094]在后文中,在光盤11上無轉(zhuǎn)換地記錄主HDR數(shù)據(jù)的模式稱為模式-1。在模式-1的情況下,在光盤11上記錄HDR信息以及低轉(zhuǎn)換信息。
[0095]而且,在主HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)并且記錄在光盤11上的模式稱為模式-1i。在模式_i i的情況下,在光盤11上記錄HDR信息以及高轉(zhuǎn)換信息。
[0096](在模式_i中的信號處理)
[0097]圖2是示出在模式_i中的信號處理的實(shí)例的示圖。
[0098]由實(shí)線L1表示的在左邊的過程是在記錄裝置1內(nèi)執(zhí)行的編碼過程,并且由實(shí)線L2表示的在右邊的過程表示在再現(xiàn)裝置2內(nèi)執(zhí)行的解碼過程。
[0099]在輸入主HDR數(shù)據(jù)時,記錄裝置1檢測主HDR數(shù)據(jù)的亮度,并且如箭頭#1的點(diǎn)所示,生成HDR信息。如箭頭#2-1的點(diǎn)所示,記錄裝置1根據(jù)HEVC方案編碼主要HDR視頻以生成編碼數(shù)據(jù)。
[0100]如箭頭#3的點(diǎn)所示,記錄裝置1將主HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。在監(jiān)控器(未示出)上顯示通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)的視頻。執(zhí)行HDR數(shù)據(jù)到STD數(shù)據(jù)的轉(zhuǎn)換,而在轉(zhuǎn)換之后,創(chuàng)作者通過其眼睛確認(rèn)STD的視頻,并且適當(dāng)?shù)卣{(diào)整轉(zhuǎn)換參數(shù)。
[0101]如箭頭#4的點(diǎn)所示,根據(jù)創(chuàng)作者的調(diào)整,記錄裝置1生成作為低轉(zhuǎn)換信息的用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息。
[0102]色調(diào)映射定義信息是限定在比標(biāo)準(zhǔn)動態(tài)范圍更寬的動態(tài)范圍(例如,0到400%的范圍)內(nèi)的每個亮度值與在作為標(biāo)準(zhǔn)動態(tài)范圍的動態(tài)范圍(例如,0到100%的范圍)內(nèi)的每個亮度值之間的對應(yīng)關(guān)系的信息。
[0103]記錄裝置1通過如由箭頭#5的點(diǎn)所示的將HDR信息以及色調(diào)映射定義信息插入作為SEI的HDR視頻的編碼數(shù)據(jù)內(nèi)、并且如箭頭#2-2的點(diǎn)所示的將主HDR隱藏字幕插入作為SEI的HDR視頻的編碼數(shù)據(jù)內(nèi),來生成視頻流。記錄裝置1以BD格式在光盤11上記錄所生成的視頻流,并且如箭頭#11所示,向再現(xiàn)裝置2提供視頻流。
[0104]如上所述,使用SEI,將HDR信息、用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息、以及HDR隱藏字幕插入視頻流內(nèi),并且將其提供給再現(xiàn)裝置2。
[0105]如箭頭#21、#22以及#23-2的點(diǎn)所示,再現(xiàn)裝置2從光盤11中讀出視頻流,并且從視頻流的SEI中提取HDR信息、用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息、以及HDR隱藏字幕。
[0106]如箭頭#23-1的點(diǎn)所示,再現(xiàn)裝置2根據(jù)HEVC方案解碼包含在視頻流內(nèi)的編碼數(shù)據(jù),并且生成HDR視頻。如箭頭#24的點(diǎn)所示,在顯示裝置3包括HDR監(jiān)控器時,再現(xiàn)裝置2將HDR信息加入HDR數(shù)據(jù)中,并且如箭頭#25的點(diǎn)所示,將所產(chǎn)生的數(shù)據(jù)輸出給顯示裝置3。
[0107]另一方面,如箭頭#26的點(diǎn)所示,在顯示裝置3包括STD監(jiān)控器時,再現(xiàn)裝置2使用從視頻流中提取的用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息,將HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。如箭頭#27的點(diǎn)所示,再現(xiàn)裝置2將通過轉(zhuǎn)換獲得的STD數(shù)據(jù)輸出給顯示裝置3。
[0108]如上所述,將HDR數(shù)據(jù)與HDR信息一起輸出至包括HDR監(jiān)控器的顯示裝置3 ADR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù),然后,輸出至包括STD監(jiān)控器的顯示裝置3。
[0109]圖3是示出從將主HDR數(shù)據(jù)輸入給記錄裝置1到從再現(xiàn)裝置2中輸出數(shù)據(jù)的過程的流程的示圖。
[0110]如白色箭頭#51的點(diǎn)所示,將主HDR數(shù)據(jù)以及用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息和基于主HDR數(shù)據(jù)由記錄裝置1生成的HDR信息供應(yīng)給再現(xiàn)裝置2。例如,HDR信息包括表示動態(tài)范圍擴(kuò)展為0到400%的范圍的信息。
[0111]在顯示裝置3包括HDR監(jiān)控器時,如箭頭#52和#53的點(diǎn)所示,在再現(xiàn)裝置2中,將HDR信息加入通過解碼所獲得的HDR數(shù)據(jù)中。如箭頭#54的點(diǎn)所示,將HDR信息加入其中的HDR數(shù)據(jù)輸出給顯示裝置3。
[0112]另一方面,在顯示裝置3包括STD監(jiān)控器時,如箭頭#55和#56的點(diǎn)所示,在再現(xiàn)裝置2中,使用用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息,將通過解碼所獲得的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。如箭頭#57的點(diǎn)所示,將通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)輸出給顯示裝置3。在圖3中,表示HDR數(shù)據(jù)的波形幅度和表示STD數(shù)據(jù)的波形幅度均表示動態(tài)范圍。
[0113]通過這種方式,在模式-1中,主HDR數(shù)據(jù)無轉(zhuǎn)換地作為HDR數(shù)據(jù)記錄在光盤11上。根據(jù)作為輸出目的地的顯示裝置3的性能,在無轉(zhuǎn)換地加入HDR信息并輸出通過解碼所獲得的HDR數(shù)據(jù)之間與將HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)并輸出STD數(shù)據(jù)之間,進(jìn)行切換。
[0114](在模式-1i中的信號處理)
[0115]圖4是示出在模式-1i中的信號處理的實(shí)例的示圖。
[0116]在輸入主HDR數(shù)據(jù)時,記錄裝置1檢測主HDR數(shù)據(jù)的亮度,并且如箭頭#71的點(diǎn)所示,生成HDR信息。
[0117]如箭頭#72的點(diǎn)所示,記錄裝置1將主HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。在監(jiān)控器(未示出)上顯示通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)的視頻。
[0118]如箭頭#73的點(diǎn)所示,根據(jù)創(chuàng)作者的調(diào)整,記錄裝置1生成用于STD-HDR轉(zhuǎn)換的色調(diào)映射定義信息,作為高轉(zhuǎn)換信息。
[0119]如箭頭#74-1的點(diǎn)所示,記錄裝置1根據(jù)HEVC方案,編碼STD數(shù)據(jù)的STD視頻,并且生成編碼數(shù)據(jù)。
[0120]如箭頭#75的點(diǎn)所示,記錄裝置1將HDR信息以及色調(diào)映射定義信息作為SEI插入STD視頻的編碼數(shù)據(jù)內(nèi),并且如箭頭#74-2的點(diǎn)所示,將STD數(shù)據(jù)的STD隱藏字幕作為SEI插入STD視頻的編碼數(shù)據(jù)內(nèi)。記錄裝置1以BD格式在光盤11上記錄作為結(jié)果所生成的視頻流,并且如箭頭#91的點(diǎn)所示,向再現(xiàn)裝置2提供視頻流。
[0121]如上所述,使用SEI,將HDR信息、用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息、以及STD隱藏字幕插入視頻流內(nèi),并且將其提供給再現(xiàn)裝置2。
[0122]再現(xiàn)裝置2從光盤11中讀出視頻流,并且如箭頭#101、#102以及#103-2的點(diǎn)所示,從視頻流的SEI中提取HDR信息、用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息、以及STD隱藏字幕。
[0123]如箭頭#103-1的點(diǎn)所示,再現(xiàn)裝置2根據(jù)HEVC方案解碼包含在視頻流內(nèi)的編碼數(shù)據(jù),以生成STD視頻。如箭頭#104的點(diǎn)所示,在顯示裝置3包括STD監(jiān)控器時,再現(xiàn)裝置2向顯示裝置3輸出STD數(shù)據(jù)。
[0124]另一方面,如箭頭#105的點(diǎn)所示,在顯示裝置3包括HDR監(jiān)控器時,再現(xiàn)裝置2使用從視頻流中提取的用于STD-HDR轉(zhuǎn)換的色調(diào)映射定義信息,將STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)。如箭頭#106的點(diǎn)所示,再現(xiàn)裝置2將HDR信息加入通過轉(zhuǎn)換所獲得的HDR數(shù)據(jù)中,并且如箭頭#107的點(diǎn)所示,將HDR數(shù)據(jù)輸出給顯示裝置3。
[0125]通過這種方式,在STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)之后,將HDR數(shù)據(jù)與HDR信息一起輸出給包括HDR監(jiān)控器的顯示裝置3。將STD數(shù)據(jù)無轉(zhuǎn)換地輸出給包括STD監(jiān)控器的顯示裝置3。
[0126]圖5是示出從將主HDR數(shù)據(jù)輸入給記錄裝置1到從再現(xiàn)裝置2中輸出數(shù)據(jù)的過程的流程的示圖。
[0127]如箭頭#121的點(diǎn)所示,在主HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)之后,將STD數(shù)據(jù)以及用于STD-HDR轉(zhuǎn)換的色調(diào)映射定義信息和基于主HDR數(shù)據(jù)在記錄裝置1內(nèi)生成的HDR信息供應(yīng)給再現(xiàn)裝置2。
[0128]在顯示裝置3包括HDR監(jiān)控器時,如箭頭#122和#123的點(diǎn)所示,在再現(xiàn)裝置2中,使用用于STD-HDR轉(zhuǎn)換的色調(diào)映射定義信息,將通過解碼所獲得的STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)。如箭頭#124和#125的點(diǎn)所示,將通過轉(zhuǎn)換STD數(shù)據(jù)所獲得的HDR數(shù)據(jù)加入HDR信息中,并且如箭頭#126的點(diǎn)所示,將HDR數(shù)據(jù)輸出給顯示裝置3。
[0129]另一方面,在顯示裝置3包括STD監(jiān)控器時,如箭頭#127的點(diǎn)所示,在再現(xiàn)裝置2中,將通過解碼所獲得的STD數(shù)據(jù)輸出給顯示裝置3。
[0130]通過這種方式,在模式-1i中,主HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù),以記錄在光盤11上。根據(jù)作為輸出目的地的顯示裝置3的性能,在將通過解碼所獲得的STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)并加入和輸出HDR信息與無轉(zhuǎn)換地輸出STD數(shù)據(jù)之間,進(jìn)行切換。
[0131]下面,描述上述記錄裝置1和再現(xiàn)裝置2的配置和操作的細(xì)節(jié)。
[0132]在此,將描述視頻流。
[0133](視頻流的配置實(shí)例)
[0134]圖6是示出視頻流的配置實(shí)例的示圖。
[0135]視頻流配置為包括存取單元(access unit),該存取單元是網(wǎng)絡(luò)抽象層(NAL)單元的收集(col lect1n)。一個存取單元包括一個圖片的視頻數(shù)據(jù)。
[0136]如在圖6中所示,一個存取單元配置為包括存取單元限定符(AU限定符)、視頻參數(shù)組(parameter set) (VPS)、序列參數(shù)組(SPS)、圖片參數(shù)組(PPS)、SE1、視頻編碼層(VCL)、序列端部(E0S)以及流端部(EOS)。
[0137]AU限定符表示存取單元的開始。VPS包括表示視頻流的內(nèi)容的元數(shù)據(jù)。SPS包括諸如圖片尺寸、編碼樹塊(CTB)尺寸的信息,在HEVC解碼器的序列的解碼處理中需要參考該信息。PPS包括HEVC解碼器需要參考的信息,以便執(zhí)行圖片的解碼處理。VPS、SPS以及PPS用作報頭?目息。
[0138]SEI是輔助信息,例如,其包括與每個圖片的定時信息以及隨機(jī)存取相關(guān)的信息。HDR信息和色調(diào)映射定義信息包含在用作一個SEI的色調(diào)映射信息SEI消息內(nèi),作為tone_mapping_info。給 tone_mapping_info 分配識另丨Jtone_mapping_info的識另lj信息。在本說明書中,識別信息是i的tone_mapping_info稱為tone_mapping_info#i。隱藏字幕包含在用作一個SEI的用戶數(shù)據(jù)未登記的SEI內(nèi)。
[0139]VCL是1個圖片的編碼數(shù)據(jù)。序列端部(E0S)表示序列的端部位置,并且視頻流端部(E0S)表示流的端部位置。
[0140](tone_mapping_info)
[0141 ] 圖7是示出tone_mapping_info的語法的示圖。
[OH2]根據(jù)作為視頻輸出目的地的顯示器的性能,轉(zhuǎn)換通過使用tone_mapping_info進(jìn)行解碼所獲得的視頻的亮度或顏色。為了方便描述,示出在圖7中的左邊的行數(shù)和冒號(:),并且所述行數(shù)和冒號(:)不包含在語法內(nèi)。這同樣也適用于下面描述的圖13、圖17和圖33。將描述包含在tone_mapping_info內(nèi)的主要信息。
[0143]在第二行,Tone_map_id是 tone_mapping_info 的識別信息。在第8行,Tone_map_model_id表示用于轉(zhuǎn)換的色調(diào)映射的模型。
[OH4] 在記錄裝置1內(nèi),生成將0、2以及3中的一個值設(shè)置為tone_map_model_id的至少一塊 tone_mapp ing_inf ο 以及將值 4 設(shè)置為 tone_map_mode l_i d 的一塊 tone_mapp ing_inf ο。[ΟΙ45] 如在圖8中所示,將值0、2以及3中的一個值設(shè)置為tone_map_model_id的tone_mapping—info用作用于HDR-STD轉(zhuǎn)換或者用于STD-HDR轉(zhuǎn)換的色調(diào)映射定義信息。包含在將值4設(shè)置為tone—map—model—id的tone—mapping—inf ο內(nèi)的信息用作HDR信息。
[0146]在圖7中,行9到11是tone—map—model—id = 0的描述。在tone—map—model—id = 0的情況下,描述 m i n_va lue 和 max—va 1 u e 0
[0147]圖9是示出由tone—map—model—id = 0的tone—mapping—inf o顯示的色調(diào)曲線的實(shí)例的示圖。
[OH8] 在圖9中,水平軸表示coded—data(在轉(zhuǎn)換之前的RGB值)并且垂直軸表示target—data(在轉(zhuǎn)換之后的RGB值在使用在圖9中的色調(diào)曲線時,如白色箭頭#151所示,等于或低于D1的RGB值轉(zhuǎn)換成由min—value表示的1^8值。進(jìn)一步,如白色箭頭#152所示,等于或大于D2的RGB值轉(zhuǎn)換成由max—value表示的RGB值。
[0149]在此處,tone—map—model—id= 0的 tone—mapping—inf ο用作用于 HDR-STD 轉(zhuǎn)換的色調(diào)映射定義信息。在使用tone—map—model—id = 0的tone—mapping—inf ο時,失去等于或大于max—value以及等于或小于min—value的亮度(由RGB值表示的亮度然而,在轉(zhuǎn)換過程上的負(fù)荷減輕。
[0150]圖7的行 15到 17表不與 tone—map—model—id = 2相關(guān)的描述。在 tone—map—model—id=2的情況下,描述了表示階梯函數(shù)的max—target—data的數(shù)量的start—of—coded—interval[i] 0start_of_coded_interval[i]表不等于或大于車專換成target_data的i的coded—data并且小于target—data的i+1的間隔的開始位置。
[0151 ] start—of—coded—interval [ i ]的位數(shù)可以是根據(jù)在第6行的coded—data—bit—depth決定的可變值或者固定值(例如,256位h在可變值的情況下,位數(shù)可以減小為比在固定值的情況下更小。
[0152]圖10是示出由tone—map—model—id = 2的tone—mapping—info顯示的階梯函數(shù)的實(shí)例的示圖。
[0153]在圖10的實(shí)例中,start—of—coded—;11^61^&1[;!_](1=0、1、2、3、4、5、6以及7)是0、
1、3、4、5、5、7以及7 因此,按照從coded—data的0開始的順序表示target—data到coded—data的值的coded—data-target—data轉(zhuǎn)換表是0、1、1、2、3、5以及因此,在使用圖1的階梯函數(shù)時,coded—data = 5 轉(zhuǎn)換成 target—data = 3。
[0154]在此處,tone—map—model—id= 2的 tone—mapping—inf ο用作用于 STD-HDR 轉(zhuǎn)換或者用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息進(jìn)一步,由于tone—map—model—id = 2的tone—mapping—info具有大量數(shù)據(jù),所以在生成時,需要對轉(zhuǎn)換表進(jìn)行卷積,但是在轉(zhuǎn)換過程上的負(fù)荷較輕。
[0155]圖7的行 18到23 表不與 tone—map—model—id = 3相關(guān)的描述。在 tone—map—model—id=3的情況下,描述表示折線函數(shù)(polygonal line funct1n)的并且由num—pivots指定的coded—pivot_value[i]和target_pivot_value[i]的數(shù)量。coded—pivot_value[i]表不第 i個樞軸的 coded—data,并且 target—pivot—value[ i]表不第 i 個樞軸的 target—data。
[0156]coded—pivot—value [i]和target—pivot—value[i]的位數(shù)可以是根據(jù)在第6 行的coded—data—bit—depth決定的可變值或者固定值(例如,256位)在可變值的情況下,位數(shù)可以減少為比在固定值的情況下更小。
[0157]圖11是示出由tone—map—model—id = 3的tone—mapping—info顯示的折線函數(shù)的實(shí)例的示圖。
[0158]在圖η的實(shí)例中,第1 樞軸的coded_pivot_value[ 1 ]是D11,target_pivot_value[1]是Dll,。第3樞軸的coded_pivot_value[3]是D12,并且target_pivot_value[3]是D12’。因此,在使用在圖11中的折線函數(shù)時,例如,coded_data = Dll轉(zhuǎn)換成target_data = Dll ’并且coded_data = D12轉(zhuǎn)換成target_data = D12 ’。在此處,tone_map_model_id = 3的tone_mapping_info用作用于STD-HDR轉(zhuǎn)換或者用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息。
[0159]通過這種方式,將值0、2以及3中的一個值設(shè)置為tone_map_model_id的tone_mapping_info用作用于STD-HDR轉(zhuǎn)換或者用于HDR-STD轉(zhuǎn)換的色調(diào)映射定義信息,并且從記錄裝置1中傳輸給再現(xiàn)裝置2。
[0160]在圖7中,行24到39是1:0116_11^_1]10(161_1(1 = 4的描述。在與1:0116_11^_1]10(161_1(1 = 4相關(guān)的信息之中,ref_ screen_luminance—white、extended_range—white_leve1、nominal_black_level_code_value >nominal_whi te_level_code_valuel^^extended_whi te_level—code—value是包含在HDR信息內(nèi)的參數(shù)。
[0161]圖12是示出包含在HDR信息內(nèi)的每塊信息的實(shí)例的示圖。
[0162]在圖12中的水平軸表示亮度值。在位長度是10位時,亮度值是從0到1023的值。在圖12中,垂直軸表示亮度。曲線L11表示在亮度值與在具有標(biāo)準(zhǔn)亮度的監(jiān)控器內(nèi)的亮度之間的關(guān)系。具有標(biāo)準(zhǔn)亮度的監(jiān)控器的動態(tài)范圍是0到100 %的范圍。
[0163]在此處,ref_screen_luminance_white表示標(biāo)準(zhǔn)監(jiān)控器的亮度(cd/m2)。進(jìn)一步,extended_range_white_level表示在擴(kuò)展之后的動態(tài)范圍的亮度。在圖12的實(shí)例的情況下,400設(shè)置為 extended_range_white_level 的值。
[0164]在此處,在具有標(biāo)準(zhǔn)亮度的監(jiān)控器中,nominal_black_level_code_value表示黑色(亮度0% )的亮度值,并且nominal_white_level_code_value表示白色(亮度100% )的亮度值。進(jìn)一步,extended_white_level_code值表示在擴(kuò)展之后在動態(tài)范圍內(nèi)的白色的亮度值。
[ΟΙ65] 在圖12的實(shí)例的情況下,如白色箭頭#161所示,根據(jù)值extended_range_white_level,動態(tài)范圍0到100%擴(kuò)展為動態(tài)范圍0到400 %。對應(yīng)于400%的