專(zhuān)利名稱(chēng):數(shù)據(jù)處理裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及將高清晰的視像(HD視像)變換為標(biāo)準(zhǔn)圖像質(zhì)量的視像(SD視像)的技術(shù)。
背景技術(shù):
近年,DVD介質(zhì)變得非常普及。其中,DVD-視頻盤(pán)(以下簡(jiǎn)記為“DVD”)作為收錄了電影等的包軟件已經(jīng)有很多在市場(chǎng)上面市了。
圖1表示DVD的數(shù)據(jù)結(jié)構(gòu)。如圖1的下方所示,在從DVD最內(nèi)周的導(dǎo)入到最外周的導(dǎo)出為止之間的區(qū)域分配為邏輯地址,基于此邏輯地址,邏輯數(shù)據(jù)被存儲(chǔ)。在基于邏輯地址存取可能的數(shù)據(jù)區(qū)域(邏輯地址空間)最開(kāi)始以后的部分存儲(chǔ)了文件系統(tǒng)的卷信息,接著存儲(chǔ)了視像、音頻等的應(yīng)用數(shù)據(jù)。
所謂文件系統(tǒng)表示ISO9660、UDF(Universal Disc Format通用盤(pán)格式)等,是將盤(pán)上的數(shù)據(jù)以被稱(chēng)為目錄或者文件的單位進(jìn)行管理的系統(tǒng)。日常使用的PC(個(gè)人計(jì)算機(jī))的情況下,通過(guò)被稱(chēng)為FAT或者NTFS的文件系統(tǒng),以目錄、文件等的數(shù)據(jù)結(jié)構(gòu)將硬盤(pán)上存儲(chǔ)的數(shù)據(jù)在計(jì)算機(jī)上表示,提高可用性。
DVD中,利用了UDF以及ISO9660兩種文件系統(tǒng)(兩者合稱(chēng)“UDF橋”),不論由UDF或者ISO9660哪一種文件系統(tǒng),驅(qū)動(dòng)器都能夠讀出數(shù)據(jù)。當(dāng)然,作為重寫(xiě)型的DVD介質(zhì)的DVD-RAM/R/RW中,通過(guò)這些文件系統(tǒng),可以在物理上讀取、寫(xiě)入、刪除數(shù)據(jù)。
在DVD上存儲(chǔ)的數(shù)據(jù)通過(guò)UDF橋能作為在圖1左上角所示那樣的目錄或者文件看到。在根目錄(圖中為“ROOT”)的正下方設(shè)置稱(chēng)為“VIDEO_TS”的目錄,在此記錄DVD的應(yīng)用數(shù)據(jù)。應(yīng)用數(shù)據(jù)作為多個(gè)文件被記錄,有以下主要的文件。
VIDEO_TS.IFO盤(pán)重放控制信息文件VTS_01_0.IFO視像標(biāo)題集#1重放控制信息文件VTS_01_0.VOB視像標(biāo)題集#1流文件在文件系統(tǒng)中規(guī)定了2種后綴。后綴“IFO”表示存儲(chǔ)了重放控制信息的文件,后綴“VOB”表示存儲(chǔ)了作為AV數(shù)據(jù)的MPEG流的文件。重放控制信息包括在DVD中采用的、根據(jù)使用者的操作使重放動(dòng)態(tài)地變化的、為了實(shí)現(xiàn)交互性的信息;原數(shù)據(jù)那樣的在標(biāo)題中附帶的信息;流中附帶的信息等。另外,在DVD中一般將重放控制信息稱(chēng)為導(dǎo)向信息。
重放控制信息文件有管理盤(pán)全體的“VIDEO_TS.IFO”和各個(gè)視像標(biāo)題集(在DVD中多個(gè)標(biāo)題、換言之不同電影和不同版本的電影能存儲(chǔ)在1張盤(pán)上)的每個(gè)的重放控制信息的“VTS_01_0.IFO”。此處,在文件名中的“01”表示視像標(biāo)題集的號(hào)碼,例如,當(dāng)視像標(biāo)題集#2的情況下成為“VTS_02_0.IFO”。
圖1的右上部是在DVD應(yīng)用層的DVD導(dǎo)向空間,上述重放控制信息是展開(kāi)的邏輯結(jié)構(gòu)空間?!癡IDEO_TS.IFO”內(nèi)的信息作為VMGI(VedioManager Information視像管理信息),“VTS_01_0.IFO”或者存在于其他的每個(gè)視像標(biāo)題集的重放控制信息作為VTSI(視像標(biāo)題集信息)在DVD導(dǎo)向空間被展開(kāi)。
VTSI中記述了被稱(chēng)為PGC(Program Chain程序鏈)的重放順序信息的PGCI(程序鏈信息)。PGCI由單元Cell的集合和被稱(chēng)為命令的一種編程信息構(gòu)成。單元自身是與MPEG流對(duì)應(yīng)的VOB(Video Object視像對(duì)象)的一部分區(qū)間或者全部區(qū)間的集合,單元的重放意味著重放由該VOB的單元指定的區(qū)間。
命令是與在瀏覽器上執(zhí)行的Java(注冊(cè)商標(biāo))腳本等相近的概念,由DVD的假設(shè)機(jī)器處理。只是,相對(duì)于Java(注冊(cè)商標(biāo))腳本除了進(jìn)行邏輯運(yùn)算之外還進(jìn)行窗口和瀏覽器的控制(例如,打開(kāi)新瀏覽器的窗口等),DVD的命令除了邏輯運(yùn)算之外,還執(zhí)行AV標(biāo)題的重放控制(例如,重放章節(jié)的指定等),在這一點(diǎn)上不同。
單元具有將在盤(pán)上存儲(chǔ)的VOB的開(kāi)始以及結(jié)束地址(盤(pán)上的邏輯存儲(chǔ)地址)作為其內(nèi)部信息,播放機(jī)利用在單元中記述的VOB的開(kāi)始以及結(jié)束地址信息執(zhí)行數(shù)據(jù)的讀出、重放。
圖2表示流中攜帶的導(dǎo)向信息中所包括的各種信息。作為DVD的特長(zhǎng)的交互性并非僅由上述的“VIDEO_TS.IFO”、“VTS_0._0.IFO”等存儲(chǔ)的導(dǎo)向信息實(shí)現(xiàn),幾個(gè)重要信息使用被稱(chēng)為導(dǎo)向組包(“導(dǎo)向組包”或者記為“NV_PCK”)的專(zhuān)用載體在VOB內(nèi)和視像數(shù)據(jù)、音頻數(shù)據(jù)一起被多路復(fù)用。
此處作為簡(jiǎn)單的交互性的例子說(shuō)明菜單。在菜單畫(huà)面上出現(xiàn)多個(gè)按鈕,對(duì)各個(gè)按鈕定義了選擇執(zhí)行該按鈕時(shí)的處理。另外,在菜單上選擇一個(gè)按鈕(通過(guò)高亮,在選擇按鈕上覆蓋半透明色,向使用者表示該按鈕處于選擇狀態(tài)),使用者使用遙控器的上下左右鍵,能夠使處于選擇狀態(tài)的按鈕向上下左右的任意按鈕移動(dòng)。即使用者通過(guò)使用遙控器的上下左右鍵,移動(dòng)高亮部分,直到想要選擇執(zhí)行的按鈕為止,按下決定鍵進(jìn)行決定,對(duì)應(yīng)的命令的程序被執(zhí)行。一般地,對(duì)應(yīng)的標(biāo)題和章節(jié)的重放是通過(guò)命令執(zhí)行的。
在NV_PCK內(nèi)包括高亮顏色信息和各個(gè)按鈕信息等。在高亮顏色信息中記述了顏色模板信息,被覆蓋顯示的高亮的半透明色被指定。在按鈕信息中記述了作為各個(gè)按鈕的位置信息的矩形區(qū)域信息、從該按鈕向其它的按鈕的移動(dòng)信息(與使用者的上下左右鍵操作分別對(duì)應(yīng)的移動(dòng)目的地按鈕的指定)、按鈕命令信息(該按鈕被決定時(shí)執(zhí)行的命令)。
菜單上的高亮是作為向菜單圖像的覆蓋圖像做成的。即在按鈕信息的矩形區(qū)域?qū)?yīng)的區(qū)域中,基于彩色模板信息賦予顏色,通過(guò)將其與菜單的按鈕信息的矩形區(qū)域重疊,實(shí)現(xiàn)菜單上的高亮。此覆蓋圖像和背景圖像合成,在畫(huà)面上顯示。
還有,使用NV_PCK將導(dǎo)向數(shù)據(jù)的一部分填充到流中的理由是第1,為了和流同步,動(dòng)態(tài)地更新菜單信息(例如,在電影重放的中間只在5分鐘~10分鐘間顯示菜單等)、即使同步時(shí)間容易成問(wèn)題的應(yīng)用也能夠確實(shí)被同步。另外,第2,在NV_PCK中存儲(chǔ)為了支持特殊重放的信息,當(dāng)快進(jìn)、回放等的特殊重放時(shí)也能順利地對(duì)AV數(shù)據(jù)解碼、重放等,為了提高使用者的操作性。
圖3A~3C表示VOB的生成順序,圖3D表示為了重放生成的VOB的裝置的構(gòu)成。在圖3A中表示的運(yùn)動(dòng)圖像、音頻、字幕等是基于在圖3B中所示的MPEG系統(tǒng)標(biāo)準(zhǔn)(ISO/IEC13818-1)壓縮以及打包的。此時(shí),視像是高清晰視像(以下記為“HD視像”),在保持其視像品質(zhì)的狀態(tài)下被壓縮以及打包。在HD視像中包括運(yùn)動(dòng)圖像、靜止圖像、文字圖形等各種高清晰圖像質(zhì)量的視像。然后,如圖3所示,分別被多路復(fù)用而生成1個(gè)MPEG程序流。此時(shí),包括了為了實(shí)現(xiàn)交互性的按鈕命令的NV_PCK也被一起多路復(fù)用。
MPEG系統(tǒng)的多路復(fù)用的特征是如果以運(yùn)動(dòng)圖像、音頻、字幕的種類(lèi)看的話,MPEG流數(shù)據(jù)是基于其解碼順序以比特串配置的,但在多路復(fù)用的運(yùn)動(dòng)圖像、音頻、字幕的各個(gè)種類(lèi)間,數(shù)據(jù)不一定是以重放順序,換言之并非限于以解碼順序形成比特串。例如,如果運(yùn)動(dòng)圖像數(shù)據(jù)的組包和字幕數(shù)據(jù)的組包連續(xù)地配置,也不一定限于在同一時(shí)間被解碼或者重放。
這樣的多路復(fù)用的理由是因?yàn)镸PEG流在規(guī)定的解碼器模型(一般所說(shuō)的系統(tǒng)目標(biāo)解碼器(System Target Decoder;STD)中必須以能被解碼那樣編碼,設(shè)置了這樣的限制。即,在解碼器模型中規(guī)定了與各個(gè)基本的流對(duì)應(yīng)的解碼器緩存器,其緩存器的容量對(duì)于各個(gè)基本流每個(gè)的容量不同。具體地說(shuō),對(duì)于運(yùn)動(dòng)圖像是232KB,對(duì)于音頻是4KB,對(duì)于字幕是52KB。視像、音頻等的各個(gè)數(shù)據(jù)直到解碼時(shí)間到來(lái)為止同時(shí)被存儲(chǔ)。解碼時(shí)間因?yàn)楦鶕?jù)緩存容量而不同,所以即使相鄰被多路復(fù)用,解碼等的時(shí)間也不同。
重放MPEG程序流時(shí),輸入到圖3D所示的裝置。多路復(fù)用器3100接收MPEG程序流,分離包括運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及音頻數(shù)據(jù)的組包,傳送到緩存器/解碼器3108。緩存器/解碼器3108緩存組包數(shù)據(jù)的同時(shí),對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)等的每個(gè)進(jìn)行解碼,構(gòu)建流。具體地說(shuō),緩存器3108具有視像緩存器、字幕用緩存器以及音頻緩存器,在視像緩存器中存儲(chǔ)運(yùn)動(dòng)圖像數(shù)據(jù),在字幕用緩存器中存儲(chǔ)字幕數(shù)據(jù),在音頻緩存器中存儲(chǔ)音頻數(shù)據(jù)。其后,緩存器/解碼器3108基于組包數(shù)據(jù)構(gòu)建運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及音頻數(shù)據(jù)并輸出。在圖3D中沒(méi)有特別地表示解碼器。緩存器/解碼器3108輸出HD視像的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及音頻數(shù)據(jù)。對(duì)于音頻數(shù)據(jù)在解碼后被輸出到揚(yáng)聲器等,作為音頻被重放。
HD視像的數(shù)據(jù)如以下這樣被處理。從緩存器/解碼器輸出的HD視像數(shù)據(jù)(運(yùn)動(dòng)圖像數(shù)據(jù)、靜止圖像數(shù)據(jù)以及文字圖形數(shù)據(jù))被送到各個(gè)處理通路。運(yùn)動(dòng)圖像數(shù)據(jù)在視像變換部3101中通過(guò)NTSC、PAL方式等變換為隔行視像(SD視像),在換算部3102中校正分辨率和平面形狀。然后,運(yùn)動(dòng)圖像通過(guò)MPEG編碼時(shí),在第一圖像質(zhì)量校正部3103中有效地除去MPEG壓縮特有的噪聲(塊噪聲、管理操作系統(tǒng)鍵控噪聲),圖像質(zhì)量得到改善。靜止圖像數(shù)據(jù)進(jìn)行靜止圖像編碼方式所固有的圖像質(zhì)量校正,在第2圖像質(zhì)量校正部3104中被降頻轉(zhuǎn)換(down convert)。然后,和運(yùn)動(dòng)圖像的輸出相互切換并被輸出。文字圖形數(shù)據(jù)在第3圖像質(zhì)量校正部3105中進(jìn)行適合于文字圖形的降頻轉(zhuǎn)換。
另一方面,字幕數(shù)據(jù)被輸出到第4圖像質(zhì)量校正部3107,通過(guò)顏色變換表CLUT3106進(jìn)行必要的顏色變換處理,其后,在第4圖像質(zhì)量校正部3107中降頻轉(zhuǎn)換為SD視像。然后,輸出到能顯示和運(yùn)動(dòng)圖像等的SD視像合成的SD視像的TV中。
在緩存器/解碼器3108的輸出后,將分辨率、縱橫比(aspect ratio)、幀速(frame rate)等從HD視像變換為SD視像的理由是因?yàn)槔门c運(yùn)動(dòng)圖像、靜止圖像、字幕等的各個(gè)最適合的文件進(jìn)行個(gè)別處理能夠最小限地防止降頻轉(zhuǎn)換時(shí)的圖像質(zhì)量惡化。這樣的處理例如在日本特開(kāi)2001-292341號(hào)公報(bào)中有記載。
今后,HD視像以原樣的幀速被存儲(chǔ)的機(jī)會(huì)會(huì)增加。例如,隨著存儲(chǔ)介質(zhì)的容量增加以及存儲(chǔ)速度的提高,假設(shè)電影素材早晚以本來(lái)的24幀/秒且720P(或者1080i)被存儲(chǔ)的機(jī)會(huì)會(huì)增加。另一方面,只能顯示SD視像的TV也會(huì)在今后相當(dāng)長(zhǎng)的期間內(nèi)被使用。由此,在重放存儲(chǔ)了HD視像的記錄介質(zhì)的裝置中,可以說(shuō)將HD視像變換為SD視像的必要性是極高的。但是,現(xiàn)在普及的DVD中,由于不能以原樣的幀速存儲(chǔ)HD視像,所以至今為止,考慮了這樣的變換的DVD重放裝置未被考慮。
另外,MPEG流這樣的運(yùn)動(dòng)圖像、字幕等各個(gè)數(shù)據(jù)分別被多路復(fù)用成流的情況下,HD視像變換為SD視像時(shí),內(nèi)容提供商一側(cè)在創(chuàng)作時(shí)如所期望的那樣,有必要重放運(yùn)動(dòng)圖像、字幕等。
發(fā)明內(nèi)容
本發(fā)明的目的在于保持本來(lái)期望的HD圖像質(zhì)量的視像、字幕等重放時(shí)間的同時(shí),變換為SD圖像質(zhì)量的視像、字幕等。
依據(jù)本發(fā)明的數(shù)據(jù)處理裝置,包括接收部,其接收數(shù)據(jù)流,該數(shù)據(jù)流包含通過(guò)以第1垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的第1主視像數(shù)據(jù)、和與所述第1主視像同步顯示的第1副視像數(shù)據(jù);和變換部,其將所述第1主視像以及所述第1副視像的各個(gè)數(shù)據(jù)變換為通過(guò)以與所述第1垂直掃描頻率不同的第2垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的合成視像的數(shù)據(jù)。所述數(shù)據(jù)流包括規(guī)定所述第1主視像以及所述第1副視像的顯示時(shí)刻的時(shí)刻信息。所述變換部對(duì)于與所述第1主視像的畫(huà)面具有相同內(nèi)容的第2主視像的畫(huà)面,通過(guò)與在所述第1主視像的畫(huà)面上顯示的和所述第1副視像具有相同內(nèi)容的第2副視像建立對(duì)應(yīng),生成顯示所述第2主視像以及所述第2副視像的合成視像。
所述變換部也可以包括視像變換部,其通過(guò)垂直掃描頻率的變換處理,將所述第1主視像的數(shù)據(jù)變換為所述第2主視像的數(shù)據(jù);字幕變換部,其將所述第1副視像的數(shù)據(jù)變換為第2副視像的數(shù)據(jù),并且確定與所述第1副視像的文字同步顯示的所述第1主視像的畫(huà)面,將與所確定的所述第1主視像的畫(huà)面對(duì)應(yīng)的所述第2主視像的畫(huà)面、和與所述第1副視像的文字對(duì)應(yīng)的所述第2副視像的文字建立對(duì)應(yīng);和合成部,其將建立對(duì)應(yīng)后的所述第2主視像的數(shù)據(jù)和第2副視像的數(shù)據(jù)合成,生成所述合成視像的數(shù)據(jù)。
所述變換部也可以包括合成部,其將根據(jù)所述時(shí)刻信息同步的所述第1主視像以及所述第1副視像重疊,生成重疊視像;和視像變換部,其將所述重疊視像的數(shù)據(jù)變換為所述合成視像的數(shù)據(jù)。
所述變換部也可以將規(guī)定分辨率的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為與所述規(guī)定分辨率不同的分辨率的合成視像的數(shù)據(jù)。
所述變換部也可以將電影素材的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為以NTSC以及PAL中的一種方式顯示的合成視像的數(shù)據(jù)。
所述變換部也可以將電影素材的所述第1主視像以及所述第1副視像的1幀變換為以PAL顯示的所述合成視像的2個(gè)以上的半幀,在向半幀變換時(shí),將同一個(gè)半幀定期地多次插入。
所述數(shù)據(jù)流包含表示在所述變換部中變換可否的變換允許信息;所述變換部也可以在所述變換允許信息表示允許變換的情況下進(jìn)行所述變換。
所述數(shù)據(jù)流包含指定變換種類(lèi)的變換指定信息;所述變換部也可以進(jìn)行根據(jù)所述變換指示信息指定的所述種類(lèi)的變換。
所述數(shù)據(jù)處理裝置也可以進(jìn)一步包括輸入部,其輸入指定變換種類(lèi)的變換指定信息。所述變換部進(jìn)行由所述變換指定信息所指定的所述種類(lèi)的變換。
所述變換部也可以基于所述變換指示信息進(jìn)行將各張畫(huà)面一次一次地顯示的變換以及將確定的畫(huà)面多次顯示的變換之中的一種,生成PAL方式的合成視像。
依據(jù)本發(fā)明的數(shù)據(jù)處理方法,包括接收步驟,其接收數(shù)據(jù)流,該數(shù)據(jù)流包含通過(guò)以第1垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的第1主視像數(shù)據(jù)、和與所述第1主視像同步顯示的第1副視像數(shù)據(jù);和變換步驟,其將所述第1主視像以及所述第1副視像的各個(gè)數(shù)據(jù)變換為通過(guò)以與所述第1垂直掃描頻率不同的第2垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的合成視像的數(shù)據(jù)。所述數(shù)據(jù)流包括規(guī)定所述第1主視像以及所述第1副視像的顯示時(shí)刻的時(shí)刻信息。在所述變換步驟中,對(duì)于與所述第1主視像的畫(huà)面具有相同內(nèi)容的第2主視像的畫(huà)面,通過(guò)與在所述第1主視像的畫(huà)面上顯示的和所述第1副視像具有相同內(nèi)容的第2副視像建立對(duì)應(yīng),生成顯示所述第2主視像以及所述第2副視像的合成視像。
所述變換步驟也可以包括視像變換步驟,其通過(guò)垂直掃描頻率的變換處理,將所述第1主視像的數(shù)據(jù)變換為所述第2主視像的數(shù)據(jù);字幕變換步驟,其將所述第1副視像的數(shù)據(jù)變換為第2副視像的數(shù)據(jù),并且確定與所述第1副視像的文字同步顯示的所述第1主視像的畫(huà)面,將與所確定的所述第1主視像的畫(huà)面對(duì)應(yīng)的所述第2主視像的畫(huà)面、和與所述第1副視像的文字對(duì)應(yīng)的所述第2副視像的文字建立對(duì)應(yīng);和合成步驟,其將建立對(duì)應(yīng)后的所述第2主視像的數(shù)據(jù)和第2副視像的數(shù)據(jù)合成,生成所述合成視像的數(shù)據(jù)。
所述變換步驟也可以包括合成步驟,其將根據(jù)所述時(shí)刻信息同步的所述第1主視像以及所述第1副視像重疊,生成重疊視像;和視像變換步驟,其將所述重疊視像的數(shù)據(jù)變換為所述合成視像的數(shù)據(jù)。
在所述變換步驟中,也可以將規(guī)定分辨率的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為與所述規(guī)定分辨率不同的分辨率的合成視像的數(shù)據(jù)。
在所述變換步驟中,也可以將電影素材的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為以NTSC以及PAL中的一種方式顯示的合成視像的數(shù)據(jù)。
在所述變換步驟中,也可以將電影素材的所述第1主視像以及所述第1副視像的1幀變換為以PAL顯示的所述合成視像的2個(gè)以上的半幀,在向半幀變換時(shí),將同一個(gè)半幀定期地多次插入。
所述數(shù)據(jù)流包含表示在所述變換步驟中變換可否的變換允許信息;在所述變換步驟中,也可以在所述變換允許信息表示允許變換的情況下進(jìn)行所述變換。
所述數(shù)據(jù)流包含指定變換種類(lèi)的變換指定信息;在所述變換步驟中,也可以進(jìn)行根據(jù)所述變換指示信息指定的所述種類(lèi)的變換。
所述數(shù)據(jù)處理方法也可以進(jìn)一步包括輸入步驟,其輸入指定變換種類(lèi)的變換指定信息。在所述變換步驟中,進(jìn)行由所述變換指定信息所指定的所述種類(lèi)的變換。
在所述變換步驟中,也可以基于所述變換指示信息進(jìn)行將各張畫(huà)面一次一次地顯示的變換以及將確定的畫(huà)面多次顯示的變換之中的一種,生成PAL方式的合成視像。
圖1是表示DVD的數(shù)據(jù)結(jié)構(gòu)的圖。
圖2是表示在流中攜帶的導(dǎo)向信息中所包含的各種信息的圖。
圖3A~3C是表示VOB的生成順序,圖3D是表示為了重放生成的VOB的裝置的構(gòu)成的圖。
圖4是表示盤(pán)狀存儲(chǔ)介質(zhì)的BD104和存儲(chǔ)的數(shù)據(jù)101、102、103的構(gòu)成的圖。
圖5是表示在BD中存儲(chǔ)的邏輯數(shù)據(jù)的目錄/文件結(jié)構(gòu)的圖。
圖6是表示讀出BD201上的視像數(shù)據(jù),重放視像的播放機(jī)的概略的功能構(gòu)成的圖。
圖7是表示播放機(jī)的詳細(xì)功能框圖的構(gòu)成圖。
圖8是表示BD的應(yīng)用空間的概念圖。
圖9是表示視像的畫(huà)面和MPEG流的數(shù)據(jù)結(jié)構(gòu)的關(guān)系圖。
圖10是表示組包的數(shù)據(jù)結(jié)構(gòu)的圖。
圖11是表示VOB數(shù)據(jù)文件等和為了讀出這些文件的播放機(jī)的功能框圖的構(gòu)成圖。
圖12是表示使用了軌道緩存器的VOB數(shù)據(jù)連續(xù)提供模型的圖。
圖13是表示VOB管理信息文件(“YYY.VOBI”)的內(nèi)部結(jié)構(gòu)的圖。
圖14是表示VOBU的重放時(shí)間長(zhǎng)度和數(shù)據(jù)大小的對(duì)應(yīng)關(guān)系的圖。
圖15是表示基于VOBU的重放時(shí)間為了取得地址的處理的概念的圖。
圖16是表示播放清單信息的數(shù)據(jù)結(jié)構(gòu)的圖。
圖17是表示事件處理器表(“XXX.PROG”)的數(shù)據(jù)結(jié)構(gòu)的圖。
圖18是表示關(guān)于BD全體的信息數(shù)據(jù)結(jié)構(gòu)的圖。
圖19是表示全局事件處理器的程序表(“BD.PROG”)的圖。
圖20是表示時(shí)間事件的概念圖。
圖21是表示進(jìn)行菜單操作的使用者事件的概念圖。
圖22是表示全局事件的概念圖。
圖23是表示關(guān)于程序處理器的功能框圖的構(gòu)成圖。
圖24是表示系統(tǒng)參數(shù)(SPRAM)的一覽的圖。
圖25是表示帶有2個(gè)選擇按鈕的菜單的程序的例子的圖。
圖26是表示菜單選擇的使用者事件的事件處理器的程序的例子的圖。
圖27是表示到AV重放為止的基本處理流程的圖。
圖28是表示從播放清單重放開(kāi)始到VOB重放開(kāi)始為止的處理流程的圖。
圖29是表示從AV重放開(kāi)始后的事件處理流程的圖。
圖30是表示字幕處理流程的圖。
圖31是表示根據(jù)本實(shí)施方式進(jìn)行降頻轉(zhuǎn)換處理的重放裝置100的構(gòu)成的圖。
圖32是表示降頻轉(zhuǎn)換處理的順序的圖。
圖33是表示將HD視像(電影素材視像)的畫(huà)面變換為SD視像(NTSC方式或者PAL方式的視像)的畫(huà)面時(shí)的相關(guān)關(guān)系的圖。
圖34是表示根據(jù)本發(fā)明的第2方法將HD視像(電影素材視像)的畫(huà)面變換為SD視像的畫(huà)面時(shí)的相關(guān)關(guān)系的圖。
圖35是表示根據(jù)第2例降頻轉(zhuǎn)換處理的順序的圖。
圖36是表示記述了推薦的變換方法的變換指定信息的數(shù)據(jù)結(jié)構(gòu)的圖。
圖37是表示基于變換指定信息決定降頻轉(zhuǎn)換方法,重放SD視像的順序的圖。
具體實(shí)施例方式
以下,說(shuō)明本發(fā)明的實(shí)施方式。在本實(shí)施方式中,HD視像是存儲(chǔ)在具有DVD數(shù)倍存儲(chǔ)容量的藍(lán)光盤(pán)等的高密度介質(zhì)中的。在本實(shí)施方式的說(shuō)明中,作為這樣的高密度介質(zhì)的例子例舉了藍(lán)光盤(pán)(藍(lán)光盤(pán);以下記為“BD”),說(shuō)明能將在BD中存儲(chǔ)的HD視像變換為SD視像的重放裝置的構(gòu)成以及動(dòng)作。
首先,說(shuō)明在本實(shí)施方式中用詞的意義。
視像通過(guò)以規(guī)定的垂直掃描頻率逐次切換多張畫(huà)面進(jìn)行顯示的圖像。視像包括運(yùn)動(dòng)圖像、靜止圖像、字幕等的文字和圖形等。運(yùn)動(dòng)圖像、靜止圖像等被稱(chēng)為主視像,與主視像同步重疊顯示的字幕等也被稱(chēng)為副視像。
畫(huà)面在隔行方式中由奇數(shù)行和偶數(shù)行的2個(gè)半幀構(gòu)成的圖像。在逐行方式中由1幀構(gòu)成的圖像。畫(huà)面是代表了幀以及半幀兩種意思的概念。
SD視像指標(biāo)準(zhǔn)圖像質(zhì)量的視像(NTSC方式的480i視像、PAL方式的576i視像)。
HD視像指上述SD視像以外的高清晰的視像(例如,高清晰視像)。
以下,在表1以及表2中表示關(guān)于SD視像和HD視像的運(yùn)動(dòng)圖像的更具體的例子。在表2中24p或者23.976p的HD視像被稱(chēng)為電影素材的視像。
(表1)分辨率(行數(shù))+掃描種類(lèi)
i隔行掃描,p逐行掃描(表2)頻率(Hz)+掃描種類(lèi)
i隔行掃描,p逐行掃描還有,在表1中表示的480p以及576p的各個(gè)視像也能有不是HD視像的分類(lèi)。但是,在本說(shuō)明書(shū)中,這些視像是作為HD視像對(duì)待的。其理由是因?yàn)檫@些視像是通過(guò)隔行逐行變換(IP變換)被變換為NTSC方式的480i以及PAL方式的576i,被表示為標(biāo)準(zhǔn)圖像質(zhì)量TV(SDTV),關(guān)于處理可以說(shuō)和一般的作為HD視像的720p以及1080i是同等的。
以下,為了容易理解,將項(xiàng)目分開(kāi)進(jìn)行說(shuō)明。項(xiàng)目是進(jìn)行(1)BD的邏輯數(shù)據(jù)結(jié)構(gòu)、(2)播放機(jī)的構(gòu)成、(3)BD的應(yīng)用空間、(4)VOB的詳細(xì)、(5)VOB的隔行存儲(chǔ)、(6)導(dǎo)向數(shù)據(jù)結(jié)構(gòu)、(7)播放清單的數(shù)據(jù)結(jié)構(gòu)、(8)事件發(fā)生的機(jī)理、(9)虛擬播放機(jī)、(10)程序的例子、(11)虛擬播放機(jī)的處理流程、(12)降頻轉(zhuǎn)換(down convert)處理的重放裝置。還有,本發(fā)明的主要處理之一是從HD視像向SD視像的降頻轉(zhuǎn)換(down convert)時(shí)的處理。
(1)BD的邏輯數(shù)據(jù)結(jié)構(gòu)圖4表示作為盤(pán)狀的存儲(chǔ)介質(zhì)的BD104和存儲(chǔ)的數(shù)據(jù)101、102、103的構(gòu)成。在BD104中存儲(chǔ)的數(shù)據(jù)是AV數(shù)據(jù)103、關(guān)于AV數(shù)據(jù)的管理信息以及AV重放順序等的BD管理信息102、實(shí)現(xiàn)交互的BD重放程序101。在本實(shí)施方式中,主要著重于為了重放電影的AV內(nèi)容的AV應(yīng)用程序?qū)D進(jìn)行說(shuō)明。但是,當(dāng)然并不僅限于此用途。
圖5表示上述的BD中存儲(chǔ)的邏輯數(shù)據(jù)的目錄/文件結(jié)構(gòu)。BD和其他光盤(pán)例如DVD和CD等同樣具有從其內(nèi)周向外周螺旋狀的存儲(chǔ)區(qū)域,和DVD同樣,具有能根據(jù)邏輯地址進(jìn)行存取的數(shù)據(jù)區(qū)(邏輯地址空間)。另外,在導(dǎo)入的內(nèi)側(cè)具有被稱(chēng)為BCA(Burst Cutting Area)的只有驅(qū)動(dòng)器能讀取的特別區(qū)域。此區(qū)域由于不能從應(yīng)用程序讀出,所以例如能被利用于著作權(quán)保護(hù)技術(shù)等。
在邏輯地址空間中,在最開(kāi)始部分存儲(chǔ)了文件系統(tǒng)信息(卷),后面存儲(chǔ)了視像數(shù)據(jù)等的應(yīng)用數(shù)據(jù)。所謂文件系統(tǒng)如以往記述所說(shuō)明的,是指UFD和ISO9660等,和通常的PC同樣地,能通過(guò)目錄、文件結(jié)構(gòu)讀出存儲(chǔ)的邏輯數(shù)據(jù)。
在本實(shí)施方式中,BD上的目錄、文件結(jié)構(gòu)是在根目錄ROOT下面設(shè)置了BDVIDEO目錄。此目錄是存儲(chǔ)了通過(guò)BD處理的AV內(nèi)容和管理信息等的數(shù)據(jù)(在圖4中說(shuō)明的101、102、103)的目錄。
在BDVIDEO目錄的下面存儲(chǔ)了下面的(a)~(g)的7種文件。
(a)BD.INFO(文件名固定)是“BD管理信息”的一個(gè),是存儲(chǔ)了關(guān)于BD全體信息的文件。BD播放機(jī)最初讀出此文件。
(b)BD.PROG(文件名固定)是“BD重放程序”的一個(gè),是存儲(chǔ)了關(guān)于BD全體的重放控制信息的文件。
(c)XXX.PL(“XXX”可變,后綴“PL”固定)是“BD管理信息”的一個(gè),是存儲(chǔ)了作為情節(jié)(重放順序)的播放清單信息的文件。每一個(gè)播放清單具有1個(gè)文件。
(d)XXX.PROG(“XXX”可變,后綴“PL”固定)是“BD重放程序”的一個(gè),是存儲(chǔ)了上述每個(gè)播放清單的重放控制信息的文件。和播放清單的對(duì)應(yīng)是由文件體名(“XXX”一致)識(shí)別的。
(e)YYY.VOB(“YYY”可變,后綴“VOB”固定)是“AV數(shù)據(jù)”的一個(gè),是存儲(chǔ)了VOB(和以往例子中說(shuō)明的VOB相同)的文件。每個(gè)VOB具有1個(gè)文件。
(f)YYY.VOBI(“YYY”可變,后綴“VOBI”固定)是“BD管理信息”的一個(gè),是存儲(chǔ)了關(guān)于作為AV數(shù)據(jù)的VOB的流管理信息的文件。和VOB的對(duì)應(yīng)是由文件體(file body)名(“YYY”一致)識(shí)別的。
(g)ZZZ.PNG(“ZZZ”可變,后綴“PNG”固定)是“AV數(shù)據(jù)”的一個(gè),是存儲(chǔ)為了構(gòu)成字幕以及菜單的圖像數(shù)據(jù)PNG(根據(jù)W3C被標(biāo)準(zhǔn)化的圖像格式)的文件。每1個(gè)PNG圖像具有一個(gè)文件。
(2)播放機(jī)的構(gòu)成接著,參照?qǐng)D6以及圖7的同時(shí),說(shuō)明重放上述BD的播放機(jī)的構(gòu)成。
圖6表示讀出BD201上的視像數(shù)據(jù)、重放視像的播放機(jī)的概略的功能構(gòu)成。播放機(jī)包括拾光器202、各種存儲(chǔ)器(程序記錄存儲(chǔ)器203、管理信息記錄存儲(chǔ)器204、AV記錄存儲(chǔ)器205)、程序處理部206、管理信息處理部207。
拾光器202從BD201讀出數(shù)據(jù)。
程序處理部206接收由管理信息處理部207重放的播放清單的信息和程序的執(zhí)行時(shí)間等的事件信息,進(jìn)行程序的處理。另外,在程序中動(dòng)態(tài)改變重放的播放清單是可能的,此種情況下,對(duì)于管理信息處理部207通過(guò)傳送播放清單的重放命令實(shí)現(xiàn)。程序處理部206接收來(lái)自使用者的事件,即接收來(lái)自遙控器鍵的請(qǐng)求,存在對(duì)應(yīng)于使用者事件的程序的情況下,則執(zhí)行此程序。
管理信息處理部207接收程序處理部206的指示,分析對(duì)應(yīng)的播放清單以及和播放清單對(duì)應(yīng)的VOB的管理信息,指示在展示處理部208中成為對(duì)象的AV數(shù)據(jù)的重放。另外,管理信息處理部207接收根據(jù)展示處理部208的基準(zhǔn)時(shí)刻信息,基于時(shí)刻信息進(jìn)行在展示處理部208中AV數(shù)據(jù)重放的停止指示,另外,對(duì)于程序處理部206生成表示程序執(zhí)行時(shí)間的事件。
展示處理部208具有分別和運(yùn)動(dòng)圖像、音頻、字幕/圖像(靜止圖像)對(duì)應(yīng)的解碼器,根據(jù)來(lái)自管理信息處理部207的指示,進(jìn)行AV數(shù)據(jù)的解碼以及輸出。運(yùn)動(dòng)圖像數(shù)據(jù)、字幕/圖像在解碼后在各自的專(zhuān)用顯示面、視頻顯示面210以及圖像顯示面209上被描繪。
合成處理部211進(jìn)行視像的合成處理向TV等的顯示設(shè)備輸出。
播放機(jī)的處理流程如以下。BD201上的數(shù)據(jù)通過(guò)拾光器202被讀出。讀出的數(shù)據(jù)根據(jù)各自的數(shù)據(jù)種類(lèi)被傳送到專(zhuān)用的存儲(chǔ)器。BD重放程序(“BD.PROG”或者“XXX.PROG”文件的內(nèi)容)被傳送到程序記錄存儲(chǔ)器203、BD管理信息(“BD.INFO”、“XXX.PL”或者“YYY.VOBI”)被傳送到管理信息記錄存儲(chǔ)器204、AV數(shù)據(jù)(“YYY.VOB”或者“ZZZ.PNG”)被傳送到AV記錄存儲(chǔ)器205。
然后,存儲(chǔ)在程序記錄存儲(chǔ)器203中的BD重放程序由程序處理部206處理。另外,存儲(chǔ)在管理信息記錄存儲(chǔ)器204中的BD管理信息由管理信息處理部207處理。存儲(chǔ)在AV記錄存儲(chǔ)器205中的AV數(shù)據(jù)由展示處理部208處理。
展示處理部208將運(yùn)動(dòng)圖像、音頻、字幕/圖像(靜止圖像)的各個(gè)解碼并輸出。其結(jié)果,運(yùn)動(dòng)圖像數(shù)據(jù)、字幕/圖像在視頻顯示面210以及圖像顯示面209上顯示。然后,合成處理部211將運(yùn)動(dòng)圖像和字幕等合成并輸出。
這樣如圖6所示,BD播放機(jī)基于在圖4所示的BD中存儲(chǔ)的數(shù)據(jù)構(gòu)成而構(gòu)成。
圖7表示播放機(jī)的詳細(xì)的功能框圖的構(gòu)成。圖7的圖像存儲(chǔ)器308和軌道緩存器309和圖6的AV記錄存儲(chǔ)器205對(duì)應(yīng),程序處理器302以及UOP管理器303和程序處理部206對(duì)應(yīng)。另外,情節(jié)處理器305以及展示控制器306和圖6的管理信息處理部207對(duì)應(yīng),時(shí)鐘307、多路復(fù)用器310、圖像處理器311、視頻處理器312以及音頻處理器313和圖6的展示處理部208對(duì)應(yīng)。
從BD201讀出的MPEG流(VOB數(shù)據(jù))被存儲(chǔ)在軌道緩存器309、圖像數(shù)據(jù)(PNG)被存儲(chǔ)在圖像存儲(chǔ)器308中。多路復(fù)用器310基于時(shí)鐘307的時(shí)刻將存儲(chǔ)在軌道緩存器309中的VOB數(shù)據(jù)抽出,將視像數(shù)據(jù)傳送到視頻處理器312、將音頻數(shù)據(jù)傳送到音頻處理器313。視頻處理器312以及音頻處理器313按照MPEG系統(tǒng)標(biāo)準(zhǔn),分別由解碼器緩存器和解碼器構(gòu)成。即,從多路復(fù)用器310送入的視像、音頻各自的數(shù)據(jù)在各自的解碼器緩存器中暫時(shí)存儲(chǔ),根據(jù)時(shí)鐘307在各個(gè)解碼器中被解碼處理。
在圖像存儲(chǔ)器308存儲(chǔ)的PNG由以下的2種處理方法處理。
當(dāng)圖像數(shù)據(jù)用于字幕的情況下,由展示控制器306指示解碼時(shí)間。情節(jié)處理器305一旦接收了來(lái)自時(shí)鐘307的時(shí)刻信息,能進(jìn)行適當(dāng)?shù)淖帜伙@示那樣,如果到了字幕顯示時(shí)刻(開(kāi)始以及結(jié)束),對(duì)展示控制器306發(fā)出字幕的顯示/非顯示的指示。接收了來(lái)自展示控制器306的解碼/顯示的指示的圖像處理器311從圖像存儲(chǔ)器308中取出對(duì)應(yīng)的PNG數(shù)據(jù),解碼、在圖像顯示面314上顯示。
接著,當(dāng)圖像數(shù)據(jù)用于菜單的情況下,由程序處理器302指示解碼時(shí)間。程序處理器302何時(shí)指示圖像的解碼依賴(lài)于程序處理器302處理的BD程序,不能一概決定。
圖像數(shù)據(jù)以及視像數(shù)據(jù)如圖6說(shuō)明的那樣分別解碼后被輸出到圖像顯示面314、視頻顯示面315,由合成處理器316合成后被輸出。
從BD201讀出的管理信息(情節(jié)、AV管理信息)被存儲(chǔ)在管理信息記錄存儲(chǔ)器304中,但情節(jié)信息(“BD.INFO”以及“XXX.PL”)被讀入到情節(jié)處理器305進(jìn)行處理。另外,AV管理信息(“YYY.VOBI”)由展示控制器306讀出并處理。
情節(jié)處理器305分析播放清單的信息,向展示控制器306指示根據(jù)播放清單參照的VOB和其重放位置,展示控制器306分析成為對(duì)象的VOB的管理信息(“YYY.VOBI”),指示驅(qū)動(dòng)器控制器317取出成為對(duì)象的VOB。
驅(qū)動(dòng)器控制器317根據(jù)展示控制器306的指示,移動(dòng)拾光器,進(jìn)行成為對(duì)象的AV數(shù)據(jù)的讀出,讀出的AV數(shù)據(jù)被讀出到上述圖像存儲(chǔ)器308或者軌道緩存器309。
另外,情節(jié)處理器305監(jiān)視時(shí)鐘307的時(shí)刻,按照管理信息設(shè)定的時(shí)間將事件傳送到程序處理器302。
在程序記錄存儲(chǔ)器301中存儲(chǔ)的BD程序(“BD.PROG”或者“XXX.PROG”)由程序處理器302執(zhí)行處理。程序處理器302處理BD程序是在從情節(jié)處理器305事件被送到的情況下,或者從UOP管理器303事件被送到的情況下。UOP管理器303在使用者通過(guò)遙控器鍵送到請(qǐng)求的情況下,對(duì)程序處理器302生成事件。
(3)BD的應(yīng)用空間圖8表示BD應(yīng)用空間的概念。
在BD的應(yīng)用空間中,播放清單(PlayList)成為一個(gè)的重放單位。播放清單通過(guò)單元(Cell)的連接,具有由連接的順序決定的作為重放順序的靜態(tài)的情節(jié)(scenario)和由程序描述的動(dòng)態(tài)的情節(jié)。只在沒(méi)有根據(jù)程序的動(dòng)態(tài)的情節(jié)的情況下,播放清單才規(guī)定將各個(gè)單元只按順序重放的順序。根據(jù)播放清單的重放在全部的單元重放結(jié)束了的時(shí)刻結(jié)束。另一方面,如果根據(jù)程序能夠描述越過(guò)播放清單的重放路徑,根據(jù)使用者或者播放機(jī)的狀態(tài)動(dòng)態(tài)的變更選擇重放的對(duì)象是可能的。作為典型的例子可以列舉出菜單。菜單能夠根據(jù)使用者的選擇定義作為重放的情節(jié),表示根據(jù)程序動(dòng)態(tài)地選擇播放清單。
以下,更詳細(xì)地說(shuō)明程序。此處所說(shuō)的程序表示時(shí)間事件或者根據(jù)使用者事件被執(zhí)行的(event handler)。
時(shí)間事件基于播放清單中攜帶的時(shí)刻信息生成。在圖7中說(shuō)明的從情節(jié)處理器305向程序處理器302傳送的事件相當(dāng)于此。如果時(shí)間事件被發(fā)行,程序處理器302執(zhí)行處理根據(jù)ID對(duì)應(yīng)的事件處理器。如上述,被執(zhí)行的程序指示其它播放清單的重放是可能的,此種情況下,現(xiàn)在重放的播放清單的重放被終止,轉(zhuǎn)移到為指定的播放清單的重放。
使用者事件根據(jù)使用者的遙控器鍵操作生成。使用者事件被分成2大類(lèi)。
第1類(lèi)使用者事件是根據(jù)特定的鍵的操作生成的菜單的選擇事件。所謂特定的鍵例如BD播放、主體或者遙控器的指示鍵(“上”“下”“左”“右”鍵)和“決定”鍵。和菜單選擇的事件對(duì)應(yīng)的事件處理器只在播放清單內(nèi)限定的期間有效。作為播放清單的信息設(shè)定了各個(gè)事件處理器的有效期間。當(dāng)按下特定鍵時(shí)檢索有效的事件處理器,存在有效的事件處理器的情況下執(zhí)行處理該事件處理器。其它的情況下,可以無(wú)視菜單選擇的事件。
第2類(lèi)使用者事件是根據(jù)特定的鍵的操作生成的菜單的呼出事件。所謂特定的鍵是例如BD播放、主體或者遙控器的“菜單”鍵。如果生成了呼出菜單的事件,則稱(chēng)為全局事件處理器。全局事件處理器不依賴(lài)于播放清單,通常是有效的事件處理器。通過(guò)使用此功能,能實(shí)現(xiàn)DVD的菜單呼出(標(biāo)題重放中得到音頻、字幕菜單等,實(shí)現(xiàn)變更音頻或者字幕后,從中斷的地點(diǎn)開(kāi)始的標(biāo)題重放的功能等)。
播放清單中作為構(gòu)成靜態(tài)的情節(jié)的單位的單元Cell是參照了VOB(MPEG流)的全部或者一部分的重放區(qū)間的單元。單元開(kāi)始VOB內(nèi)的重放區(qū)間,將其作為結(jié)束時(shí)刻的信息。各個(gè)VOB和成為一對(duì)的VOB管理信息(VOBI)包括在其內(nèi)部與數(shù)據(jù)的重放時(shí)刻對(duì)應(yīng)的作為記錄地址的表信息的時(shí)間圖(Time Map或者TM)。根據(jù)此時(shí)間圖,上述的VOB的重放、讀出在VOB內(nèi)(即,成為對(duì)象的文件“YYY.VOB”內(nèi))的結(jié)束時(shí)刻、導(dǎo)出開(kāi)始地址以及結(jié)束地址是可能的。后面詳細(xì)敘述時(shí)間圖。
(4)VOB的詳細(xì)圖9表示視像的畫(huà)面和MPEG流的數(shù)據(jù)結(jié)構(gòu)的關(guān)系。最下方表示VOB的數(shù)據(jù)結(jié)構(gòu),由1個(gè)以上的VOBU(Video Object Unit視像對(duì)象單元)構(gòu)成。各個(gè)VOBU在其內(nèi)部包括視頻組包V_PCK和音頻組包A_PCK。各個(gè)組包具有和1個(gè)扇區(qū)相同的大小,在本實(shí)施方式中由2KB單位構(gòu)成。
VOBU是以稱(chēng)為MPEG視像流的GOP(Group of Picture畫(huà)面組)作為標(biāo)準(zhǔn)構(gòu)成的,也包括音頻數(shù)據(jù),是作為多路復(fù)用流的一個(gè)重放單位。VOBU包括以視像的重放時(shí)間看來(lái),從0.4秒開(kāi)始至1.0秒的范圍內(nèi)(通常為0.5秒左右)的數(shù)據(jù)。也就是說(shuō),多數(shù)的情況下,在1個(gè)GOP內(nèi)當(dāng)NTSC的情況下存儲(chǔ)了15幀左右的幀。
圖10表示組包的數(shù)據(jù)結(jié)構(gòu)。組包(pack)具有組包頭、包頭(PES PacketHeader)、有效載荷(PES Packet Payload)。包頭以及有效載荷共同構(gòu)成包(PES Packet)。
有效載荷是包(PES Packet)的數(shù)據(jù)存儲(chǔ)區(qū)域。在有效載荷中視頻數(shù)據(jù)以及音頻數(shù)據(jù)等的元素?cái)?shù)據(jù)從開(kāi)始依次被存入。在包頭中存儲(chǔ)為了識(shí)別在有效載荷中存儲(chǔ)的數(shù)據(jù)是哪個(gè)流的ID(stream_id)、該有效數(shù)據(jù)的解碼以及顯示時(shí)刻信息的時(shí)間戳、DTS(Decode Time Stamp解碼時(shí)間戳)以及PTS(Presentation Time Stamp展示時(shí)間戳)。還有,PTS/DTS并不限于在全部的包頭中存儲(chǔ)。
在組包頭中存儲(chǔ)了表示該組包何時(shí)通過(guò)多路復(fù)用器被輸入到各個(gè)元素流的解碼器緩存器的時(shí)間戳SCR(System Clock Reference系統(tǒng)參考時(shí)鐘)。
(5)VOB的插入存儲(chǔ)接著,參照?qǐng)D11以及圖12,說(shuō)明被插入存儲(chǔ)的VOB文件的重放處理。
圖11表示VOB數(shù)據(jù)文件等和為了讀出這些文件的播放機(jī)的功能框圖的構(gòu)成。
圖11的下方表示在BD上的VOB文件以及PNG文件的插入存儲(chǔ)。如圖11所示,VOB數(shù)據(jù)文件被分段,在盤(pán)上被離散配置。從某一個(gè)連續(xù)區(qū)間向其它區(qū)間的移動(dòng)需要查找動(dòng)作,此間數(shù)據(jù)的讀出停止。即,存在數(shù)據(jù)的提供停止的可能性。
一般的ROM例如CD-ROM和DVD-ROM的情況下,作為一連串的連續(xù)重放單位的AV數(shù)據(jù)是被連續(xù)地存儲(chǔ)的。限于連續(xù)存儲(chǔ)的情況,驅(qū)動(dòng)器只需依次讀出數(shù)據(jù),傳送至解碼器即可的處理是簡(jiǎn)單的。由此VOB數(shù)據(jù)文件優(yōu)選存儲(chǔ)在連續(xù)區(qū)域。但是,盡管如此還有這樣的數(shù)據(jù)結(jié)構(gòu)的理由是因?yàn)槔绱嬖谙笞帜粩?shù)據(jù)這樣的,和在VOB中存儲(chǔ)的視像數(shù)據(jù)同步被重放的數(shù)據(jù),和VOB文件同樣,字幕數(shù)據(jù)也通過(guò)采用某種方法從BD中讀出是必要的。由此,將VOB數(shù)據(jù)文件分為若干塊,在其間配置字幕用的圖像數(shù)據(jù)(PNG文件)是有必要的。
還有,作為字幕數(shù)據(jù)的讀出方法的一種方法,有在VOB重放開(kāi)始之前集中將字幕用的圖像數(shù)據(jù)(PNG文件)讀出的方法。但是,此種情況下,大量的存儲(chǔ)器是必要的,這是不現(xiàn)實(shí)的。
通過(guò)適當(dāng)?shù)夭迦肱渲肰OB文件和圖像數(shù)據(jù),不需要上述這樣的大量的臨時(shí)記錄存儲(chǔ)器,通過(guò)必要的時(shí)間將圖像數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器中成為可能。
播放機(jī)的功能框圖是上述的播放機(jī)的一部分。BD上的數(shù)據(jù)通過(guò)拾光器被讀出。VOB數(shù)據(jù)文件(即MPEG流)被輸入到軌道緩存器,PNG(即圖像數(shù)據(jù))文件被輸入圖像存儲(chǔ)器。
軌道緩存器為FIFO(First In First Out先進(jìn)先出),被輸入的VOB數(shù)據(jù)按輸入的順序被傳送到多路復(fù)用器。此時(shí),根據(jù)上述的SCR,各個(gè)組包被從軌道緩存器中取出,其數(shù)據(jù)經(jīng)由多路復(fù)用器被傳送到視頻處理器或者音頻處理器中。另一方面,對(duì)于圖像數(shù)據(jù)來(lái)說(shuō),描繪哪幅圖像是由展示控制器指示的。另外,描繪時(shí)使用的圖像數(shù)據(jù)是字幕用數(shù)據(jù)的情況下,被同時(shí)從圖像存儲(chǔ)器中刪除,當(dāng)是菜單用的圖像數(shù)據(jù)的情況下,其菜單描繪中被按照原樣保留在圖像存儲(chǔ)器內(nèi)。這是因?yàn)椴藛蔚拿枥L依賴(lài)于使用者操作,隨著使用者的操作對(duì)菜單的一部分進(jìn)行再顯示或者變換為不同的圖像,此時(shí)為了使再顯示部分的圖像數(shù)據(jù)的解碼更容易的原因。
圖12表示使用了軌道緩存器的VOB數(shù)據(jù)連續(xù)提供模型。首先,如在圖12的上方所示,使VOB的一個(gè)連續(xù)記錄區(qū)域從邏輯地址的“a1”開(kāi)始延續(xù)至“a2”為止。從“a2”至“a3”間存儲(chǔ)了圖像數(shù)據(jù),是不進(jìn)行VOB數(shù)據(jù)的讀出的區(qū)間。
由于VOB數(shù)據(jù)暫時(shí)累積在軌道緩存器中,所以如果在向軌道緩存器的數(shù)據(jù)輸入速率Va和從軌道緩存器輸出的數(shù)據(jù)速率Vb之間設(shè)定差(Va>Vb),限于從BD中連續(xù)讀出數(shù)據(jù),軌道緩存器的數(shù)據(jù)累積量不斷增加。在圖12的下方表示在軌道緩存器中存儲(chǔ)的數(shù)據(jù)的數(shù)據(jù)量。橫坐標(biāo)表示時(shí)間,縱坐標(biāo)表示在軌道緩存器內(nèi)部累積的數(shù)據(jù)量。時(shí)刻“t1”表示作為VOB的一個(gè)連續(xù)記錄區(qū)域的開(kāi)始點(diǎn)的“a1”的讀出開(kāi)始的時(shí)刻。在此時(shí)刻以后,在軌道緩存器中以速率Va-Vb累積數(shù)據(jù)。此速率是軌道緩存器的輸入輸出速率的差。時(shí)刻“t2”表示到作為一個(gè)連續(xù)記錄區(qū)域的結(jié)束點(diǎn)的“a2”的數(shù)據(jù)為止讀取結(jié)束的時(shí)刻。從時(shí)刻“t1”開(kāi)始至“t2”之間,以速率Va-Vb,軌道緩存器內(nèi)數(shù)據(jù)量不斷增加,時(shí)刻“t2”的數(shù)據(jù)累積量B(t2)能由下式求出。
B(t2)=(Va-Vb)×(t2-t1) (1)此后,由于至BD上的地址“a3”為止圖像數(shù)據(jù)連續(xù),所以向軌道緩存器的輸入變?yōu)?,按照作為輸出速率的“-Vb”,軌道緩存器內(nèi)的數(shù)據(jù)量減少。這使讀出位置至“a3”(時(shí)刻“t3”)為止。
此處應(yīng)該注意的是,如果在時(shí)刻“t3”很早之前,在軌道緩存器中累積的數(shù)據(jù)量為0,向解碼器提供的VOB的數(shù)據(jù)就沒(méi)有了,存在VOB的重放停止的可能性。由此,在時(shí)刻“t3”,當(dāng)在軌道緩存器中還留有數(shù)據(jù)的情況下,VOB的重放不會(huì)停止,能夠連續(xù)。
此條件能由下式表示。
B(t2)≥-Vb×(t3-t2) (2)即,滿(mǎn)足式(2)這樣決定圖像數(shù)據(jù)(非VOB數(shù)據(jù))的配置即可。
(6)導(dǎo)向數(shù)據(jù)結(jié)構(gòu)參照?qǐng)D13~圖19,說(shuō)明BD的導(dǎo)向數(shù)據(jù)(BD管理信息)結(jié)構(gòu)。
圖13表示VOB管理信息文件(“YYY.VOBI”)的內(nèi)部結(jié)構(gòu)。VOB管理信息包括該VOB的流屬性信息Attribute和時(shí)間圖TMAP。流屬性包括視頻屬性Video、音頻屬性Audio#0~Audio#m的各個(gè)。特別是音頻流的情況下,由于VOB能夠同時(shí)具有多個(gè)音頻流,所以根據(jù)音頻流數(shù)量Number表示數(shù)據(jù)域的有無(wú)。
下面是視頻屬性Video所具有的域和分別可取的值。
壓縮方式CodingMPEG1MPEG2MPEG4MPEG4-AVC(Advaced Video Coding)分辨率Resolution1920×10801280×720720×480720×565縱橫比Aspect4∶316∶9幀速Framerate
6059.94(60/1.001)503029.97(30/1.001)252423.976(24/1.001)下面是音頻屬性Audio所具有的域和分別可取的值。
壓縮方式CodingAV3MPEG1MPEG2LPCM頻道數(shù)(Ch)1~8語(yǔ)言屬性Language時(shí)間圖TAMP是具有每個(gè)VOBU的信息的表,具有該VOB包括的VOBU數(shù)Number和各個(gè)VOBU信息VOBU#1~VOBU#n。各個(gè)VOBU信息分別包括VOBU的重放時(shí)間長(zhǎng)度Duration和VOBU的數(shù)據(jù)大小Size。
圖14表示VOBU的重放時(shí)間長(zhǎng)度和數(shù)據(jù)大小的對(duì)應(yīng)關(guān)系。因?yàn)樽鳛橐纛l的壓縮標(biāo)準(zhǔn)的AC3進(jìn)行以固定位速率的壓縮,所以時(shí)間和地址的關(guān)系能夠通過(guò)1次式求出。但是,當(dāng)為MPEG視頻的情況下,時(shí)間和地址的關(guān)系以一次式的形式表示是不可能的。
其理由是因?yàn)镸PEG視頻流為了獲得高圖像質(zhì)量記錄是以可變位速率被壓縮生成的,其重放時(shí)間和數(shù)據(jù)大小間沒(méi)有單純的相關(guān)。當(dāng)MPEG視頻數(shù)據(jù)的情況下,各個(gè)幀具有固定的顯示時(shí)間,例如當(dāng)NTSC信號(hào)的情況下,1幀具有1/29.97秒的顯示時(shí)間,各個(gè)幀的壓縮后的數(shù)據(jù)大小由于畫(huà)面的特性和壓縮所使用的畫(huà)面種類(lèi),也就是根據(jù)I/P/B畫(huà)面,數(shù)據(jù)大小有很大的改變。
同樣地,將MPEG視頻數(shù)據(jù)多路復(fù)用MPEG系統(tǒng)流,即VOB也還是不可能通過(guò)一次式的形式表示時(shí)間和數(shù)據(jù)大小。因此,關(guān)于在VOB內(nèi)的時(shí)間和地址的對(duì)應(yīng)關(guān)系的信息是必要的。所以,設(shè)置了時(shí)間圖TMAP。如圖14所示,時(shí)間圖TMAP具有使在各個(gè)VOBU的每個(gè)中VOBU內(nèi)的幀數(shù)和VOBU內(nèi)的組包數(shù)(即數(shù)據(jù)大小)對(duì)應(yīng)的入口。
參照?qǐng)D15,詳細(xì)地說(shuō)明時(shí)間圖TMAP。圖15表示基于VOBU的重放時(shí)間為了得到地址的處理的概念。首先,當(dāng)給出時(shí)刻信息的情況下,首先檢索該時(shí)刻屬于哪個(gè)VOBU。這要對(duì)時(shí)間圖的每個(gè)VOBU的幀數(shù)進(jìn)行加法運(yùn)算,幀數(shù)的和超過(guò)該時(shí)刻(換算為幀數(shù))或者一致的VOBU成為該VOBU。接著對(duì)時(shí)間圖的每個(gè)VOBU的數(shù)據(jù)大小直到該VOBU之前的VOBU為止相加。為了重放包括給出時(shí)刻的幀,此值被用于求出應(yīng)當(dāng)讀出的組包的地址。
(7)播放清單的數(shù)據(jù)結(jié)構(gòu)接著參照?qǐng)D16,說(shuō)明播放清單信息(“XXX.PL”)的數(shù)據(jù)結(jié)構(gòu)。圖16表示播放清單信息的數(shù)據(jù)結(jié)構(gòu)。播放清單信息由單元清單CellList和事件清單EventList構(gòu)成。
單元清單CellList是播放清單內(nèi)的重放單元順序,以本清單的記述順序重放單元。單元清單CellList的內(nèi)容是單元數(shù)Number和各個(gè)單元信息Cell#1~Cell#n。
單元信息Cell#具有VOB文件名VOBName、在該VOB內(nèi)的開(kāi)始時(shí)刻In以及結(jié)束時(shí)刻O(píng)ut、字幕表SubtitleTable。開(kāi)始時(shí)刻In以及結(jié)束時(shí)刻O(píng)ut,分別以該VOB內(nèi)的幀號(hào)表示,通過(guò)使用上述的時(shí)間圖TMAP能夠得到重放時(shí)必要的VOB數(shù)據(jù)的地址。
字幕表SubtitleTable具有該VOB和被同步重放的字幕信息。字幕和音頻同樣能夠具有多種語(yǔ)言,字幕表SubtitleTable最初的信息也是由語(yǔ)言數(shù)Number和其后接續(xù)的各種語(yǔ)言的各個(gè)表Language#1~Language#k構(gòu)成。
各種語(yǔ)言的表Language#是由語(yǔ)言信息Lang、每種中表示的字幕的字幕信息數(shù)Number、每種中表示的字幕的字幕信息Speech#1~Speech#j構(gòu)成,字幕信息Speech#由對(duì)應(yīng)的圖像數(shù)據(jù)文件名Name、字幕顯示開(kāi)始時(shí)刻In以及字幕顯示結(jié)束時(shí)刻O(píng)ut、字幕顯示位置Position構(gòu)成。
事件表EventList是定義在該播放清單內(nèi)發(fā)生的事件的表。事件表是由在事件數(shù)Number之后的各個(gè)事件Event#1~Event#m構(gòu)成,各個(gè)事件Event#t由事件的種類(lèi)Type、事件的ID、事件發(fā)生時(shí)刻Time和有效期間Duration構(gòu)成。
圖17表示事件處理器表(“XXX.PROG”)的數(shù)據(jù)結(jié)構(gòu)。事件處理器表(“XXX.PROG”)包括各個(gè)播放清單每個(gè)的事件處理器(時(shí)間事件和菜單選擇用的使用者事件)。
事件處理器表包括定義的時(shí)間處理器/程序數(shù)Number和各個(gè)事件處理器/程序Program#1~Program#n。各個(gè)事件處理器/程序Program#內(nèi)的描述包括事件處理器開(kāi)始的定義(<event_handler>標(biāo)識(shí)符)和與上述的時(shí)間的ID成為一對(duì)的事件處理器的ID,其后該程序也在函數(shù)后的括號(hào)“{”和“}”之間描述。在上述的“XXX.PL”的事件表EventList中存儲(chǔ)的事件Event#1~Event#m,利用“XXX.PROG”的事件處理器的ID被確定。
接著參照?qǐng)D18的同時(shí)說(shuō)明關(guān)于BD全體的信息(“BD.INFO”)的內(nèi)部結(jié)構(gòu)。圖18表示關(guān)于BD全體的信息的數(shù)據(jù)結(jié)構(gòu)。
關(guān)于BD全體的信息包括標(biāo)題清單TitleList和全局事件用的事件表(事件清單)。
標(biāo)題清單TitleList由盤(pán)內(nèi)的標(biāo)題數(shù)Number和接續(xù)其后的各個(gè)標(biāo)題信息Title#1~Title#n構(gòu)成。各個(gè)標(biāo)題信息Title#包括在標(biāo)題中包含的播放清單的表PLTable和標(biāo)題內(nèi)的章節(jié)清單ChapterList。播放清單的表PLTable包括標(biāo)題內(nèi)的播放清單數(shù)Number和播放清單名Name即播放清單的文件名。
章節(jié)清單ChapterList由在該標(biāo)題內(nèi)包括的章節(jié)數(shù)Number和各個(gè)章節(jié)的信息Chapter#1~Chapter#n構(gòu)成。章節(jié)信息Chapter#具有該章節(jié)包括的單元的表CellTable,單元的表CellTable由單元數(shù)Number和各個(gè)單元的入口信息CellEntry#1~CellEntry#k構(gòu)成。單元的入口信息CellEntry#是根據(jù)包括該單元的播放清單名和播放清單內(nèi)的單元號(hào)描述的。
事件清單EventList包括全局事件數(shù)Number和各個(gè)全局事件的信息。此處應(yīng)注意之處是最初定義的全局事件被稱(chēng)為最初事件FirstEvent,是BD被插入播放機(jī)時(shí)最初讀出的事件。全局事件用事件信息只包括事件種類(lèi)Type和事件的ID。
圖19表示全局事件處理器的程序表(“BD.PROG”)。此表具有和在圖17中說(shuō)明的事件處理器表相同的內(nèi)容。
(8)事件發(fā)生的機(jī)制接著參照?qǐng)D20至圖22,說(shuō)明事件發(fā)生的機(jī)制。
圖20表示時(shí)間事件的概念。如前所述,時(shí)間事件是根據(jù)播放清單信息(“XXX.PL”)的事件清單EventList被定義的。作為時(shí)間事件被定義的事件,即當(dāng)事件種類(lèi)Type是“TimeEvent”的情況下,在事件生成時(shí)刻(“t1”)的時(shí)刻,具有ID“Ex1”的時(shí)間事件被從情節(jié)處理器傳送到程序處理器。程序處理器尋找具有事件ID“Ex1”的事件處理器,執(zhí)行處理對(duì)象的事件處理器。例如,在本實(shí)施方式中,能夠進(jìn)行2個(gè)按鈕圖像的描繪等。
圖21表示進(jìn)行菜單操作的使用者事件的概念。
如前所述,進(jìn)行菜單操作的使用者事件也是根據(jù)播放清單信息(“XXX.PL”)的事件清單EventList被定義的。作為使用者事件被定義的事件,即當(dāng)事件種類(lèi)Type為“UserEvent”的情況下,在成為事件生成時(shí)刻(“t1”)的時(shí)刻,該使用者事件為預(yù)備。此時(shí),事件自身還未被生成。該事件在由有效期間信息Duration描述的期間內(nèi)是預(yù)備狀態(tài)。
如圖21所示,當(dāng)使用者按下遙控器的“上”“下”“左”“右”鍵或者“決定”鍵的情況下,首先UOP事件由UOP管理器生成,被傳送到程序處理器。程序處理器對(duì)情節(jié)處理器傳送UOP事件。然后,情節(jié)處理器在接收了UOP事件的時(shí)刻,檢索是否存在有效的使用者事件,當(dāng)存在作為對(duì)象的使用者事件的情況下,生成使用者事件,傳送到程序處理器。在程序處理器中,尋找具有事件ID“Ex1”的事件處理器,執(zhí)行處理對(duì)象的事件處理器。例如,在本實(shí)施方式中,開(kāi)始播放清單#2的重放。
在生成的使用者事件中,沒(méi)有包括使用者按下了哪個(gè)遙控器鍵的信息。被選擇的遙控器鍵的信息根據(jù)UOP事件被傳送到程序處理器,被記錄保存在虛擬播放機(jī)具有的寄存器SPRM(8)中。事件處理器的程序分析此寄存器的值,執(zhí)行分支處理是可能的。
圖22表示全局事件的概念。如前所述,全局事件是根據(jù)關(guān)于BD全體的信息(“BD.INFO”)的事件清單EventList被定義的。作為全局事件被定義的事件,即當(dāng)事件種類(lèi)Type為“GlobalEvent”的情況下,只在有使用者的遙控器鍵操作的情況下被生成。
當(dāng)使用者按下“菜單”的情況下,首先UOP事件被放到根據(jù)UOP管理器生成的程序處理器中。程序處理器對(duì)情節(jié)處理器傳送UOP事件,情節(jié)處理器生成該全局事件,傳送到程序處理器。在程序處理器中,尋找具有事件ID“menu”的事件處理器,執(zhí)行處理對(duì)象的事件處理器。例如,在本實(shí)施方式中,開(kāi)始播放清單#3的重放。
還有,此處只簡(jiǎn)單地稱(chēng)作“菜單”鍵,但也可以是如DVD那樣具有多個(gè)菜單鍵。通過(guò)分別定義與各個(gè)菜單鍵對(duì)應(yīng)的ID,進(jìn)行對(duì)應(yīng)是可能的。
(9)虛擬播放機(jī)參照?qǐng)D23,說(shuō)明程序處理器的功能。圖23表示與程序處理器相關(guān)的功能框圖的構(gòu)成。程序處理器是在內(nèi)部具有虛擬播放機(jī)的處理模塊。虛擬播放機(jī)是與BD相關(guān)定義的功能模型,不依賴(lài)于各個(gè)BD播放機(jī)的具體的安裝構(gòu)成。因此,能夠保證不管在哪個(gè)BD播放機(jī)中都能執(zhí)行同樣的功能。例如,圖6以及圖7就是以具有以下所說(shuō)明的功能為前提的構(gòu)成。
虛擬播放機(jī)具有大致2種功能。是編程函數(shù)(a~c)和播放機(jī)變量(寄存器)。編程函數(shù)是以例如Java(R)Script為基礎(chǔ),將以下描述的2種功能作為BD固有函數(shù)定義的。
(a)鏈接函數(shù)停止現(xiàn)在的重放,開(kāi)始指定的播放清單、單元、時(shí)刻開(kāi)始的重放。
格式Link(PL#,Cell#,time)PL#播放清單名Cell#單元號(hào)time在單元內(nèi)的重放開(kāi)始時(shí)刻(b)PNG描繪函數(shù)在圖像顯示面上描繪指定的PNG數(shù)據(jù)。
格式Draw(File,X,Y)FilePNG文件名XX坐標(biāo)位置
YY坐標(biāo)位置(c)圖像顯示面清除函數(shù)清除圖像顯示面的指定區(qū)域。
格式Clear(X,Y,W,H)XX坐標(biāo)位置YY坐標(biāo)位置WX方向?qū)挾菻Y方向?qū)挾炔シ艡C(jī)變量是表示播放機(jī)狀態(tài)的系統(tǒng)參數(shù)SPRM和作為一般用途可能使用的通用參數(shù)GPRM。
圖24是系統(tǒng)參數(shù)SPRM的一覽表。
SPRM(0)語(yǔ)言編碼SPRM(1)音頻流號(hào)SPRM(2)字幕流號(hào)SPRM(3)角度號(hào)SPRM(4)標(biāo)題號(hào)SPRM(5)章節(jié)號(hào)SPRM(6)程序號(hào)SPRM(7)單元號(hào)SPRM(8)選擇鍵信息SPRM(9)導(dǎo)向計(jì)時(shí)器SPRM(10)重放時(shí)刻信息SPRM(11)卡拉OK用混合模式SPRM(12)母語(yǔ)國(guó)信息SPRM(13)母語(yǔ)水平SPRM(14)播放機(jī)設(shè)定值(視頻)SPRM(15)播放機(jī)設(shè)定值(音頻)SPRM(16)音頻流用語(yǔ)言編碼SPRM(17)音頻流用語(yǔ)言編碼(擴(kuò)展)SPRM(18)字幕流用語(yǔ)言編碼SPRM(19)字幕流用語(yǔ)言編碼(擴(kuò)展)
SPRM(20)播放機(jī)區(qū)域編碼SPRM(21)保留SPRM(22)保留SPRM(23)重放狀態(tài)SPRM(24)保留SPRM(25)保留SPRM(26)保留SPRM(27)保留SPRM(28)保留SPRM(29)保留SPRM(30)保留SPRM(31)保留在本實(shí)施方式中,虛擬播放機(jī)的編程函數(shù)是以Java(R)Script為基礎(chǔ),其它,也可以是在UNIX(R)OS等使用的B-Shell、Perl Script等其它的編程函數(shù)。換言之,本發(fā)明并非限定于Java(R)Script。
(10)程序的例子參照?qǐng)D25以及圖26,說(shuō)明在事件處理器中的程序的例子。
圖25是有2個(gè)選擇按鈕的菜單的程序的例子。
在單元(PlayList#1.Cell#1)的開(kāi)頭,采用時(shí)間事件,從圖25中的“<event_handler ID=”pre“>”開(kāi)始的程序被執(zhí)行。此處,最初將通用參數(shù)的一個(gè)GPRM(0)設(shè)定為“1”。GPRM(0)是被用于識(shí)別在該程序中選擇的按鈕。當(dāng)初規(guī)定在左側(cè)配置的按鈕“1”所選擇的狀態(tài)作為初始值。接著,使用作為描繪PNG的描繪的函數(shù)的Draw分別對(duì)按鈕1、按鈕2進(jìn)行描繪。按鈕1以坐標(biāo)(10、200)為起點(diǎn)(左端)描繪PNG圖像“1black.png”。按鈕2以坐標(biāo)(330、200)為起點(diǎn)(左端)描繪PNG圖像“2white.png”。
另外,在本單元最后使用時(shí)間事件執(zhí)行圖25右側(cè)的程序。此處,使用Link函數(shù),指示從該單元的開(kāi)始再次重放。
圖26是菜單選擇的使用者事件處理器的事件處理器的程序的例子。
當(dāng)按下了“左”鍵、“右”鍵、“決定”鍵的哪一個(gè)遙控器鍵的情況下,與其分別對(duì)應(yīng)的程序在事件處理器中被描述。使用者按下遙控器鍵的情況下,如圖21所說(shuō)明的,使用者事件被生成,圖26的事件處理器被啟動(dòng)。本事件處理器使用識(shí)別選擇按鈕的GPRM(0)的值和識(shí)別選擇的遙控器鍵的SPRM(8)進(jìn)行分支處理。對(duì)于條件的分支以及執(zhí)行處理如以下所述。
條件1)當(dāng)按鈕1被選擇而且選擇鍵為“右”鍵的情況下再次設(shè)定GPRM(0)為2,將處于選擇狀態(tài)的按鈕變更為右按鈕2。按鈕1、按鈕2的圖像被互相交換。
條件2)當(dāng)選擇鍵為“決定OK”、按鈕1被選擇的情況下,開(kāi)始播放清單#2的重放。
條件3)當(dāng)選擇鍵為“決定OK”、按鈕2被選擇的情況下,開(kāi)始播放清單#3的重放。
(11)虛擬播放機(jī)的處理流程接著參照?qǐng)D27至圖30的同時(shí)說(shuō)明在播放機(jī)中的處理流程。圖27表示直到AV重放為止的基本處理流程。
如果插入BD(S101),BD播放機(jī)執(zhí)行BD.INFO文件的讀入以及分析(S102)、BD.PROG的讀入(S103)。BD.INFO以及BD.PROG一旦被共同地存儲(chǔ)到管理信息記錄存儲(chǔ)器中,則由情節(jié)處理器分析。
接著,情節(jié)處理器根據(jù)在BD.INFO文件內(nèi)的初始事件FirstEvent信息,生成最初的時(shí)間(S104)。生成的初始事件被程序處理器接收,處理執(zhí)行與該事件對(duì)應(yīng)的事件處理器(S105)。
期望在與初始事件對(duì)應(yīng)的事件處理器中,應(yīng)當(dāng)存儲(chǔ)最初重放的播放清單信息。假設(shè),當(dāng)沒(méi)有指示播放清單重放(PL重放)的情況下,播放機(jī)什么也不重放,只是連續(xù)等待接收使用者事件(S201)。如果BD播放機(jī)接收來(lái)自使用者的遙控器操作,UOP管理器對(duì)于程序管理器發(fā)行UOP事件(S202)。
程序管理器判斷UOP事件是否是菜單鍵(S203),當(dāng)是菜單鍵的情況下,向情節(jié)處理器發(fā)送UOP事件,情節(jié)處理器生成使用者事件(S204)。程序處理器執(zhí)行處理與生成的使用者事件對(duì)應(yīng)的事件處理器(S205)。
圖28表示從播放清單重放開(kāi)始至VOB重放開(kāi)始為止的處理流程。
如前所述,根據(jù)初始事件處理器或者全局事件處理器開(kāi)始播放清單重放(S301)。情節(jié)處理器作為重放對(duì)象的播放清單重放所必要的信息,進(jìn)行播放清單信息“XXX.PL”的讀入和分析(S302)、與播放清單對(duì)應(yīng)的程序信息“XXX.PROG”的讀入(S303)。接著,情節(jié)處理器基于在播放清單登錄的單元信息,指示單元的重放(S304)。單元重放意味著情節(jié)處理器對(duì)展示控制器能提出要求,展示控制器開(kāi)始AV重放(S305)。
如果開(kāi)始了AV重放的開(kāi)始(S401),展示控制器讀入與重放的單元對(duì)應(yīng)的VOB信息文件(XXX.VOBI),進(jìn)行分析(S402)。展示控制器使用時(shí)間圖確定重放開(kāi)始的VOBU和其地址,向驅(qū)動(dòng)控制器指示讀出的地址。驅(qū)動(dòng)控制器讀出成為對(duì)象的VOB數(shù)據(jù)(S403),將VOB數(shù)據(jù)傳送到解碼器開(kāi)始重放(S404)。
VOB重放繼續(xù)到其VOB的重放區(qū)間結(jié)束為止(S405),如果結(jié)束則轉(zhuǎn)移到下一個(gè)單元重放S304。當(dāng)不存在下一個(gè)單元的情況下,重放結(jié)束(S406)。
圖29表示從AV重放開(kāi)始后的事件處理流程。BD播放機(jī)是事件驅(qū)動(dòng)型的。如果開(kāi)始了播放清單的重放,時(shí)間事件系統(tǒng)、使用者事件系統(tǒng)、字幕顯示系統(tǒng)的事件處理過(guò)程就分別被啟動(dòng),并行執(zhí)行事件處理。
從S501開(kāi)始至S505為止的處理是時(shí)間事件系統(tǒng)的處理流程。播放清單重放開(kāi)始后(S501),經(jīng)過(guò)確認(rèn)播放清單重放結(jié)束的步驟(S502),情節(jié)處理器確認(rèn)到達(dá)時(shí)間事件發(fā)生時(shí)刻(S503)。當(dāng)?shù)竭_(dá)了時(shí)間事件發(fā)生時(shí)刻的情況下,情節(jié)處理器生成時(shí)間事件(S504),程序處理器接收時(shí)間事件,執(zhí)行處理事件處理器(S505)。
在步驟S503中,當(dāng)不是時(shí)間事件發(fā)生時(shí)刻的情況下或者在步驟S504中事件處理器執(zhí)行處理后,再次返回到步驟S502,重復(fù)同樣的處理。另一方面,在步驟S502中如果播放清單重放結(jié)束得到確認(rèn),則時(shí)間事件系統(tǒng)的處理被強(qiáng)制性地結(jié)束。
從S601開(kāi)始至S608為止的處理是使用者事件系統(tǒng)的處理流程。播放清單重放開(kāi)始后(S601),經(jīng)過(guò)播放清單重放結(jié)束確認(rèn)步驟(S602),轉(zhuǎn)移到UOP接收確認(rèn)步驟的處理(S603)。當(dāng)存在UOP的接收時(shí),UOP管理器生成UOP事件(S604),接收了UOP事件的程序處理器確認(rèn)UOP事件是菜單呼出(S605)。當(dāng)是菜單呼出的情況下,程序處理器使情節(jié)處理器生成事件(S607),程序處理器執(zhí)行處理事件處理器(S608)。
在步驟S605中,當(dāng)判斷了UOP事件不是菜單呼出事件的情況下,UOP事件通過(guò)指示鍵或者“決定”鍵表示是事件。此種情況下,情節(jié)處理器判斷現(xiàn)在時(shí)刻是否是在使用者事件有效期間內(nèi)(S606)。當(dāng)在有效期間內(nèi)的情況下,情節(jié)處理器生成使用者事件(S607),程序處理器執(zhí)行處理對(duì)象的事件處理器(S608)。
當(dāng)在步驟S603中沒(méi)有UOP接收的情況下,在步驟S606中現(xiàn)在時(shí)刻不在使用者事件有效期間的情況下,或者在步驟S608中事件處理器執(zhí)行處理之后再次返回步驟S602,重復(fù)相同的處理。另外,在步驟S602中如果播放清單重放結(jié)束被確認(rèn),使用者系統(tǒng)的處理被強(qiáng)制地結(jié)束。
圖30表示字幕處理的流程。如果播放清單重放開(kāi)始(S701),經(jīng)過(guò)播放清單重放結(jié)束確認(rèn)步驟(S702),轉(zhuǎn)移至字幕描繪開(kāi)始時(shí)刻確認(rèn)步驟(S703)。字幕描繪開(kāi)始時(shí)刻的情況下,情節(jié)處理器對(duì)展示控制器指示字幕描繪,展示控制器對(duì)圖像處理器指示字幕描繪(S704)。在步驟S703中當(dāng)判斷不是字幕描繪開(kāi)始時(shí)刻的情況下,確認(rèn)是否是字幕顯示結(jié)束時(shí)刻(S705)。如果判斷為字幕顯示結(jié)束時(shí)刻的情況下,展示控制器對(duì)圖像處理器進(jìn)行字幕消除指示,將描繪的字幕從圖像顯示面消除(S706)。
在字幕描繪的指示(步驟S704)結(jié)束后,字幕消除指示(步驟S706)結(jié)束后,或者在字幕顯示結(jié)束時(shí)刻的確認(rèn)(步驟S705)中判斷為不是該時(shí)刻之后,返回步驟S702,重復(fù)相同的處理。如果在步驟S702中確認(rèn)了播放清單的重放結(jié)束了,則處理被強(qiáng)制地結(jié)束。
(12)進(jìn)行降頻轉(zhuǎn)換處理的重放裝置圖31表示根據(jù)本實(shí)施方式進(jìn)行降頻轉(zhuǎn)換處理的重放裝置100的構(gòu)成。重放裝置100由基于關(guān)于MPEG標(biāo)準(zhǔn)的傳送流的系統(tǒng)目標(biāo)解碼器(T-STD)模型構(gòu)成。重放裝置100將HD視像降頻轉(zhuǎn)換為SD視像是可能的。
還有,在圖31中,運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)、靜止圖像數(shù)據(jù)以及音頻數(shù)據(jù)分別被輸入到解碼器模型中,這是光頭將MPEG傳送流從BD中讀出,多路復(fù)用器接收其傳送流,將運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)等分別從存儲(chǔ)的包中分離輸出的結(jié)果。多路復(fù)用器具有和例如圖3的多路復(fù)用器3100同樣的功能。
重放裝置100大致分為包括緩存器3121、解碼器3122、對(duì)應(yīng)于各數(shù)據(jù)種類(lèi)的信號(hào)處理系統(tǒng)和變換部3123。
緩存器3121包括將運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)、靜止圖像數(shù)據(jù)以及音頻數(shù)據(jù)分別分為數(shù)段存儲(chǔ)的緩存器。另外,解碼器3122將基于MPEG標(biāo)準(zhǔn)壓縮編碼的視像數(shù)據(jù)以及音頻數(shù)據(jù)基于MPEG標(biāo)準(zhǔn)解碼。信號(hào)處理系統(tǒng)實(shí)現(xiàn)對(duì)應(yīng)于運(yùn)動(dòng)圖像數(shù)據(jù)等各種的處理。具體在后面敘述。變換部3123將HD視像降頻轉(zhuǎn)換為SD視像。緩存器3121、解碼器3122以及信號(hào)處理系統(tǒng)作為1個(gè)解碼器芯片實(shí)現(xiàn)也可以。另外,只將解碼器3122以及信號(hào)處理系統(tǒng)作為1個(gè)芯片也可以。
以下,說(shuō)明在視像數(shù)據(jù)中包含的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及靜止圖像數(shù)據(jù)的處理流程的同時(shí),說(shuō)明上述各個(gè)構(gòu)成元素的功能。
首先運(yùn)動(dòng)圖像數(shù)據(jù)被傳送至視像的解碼器線,從傳送流緩存器TB3201經(jīng)由多路復(fù)用緩存器MB3202在元素緩存器EB3203中暫時(shí)存儲(chǔ)。在EB3203中存儲(chǔ)的畫(huà)面在指定的解碼時(shí)刻(DTS)到來(lái)的瞬間被傳送至視像解碼器3204被解碼。從其它的畫(huà)面參照的畫(huà)面(I畫(huà)面、P畫(huà)面)被傳送至重新排序緩存器O3205,被利用于其它畫(huà)面的解碼。各個(gè)畫(huà)面在重放時(shí)刻(PTS)的時(shí)刻被送至視像顯示裝置顯示。當(dāng)連接了HDTV的情況下,解碼的HD視像在PTS時(shí)刻向HDTV3206被輸出處理。當(dāng)向SDTV的降頻轉(zhuǎn)換必要的情況下,解碼的HD視像被傳送至視像的降頻轉(zhuǎn)換器V-DC3207,被變換為SD視像。
字幕數(shù)據(jù)被從傳送緩存器TB3208傳送到緩存器B3209,被暫時(shí)存儲(chǔ)。然后,和視像的情況同樣地,字幕數(shù)據(jù)也在解碼的時(shí)刻DTS被瞬時(shí)傳送到字幕解碼器D3210被解碼。解碼的字幕數(shù)據(jù)在圖像緩存器IB3212一旦被展開(kāi),接收來(lái)自圖像控制器IC3211的要求,被指定的字幕在PTS時(shí)刻經(jīng)由顏色變換表的CLUT3213向HDTV輸出。字幕向由圖像控制器IC3211指定的HDTV的顯示區(qū)域顯示。當(dāng)向SDTV的降頻轉(zhuǎn)換必要的情況下,解碼的HD圖像質(zhì)量的字幕被傳送到字幕的降頻轉(zhuǎn)換器S-DC3215,變換為SD圖像質(zhì)量的字幕。
處理菜單的靜止圖像等的靜止圖像數(shù)據(jù)也被解碼,被輸出到HDTV或者SDTV。因?yàn)殪o止圖像數(shù)據(jù)的處理和字幕數(shù)據(jù)是同樣的,所以引用關(guān)于字幕數(shù)據(jù)的上述說(shuō)明,此處省略說(shuō)明。
被降頻轉(zhuǎn)換處理的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及靜止圖像數(shù)據(jù)被合成,作為SD視像向SDTV3229輸出。首先運(yùn)動(dòng)圖像和字幕被α合成。對(duì)于合成的結(jié)果得到的SD圖像質(zhì)量的運(yùn)動(dòng)圖像,α合成菜單等的靜止圖像。由此,在背景圖像上重疊了字幕,在其上完成菜單等的靜止圖像重疊的SD視像。SD視像向SDTV3229輸出。
音頻數(shù)據(jù)的處理流程如以下。音頻數(shù)據(jù)被從傳送緩存器TB3224傳送到緩存器B3225,在緩存器B3225暫時(shí)存儲(chǔ)后,在解碼時(shí)刻(DTS)被瞬時(shí)向音頻解碼器3226輸出被解碼。還有,音頻數(shù)據(jù)的解碼時(shí)刻和重放時(shí)刻是同一時(shí)刻的情況很多,大多數(shù)的音頻被解碼的時(shí)刻(DTS)就是重放時(shí)刻(PTS)。由此,解碼后即刻被輸出到揚(yáng)聲器3227。
當(dāng)在視像輸出上沒(méi)有連接HDTV的情況下,當(dāng)向SD視像的降頻轉(zhuǎn)換必要時(shí),向音頻降頻轉(zhuǎn)換器A-DC3228傳送,進(jìn)行采樣的間隔抽取處理等。然后和SD視像同步的音頻向揚(yáng)聲器3230輸出。還有,設(shè)置音頻降頻轉(zhuǎn)換器A-DC3228的理由是因?yàn)樵诤笫龅腜AL方式中,根據(jù)DEFT變換等被降頻轉(zhuǎn)換的SD視像是以和原始的HD視像不同的速度被顯示的,產(chǎn)生為了調(diào)整重放速度和SD視像一起進(jìn)行音頻的降頻轉(zhuǎn)換的必要。
還有,如后述那樣,當(dāng)降頻轉(zhuǎn)換處理后的SD視像的重放速度對(duì)于原始的HD視像的重放速度產(chǎn)生變化時(shí),不必如DTS時(shí)刻那樣進(jìn)行解碼也可以。
接著,參照?qǐng)D32以及圖33,詳細(xì)地說(shuō)明從HD視像向SD視像的降頻轉(zhuǎn)換處理。此處,HD視像是幀速為24Hz、逐行掃描的電影素材視像(帶有字幕的運(yùn)動(dòng)圖像)。另一方面,SD視像是幀速為59.94Hz、隔行掃描的NTSC視像或者幀速為50Hz、隔行掃描的PAL視像。不管哪一種都和原始的HD視像是帶有字幕的運(yùn)動(dòng)圖像相對(duì)應(yīng),對(duì)帶有字幕的運(yùn)動(dòng)圖像進(jìn)行降頻轉(zhuǎn)換。
圖32表示降頻轉(zhuǎn)換處理的順序。首先,重放裝置100從光盤(pán)中讀出MPEG數(shù)據(jù)流(S801)。多路復(fù)用器(圖中未表示)接收MPEG數(shù)據(jù)流,分離運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)、靜止圖像數(shù)據(jù)、音頻數(shù)據(jù),將這些經(jīng)由緩存器3121傳送到解碼器3122。解碼器3122分別將HD視像的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)、靜止圖像等解碼(S802)。
接著,變換部3123取得HD視像的顯示時(shí)刻信息(PTS)(S803)。更具體地說(shuō),視像降頻轉(zhuǎn)換器3207取得運(yùn)動(dòng)圖像的PTS,字幕降頻轉(zhuǎn)換器3215取得字幕的PTS。如參照?qǐng)D10說(shuō)明的那樣,顯示時(shí)刻信息(PTS)是從構(gòu)成MPEG數(shù)據(jù)流的包的包頭中取得的。
接著,變換部3123基于PTS確定運(yùn)動(dòng)圖像畫(huà)面的數(shù)據(jù)和在其畫(huà)面上顯示的字幕的數(shù)據(jù)(S804),將確定的HD視像的畫(huà)面數(shù)據(jù)變換為SD視像的畫(huà)面數(shù)據(jù),而且,將確定的HD視像的字幕數(shù)據(jù)變換為SD視像的字幕數(shù)據(jù)(S805)。
以下,參照?qǐng)D33詳細(xì)說(shuō)明在步驟S804以及步驟S805中進(jìn)行的處理。圖33表示HD視像(電影素材視像)的畫(huà)面變換為SD視像(NTSC方式或者PAL方式的視像)的畫(huà)面時(shí)的相關(guān)關(guān)系。從MPEG數(shù)據(jù)流得到的電影素材的HD視像是將作為重放周期為1/24秒的順序掃描信號(hào)(逐行掃描)的畫(huà)面P1、P2、…連續(xù)地切換顯示得到的。
變換部3123將此HD視像變換為SD視像。變換后的SD視像(NTSC方式)是將重放周期為1/59.94秒、隔行掃描信號(hào)(隔行掃描)的半幀連續(xù)地切換顯示得到的。另外,在變換后的SD視像(PAL方式)中,作為重放周期為1/50秒、隔行掃描信號(hào)(隔行掃描)的半幀是連續(xù)地切換顯示得到的。
在將HD視像變換為NTSC方式的SD視像時(shí),按照以下的規(guī)則變換。即電影素材的幀P1被變換為2個(gè)半幀P1t以及P1b。電影素材的幀P2被變換為3個(gè)半幀P2t、P2b以及P2t。一般地,奇數(shù)個(gè)HD視像的畫(huà)面被變換為2張SD視像半幀,偶數(shù)個(gè)HD視像的畫(huà)面被變換為3張SD視像的半幀。這被稱(chēng)為2∶3下拉,是將HD視像的2幀變換為SD視像的5個(gè)半幀的技術(shù)。還有,在變換后的NTSC方式的SD視像中,例如由于半幀P2t夾著半幀P2b被顯示2次,所以能看見(jiàn)視像晃動(dòng)。
當(dāng)將HD視像變換為PAL方式的SD視像時(shí),能夠利用被稱(chēng)為DEFT變換的技術(shù)。在DEFT變換中,電影素材的幀Pn被變換為2個(gè)半幀Pnt以及Pnb。因此,由于不象NTSC方式那樣對(duì)相同的半幀顯示2次,所以視像的振動(dòng)被極小化。另一方面,各個(gè)半幀以50Hz,即各個(gè)幀以25Hz顯示。即由于24Hz的HD視像被變換為25Hz的SD視像,此SD視像和原始的HS視像比較,每1幀(2個(gè)半幀)只以1Hz被快進(jìn)顯示。
如上述,如果將電影素材這樣的24Hz(或者23.976Hz)的幀速的HD視像降頻轉(zhuǎn)換為SD視像,以和本來(lái)應(yīng)當(dāng)以24Hz顯示的時(shí)間不同的時(shí)間顯示畫(huà)面。由此,當(dāng)必須在運(yùn)動(dòng)圖像上重疊字幕顯示的情況下,使字幕在那張畫(huà)面上重疊就成了問(wèn)題。
將字幕重疊在運(yùn)動(dòng)圖像、靜止圖像的情況下,也可以對(duì)運(yùn)動(dòng)圖像、靜止圖像和字幕分別賦予重放時(shí)刻(PTS)。但是由于在SDTV中存在各個(gè)畫(huà)面的顯示時(shí)刻的格子(59.94Hz和50Hz),所以?xún)?yōu)選SDTV的輸出時(shí)刻和此格子吻合。
首先,在MPEG-2中,能以90000Hz的時(shí)刻精度設(shè)定各個(gè)存取單元的DTS、PTS。即,在24Hz的電影素材中,顯示相鄰的運(yùn)動(dòng)圖像的各個(gè)畫(huà)面的PTS的差為3750。另一方面,NTSC的情況下,運(yùn)動(dòng)圖像的各個(gè)半幀的PTS的差為1501或者1502;PAL方式的情況下,各個(gè)半幀的PTS的差為1800。在各種顯示形式中,畫(huà)面的PTS是隨著其格子變化的。
當(dāng)以MPEG-2多路復(fù)用的情況下,字幕數(shù)據(jù)的重放時(shí)刻(PTS)也能以90000Hz的時(shí)刻精度設(shè)定。但是,字幕數(shù)據(jù)不應(yīng)當(dāng)在任意時(shí)刻設(shè)定,在從HD視像的畫(huà)面得到的SD視像的畫(huà)面中,需要始終顯示和在其對(duì)應(yīng)的HD視像的畫(huà)面上顯示的字幕具有相同內(nèi)容的字幕。例如,在同時(shí)進(jìn)行向HDTV輸出和向SDTV輸出這樣的情況下,在HDTV上的顯示和在SDTV上的顯示之間,需要做到在運(yùn)動(dòng)圖像的相同場(chǎng)面上不出現(xiàn)不同的字幕。
在圖33中,在涂黑表示的畫(huà)面P4、P5以及P6上顯示字幕。為了在將P4、P5以及P6變換為SD視像之后也顯示相同的字幕,變換部3123基于運(yùn)動(dòng)圖像的PTS和字幕的PTS,確定運(yùn)動(dòng)圖像的畫(huà)面的數(shù)據(jù)和在其畫(huà)面上顯示的字幕的數(shù)據(jù)(即圖32的步驟S804)。
具體地說(shuō),如果畫(huà)面P4、P5以及P6的PTS分別為t4、t5、t6(t5=t4+3750、t6=t5+3750),PTS確定作為t4、t5、t6的字幕。然后,確定的HD視像的畫(huà)面P4~P6的數(shù)據(jù)變換為SD視像的畫(huà)面數(shù)據(jù),而且,確定的HD視像的字幕數(shù)據(jù)變換為SD視像的字幕數(shù)據(jù)(即圖32的步驟S805)。然后,變換部3123合成生成的SD視像的畫(huà)面數(shù)據(jù)和字幕數(shù)據(jù)并輸出(S806)。
此結(jié)果,在變換后的SD視像中,對(duì)于和畫(huà)面P4對(duì)應(yīng)的半幀P4b、P4t以及P4b,和PTS值表示時(shí)刻t4的字幕具有相同內(nèi)容的字幕以SD圖像質(zhì)量被顯示。另外,對(duì)于和畫(huà)面P5對(duì)應(yīng)的半幀P5t以及P5b,和PTS值表示時(shí)刻t5的字幕具有相同內(nèi)容的字幕以SD圖像質(zhì)量被顯示。畫(huà)面P6和P4相同。由此,從電影素材變換為NTSC、PAL之后,字幕和其字幕顯示的運(yùn)動(dòng)圖像的畫(huà)面之間的關(guān)系也被保持。這在PAL方式中也是同樣的。
但是,根據(jù)適用于PAL方式的DEFT變換,由于以比電影素材本來(lái)的幀顯示周期(換言之,垂直掃描頻率)還要快的時(shí)間改寫(xiě)幀,所以與其同步的音頻的重放速度增加,音調(diào)升高,產(chǎn)生不合適的情況。在這樣的情況下,能通過(guò)以下的方法抑制不適的情況。
圖34表示根據(jù)第2種方法,將HD視像(電影素材視像)的畫(huà)面變換為SD視像的畫(huà)面時(shí)的相關(guān)關(guān)系。以下,說(shuō)明在圖34的第1段表示的HD視像(電影素材視像)的畫(huà)面變換為在第3段表示的SD視像中表示的畫(huà)面的處理。還有,圖34的第2段表示DEFT變換后的PAL方式的畫(huà)面,這與圖33的第3段是相同的。之所以一同表示的理由是為了使與在圖34的第3段表示的變換后的畫(huà)面的對(duì)比更加容易。
如上述這樣,如果將24Hz的HD視像通過(guò)DEFT變換為25Hz的PAL方式的SD視像,SD視像能以只有相當(dāng)于1幀1秒的時(shí)間比HD視像快放顯示。因此,在本說(shuō)明書(shū)中,以DEFT變換為基礎(chǔ),在變換時(shí)定期地使確定的畫(huà)面(半幀或者幀)顯示多次,不是視像的重放速度變快那樣調(diào)整1秒間的顯示畫(huà)面數(shù)。此變換在本說(shuō)明書(shū)中稱(chēng)為“半幀加倍變換”。
參照?qǐng)D34進(jìn)行說(shuō)明。在圖34中,將基于HD視像的畫(huà)面P5根據(jù)DEFT變換得到的半幀作為P5t以及P5b,將基于HD視像的畫(huà)面得到的半幀作為P6t以及P6b。在半幀加倍變換中,在半幀P5t以及P5b之后,半幀P5t被再次顯示,由此變換視像。半幀P5t的第2次顯示結(jié)束后,半幀P6b被顯示,接著半幀P6t被顯示。通過(guò)2次顯示半幀P5t,使其后半幀P6b的顯示時(shí)間只慢1/50秒。由此,快送被1個(gè)半幀分解消除。此處理不只是對(duì)運(yùn)動(dòng)圖像,對(duì)于與此運(yùn)動(dòng)圖像同步重放的字幕等的視像也是同樣的。例如,對(duì)于字幕數(shù)據(jù),在圖31的字幕降頻轉(zhuǎn)換器3215中,將與半幀P5t對(duì)應(yīng)顯示的字幕半幀在與半幀P5b對(duì)應(yīng)顯示的字幕半幀之后插入,其后,顯示與半幀P6b對(duì)應(yīng)顯示的字幕半幀這樣進(jìn)行變換即可。
進(jìn)一步,2次顯示其它的1個(gè)半幀,在1秒間使確定的2個(gè)半幀顯示2次,由緊隨其后的2個(gè)半幀構(gòu)成的畫(huà)面能使重放時(shí)間與和電影素材對(duì)應(yīng)的畫(huà)面進(jìn)行整合。根據(jù)半幀加倍變換,在相同的半幀多次顯示這點(diǎn)上,半幀的第2次顯示時(shí),SD視像能看見(jiàn)晃動(dòng)的可能性是存在的。但是,由于能使畫(huà)面的重放時(shí)間和HD視像進(jìn)行整合,所以,與其視像同步重放的音頻數(shù)據(jù)能按原樣沒(méi)有失真地重放。由此,作為電影素材(24Hz或者23.976Hz)、音頻作為重要的內(nèi)容在PAL中降頻轉(zhuǎn)換時(shí),此半幀加倍的降頻轉(zhuǎn)換處理的方法是適用的。
還有,如從圖31所理解,重放裝置100將HD圖像質(zhì)量的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及靜止圖像數(shù)據(jù)分別獨(dú)立地降頻轉(zhuǎn)換生成SD圖像質(zhì)量的各個(gè)數(shù)據(jù),其后,將其進(jìn)行合成得到SD視像。但是,也可以是在HD圖像質(zhì)量的狀態(tài)下,合成運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)以及靜止圖像數(shù)據(jù),其后將合成的HD視像降頻轉(zhuǎn)換為SD視像,生成SD合成視像。在進(jìn)行這樣的處理時(shí),在圖31的變換部3123中,首先,設(shè)置合成HD圖像質(zhì)量的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)等的構(gòu)成元素,設(shè)置將從此元素的HD合成視像輸出變換為SD視像的降頻轉(zhuǎn)換器即可。
圖35表示根據(jù)第2例的降頻轉(zhuǎn)換處理的順序。此處理代替圖32表示的處理被執(zhí)行。雖然沒(méi)有圖示執(zhí)行此處理的裝置的構(gòu)成,除了上述變換部3123的內(nèi)部構(gòu)成,能由和圖31的重放裝置100的構(gòu)成元素同樣的構(gòu)成元素構(gòu)成。由此,以下,參照?qǐng)D31的重放裝置100進(jìn)行說(shuō)明。
首先重放裝置100從光盤(pán)讀出MPEG數(shù)據(jù)流(S901),多路復(fù)用器(圖中未表示)接收MPEG數(shù)據(jù)流,分離運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)、靜止圖像數(shù)據(jù)、音頻數(shù)據(jù),將這些數(shù)據(jù)通過(guò)緩存器3121送至解碼器3122。解碼器3122分別對(duì)HD視像的運(yùn)動(dòng)圖像數(shù)據(jù)、字幕數(shù)據(jù)、靜止圖像數(shù)據(jù)等進(jìn)行解碼(S902)。
接著,變換部3123取得在HD視像的畫(huà)面數(shù)據(jù)以及字幕數(shù)據(jù)中附加的顯示時(shí)刻信息(PTS)(S903),基于PTS確定HD視像的畫(huà)面數(shù)據(jù)和在其畫(huà)面上顯示的字幕數(shù)據(jù)(S904)。
其后,變換部3123合成確定的HD視像的畫(huà)面數(shù)據(jù)和字幕數(shù)據(jù),生成合成HD視像數(shù)據(jù)(S905)。然后,變換部3123將合成的HD視像的畫(huà)面數(shù)據(jù)變換為SD視像的畫(huà)面數(shù)據(jù)并輸出(S906)。
還有,合成HD視像,其后變換為SD視像的處理能夠利用在圖33以及圖34中說(shuō)明的變換方法。例如,變換為NTSC方式的SD視像能適用2∶3下拉變換,變換為PAL方式的SD視像能進(jìn)行DEFT變換或者半幀加倍變換。另外,預(yù)測(cè)在降頻轉(zhuǎn)換時(shí)具有4∶3的顯示比率的TV上全景和掃描顯示的情況下,字幕的顯示區(qū)域、特別是使橫幅能裝進(jìn)降頻轉(zhuǎn)換后的4∶3的TV中這樣進(jìn)行變換也可以。
基于DEFT變換或者半幀加倍變換的那一個(gè)進(jìn)行變換,可以在每次變換時(shí)由視聽(tīng)者對(duì)重放裝置100發(fā)出指示,也可以事先固定為某一種變換。
進(jìn)一步,也能夠?qū)⒂浭隽送扑]的變換方法的變換指定信息附加在流中,重放裝置100基于此變換指定信息決定變換方法。
圖36表示記述了推薦的變換方法的變換指定信息的數(shù)據(jù)結(jié)構(gòu)。例如,變換指定信息記述在BD的管理信息“YYY.VOBI”內(nèi)以及/或者在MPEG流的“YYY.VOB”內(nèi)也可以。如果是記述在流管理信息的“YYY.VOBI”中,則具有每個(gè)VOB都能夠選擇適當(dāng)?shù)慕殿l轉(zhuǎn)換處理的優(yōu)點(diǎn)。另外,象“BD.INFO”這樣,存儲(chǔ)在盤(pán)的其它區(qū)域中也可以。還有,在本說(shuō)明書(shū)中原則上發(fā)送信息一方的廣播臺(tái)等在MPEG傳輸流內(nèi)記述變換指定信息,進(jìn)行發(fā)送。但是,在記錄時(shí),也可以根據(jù)需要,存儲(chǔ)裝置在MPEG傳輸流附加的管理信息“YYY.VOBI”中記述變換指定信息。
更具體地說(shuō),變換指定信息是根據(jù)在屬性信息Attribute內(nèi)部降頻轉(zhuǎn)換信息DownCon規(guī)定的。降頻轉(zhuǎn)換信息包括標(biāo)記DC_prohibit_flag以及指定推薦的變換方法的信息DC_PAL。
標(biāo)記DC_prohibit_flag表示是否是降頻轉(zhuǎn)換、輸出SD視像可能的內(nèi)容。在標(biāo)記中,當(dāng)禁止降頻轉(zhuǎn)換時(shí)添加“1b”,允許時(shí)添加“0b”。指定推薦的變換方法的信息DC_PAL是指示向PAL方式的SD視像的降頻轉(zhuǎn)換的信息,而且,指示變換方法。如圖36所示,在本實(shí)施方式中,在“DC_PAL”中沒(méi)有推薦的變換方法時(shí)添加“00b”,推薦DEFT變換時(shí)添加“01b”,推薦半幀加倍(FD)變換時(shí)添加“10b”。當(dāng)沒(méi)有特別地指定變換方法的情況下,表示兩種變換都是可能的添加“11b”。
圖37表示基于變換指定信息決定降頻轉(zhuǎn)換方法、重放SD視像的順序。此處理在例如重放裝置100中進(jìn)行。
首先,如果重放裝置100從視聽(tīng)者處接受了重放開(kāi)始的指示,重放裝置100判斷連接的顯示設(shè)備(例如電視)是否能夠不對(duì)重放對(duì)象的HD視像的內(nèi)容進(jìn)行降頻轉(zhuǎn)換進(jìn)行顯示(S1002)。如果連接了能將該內(nèi)容按原樣重放的顯示裝置,則以HD視像的狀態(tài)向顯示設(shè)備輸出(S1005),在其顯示設(shè)備中重放。
另一方面,當(dāng)從HD視像向SD視像的降頻轉(zhuǎn)換是必要的情況下,重放裝置100取得變換指定信息(S1002),參照標(biāo)記DC_prohibit_flag判斷是否被允許(S1003)。如果降頻轉(zhuǎn)換未被允許,則該內(nèi)容的重放結(jié)束。
另一方面,當(dāng)降頻轉(zhuǎn)換被允許的情況下,參照指定推薦的變換方法的信息DC_PAL,確定被推薦的降頻轉(zhuǎn)換方法,基于此方法對(duì)HD視像進(jìn)行降頻轉(zhuǎn)換(S1004)。然后,重放裝置100將降頻轉(zhuǎn)換的SD視像向顯示裝置輸出(S1005)。然后,直到成為該內(nèi)容的重放對(duì)象的區(qū)間的重放結(jié)束為止,繼續(xù)降頻轉(zhuǎn)換處理以及重放輸出。
還有,重放裝置100將關(guān)于上述推薦的變換方法的信息在例如屏上顯示(On Screen Display)顯示的同時(shí),基于視聽(tīng)者的指示決定最終的降頻轉(zhuǎn)換方法也可以。
在本實(shí)施方式中,雖然只記錄了HD圖像質(zhì)量的字幕和靜止圖像數(shù)據(jù),也可以將降頻轉(zhuǎn)換用的SD圖像質(zhì)量的字幕和靜止圖像數(shù)據(jù)記錄在別處,當(dāng)降頻轉(zhuǎn)換時(shí),讓播放機(jī)/使用者能夠進(jìn)行選擇即可。另外,雖然只是存儲(chǔ)了HD圖像質(zhì)量的字幕和靜止圖像數(shù)據(jù),但為了保證降頻轉(zhuǎn)換時(shí)的圖像質(zhì)量,在降頻轉(zhuǎn)換時(shí),合成的字幕也可以利用TrueType那樣的向量圖像字體生成。
在本實(shí)施方式中,對(duì)于字幕的顯示區(qū)域的設(shè)定方法沒(méi)有詳細(xì)地涉及,但考慮降頻轉(zhuǎn)換,對(duì)HD用、降頻轉(zhuǎn)換了的NTSC的字母框(letter box)用、降頻轉(zhuǎn)換的NTSC的全景&掃描用、降頻轉(zhuǎn)換的PAL的字母框用、降頻轉(zhuǎn)換的PAL的全景&掃描用等分別設(shè)定字幕顯示區(qū)域也可以。另外,根據(jù)使用者的喜好能夠變更顯示區(qū)域這樣也可以。
在本實(shí)施方式中,當(dāng)根據(jù)半幀加倍變換進(jìn)行降頻轉(zhuǎn)換時(shí),對(duì)將確定的半幀按原樣再次顯示進(jìn)行了說(shuō)明,但是為了使降頻轉(zhuǎn)換時(shí)的視像的晃動(dòng)減輕,從前后的畫(huà)面生成中間的半幀畫(huà)面,將此半幀畫(huà)面插入,進(jìn)行半幀加倍變換也可以。例如在圖34中,將第3段的50Hz-FD(PAL)再次顯示的第2張的P5t基于24Hz(影片)的P5畫(huà)面和P6畫(huà)面生成也可以。
在實(shí)施方式中,將HD視像的視像以及字幕的數(shù)據(jù)變換為SD圖像質(zhì)量的視像數(shù)據(jù)。但是,當(dāng)SD視像變換為HD圖像質(zhì)量在HDTV上顯示的情況下,也能夠根據(jù)和上述處理同樣的處理,得到視像以及字幕被合成的HD圖像質(zhì)量的數(shù)據(jù)。即本發(fā)明能夠適用于將某一分辨率的視像以及字幕數(shù)據(jù)變換為和其分辨率不同的分辨率的合成視像的數(shù)據(jù)的情況。
通過(guò)以MPEG-TS的T-STD為基礎(chǔ)的模型進(jìn)行了說(shuō)明,但是這只是例子,即使是MPEG-PS和其他視像以及音頻的多路復(fù)用流的情況也同樣能夠適用。
在工業(yè)上應(yīng)用的可能性根據(jù)本發(fā)明,將HD視像向SD視像降頻轉(zhuǎn)換視聽(tīng)時(shí),能夠自動(dòng)地或者根據(jù)使用者的判斷選擇對(duì)應(yīng)內(nèi)容的降頻轉(zhuǎn)換方法成為可能。
另外,將和在HD視像的畫(huà)面上顯示的字幕具有相同內(nèi)容的SD圖像質(zhì)量的字幕與SD視像的畫(huà)面對(duì)應(yīng)生成合成視像,輸出。由此,能使和HD視像具有完全相同內(nèi)容的SD視像被顯示。另外,通過(guò)規(guī)定和字幕(靜止圖像)和運(yùn)動(dòng)圖像的同步重放模型,能夠確保設(shè)備間的互操作性。
權(quán)利要求
1.一種數(shù)據(jù)處理裝置,其特征在于,包括接收部,其接收數(shù)據(jù)流,該數(shù)據(jù)流包含通過(guò)以第1垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的第1主視像數(shù)據(jù)、和與所述第1主視像同步顯示的第1副視像數(shù)據(jù);和變換部,其將所述第1主視像以及所述第1副視像的各個(gè)數(shù)據(jù)變換為通過(guò)以與所述第1垂直掃描頻率不同的第2垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的合成視像的數(shù)據(jù);所述數(shù)據(jù)流包括規(guī)定所述第1主視像以及所述第1副視像的顯示時(shí)刻的時(shí)刻信息;所述變換部對(duì)于與所述第1主視像的畫(huà)面具有相同內(nèi)容的第2主視像的畫(huà)面,通過(guò)與在所述第1主視像的畫(huà)面上顯示的和所述第1副視像具有相同內(nèi)容的第2副視像建立對(duì)應(yīng),生成顯示所述第2主視像以及所述第2副視像的合成視像。
2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理裝置,其特征在于,所述變換部包括視像變換部,其通過(guò)垂直掃描頻率的變換處理,將所述第1主視像的數(shù)據(jù)變換為所述第2主視像的數(shù)據(jù);字幕變換部,其將所述第1副視像的數(shù)據(jù)變換為第2副視像的數(shù)據(jù),并且確定與所述第1副視像的文字同步顯示的所述第1主視像的畫(huà)面,將與所確定的所述第1主視像的畫(huà)面對(duì)應(yīng)的所述第2主視像的畫(huà)面、和與所述第1副視像的文字對(duì)應(yīng)的所述第2副視像的文字建立對(duì)應(yīng);和合成部,其將建立對(duì)應(yīng)后的所述第2主視像的數(shù)據(jù)和第2副視像的數(shù)據(jù)合成,生成所述合成視像的數(shù)據(jù)。
3.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理裝置,其特征在于,所述變換部包括合成部,其將根據(jù)所述時(shí)刻信息同步的所述第1主視像以及所述第1副視像重疊,生成重疊視像;和視像變換部,其將所述重疊視像的數(shù)據(jù)變換為所述合成視像的數(shù)據(jù)。
4.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理裝置,其特征在于,所述變換部將規(guī)定分辨率的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為與所述規(guī)定分辨率不同的分辨率的合成視像的數(shù)據(jù)。
5.根據(jù)權(quán)利要求4所述的數(shù)據(jù)處理裝置,其特征在于,所述變換部將電影素材的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為以NTSC以及PAL中的一種方式顯示的合成視像的數(shù)據(jù)。
6.根據(jù)權(quán)利要求5所述的數(shù)據(jù)處理裝置,其特征在于,所述變換部將電影素材的所述第1主視像以及所述第1副視像的1幀變換為以PAL顯示的所述合成視像的2個(gè)以上的半幀,在向半幀變換時(shí),將同一個(gè)半幀定期地多次插入。
7.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理裝置,其特征在于,所述數(shù)據(jù)流包含表示在所述變換部中變換可否的變換允許信息;所述變換部在所述變換允許信息表示允許變換的情況下進(jìn)行所述變換。
8.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理裝置,其特征在于,所述數(shù)據(jù)流包含指定變換種類(lèi)的變換指定信息;所述變換部進(jìn)行根據(jù)所述變換指示信息指定的所述種類(lèi)的變換。
9.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理裝置,其特征在于,進(jìn)一步包括輸入部,其輸入指定變換種類(lèi)的變換指定信息;所述變換部進(jìn)行由所述變換指定信息所指定的所述種類(lèi)的變換。
10.根據(jù)權(quán)利要求9所述的數(shù)據(jù)處理裝置,其特征在于,所述變換部基于所述變換指示信息進(jìn)行將各張畫(huà)面一次一次地顯示的變換以及將確定的畫(huà)面多次顯示的變換之中的一種,生成PAL方式的合成視像。
11.一種數(shù)據(jù)處理方法,其特征在于,包括接收步驟,其接收數(shù)據(jù)流,該數(shù)據(jù)流包含通過(guò)以第1垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的第1主視像數(shù)據(jù)、和與所述第1主視像同步顯示的第1副視像數(shù)據(jù);和變換步驟,其將所述第1主視像以及所述第1副視像的各個(gè)數(shù)據(jù)變換為通過(guò)以與所述第1垂直掃描頻率不同的第2垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的合成視像的數(shù)據(jù);所述數(shù)據(jù)流包括規(guī)定所述第1主視像以及所述第1副視像的顯示時(shí)刻的時(shí)刻信息;在所述變換步驟中,對(duì)于與所述第1主視像的畫(huà)面具有相同內(nèi)容的第2主視像的畫(huà)面,通過(guò)與在所述第1主視像的畫(huà)面上顯示的和所述第1副視像具有相同內(nèi)容的第2副視像建立對(duì)應(yīng),生成顯示所述第2主視像以及所述第2副視像的合成視像。
12.根據(jù)權(quán)利要求11所述的數(shù)據(jù)處理方法,其特征在于,所述變換步驟包括視像變換步驟,其通過(guò)垂直掃描頻率的變換處理,將所述第1主視像的數(shù)據(jù)變換為所述第2主視像的數(shù)據(jù);字幕變換步驟,其將所述第1副視像的數(shù)據(jù)變換為第2副視像的數(shù)據(jù),并且確定與所述第1副視像的文字同步顯示的所述第1主視像的畫(huà)面,將與所確定的所述第1主視像的畫(huà)面對(duì)應(yīng)的所述第2主視像的畫(huà)面、和與所述第1副視像的文字對(duì)應(yīng)的所述第2副視像的文字建立對(duì)應(yīng);和合成步驟,其將建立對(duì)應(yīng)后的所述第2主視像的數(shù)據(jù)和第2副視像的數(shù)據(jù)合成,生成所述合成視像的數(shù)據(jù)。
13.根據(jù)權(quán)利要求11所述的數(shù)據(jù)處理方法,其特征在于,所述變換步驟包括合成步驟,其將根據(jù)所述時(shí)刻信息同步的所述第1主視像以及所述第1副視像重疊,生成重疊視像;和視像變換步驟,其將所述重疊視像的數(shù)據(jù)變換為所述合成視像的數(shù)據(jù)。
14.根據(jù)權(quán)利要求11所述的數(shù)據(jù)處理方法,其特征在于,在所述變換步驟中,將規(guī)定分辨率的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為與所述規(guī)定分辨率不同的分辨率的合成視像的數(shù)據(jù)。
15.根據(jù)權(quán)利要求14所述的數(shù)據(jù)處理方法,其特征在于,在所述變換步驟中,將電影素材的所述第1主視像以及所述第1副視像的數(shù)據(jù)變換為以NTSC以及PAL中的一種方式顯示的合成視像的數(shù)據(jù)。
16.根據(jù)權(quán)利要求15所述的數(shù)據(jù)處理方法,其特征在于,在所述變換步驟中,將電影素材的所述第1主視像以及所述第1副視像的1幀變換為以PAL顯示的所述合成視像的2個(gè)以上的半幀,在向半幀變換時(shí),將同一個(gè)半幀定期地多次插入。
17.根據(jù)權(quán)利要求11所述的數(shù)據(jù)處理方法,其特征在于,所述數(shù)據(jù)流包含表示在所述變換步驟中變換可否的變換允許信息;在所述變換步驟中,在所述變換允許信息表示允許變換的情況下進(jìn)行所述變換。
18.根據(jù)權(quán)利要求11所述的數(shù)據(jù)處理方法,其特征在于,所述數(shù)據(jù)流包含指定變換種類(lèi)的變換指定信息;在所述變換步驟中,進(jìn)行根據(jù)所述變換指示信息指定的所述種類(lèi)的變換。
19.根據(jù)權(quán)利要求11所述的數(shù)據(jù)處理方法,其特征在于,進(jìn)一步包括輸入步驟,其輸入指定變換種類(lèi)的變換指定信息;在所述變換步驟中,進(jìn)行由所述變換指定信息所指定的所述種類(lèi)的變換。
20.根據(jù)權(quán)利要求19所述的數(shù)據(jù)處理方法,其特征在于,在所述變換步驟中,基于所述變換指示信息進(jìn)行將各張畫(huà)面一次一次地顯示的變換以及將確定的畫(huà)面多次顯示的變換之中的一種,生成PAL方式的合成視像。
全文摘要
本發(fā)明的數(shù)據(jù)處理裝置包括接收部,其接收數(shù)據(jù)流,該數(shù)據(jù)流包含通過(guò)以第1垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的第1主視像數(shù)據(jù)、和與第1主視像同步顯示的第1副視像數(shù)據(jù);和變換部,其將第1主視像以及第1副視像的各個(gè)數(shù)據(jù)變換為通過(guò)以與第1垂直掃描頻率不同的第2垂直掃描頻率切換多張畫(huà)面而進(jìn)行顯示的合成視像的數(shù)據(jù)。數(shù)據(jù)流包括規(guī)定第1主視像以及第1副視像的顯示時(shí)刻的時(shí)刻信息。變換部對(duì)于與第1主視像的畫(huà)面具有相同內(nèi)容的第2主視像的畫(huà)面,通過(guò)與在第1主視像的畫(huà)面上顯示的和第1副視像具有相同內(nèi)容的第2副視像建立對(duì)應(yīng),生成顯示第2主視像以及第2副視像的合成視像。
文檔編號(hào)H04N5/45GK1706187SQ200480001270
公開(kāi)日2005年12月7日 申請(qǐng)日期2004年3月2日 優(yōu)先權(quán)日2003年3月13日
發(fā)明者矢羽田洋, 岡田智之, 池田航 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社