專利名稱：現(xiàn)場提交數(shù)字信號(hào)的方法
現(xiàn)場提交數(shù)字信號(hào)的方法技術(shù)領(lǐng)域本申請(qǐng)涉及從一系列音頻-視頻數(shù)據(jù)片段實(shí)時(shí)產(chǎn)生音頻-視頻傳 輸流的方法、產(chǎn)生與所述音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的方法、 所述方法在游戲機(jī)中的使用、借助于數(shù)據(jù)流實(shí)時(shí)提交數(shù)字信號(hào)的方 法、實(shí)時(shí)重放所接收數(shù)字信號(hào)的方法。本申請(qǐng)還涉及用于實(shí)時(shí)產(chǎn)生音 頻 - 視頻傳輸流的裝置、用于產(chǎn)生與所述音頻-視頻傳輸流相關(guān)聯(lián)的 元數(shù)據(jù)的裝置、用于提交數(shù)字信號(hào)的廣播系統(tǒng)和用于接收并重放數(shù)字 信號(hào)的重放系統(tǒng)。
背景技術(shù)：
新形式消費(fèi)類電子產(chǎn)品不斷研發(fā)。許多努力已經(jīng)集中在互聯(lián)網(wǎng)和 家庭娛樂系統(tǒng)的匯聚上。通過將廣播的音頻-視頻內(nèi)容與本地可用的 音頻-視頻內(nèi)容合并，重要地區(qū)具有了交互性且增強(qiáng)了功能性。在諸如歐洲MHP (多媒體家庭平臺(tái))或US Dase平臺(tái)的數(shù)字視頻廣播(DVB) 地區(qū)中 一些行業(yè)論壇透露利用互聯(lián)網(wǎng)資源來增強(qiáng)功能性。例如，預(yù)想下一代光盤播放器/記錄器，例如藍(lán)光播放器/記錄器， 將具有音頻和視頻數(shù)據(jù)可以從工作室網(wǎng)絡(luò)服務(wù)器流傳播以便通過BD-ROM播放器顯示在TV上的功能。這種流傳播通過在服務(wù)器上將視頻數(shù) 據(jù)分成許多小文件然后通過HTTP請(qǐng)求單獨(dú)下載這些文件來發(fā)生。在播 放之后，可選擇地再次刪除這些小文件。所述的流傳播方法在本領(lǐng)域 被稱為"漸進(jìn)播放歹'J表(progressive playlist)，，。一種用于編碼音頻-視頻內(nèi)容的優(yōu)選編碼方法是變化率編碼，因 為其對(duì)給定的編碼質(zhì)量標(biāo)準(zhǔn)來說允許較高的壓縮水平。因此，為了允 許技巧播放，除音頻-視頻內(nèi)容之外，與視頻和音頻信息相關(guān)的元數(shù) 據(jù)儲(chǔ)存在光盤上。例如，在藍(lán)光只讀光盤(BD-R0M)的情況下與視頻 復(fù)用有關(guān)的元數(shù)據(jù)儲(chǔ)存在光盤上的單獨(dú)文件中。最重要的是與特征點(diǎn) 信息相應(yīng)的元數(shù)據(jù)儲(chǔ)存在被稱為剪輯文件的單獨(dú)文件中。特征點(diǎn)信息 包括用于回放的時(shí)間軸上的點(diǎn)與傳輸流文件中的偏移之間的映射。特
征點(diǎn)信息用于支持技巧播放模式，并且回放必須從時(shí)間軸上的特定點(diǎn) 開始。對(duì)于傳輸流文件的視頻數(shù)據(jù)來說，特征點(diǎn)信息映射對(duì)于每個(gè)I-幀來說通常包括一個(gè)條目。對(duì)于只具有音頻數(shù)據(jù)的傳輸流來說，映射 通常包括規(guī)則間隔的多個(gè)條目。為了完成視頻的回放，"回放機(jī)，，需要三級(jí)文件播放列表、剪輯和傳輸流。在以下白皮書中可以找到對(duì)藍(lán)光應(yīng)用可預(yù)見的與數(shù)據(jù)結(jié)構(gòu)相關(guān)的 更多信息 "Blu-ray Disc Format: 2a-logical and audio visual format specifications for BD-RE ，， 和 "Blu-ray Disc Format: 2b-logical and audio visual format specifications for BD-RE"，在此引入作為參考。關(guān)于可記錄格式(BD-RE)的白皮書包 括與剪輯信息文件的內(nèi)容和結(jié)構(gòu)相關(guān)的詳細(xì)信息，其也可以應(yīng)用于BD-ROM格式。炎凝潛^r;^潛放W4在圖1中，示出了回i文所需的所述三級(jí)文件，例如，相應(yīng)于應(yīng)當(dāng) 以"漸進(jìn)播放列表"法流傳播的電影宣傳片的情況。在頂行上存在一 個(gè)播放列表文件，與整個(gè)電影宣傳片相應(yīng)，描述了許多小部分。在中間行中是包括用于回放每個(gè)小部分的元數(shù)據(jù)的剪輯文件，在底部有用 于每個(gè)小部分的傳輸流文件。為了簡化播放器的執(zhí)行，需要播放列表和剪輯文件為ALL模式， 該模式在回放開始前可用于回放機(jī)制?？傊@些文件很小，以致于全 部下載它們不會(huì)太多地延遲開始進(jìn)行回放。然而，在實(shí)時(shí)流情況下存 在問題，因?yàn)閍) 剪輯文件必須包括指針以便確定傳輸流文件內(nèi)部的字節(jié)位置； 同時(shí)b) 更高數(shù)目的傳輸流(mt2s)文件仍然不可用，因?yàn)樗鼈內(nèi)孕栌?錄。換言之，問題在于如何排列具有傳輸流文件中數(shù)據(jù)的剪輯文件中 的指針，剪輯文件必須從開始就可用，而傳輸率文件中的數(shù)據(jù)由于必須被記錄仍然是不可用的。 發(fā)明內(nèi)容本發(fā)明的目的在于提供一種上述問題的解決方案。通過實(shí)時(shí)產(chǎn)生
以權(quán)利要求1為特征的音頻-視頻傳輸流來實(shí)現(xiàn)此目的。使用術(shù)語"實(shí) 時(shí)，，在本領(lǐng)域有些不精確。相對(duì)于本發(fā)明來說，我們將"實(shí)時(shí)"定義 為時(shí)間周期，其恰好在如下所述放映時(shí)間長度和位長度已經(jīng)被預(yù)先確 定的時(shí)間點(diǎn)之后開始。通過將可變位長度和預(yù)定放映時(shí)間長度的音頻-視頻數(shù)據(jù)片段序 列以所述片段產(chǎn)生或接收的順序組合到一起而實(shí)時(shí)產(chǎn)生音頻-視頻傳 輸流。進(jìn)行這種產(chǎn)生以便與相繼的音頻-視頻數(shù)據(jù)片段相應(yīng)的部分音頻 -視頻傳輸流(即，包含音頻或視頻或二者的傳輸流)通過填充數(shù)據(jù)被 分隔開。選擇相繼部分之間填充數(shù)據(jù)的數(shù)量以便使相繼部分的開始位 置之間的間隔與預(yù)定的位長度相應(yīng)。如上文所述添加填充數(shù)據(jù)使得音 頻-視頻傳輸流包括預(yù)定放映時(shí)間長度和預(yù)定位長度的多個(gè)部分的序 列。根據(jù)本發(fā)明在音頻-視頻傳輸流中存在預(yù)定放映時(shí)間長度和預(yù)定位 長度的各部分帶來的優(yōu)點(diǎn)在于在使所有音頻-視頻數(shù)據(jù)片段可用之 前，回放所需的相關(guān)元數(shù)據(jù)是可預(yù)見的并且可以計(jì)算且使其可為播放 器中的回放機(jī)制所用。因此，如果計(jì)算這種相關(guān)元數(shù)據(jù)且使其對(duì)播放 器可用，則"現(xiàn)場，，音頻-視頻內(nèi)容的實(shí)時(shí)回放是可能的，即，該音頻 -視頻內(nèi)容包含在實(shí)時(shí)期間產(chǎn)生的數(shù)據(jù)位。在有利實(shí)施例中，預(yù)定的位長度是恒定的，即，對(duì)于所有片段來 說是相同的，選擇恒定值使其大于音頻-視頻數(shù)據(jù)片段的最大預(yù)計(jì)位長度。音頻-視頻數(shù)據(jù)片段可以有利地具有恒定的預(yù)定放映時(shí)間長度；因 此預(yù)計(jì)的最大位長度可以根據(jù)所用的壓縮參數(shù)來預(yù)計(jì)。 一方面必須確 保達(dá)到預(yù)定位長度的部分所需的填充數(shù)據(jù)數(shù)量為正。如果存在至少一 個(gè)音頻-視頻數(shù)據(jù)片段，其位長度超過預(yù)定的位長度，則在所有音頻-視頻片段序列產(chǎn)生或接收之前不能產(chǎn)生相關(guān)的元數(shù)據(jù)。在有利實(shí)施例中，音頻-視頻傳輸流通過將來自笫二音頻-視頻傳 輸流的音頻-視頻數(shù)據(jù)與所接收或產(chǎn)生的音頻-視頻數(shù)據(jù)片段進(jìn)一步組 合在一起而產(chǎn)生。優(yōu)選地，在視頻多路復(fù)用的情況下，填充數(shù)據(jù)采取 空包的形式。本發(fā)明還涉及產(chǎn)生與可以從音頻-視頻數(shù)據(jù)片段序列產(chǎn)生的音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的方法，音頻-視頻傳輸流的產(chǎn)生根據(jù)上文 所述的本發(fā)明方法進(jìn)行。該方法的特征在于元數(shù)據(jù)至少包括與開始位 置相關(guān)且與相應(yīng)于音頻-視頻數(shù)據(jù)片段的部分音頻-視頻傳輸流的放映
時(shí)間相關(guān)的信息，并且元數(shù)據(jù)在至少一個(gè)音頻-視頻數(shù)據(jù)片段產(chǎn)生或接 收之前產(chǎn)生。這種產(chǎn)生元數(shù)據(jù)的方法帶來的優(yōu)點(diǎn)在于在所有音頻-視頻 數(shù)據(jù)片段產(chǎn)生或接收之前，元數(shù)據(jù)對(duì)回放裝置來說可以是可用的，由 此啟動(dòng)實(shí)時(shí)流。
本發(fā)明還涉及通過數(shù)據(jù)流實(shí)時(shí)提交數(shù)字信號(hào)的方法，數(shù)據(jù)流包括 根據(jù)上文所述的相應(yīng)的本發(fā)明方法從音頻-視頻數(shù)據(jù)片段序列產(chǎn)生的 音頻-視頻傳輸流和根據(jù)上文所述的相應(yīng)的本發(fā)明方法產(chǎn)生的相關(guān)元 數(shù)據(jù)。
本發(fā)明還涉及通過數(shù)據(jù)流實(shí)時(shí)提交數(shù)字信號(hào)的方法，該數(shù)據(jù)流包 括根據(jù)上文所述的相應(yīng)的本發(fā)明方法產(chǎn)生的音頻-視頻數(shù)據(jù)片段序列 和根據(jù)上文所述的相應(yīng)的本發(fā)明方法產(chǎn)生的相關(guān)元數(shù)據(jù)。
本發(fā)明還涉及數(shù)字信號(hào)，其包括根據(jù)上文所述的相應(yīng)的本發(fā)明方 法產(chǎn)生的音頻-視頻傳輸流或者包括與音頻-視頻傳輸流相關(guān)的元數(shù) 據(jù)，元數(shù)據(jù)的產(chǎn)生根據(jù)上文所述的相應(yīng)的本發(fā)明方法進(jìn)行。
本發(fā)明還涉及根據(jù)權(quán)利要求1的實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法
或根據(jù)權(quán)利要求5的產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的方法在 游戲機(jī)中的應(yīng)用。通過游戲機(jī)，我們希望系統(tǒng)不通過記錄真實(shí)世界中 的事物來產(chǎn)生音頻-視頻內(nèi)容，而是通過計(jì)算的方式來產(chǎn)生音頻-視頻 內(nèi)容，以便表示模擬或虛擬的實(shí)體，例如，游戲中的實(shí)體。
本發(fā)明還涉及根據(jù)權(quán)利要求16的用于產(chǎn)生音頻-視頻傳輸流的裝置。
本發(fā)明還涉及用于產(chǎn)生與音頻-視頻數(shù)據(jù)片段序列相關(guān)聯(lián)的元數(shù) 據(jù)的裝置。
本發(fā)明還涉及包括用于產(chǎn)生音頻-視頻流的根據(jù)本發(fā)明裝置的廣
本發(fā)明還涉及廣播裝置，其包括用于產(chǎn)生與音頻-視頻數(shù)據(jù)片段序 列相關(guān)聯(lián)的元數(shù)據(jù)的根據(jù)本發(fā)明的裝置。


將參考以下附圖來評(píng)價(jià)本發(fā)明的特征和優(yōu)點(diǎn)，其中: 圖1示意性地示出了三級(jí)文件為了能夠回放音頻-視頻傳輸流， 回放裝置所需的播放列表、剪輯和傳輸流；圖2示意性地示出了根據(jù)本發(fā)明實(shí)施例產(chǎn)生音頻-視頻傳輸流的 方法和產(chǎn)生與所述音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的方法；圖3示意性地示出了根據(jù)本發(fā)明實(shí)施例的傳輸系統(tǒng)，其包括廣播 裝置和回放裝置；圖4示意性地示出了根據(jù)本發(fā)明實(shí)施例的廣播裝置；圖5示意性地示出了根據(jù)本發(fā)明實(shí)施例的回放裝置。
具體實(shí)施方式
在圖1中示出了為了能夠回放音頻-視頻傳輸流回放裝置所需的 三級(jí)文件。例如，這可以與根據(jù)"漸進(jìn)播放列表"法應(yīng)當(dāng)流傳播的電 影宣傳片相應(yīng)。在頂行上有一個(gè)播放列表文件11，在上述示例中與要 流傳播的整個(gè)電影宣傳片相應(yīng)，播放列表文件11描述了許多小項(xiàng)目。 與本播放列表文件ll相關(guān)聯(lián)，在中間行示出了與每個(gè)小項(xiàng)目相應(yīng)的剪 輯文件12、 15。在第三級(jí)，相應(yīng)的傳輸流文件13、 14與每個(gè)剪輯文件12、 15相 關(guān)聯(lián)。在實(shí)時(shí)流情況下，散列的(hashed )傳輸流文件14仍然不可用 于回放裝置，即，它們?nèi)匀粵]有被接收和/或未產(chǎn)生。問題在于回放裝 置需要與這些不可用傳輸流文件14相關(guān)的剪輯文件15在回放開始之 前可用。圖2示意性地示出了根據(jù)克服上述問題的本發(fā)明實(shí)施例的產(chǎn)生音 頻-視頻傳輸流的方法和產(chǎn)生與所述音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù) 據(jù)的方法。例如，攝像機(jī)102現(xiàn)場記錄了正在評(píng)論電影的導(dǎo)演101。該記錄 采取傳輸流103的形式，傳輸流包括位長度不相等但放映時(shí)間長度相 等的音頻-視頻數(shù)據(jù)片段的序列。例如，信號(hào)片段105包括相應(yīng)的特 征點(diǎn)104。由于片段105的大小不等，因此這些特征點(diǎn)104以不相等 的偏移109出現(xiàn)在傳輸流103中，在圖2所示的示例中，偏移為0、 30、 60、 80。相應(yīng)于片段105的剪輯文件106必須包括與這些特征點(diǎn)有關(guān) 的信息，也就是說其應(yīng)當(dāng)包括所有偏移的列表。與傳輸流103相關(guān)的 偏移的這種列表不能在全部傳輸流103可用之前產(chǎn)生。相反，在根據(jù)
本發(fā)明的產(chǎn)生相關(guān)元數(shù)據(jù)的方法中，指針107以寬間隔的回放偏移110 添加到剪輯文件106中。在根據(jù)本發(fā)明的產(chǎn)生音頻-視頻傳輸流121 的方法中，填充數(shù)據(jù)108插在所產(chǎn)生的音頻視頻傳輸流121中的各個(gè) 單獨(dú)片段lll之間。在將音頻視頻傳輸流121提供到回放機(jī)之前，確 保了所述傳輸流121中的回放偏移110匹配剪輯文件106中的相應(yīng)指 針107。因此根據(jù)本發(fā)明與傳輸流121相關(guān)聯(lián)的元數(shù)據(jù)可以在產(chǎn)生實(shí)際 的數(shù)據(jù)片段之前被預(yù)測并產(chǎn)生。因此可以在視頻回放過程開始之前如 播放器所要求的那樣下載相關(guān)的元數(shù)據(jù)。表1概括了本技術(shù)領(lǐng)域已知的音頻-視頻傳輸流103和根據(jù)本發(fā) 明的音頻-視頻傳輸流121之間的差別。放映時(shí)間(PTS) 序列(秒)源包數(shù)量(SPN )已知TS (103)0s， 0. 5s， ls， 1. 5s…0， 30， 60， 80，...本發(fā)明TS ( 121 )0s， 0. 5s， ls， 1. 5s…0， 100， 200， 300，…例如，在藍(lán)光光盤(BD)介質(zhì)和播放器的情況下，剪輯信息文件 包括與放映時(shí)間(PTS)相關(guān)的信息和I-幀的文件位置(SPN，源包 數(shù)量)。實(shí)際上，片段之間的預(yù)定間隔應(yīng)當(dāng)大于上表所示的，以便處 理用于記錄的最差情況的圖片組(GOP)長度。此外，除產(chǎn)生固定的I -幀位置之外，填充還可以用于獲得用于剪輯信息文件中一些其他SPN 參考的固定位置。如果將流數(shù)據(jù)在本地存儲(chǔ)器上長時(shí)間保存，則填充 數(shù)據(jù)可以刪除以便節(jié)省空間。在這種情況下，可以使用新的剪輯(CPI ) 信息文件，其包括未填充TS文件的SPN位置。圖3示意性地示出了根據(jù)本發(fā)明實(shí)施例的包括廣播裝置和回放裝 置的傳輸系統(tǒng)；將對(duì)根據(jù)本發(fā)明的音頻傳輸流121和根據(jù)本發(fā)明的相 關(guān)元數(shù)據(jù)106進(jìn)行進(jìn)一步的參考，如圖2所公開的。例如通過攝像機(jī)102現(xiàn)場進(jìn)行的記錄通過廣播裝置作為廣播裝置 的傳輸流(TS2)實(shí)時(shí)可用，廣播裝置例如為工作室網(wǎng)絡(luò)服務(wù)器300。 傳輸流TS2被回放裝置400接收或下載，回放裝置例如為藍(lán)光光盤 (BD)播放器。通常，在藍(lán)光光盤(BD)播放器的情況下，在Java虛 擬機(jī)上運(yùn)行Java程序，控制層(401)控制傳輸流TS2的下載。優(yōu)選地，雖然不是必需地，所記錄數(shù)據(jù)103的傳輸在填充數(shù)據(jù)108 添加之前進(jìn)行。填充數(shù)據(jù)108通過控制下載過程的Java程序401優(yōu)選 添加到播放器400 —側(cè)上。因此該Java程序401需要具有1) 所記錄的數(shù)據(jù)，即，音頻視頻片段103的序列(其可以在 網(wǎng)絡(luò)上檢索得到，優(yōu)選以通過HTTP請(qǐng)求的文件形式)；2) 額外指令，其指定填充數(shù)據(jù)應(yīng)當(dāng)如何添加到所記錄的數(shù) 據(jù)，以便產(chǎn)生與剪輯文件對(duì)準(zhǔn)的傳輸流文件。這些額外指令可以a) 在網(wǎng)絡(luò)上傳送(在該情況下其優(yōu)選采取偏移和長度列表 的形式)，如圖2或表1所示；b) 也可以儲(chǔ)存在光盤上，或者編碼在Java程序自身中。 在后一情況下，數(shù)據(jù)優(yōu)選采取指令形式，該指令指出如何解析(識(shí)別 某些標(biāo)記)下載的記錄數(shù)據(jù)以及如何在遇到某些標(biāo)記時(shí)產(chǎn)生動(dòng)作。另外，次優(yōu)選的解決方案是，在網(wǎng)絡(luò)上傳輸之前，將填充數(shù)據(jù)添 加在工作室網(wǎng)絡(luò)服務(wù)器一側(cè)，在添加后壓縮該文件。然后在接收該文 件后在播放器中將其解壓。本地產(chǎn)生的或者下栽的剪輯文件儲(chǔ)存在儲(chǔ)存空間403中(或者存 儲(chǔ)器內(nèi)或者盤上)。注意，雖然附圖和本申請(qǐng)的內(nèi)容集中在音頻/視頻數(shù)據(jù)的實(shí)時(shí)流 上，但在其他情況下沒有任何視頻只有音頻軌道也能被實(shí)時(shí)流傳播。 后一情況的具體示例為直播事件，其中導(dǎo)演說出聲音注釋同時(shí)控制儲(chǔ) 存在BD-ROM播放器中的光盤上的電影回放。以這種方式，導(dǎo)演可以響 應(yīng)電影部分示出的問題，同時(shí)以話外音說話。圖4示意性地示出了根據(jù)本發(fā)明實(shí)施例的廣播裝置；輸入裝置(301 )接收將要流傳播的音頻-視頻內(nèi)容。壓縮器 (302 )將音頻-視頻內(nèi)容壓縮為MPEG2流(MPEG2)。壓縮優(yōu)選包括 可變位的壓縮率。任選地，編碼器(303 )可以在目錄鍵的控制下通過 加密MPEG2流將其編碼，然后將MPEG2流傳送到多路復(fù)用器(304 )。 除MPEG2流之外，多路復(fù)用器(104)還可以接收一個(gè)或更多編碼的或 未編碼的數(shù)據(jù)流(DS)和來自控制器(305 )的其他數(shù)字信號(hào)。多路復(fù) 用器(304 )通過時(shí)分復(fù)用將編碼的或未編碼的MPEG2流和一個(gè)或更多 數(shù)據(jù)流(DS)集合為傳輸流(TS1)，該傳輸流(TS1)包括固定放映 時(shí)間長度和可變位長度的音頻數(shù)據(jù)片段的序列。編碼和復(fù)用可以在分 開的單元中進(jìn)行，并且如果需要，在不同位置處進(jìn)行。同樣，傳輸流 (TS1)包括一種或多種類型的流，其對(duì)名為服務(wù)的技術(shù)領(lǐng)域的技術(shù)人 員也是已知的，每個(gè)服務(wù)包括一個(gè)或多個(gè)服務(wù)分量。服務(wù)分量還被稱 為單媒體要素。服務(wù)分量的例子有視頻基本流、音頻基本流、小標(biāo)題 分量、Java應(yīng)用(Xlet)或其他數(shù)據(jù)類型。傳輸流通過時(shí)分復(fù)用一個(gè) 或多個(gè)基本流和/或數(shù)據(jù)來形成。根據(jù)本發(fā)明的廣播裝置可以包括填充部件(307 )，其用于根據(jù) 參考圖2和3所述的相應(yīng)方法之一將填充數(shù)據(jù)添加到傳輸流(TS1 )并 產(chǎn)生填充傳輸流(TS2)。這種填充部件(307 )可以形成為單獨(dú)的硬 件單元或者優(yōu)選地通過合適的固件集成在控制器(305 )中。根據(jù)本發(fā) 明的廣播裝置還可以包括元數(shù)據(jù)產(chǎn)生部件(306 )，其用于根據(jù)參考圖 2和3所述的相應(yīng)方法之一產(chǎn)生相關(guān)的元數(shù)據(jù)。這種元數(shù)據(jù)產(chǎn)生部件 (306 )可以形成為單獨(dú)的硬件單元或者優(yōu)選地通過合適的固件集成在 控制器(305 )中。所產(chǎn)生的元數(shù)據(jù)通過控制器305提供到多路復(fù)用器 304以便作為分量插到兩個(gè)流之一中或者直接以單獨(dú)文件的形式提供 給傳輸器(308 )。例如，傳輸器(308 )可以是網(wǎng)絡(luò)服務(wù)器，產(chǎn)生將被播放的現(xiàn)場 信號(hào)(LS)。根據(jù)具體實(shí)施例，傳輸器(308 )可以接收包括音頻數(shù)據(jù) 片段序列的音頻視頻流(TS1)(優(yōu)選實(shí)施例)或者填充的音頻視頻流 (TS2)。傳輸器還可以接收來自控制器305的相關(guān)元數(shù)據(jù)。圖5示意性地示出了根據(jù)本發(fā)明實(shí)施例的回放裝置。本發(fā)明可以實(shí)施的回放裝置400的典型例子包括機(jī)頂盒(STB)、 裝備有數(shù)字通用光盤(DVD)和/或藍(lán)光光盤(BD)回放能力的數(shù)字電 視單元、或者基于娛樂系統(tǒng)的電腦，其在名為家庭媒體服務(wù)下也是已 知的。同時(shí)，對(duì)于實(shí)施我們的發(fā)明并不必需的，回放裝置400可以遵 守已定義的開放平臺(tái)，例如歐洲MHP (多媒體家庭平臺(tái))或US Dase 平臺(tái)。這些公共平臺(tái)定義了可以被終端用戶系統(tǒng)識(shí)別并執(zhí)行的幾種類 型的應(yīng)用。例如，歐洲MHP平臺(tái)指定應(yīng)用可以包括JavaTM應(yīng)用。這種 應(yīng)用在名為Xlet的領(lǐng)域的技術(shù)人員來說是已知的。多路復(fù)用器5 01將接收的現(xiàn)場信號(hào)(LS )接合到數(shù)據(jù)流5 02和音 頻503、視頻504以及小標(biāo)題流505中。音頻、視頻和小標(biāo)題流(503、 504、 505 )被饋送到控制器506，控制器506通過特定的操作系統(tǒng)控 制回放裝置400的所有軟件和硬件模塊。音頻/視頻內(nèi)容也可以通過條
件存取子系統(tǒng)(圖5未示出)來傳輸，其確定存取許可并且可以解密 數(shù)據(jù)?？刂破?06將音頻503和視頻504以及小標(biāo)題505的流提供到 回放/記錄機(jī)518，該回放/記錄機(jī)將它們轉(zhuǎn)換成適用于視頻和音頻519 重現(xiàn)裝置(例如分別為顯示器和揚(yáng)聲器)的信號(hào)。回放裝置的功能在通常應(yīng)用控制器509的控制之下。例如，在BD 播放器的情況下，這相應(yīng)于提取層，其在名為應(yīng)用管理器的領(lǐng)域中是 已知的，提取層存在于將被回放裝置執(zhí)行的任何應(yīng)用和回放裝置的特 定系統(tǒng)資源之間。通過多路復(fù)用器501輸出的數(shù)據(jù)流502被饋送到應(yīng) 用管理器509。包括在數(shù)據(jù)流502中的任何應(yīng)用將被應(yīng)用管理器509 執(zhí)行。如上述廣播裝置300，根據(jù)本發(fā)明包括在所接收的現(xiàn)場信號(hào)中的 數(shù)據(jù)流應(yīng)當(dāng)包括相關(guān)的元數(shù)據(jù)或如何產(chǎn)生相關(guān)元數(shù)據(jù)的指令。因此應(yīng) 用管理器509可以包括用于產(chǎn)生元數(shù)據(jù)的部件521。應(yīng)用管理器509 可以產(chǎn)生或傳輸元數(shù)據(jù)，例如以剪輯文件的形式，將其傳輸?shù)皆獢?shù)據(jù) 存儲(chǔ)部件517,元數(shù)據(jù)存儲(chǔ)部件可以相應(yīng)于存儲(chǔ)器或者合適的存儲(chǔ)媒 介。控制器506還可以包括組合部件507，用于接收幾個(gè)音頻、視頻 和小標(biāo)題流并將它們組合成音頻視頻傳輸流。根據(jù)本發(fā)明填充部件508 確保添加填充數(shù)據(jù)，如參考圖2和3所述。這種組合部件507和/或填 充部件508可以形成為單獨(dú)的硬件單元或者優(yōu)選地通過合適的固件集 成在控制器506中。組合部件507和填充部件508可以受應(yīng)用管理器 509的控制?；胤叛b置包括部件511，用于從記錄載體510讀取和/或?qū)懙接涗?載體510上。這種讀取和/或?qū)懭氩考?11是本領(lǐng)域已知的并且不再進(jìn) 一步詳述。裝置包括多路復(fù)用器512，用于多路復(fù)用從記錄載體510 讀取的音頻-視頻內(nèi)容。雖然圖5中示出了不同的模塊，用于多路分 離現(xiàn)場流(LS)的兩個(gè)多路分離器501和512以及從記錄載體510讀 取的音頻-視頻內(nèi)容可以被能夠處理多路輸入流的單個(gè)多路分離器實(shí) 現(xiàn)。組合部件507可以將所接收的流(503、 504、 506 )或其部分與 從記錄載體510讀取的流(514、 515、 516)或其部分進(jìn)行組合。例如， 這發(fā)生在直播事件的前述示例中，其中導(dǎo)演說出音頻注釋同時(shí)控制儲(chǔ)
存在記錄載體上的電影的回放。這里描述的方法不限于MPEG-2文件，還可以應(yīng)用于通過其他編 碼譯碼器產(chǎn)生的文件。其還可以應(yīng)用于音頻文件(例如，在將來自光 盤的在前記錄視頻與流音頻文件混合的情況下)。并且，本方法不限 于傳輸流；其還可以用于具有程序流的系統(tǒng)或其他音頻-視頻數(shù)據(jù)打 包方法。注意上述實(shí)施例意在說明而不是限制本發(fā)明。并且本領(lǐng)域技術(shù)人 員能夠在不脫離所附權(quán)利要求范圍的情況下設(shè)計(jì)許多可替換的實(shí)施 例。在權(quán)利要求中，圓括號(hào)之間的任何參考標(biāo)記不應(yīng)解釋為限制權(quán)利 要求。使用的動(dòng)詞"包括，，和"包含"以及它們的結(jié)合不排除存在權(quán) 利要求中所述的元件之外的元件。元件前面的冠詞"一"不排除存在 多個(gè)這種元件。本發(fā)明可以通過包括若干獨(dú)特元件的硬件和/或通過合 適的固件來完成。在列舉若干部件的系統(tǒng)/裝置/設(shè)備權(quán)利要求中，幾 個(gè)這些部件可以通過一個(gè)和相同的硬件或軟件來實(shí)現(xiàn)。 一個(gè)起碼的事 實(shí)是，相互不同的從屬權(quán)利要求中引用的某些措施不表示這些措施的 組合不能有利地應(yīng)用。
權(quán)利要求
1、一種從音頻-視頻數(shù)據(jù)片段序列實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法，該音頻-視頻數(shù)據(jù)片段來自具有可變位長度和預(yù)定放映時(shí)間長度的序列，該方法包括步驟實(shí)時(shí)產(chǎn)生或接收音頻-視頻數(shù)據(jù)片段；通過將音頻-視頻數(shù)據(jù)片段以其產(chǎn)生或接收的順序組合在一起產(chǎn)生音頻-視頻傳輸流；該方法特征在于在與相繼的音頻-視頻數(shù)據(jù)片段相應(yīng)的音頻-視頻傳輸流的相繼部分之間插入填充數(shù)據(jù)，選擇相繼部分之間填充數(shù)據(jù)的數(shù)量以使音頻-視頻傳輸流相繼部分的開始位置之間的間隔與預(yù)定的位長度相應(yīng)。
2、 根據(jù)權(quán)利要求l的實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法，特征在 于選擇用于預(yù)定位長度的恒定值，該恒定值大于音頻-視頻數(shù)據(jù)片段 的最大預(yù)計(jì)位長度。
3、 根據(jù)權(quán)利要求l的實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法，特征在 于通過進(jìn)一步將來自第二音頻-視頻傳輸流的音頻-視頻數(shù)據(jù)與所接 收或產(chǎn)生的音頻-視頻數(shù)據(jù)片段組合來產(chǎn)生音頻-視頻傳輸流。
4、 根據(jù)權(quán)利要求3的實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法，特征在 于音頻-視頻片段包括與第二音頻-視頻傳輸流中的視頻數(shù)據(jù)相應(yīng)的 音頻數(shù)據(jù)。
5、 根據(jù)權(quán)利要求1至3的實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法，特 征在于填充數(shù)據(jù)為空包。
6、 一種產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的方法，該音頻 -視頻傳輸流可以從實(shí)時(shí)接收或產(chǎn)生的音頻-視頻數(shù)據(jù)片段序列產(chǎn) 生，該音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長 度，音頻-視頻傳輸流的產(chǎn)生根據(jù)權(quán)利要求1的方法進(jìn)行，本方法的 步驟包括產(chǎn)生元數(shù)據(jù)，其包括與開始的預(yù)計(jì)位置相關(guān)且與部分音頻-視頻 傳輸流的預(yù)計(jì)放映時(shí)間相關(guān)的信息，該音頻-視頻傳輸流與來自所述 序列的音頻-視頻數(shù)據(jù)片段相關(guān)聯(lián)；該方法特征在于在至少一個(gè)音頻-視頻數(shù)據(jù)片段產(chǎn)生或接收之前 產(chǎn)生元數(shù)據(jù)。
7、 一種通過數(shù)據(jù)流實(shí)時(shí)提交數(shù)字信號(hào)的方法，該方法包括步驟 實(shí)時(shí)產(chǎn)生音頻-視頻數(shù)據(jù)片段的序列，該音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長度；從該音頻-視頻數(shù)據(jù)片段序列實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流，該音 頻 -視頻傳輸流的產(chǎn)生根據(jù)權(quán)利要求1的方法進(jìn)行；產(chǎn)生與該音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)，該相關(guān)元數(shù)據(jù)的產(chǎn) 生根據(jù)權(quán)利要求6的方法進(jìn)行；在提交所產(chǎn)生的音頻-視頻傳輸流的至少一部分之前提交該相關(guān) 元數(shù)據(jù)；實(shí)時(shí)提交該音頻-視頻傳輸流。
8、 一種通過數(shù)據(jù)流實(shí)時(shí)提交數(shù)字信號(hào)的方法，該方法包括步驟 實(shí)時(shí)產(chǎn)生音頻-視頻數(shù)據(jù)片段的序列，該音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長度；產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)，該音頻-視頻傳輸流根據(jù)權(quán)利要求1的方法可以從所述序列產(chǎn)生，該元數(shù)據(jù)的產(chǎn)生根據(jù)權(quán)利要求6的方法進(jìn)行；在產(chǎn)生至少一個(gè)音頻-視頻數(shù)據(jù)片段之前提交該元數(shù)據(jù)； 以產(chǎn)生的順序來實(shí)時(shí)提交音頻-視頻數(shù)據(jù)片段的序列。
9、 根據(jù)權(quán)利要求8的提交數(shù)字信號(hào)的方法，特征在于進(jìn)一步提交 用于產(chǎn)生音頻-視頻傳輸流的信息，該信息至少包括與預(yù)定位長度相 關(guān)的信息。
10、 根據(jù)權(quán)利要求8的提交數(shù)字信號(hào)的方法，特征在于在該音頻 -視頻數(shù)據(jù)片段內(nèi)進(jìn)一步包括標(biāo)記。
11、 一種實(shí)時(shí)回放所接收的數(shù)字信號(hào)的方法，該數(shù)字信號(hào)根據(jù)權(quán) 利要求7的方法提交，該方法包括步驟接收所產(chǎn)生的元數(shù)據(jù)；實(shí)時(shí)接收音頻-視頻傳輸流；回放與音頻-視頻數(shù)據(jù)片段相應(yīng)的部分音頻-視頻傳輸流。
12、 一種實(shí)時(shí)回放所接收的數(shù)字信號(hào)的方法，該數(shù)字信號(hào)根據(jù)權(quán) 利要求8或9的方法提交，該方法包括步驟接收所產(chǎn)生的元數(shù)據(jù)；實(shí)時(shí)接收音頻-視頻數(shù)據(jù)片段序列； 根據(jù)權(quán)利要求1從音頻-視頻數(shù)據(jù)片段序列產(chǎn)生音頻-視頻傳輸流；回放與該音頻-視頻數(shù)據(jù)片段相應(yīng)的部分音頻-視頻傳輸流。
13、 根據(jù)權(quán)利要求1的實(shí)時(shí)產(chǎn)生音頻-視頻傳輸流的方法或根據(jù) 權(quán)利要求5的產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的方法在游戲 機(jī)中的應(yīng)用。
14、 一種包括音頻-視頻傳輸流的數(shù)字信號(hào)，該數(shù)字信號(hào)的特征 在于該音頻-視頻傳輸流通過根據(jù)權(quán)利要求1的方法從音頻-視頻數(shù) 據(jù)片段序列產(chǎn)生，該音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的 放映時(shí)間長度。
15、 一種包括音頻-視頻數(shù)據(jù)片段序列的數(shù)字信號(hào)，該音頻-視 頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長度；該數(shù)字信號(hào)的特征在于進(jìn)一步包括與可以從所述序列產(chǎn)生的音頻 -視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)，該音頻-視頻傳輸流的產(chǎn)生通過根據(jù) 權(quán)利要求1的方法進(jìn)行，該元數(shù)據(jù)的產(chǎn)生通過根據(jù)權(quán)利要求4的方法 產(chǎn)生。
16、 一種用于產(chǎn)生音頻-視頻傳輸流的裝置，包括 輸入部件，用于實(shí)時(shí)接收或產(chǎn)生音頻-視頻數(shù)據(jù)片段的序列，該音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長度；組合部件，用于將來自音頻-視頻數(shù)據(jù)片段序列的音頻-視頻傳輸流以其產(chǎn)生/接收的順序進(jìn)行組合； 特征在于該裝置進(jìn)一步包括填充部件，用于在與相繼的音頻-視頻數(shù)據(jù)片段相應(yīng)的音頻-視 頻傳輸流的相繼部分添加填充數(shù)據(jù)；控制部件，用于激活該填充部件以便在相應(yīng)于相繼的音頻-視頻 數(shù)據(jù)片段的音頻-視頻傳輸流的相繼部分之間添加大量填充數(shù)據(jù)，以 使音頻-視頻傳輸流相繼部分的開始位置之間的間隔與預(yù)定的位長度 相應(yīng)。
17、 根據(jù)權(quán)利要求16的裝置，特征在于控制部件進(jìn)一步適于激活 填充部件，以便添加填充數(shù)據(jù)，從而使預(yù)定的位長度具有大于音頻-視頻數(shù)據(jù)片段最大預(yù)計(jì)位長度的固定值。
18、 根據(jù)權(quán)利要求16或17的裝置，特征在于填充部件適于以空 包的形式添加填充數(shù)據(jù)。
19、 根據(jù)權(quán)利要求16的裝置，特征在于該裝置進(jìn)一步包括 第二輸入部件，用于實(shí)時(shí)接收或產(chǎn)生第二音頻-視頻傳輸流； 組合部件，進(jìn)一步適于將第二音頻-視頻傳輸流與所接收或產(chǎn)生的音頻-視頻數(shù)據(jù)片段組合在一起成為音頻-視頻傳輸流。
20、 一種用于產(chǎn)生與音頻-視頻數(shù)據(jù)片段序列相關(guān)聯(lián)的元數(shù)據(jù)的 裝置，該音頻-視頻數(shù)據(jù)片段具有預(yù)定的放映時(shí)間長度和可變的位長 度，該裝置包括輸入部件，用于實(shí)時(shí)接收或產(chǎn)生音頻-視頻數(shù)據(jù)片段序列； 該裝置的特征在于其還包括元數(shù)據(jù)產(chǎn)生部件，用于產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù) 據(jù)，該音頻-視頻傳輸流可以通過在與相繼的音頻-視頻數(shù)據(jù)片段相 應(yīng)的音頻-視頻傳輸流的相繼部分之間添加填充數(shù)據(jù)來產(chǎn)生，選擇填 充數(shù)據(jù)的數(shù)量以使相繼部分的開始位置之間的間隔相應(yīng)于預(yù)定的位長度；控制部件，適于啟動(dòng)元數(shù)據(jù)產(chǎn)生部件以便在至少一個(gè)音頻-視頻 數(shù)據(jù)片段產(chǎn)生或接收之前產(chǎn)生元數(shù)據(jù)。
21、 一種用于提交數(shù)字信號(hào)的廣播裝置，該廣播裝置包括用于根 據(jù)權(quán)利要求16產(chǎn)生音頻-視頻傳輸流的裝置；該廣播裝置進(jìn)一步包括傳輸裝置，用于產(chǎn)生包括所產(chǎn)生的音頻-視頻流的數(shù)字信號(hào)。
22、 一種用于提交數(shù)字信號(hào)的廣播裝置，該廣播裝置包括用于根 據(jù)權(quán)利要求20產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)的裝置；該廣播裝置進(jìn)一步包括傳輸部件，用于產(chǎn)生包括音頻-視頻片段序列和相關(guān)元數(shù)據(jù)的數(shù) 字信號(hào)。
23、 一種用于實(shí)時(shí)接收并回放數(shù)字信號(hào)的回放裝置，該回放裝置 包括輸入部件，用于實(shí)時(shí)接收由根據(jù)權(quán)利要求22的廣播裝置提交的數(shù) 字信號(hào)；多路分離部件，用于分離相關(guān)元數(shù)據(jù)和音頻-視頻片段序列； 組合部件，用于將來自音頻-視頻數(shù)據(jù)片段序列的音頻-視頻傳 輸流以其被產(chǎn)生/接收的順序組合； 特征在于該裝置還包括填充部件，用于在與相繼的音頻-視頻數(shù)據(jù)片段相應(yīng)的音頻-視 頻傳輸流的相繼部分之間添加填充數(shù)據(jù)；控制部件，用于啟動(dòng)填充部件以便在音頻-視頻傳輸流的相繼部 分之間添加大量填充數(shù)據(jù)，從而使相繼部分的開始位置之間的間隔與 預(yù)定的位長度相應(yīng)；回放部件，用于接收音頻-視頻流和相關(guān)元數(shù)據(jù)并用于實(shí)時(shí)回放 音頻-纟見頻傳輸流。
24、 一種根據(jù)權(quán)利要求23的回放裝置，特征在于該回放裝置進(jìn)一 步包括用于從存儲(chǔ)介質(zhì)讀取第二音頻-視頻傳輸流的部件； 控制部件進(jìn)一步適于啟動(dòng)組合部件，以便將第二音頻-視頻傳輸 流與所接收或產(chǎn)生的音頻-視頻數(shù)據(jù)片段組合成音頻-視頻傳輸流。
25、 一種用于實(shí)時(shí)產(chǎn)生并回放音頻-視頻傳輸流的回放裝置，該 音頻-視頻傳輸流由儲(chǔ)存在存儲(chǔ)介質(zhì)上的音頻-視頻數(shù)據(jù)片段的序列 產(chǎn)生，該音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長 度；該回放裝置包括讀取部件，用于從存儲(chǔ)介質(zhì)讀取音頻-視頻數(shù)據(jù)片段； 數(shù)據(jù)輸入部件，用于接收與順序相關(guān)的信息或讀取音頻-視頻數(shù) 據(jù)片段；組合部件，用于將來自音頻-視頻數(shù)據(jù)片段序列的音頻-視頻傳 輸流以其被讀取的順序組合； 特征在于該裝置進(jìn)一步包括填充部件，用于在相應(yīng)于相繼的音頻-視頻數(shù)據(jù)片段的音頻-視^ 頻傳輸流的部分之間添加填充數(shù)據(jù)；控制部件，用于啟動(dòng)填充部件以便在音頻-視頻傳輸流的相繼部 分之間添加大量填充數(shù)據(jù)，以使音頻-視頻傳輸流相繼部分的開始位 置之間的間隔與預(yù)定的位長度相應(yīng)；元數(shù)據(jù)產(chǎn)生部件，用于產(chǎn)生與音頻-視頻傳輸流相關(guān)聯(lián)的元數(shù)據(jù)； 回放部件，用于接收音頻-視頻傳輸流和相關(guān)元數(shù)據(jù)并用于實(shí)時(shí)回放音頻-視頻流；控制部件，適于啟動(dòng)元數(shù)據(jù)產(chǎn)生部件以便在至少一個(gè)音頻-視頻 數(shù)據(jù)片段產(chǎn)生或接收之前產(chǎn)生元數(shù)據(jù)。
全文摘要
一種從音頻-視頻數(shù)據(jù)片段序列產(chǎn)生音頻-視頻傳輸流的方法，來自該序列的音頻-視頻數(shù)據(jù)片段具有可變的位長度和預(yù)定的放映時(shí)間長度，該方法包括步驟實(shí)時(shí)產(chǎn)生或接收音頻-視頻數(shù)據(jù)片段；通過將音頻-視頻數(shù)據(jù)片段以其被產(chǎn)生或接收的順序組合在一起產(chǎn)生音頻-視頻傳輸流；在與相繼的音頻-視頻數(shù)據(jù)片段相應(yīng)的音頻-視頻傳輸流的相繼部分之間插入填充數(shù)據(jù)，選擇相繼部分之間填充數(shù)據(jù)的數(shù)量，以使音頻-視頻傳輸流相繼部分的開始位置之間的間隔與預(yù)定的位長度相應(yīng)。
文檔編號(hào)H04N7/24GK101120590SQ200680005298
公開日2008年2月6日 申請(qǐng)日期2006年2月14日 優(yōu)先權(quán)日2005年2月18日
發(fā)明者K·J·G·霍爾特曼 申請(qǐng)人:皇家飛利浦電子股份有限公司