專利名稱：視頻輸出設(shè)備和視頻輸出方法
技術(shù)領(lǐng)域：
本發(fā)明涉及視頻輸出設(shè)備和視頻輸出方法，用于響應(yīng)于輸入視頻的顯示大小的比 例因子而改變補(bǔ)充信息的顯示形式。
背景技術(shù)：
通常，用于接收電視廣播臺、有線電視臺等所提供的廣播節(jié)目的設(shè)備處理接收信 號并輸出視頻。在下文中，該設(shè)備將被稱為“視頻輸出設(shè)備”。視頻輸出目的地是安裝在視 頻輸出設(shè)備中的顯示器、或通過線纜等的通信部件而連接至視頻輸出設(shè)備的外部顯示器。 此時，例如，為了滿足想要同時觀看多于一個節(jié)目的用戶的要求，廣泛已知在兩個劃分的屏 幕上顯示兩個輸入視頻圖像的“雙屏模式”。圖1(a)至(c)是示出一般的雙屏模式的顯示型式的圖。圖1(a)示出以相同的比 率并行顯示輸入視頻A和輸入視頻B的示例。圖1(b)示出以不同的大小顯示輸入視頻A和 輸入視頻B的示例。圖1 (c)示出將小屏的輸入視頻B疊加在全屏上顯示的輸入視頻A上 的示例。圖2(a)至(c)示出將視頻分配至圖1(a)至(c)中所示的雙屏模式的每個顯示型 式的顯示示例。當(dāng)以雙屏模式在顯示器上顯示視頻時，通常，用戶執(zhí)行預(yù)定操作，從而以固定比率 切換分屏型式。然而，近來，用于以由用戶指定的任何期望比率來劃分屏幕的視頻輸出設(shè)備 也已經(jīng)出現(xiàn)。另一方面，在最近的視頻輸出設(shè)備中，屏幕變得更大，并且提供了更高的功能。例 如，安裝多個調(diào)諧器的模型、安裝多個可連接至游戲機(jī)等的多個外部輸入端子的模型、播放 通過因特網(wǎng)接收的運(yùn)動圖像的模型、在用于存儲的記錄介質(zhì)上記錄所接收的節(jié)目的模型等 等是可獲得的。因此，起居室中的一個大屏幕可以被劃分為三個部分，并且家人可以觀看三 個視頻圖像。例如，假設(shè)下面的用途母親和女兒在第一劃分屏幕上欣賞記錄的戲劇，父親 在第二劃分屏幕上欣賞轉(zhuǎn)播的棒球，而兒子在第三屏幕上享受游戲。如果多個視頻圖像被縮小、并以固定比率或任意期望比率顯示在具有上述分屏功 能的視頻輸出設(shè)備的顯示器上，則縮小的視頻中的字符串或符號會被擠壓，如圖2(a)至 (c)所示。此時，所顯示的信息難以被用戶閱讀，并且無法被用戶辨認(rèn)；這是個問題。在專利文獻(xiàn)1中揭示了解決此問題的一種方法。根據(jù)該文獻(xiàn)中的方法，當(dāng)通過分 屏而縮小涉及數(shù)據(jù)廣播的節(jié)目用以顯示時，用戶通過遙控操作，基于布局信息，將由節(jié)目發(fā) 送方指定的數(shù)據(jù)廣播的菜單屏幕疊加在縮小的屏幕之外。然而，此方法假設(shè)預(yù)定字符串和圖像數(shù)據(jù)與布局信息一起被包含在作為數(shù)據(jù)廣播 的節(jié)目中。用戶必須連續(xù)操作遙控器來顯示要檢查的信息。因為信息被疊加在不同的劃分 屏幕上，所以該不同的劃分屏幕被疊加屏幕遮蔽，并且信息丟失。在專利文獻(xiàn)2中揭示了另一種解決該問題的方法。在該文獻(xiàn)中的方法中，對于兩 個或更多個輸入視頻圖像，第一輸入視頻被顯示在全屏上，而從第二輸入視頻中提取包含 字符串的字幕區(qū)域，并且，所提取的字符串被疊加在第一輸入視頻的任何期望位置上。
圖3至圖5是示出根據(jù)專利文獻(xiàn)2中揭示的方法的處理的概要的圖。在專利文獻(xiàn) 2中的方法中，在圖3(a)中所示的兩個輸入視頻圖像A和B中，字符串B’從輸入視頻B中 被提取(如圖3(b)中所示)，并且被疊加在輸入視頻A上(如圖3(c)中所示)。圖4示出 當(dāng)視頻被分配至每個屏幕時的顯示示例。在圖4中所示的示例中，與對應(yīng)于輸入視頻B的 棒球轉(zhuǎn)播中的字符串區(qū)域B對應(yīng)的計分顯示部分被疊加在輸入視頻A上。相關(guān)技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)1 JP-A-2002-171457專利文獻(xiàn)2 JP-A-8-31730
發(fā)明內(nèi)容
本發(fā)明要解決的問題在上述專利文獻(xiàn)2中揭示的方法中，輸入視頻中要被用戶知道的信息需要是字符 串。因此，不是字符串的信息(例如，職業(yè)棒球?qū)Φ膌ogo標(biāo)記等)不包含在字符串區(qū)域B’ 中。因此，如果要被用戶知道的信息包含不是字符串的信息，則信息丟失(被剪切)；這是 個問題。例如，如果無法被提取的符號或標(biāo)記被用在圖4中所示的輸入視頻B的計分顯示 部分中(如圖5(a)中所示)，則僅提取字符串部分，如圖5(b)中所示。因此，符號和標(biāo)記未 被疊加在輸入視頻A上，如圖5(c)中所示。雖然字符串區(qū)域B’可以被疊加在輸入視頻A的任何期望位置上，但是，因為輸入 視頻A是全屏顯示，所以，字符串區(qū)域B’被疊加在輸入視頻A的任何位置上。因此，輸入視 頻A的部分信息丟失。例如，如圖4(c)和5(c)中所示，字符串區(qū)域B’被疊加在輸入視頻 A的telop (字幕)的一部分上，因此疊加部分中的telop的信息丟失。本發(fā)明的目的是提供視頻輸出設(shè)備和視頻輸出方法，用于響應(yīng)于輸入視頻的顯示 大小的比例因子而改變補(bǔ)充信息的顯示形式。解決問題的手段本發(fā)明提供了一種視頻輸出設(shè)備，包括屏幕構(gòu)成管理部分，其管理用于顯示至少 一個視頻的屏幕的布置或縮放比例；區(qū)域確定部分，其確定輸入視頻中的字符區(qū)域；補(bǔ)充 信息存儲部分，其剪切出包括由區(qū)域確定部分確定的至少一個字符區(qū)域的補(bǔ)充信息區(qū)域上 的視頻，并且將補(bǔ)充信息區(qū)域上的視頻存儲作為補(bǔ)充信息；補(bǔ)充信息顯示確定部分，其基于 由屏幕構(gòu)成管理部分管理的屏幕構(gòu)成，確定是否除了輸入視頻之外還顯示由補(bǔ)充信息存儲 部分存儲的補(bǔ)充信息；以及輸出部分，其根據(jù)來自屏幕構(gòu)成管理部分和補(bǔ)充信息顯示確定 部分的命令，輸出輸入視頻和補(bǔ)充信息。補(bǔ)充信息顯示確定部分基于響應(yīng)于由屏幕構(gòu)成管 理部分管理的縮放比例而改變的輸入視頻中的字符區(qū)域中包括的字符的大小，確定是否顯 示補(bǔ)充信息。本發(fā)明提供了一種視頻輸出設(shè)備，包括屏幕構(gòu)成管理部分，其管理用于顯示至少 一個視頻的屏幕的布置或縮放比例；區(qū)域確定部分，其確定輸入視頻中的字符區(qū)域；通信 部分，其從外部服務(wù)器獲取由區(qū)域確定部分確定的至少一個字符區(qū)域中包括的字符串作為 補(bǔ)充信息；補(bǔ)充信息顯示確定部分，其基于由屏幕構(gòu)成管理部分管理的屏幕構(gòu)成，確定是否 除了輸入視頻之外還顯示由通信部分獲取的補(bǔ)充信息；以及輸出部分，其根據(jù)來自屏幕構(gòu)成管理部分和補(bǔ)充信息顯示確定部分的命令，輸出輸入視頻和補(bǔ)充信息。當(dāng)由區(qū)域確定部 分確定的至少一個字符區(qū)域中包括的字符的大小小于閾值時，補(bǔ)充信息顯示確定部分顯示 補(bǔ)充信息。本發(fā)明提供了一種視頻輸出方法，包括確定輸入視頻中的字符區(qū)域；剪切出包 括至少一個字符區(qū)域的補(bǔ)充信息區(qū)域上的視頻，并且將補(bǔ)充信息區(qū)域上的視頻存儲作為補(bǔ) 充信息；基于用于定義用以顯示至少一個視頻的屏幕的布置或縮放比例的屏幕構(gòu)成，確定 是否除了輸入視頻之外還顯示補(bǔ)充信息；以及根據(jù)屏幕構(gòu)成和確定結(jié)果，輸出輸入視頻和 補(bǔ)充信息。基于輸入視頻中的字符區(qū)域中包括的字符的大小，確定顯示補(bǔ)充信息。本發(fā)明提供了一種視頻輸出方法，包括確定輸入視頻中的字符區(qū)域；從外部服 務(wù)器獲取至少一個字符區(qū)域中包括的字符串作為補(bǔ)充信息；基于用于定義用以顯示至少一 個視頻的屏幕的布置或縮放比例的屏幕構(gòu)成，確定是否除了輸入視頻之外還顯示從外部服 務(wù)器獲取的補(bǔ)充信息；以及根據(jù)屏幕構(gòu)成和確定結(jié)果，輸出輸入視頻和補(bǔ)充信息。當(dāng)至少一 個字符區(qū)域中包括的字符大小小于閾值時，確定顯示補(bǔ)充信息。本發(fā)明的優(yōu)點(diǎn)根據(jù)本發(fā)明的視頻輸出設(shè)備和視頻輸出方法，可以響應(yīng)于輸入視頻的顯示大小的 比例因子而改變補(bǔ)充信息的顯示形式。因此，如果執(zhí)行對多個輸入視頻圖像的分屏，則發(fā)生 輸入視頻中的字符或符號的擠壓的部分可以由補(bǔ)充信息來補(bǔ)足，并且可以防止用戶想要的 信息的丟失。


圖1(a)至(C)是示出一般的雙屏模式的顯示型式的圖。圖2(a)至(c)是示出將視頻分配至圖1 (a)至(c)中所示的雙屏模式下的每個顯 示型式的顯示示例的圖。圖3是示出根據(jù)專利文獻(xiàn)2中揭示的方法、剪切出并疊加輸入視頻B的一部分的 顯示示例的圖。圖4是示出將視頻分配至圖3中所示的每個屏幕的顯示示例的圖。圖5是示出其中輸入視頻B包括字符串和符號的顯示示例的圖。圖6是示出第一實(shí)施例的視頻輸出設(shè)備和其相關(guān)設(shè)備的框圖。圖7(a)至(f)是示出根據(jù)第一實(shí)施例的全屏顯示和雙屏顯示的型式的圖。圖8是示出由屏幕構(gòu)成管理部分103保存的屏幕構(gòu)成管理表的示例的圖。圖9 (a)至(f)是示出由屏幕構(gòu)成管理部分103保存的屏幕構(gòu)成管理表的數(shù)據(jù)構(gòu) 成示例的圖。圖10是示出圖7(e)中所示的雙屏顯示狀態(tài)C下的補(bǔ)充信息屏幕的顯示示例的 圖。圖11是描述圖10中所示的屏幕元素的圖。圖12是示出響應(yīng)于屏幕定義請求、在顯示補(bǔ)充信息屏幕時由圖像輸出設(shè)備100執(zhí) 行的處理的流程圖。圖13是示出補(bǔ)充信息提取處理的流程圖。圖14是示出輸入視頻2中的字符區(qū)域和對象區(qū)域的圖。
圖15是示出由補(bǔ)充信息存儲部分113保存的字符區(qū)域表的圖。圖16是示出由補(bǔ)充信息存儲部分113保存的對象區(qū)域表的圖。圖17是示出在圖13的流程圖中的步驟213所示的字符區(qū)域組定義處理的流程 圖。圖18是示出輸入視頻2中的字符區(qū)域和對象區(qū)域的疊加狀態(tài)的圖。圖19是示出由補(bǔ)充信息存儲部分113保存的字符區(qū)域組表的圖。圖20是示出疊加狀態(tài)檢測型式的圖。圖21是示出在內(nèi)部處理中使用的邊緣寬度的示例的圖。圖22是示出在圖13的流程圖中的步驟S214所示的補(bǔ)充信息定義處理的流程圖。圖23是示出輸入視頻2中的字符區(qū)域組區(qū)域和補(bǔ)充信息區(qū)域的定義的圖。圖24是示出由補(bǔ)充信息存儲部分113保存的補(bǔ)充信息表的圖。圖25是示出響應(yīng)于輸入視頻的比例因子和分屏模式的補(bǔ)充信息顯示確定標(biāo)準(zhǔn)的 圖。圖26是示出用于確定補(bǔ)充信息的顯示位置的因素的示例的圖。圖27是示出圖7(e)中所示的“雙屏顯示狀態(tài)C”的屏幕布局構(gòu)成的圖。圖28是示出第二實(shí)施例的視頻輸出設(shè)備和其相關(guān)設(shè)備的框圖。圖29是示出由補(bǔ)充信息提供設(shè)備提供的屏幕構(gòu)成數(shù)據(jù)的圖。圖30是示出基于屏幕構(gòu)成數(shù)據(jù)的補(bǔ)充信息的顯示示例的圖。
具體實(shí)施例方式下面將參考附圖來討論根據(jù)本發(fā)明的視頻輸出設(shè)備和視頻輸出方法的實(shí)施例。下 面描述的每個實(shí)施例的視頻輸出設(shè)備是這樣的設(shè)備，其用于接收通過廣播臺的發(fā)送臺發(fā)送 的節(jié)目、廣告等的內(nèi)容并且在該設(shè)備內(nèi)部或外部的顯示器上顯示所述內(nèi)容。(第一實(shí)施例)圖6是示出第一實(shí)施例的視頻輸出設(shè)備和其相關(guān)設(shè)備的框圖。首先，將討論直到 視頻輸出設(shè)備在顯示器上顯示輸入視頻為止的處理概要。如圖6中所示，圖像輸出設(shè)備100包括輸入部分101、終端控制部分102、屏幕構(gòu)成 管理部分103、視頻輸入部分104、應(yīng)用處理部分105、屏幕生成部分106、合成部分107、輸出 部分108、區(qū)域確定部分112、補(bǔ)充信息存儲部分113、以及補(bǔ)充信息顯示確定部分115。輸入部分101從附連至圖像輸出設(shè)備100或外部連接設(shè)備等的遙控設(shè)備(簡稱為 “遙控器”)接收控制指令信號，并且將該信號傳送至終端控制部分102。終端控制部分102 響應(yīng)于從輸入部分101傳送的控制指令信號而將屏幕構(gòu)成的查詢發(fā)送至屏幕構(gòu)成管理部 分103。例如，屏幕構(gòu)成是根據(jù)關(guān)于圖像輸出設(shè)備100的開機(jī)指令的而在全屏上顯示上次觀 看的頻道的構(gòu)成、根據(jù)節(jié)目指南顯示指令而縮小用于顯示的當(dāng)前廣播并且在全屏上顯示節(jié) 目指南的構(gòu)成，等等。屏幕構(gòu)成管理部分103管理在顯示器上顯示的屏幕的構(gòu)成。屏幕構(gòu) 成管理部分103存儲稍后描述的屏幕構(gòu)成管理表。當(dāng)節(jié)目指南顯示指令信號被輸入至輸入部分101時，終端控制部分102將節(jié)目指 南顯示指令傳送至應(yīng)用處理部分105。應(yīng)用處理部分105可以執(zhí)行用于除了節(jié)目指南顯示 功能之外還實(shí)現(xiàn)各種功能的應(yīng)用。應(yīng)用處理部分105響應(yīng)于從終端控制部分102輸入的指令，返回對于終端控制部分102所需的處理(例如，縮小用于顯示的當(dāng)前頻道，等等)。應(yīng)用 處理部分105為屏幕生成部分106提供用于生成屏幕所需的信息，該屏幕是用以響應(yīng)于來 自終端控制部分102的指令而進(jìn)行設(shè)置所需的。例如，可以由應(yīng)用處理部分105執(zhí)行的應(yīng)用 所實(shí)現(xiàn)的功能不僅是節(jié)目指南顯示功能，而且還是廣播接收設(shè)置功能、圖像質(zhì)量調(diào)節(jié)功能、 警報設(shè)置功能、日歷顯示功能、網(wǎng)絡(luò)連接設(shè)置功能等。屏幕生成部分106基于從應(yīng)用處理部分105提供的信息，執(zhí)行被合成為屏幕的基 本部分(字符串、圖像、背景色等)的繪圖處理。視頻輸入部分104管理可以由圖像輸出設(shè)備100輸入的視頻源中的至少一個，并 且將響應(yīng)于來自終端控制部分102的命令而獲得的輸入視頻傳送至合成部分107。例如， 在本實(shí)施例中，視頻輸入部分104具有第一調(diào)諧器109a、第二調(diào)諧器109b、外部輸入部分 109c、通信部分109d、解碼器IlOa至110d、以及處理部分Illa至llld。第一調(diào)諧器109a和第二調(diào)諧器109b通過天線200接收由廣播臺300通過發(fā)送臺 400發(fā)送的節(jié)目、廣告等的內(nèi)容。外部輸入部分109c獲取從具有記錄介質(zhì)的記錄器的視頻 提供設(shè)備500或任何其它視頻設(shè)備等輸出的內(nèi)容。此外，通信部分109d通過網(wǎng)絡(luò)600接收 從視頻提供設(shè)備700傳送的內(nèi)容。解碼器IlOa至IlOd分別解碼來自第一調(diào)諧器109a、第 二調(diào)諧器109b、外部輸入部分109c和通信部分109d的信號。處理部分Illa至Illd響應(yīng) 于來自終端控制部分102的命令，使用來自對應(yīng)的解碼器IlOa至IlOd的視頻數(shù)據(jù)來執(zhí)行 改變視頻的投射、比例因子等的處理，并且傳送至合成部分107。合成部分107基于屏幕構(gòu)成管理部分103的設(shè)置而合成從視頻輸入部分104傳送 的視頻，并且將所合成的視頻(在下文中，其將被稱為“作為結(jié)果的視頻”)輸出至輸出部分 108。具體地，合成部分107基于來自應(yīng)用處理部分105的為屏幕構(gòu)成管理部分103指定的 布局，在屏幕構(gòu)成中合成被處理部分Illa至Illd以從終端控制部分102需要的比例因子 而縮小的每個輸入視頻。如果圖像輸出設(shè)備100包括顯示器，則輸出部分108在顯示器上顯示作為結(jié)果的 視頻；如果圖像輸出設(shè)備100不包括顯示器，則輸出部分108將作為結(jié)果的視頻傳送至外部
顯不器。將基于補(bǔ)充信息的提取處理和顯示處理的特定示例，詳細(xì)討論包括在圖像輸出設(shè) 備100中的區(qū)域確定部分112、補(bǔ)充信息存儲部分113和補(bǔ)充信息顯示確定部分115。圖 7(a)至(f)是示出根據(jù)第一實(shí)施例的全屏和雙屏顯示的型式的圖。圖8是示出由屏幕構(gòu)成 管理部分103保存的屏幕構(gòu)成管理表的示例的圖。圖7(a)示出了在顯示器的全屏上顯示由第一調(diào)諧器109a接收的輸入視頻1的狀 態(tài)，作為初始狀態(tài)(僅戲劇節(jié)目的全屏顯示狀態(tài))。圖7 (b)示出了這樣的狀態(tài)當(dāng)用戶使用 遙控器給出頻道改變命令時、通過頻道改變而在顯示器的全屏上顯示通過第一調(diào)諧器109a 的頻道改變而接收的輸入視頻1 (僅棒球轉(zhuǎn)播的全屏顯示狀態(tài))。圖7(c)示出這樣的狀態(tài)當(dāng)用戶使用遙控器給出雙屏顯示命令時，以一比三的屏 幕比率顯示作為輸入視頻1的先前選擇的頻道(戲劇)和作為輸入視頻2的當(dāng)前選擇的頻 道(棒球轉(zhuǎn)播)(雙屏顯示狀態(tài)A)。圖7(d)示出這樣的顯示示例當(dāng)用戶可以通過操作遙控器的左右按鈕而根據(jù)期 望改變左右屏幕比率時，用戶增加左屏幕的比率，并且將左屏幕和右屏幕的屏幕比率設(shè)置為相同的比率。在該顯示屏幕中，確定出用戶不能確定劃分屏幕中的右屏幕(輸入視頻2) 的棒球轉(zhuǎn)播的擊球手計分(字符串和符號)。因此，在該顯示示例中，指示右屏幕(輸入視 頻2)的擊球手計分的區(qū)域的屏幕作為補(bǔ)充信息而以實(shí)際大小被顯示在右屏幕(輸入視頻 2)的附近(雙屏顯示狀態(tài)B)。圖7(e)示出將左屏幕的比率設(shè)置為大的顯示示例。在該顯示示例中，確定出用 戶不能確定劃分屏幕中的右屏幕(輸入視頻2)的棒球轉(zhuǎn)播的進(jìn)展信息(在屏幕的右下部 分中顯示的字符串和符號)。因此，在該顯示示例中，除了指示擊球手計分的區(qū)域的屏幕之 外，還將指示右屏幕(輸入視頻2)的進(jìn)展信息的屏幕作為補(bǔ)充信息而以實(shí)際大小顯示在右 屏幕(輸入視頻2)附近(雙屏顯示狀態(tài)C)。圖7(f)示出使左屏幕的比率最大化的顯示示例。在該顯示示例中，將右屏幕(輸 入視頻2)的棒球轉(zhuǎn)播最小化為這樣的水平以使得可以確定擊球手揮臂的一般情形。然而， 在指示擊球手計分和進(jìn)展信息的區(qū)域的屏幕被作為補(bǔ)充信息而疊加在左屏幕(輸入視頻 1)的一部分上的同時，它們被以實(shí)際大小顯示(雙屏顯示狀態(tài)D)。在該描述中，先前選擇的頻道是輸入視頻1，而當(dāng)前選擇的頻道是輸入視頻2。然 而，對于該頻道的輸入視頻的選擇，當(dāng)前選擇的頻道可以是由第一調(diào)諧器109a接收的輸入 視頻1，而在第二調(diào)諧器109b中由用戶選擇的上個頻道可以是輸入視頻2。用戶可以選擇 左屏幕或右屏幕用以改變。當(dāng)給出雙屏顯示命令時的屏幕比率不限于一比三，并且可以被設(shè)置為任何比率。 在描述中，左和右屏幕比率可以通過操作遙控器的左右按鈕而根據(jù)期望改變，但是，可以使 用安裝在遙控器中的任何輸入部件，如另一個按鈕、或觸摸傳感器、或加速度傳感器。此外， 圖7(f)示出將指示補(bǔ)充信息的擊球手計分和進(jìn)展信息的區(qū)域的屏幕疊加在左屏幕(輸入 視頻1)的一部分上的示例。然而，可以控制左屏幕的放大，使得指示補(bǔ)充信息的屏幕不被 疊加在左屏幕上。當(dāng)指示補(bǔ)充信息的屏幕被疊加在左屏幕上時，可以降低指示補(bǔ)充信息的 屏幕的透明度。此時，用戶還可以檢查指示補(bǔ)充信息的屏幕的重疊部分的輸入視頻1。圖8示出在圖7(a)中所示的狀態(tài)下由屏幕構(gòu)成管理部分103保存的屏幕構(gòu)成管 理表的數(shù)據(jù)構(gòu)成示例。如圖8中所示，對于每個輸入視頻，在屏幕構(gòu)成管理表中設(shè)置輸入 源、輸出標(biāo)志、指示屏幕的繪圖區(qū)域的寬度(W)和高度(H)、橫軸(X)的繪圖位置、豎軸(Y) 的繪圖位置、指示表示視頻圖像的重疊的疊加層的深度(Z)、在0至255的范圍中指示的屏 幕的透明度(α)、以及相對于全大小的比例因子(R)。透明度(α)越接近0，則透明度越 尚ο圖7(a)中所示的狀態(tài)是僅顯示由第一調(diào)諧器109a接收的輸入視頻1的狀態(tài)。因 此，此時，在屏幕構(gòu)成管理表中，僅輸入視頻1的輸出標(biāo)志為“真”，而任何其它輸入視頻的 輸出標(biāo)志為“假”。作為輸入視頻1的繪圖區(qū)域，寬度(W)是1920，高度(H)是1080，橫軸(X) 的繪圖位置是0、而豎軸(Y)的繪圖位置是0。此外，作為指示輸入視頻1和任何其它視頻 的重疊的參數(shù)，深度⑵是0，輸入視頻1的透明度(α)是255，而比例因子(R)是100%。 當(dāng)設(shè)置這樣的參數(shù)時，輸入視頻1被顯示在顯示器的全屏上。圖9(a)至9(f)示出對應(yīng)于圖7 (a)至7 (f)中的顯示狀態(tài)的屏幕構(gòu)成管理表的數(shù) 據(jù)構(gòu)成示例。如圖9(a)至9(f)中所示，對于屏幕構(gòu)成管理表的參數(shù)，如果屏幕構(gòu)成不同， 則輸出標(biāo)志、屏幕構(gòu)成比率和縮放比例的改變不同。
接下來，將參考圖10至圖12來討論用于在顯示器上顯示指示補(bǔ)充信息的屏幕的 過程。圖10是示出圖7(e)中所示的雙屏顯示狀態(tài)C中的補(bǔ)充信息屏幕的顯示示例的圖。 圖11是描述圖10中所示的屏幕元素的圖。顯示屏幕(1000/1100)由兩個系統(tǒng)的輸入視頻圖像組成。左屏幕(1001)是用于 顯示輸入視頻1的屏幕1 (1101)，而右屏幕(1002)是用于顯示輸入視頻2的屏幕2 (1102)。 當(dāng)輸入視頻2被縮小時，將指示輸入視頻2 (棒球轉(zhuǎn)播)的擊球手計分的區(qū)域(1003)顯示 在屏幕2(1102)上，因此確定出該區(qū)域是對于用戶難辨認(rèn)的區(qū)域，并且將該區(qū)域設(shè)置為補(bǔ) 充信息目標(biāo)區(qū)域SA1。同樣，確定出指示輸入視頻2 (棒球轉(zhuǎn)播)的進(jìn)展信息的區(qū)域(1004) 是對于用戶難辨認(rèn)的區(qū)域，并且將該區(qū)域設(shè)置為補(bǔ)充信息目標(biāo)區(qū)域SA2。在圖10和11中，通過剪切并顯示補(bǔ)充信息目標(biāo)區(qū)域SAl而提供的部分是補(bǔ)充 信息屏幕1 (1005/1105)，而通過剪切并顯示補(bǔ)充信息目標(biāo)區(qū)域SA2而提供的部分是補(bǔ)充 信息屏幕2(1006/1106)。此外，顯示在補(bǔ)充信息屏幕2(1006)的外框上的陰影、或顯示 在補(bǔ)充信息屏幕2(1006)左側(cè)的諸如星號的符號作為指示補(bǔ)充信息屏幕的“增強(qiáng)表示部 分”(1007/1107)。在圖10和11中，從補(bǔ)充信息目標(biāo)區(qū)域SAl到補(bǔ)充信息屏幕1、以及從補(bǔ) 充信息目標(biāo)區(qū)域SA2到補(bǔ)充信息屏幕2顯示虛線。該虛線被示為用以為用戶指示“在放大 的比例上將信息顯示在哪個區(qū)域中”的指引線。通過示例示出作為指引線的虛線；如果可 以確定指示哪個區(qū)域，則其可以是箭頭、實(shí)線、顏色、明亮和陰影等。接下來，將詳細(xì)討論由圖像輸出設(shè)備100執(zhí)行的用于在顯示器上顯示圖10和11 中的屏幕的處理，分別作為“分屏模式處理”、“補(bǔ)充信息提取處理”、“字符區(qū)域組定義處理” 和“補(bǔ)充信息定義處理”。圖12是示出響應(yīng)于屏幕定義請求、在顯示補(bǔ)充信息屏幕時由圖像輸出設(shè)備100執(zhí) 行的處理的流程圖。首先，當(dāng)用戶按下遙控器的“分屏模式按鈕”時，輸入部分101從遙控器 接收“分屏模式請求”的指令信號，并且通過終端控制部分102將該指令傳送至屏幕構(gòu)成管 理部分103。屏幕構(gòu)成管理部分103將分屏數(shù)目(N)設(shè)置為“2”，并且確定在顯示時的屏幕 比率(例如，作為初始值的固定比例因子1 3)，作為分屏模式處理的初始化處理。此外， 屏幕構(gòu)成管理部分103通過終端控制部分102指示視頻輸入部分104從第一調(diào)諧器109a 和第二調(diào)諧器109b輸出輸入視頻1和輸入視頻2。屏幕構(gòu)成管理部分103通過終端控制部 分102指示處理部分Illa和Illb縮小每個輸入視頻，以變成固定比例因子(1 3)(步驟 S101)。在描述中，分屏的屏幕比率的初始值被設(shè)置為固定比例因子(1 3)，但是可以被 設(shè)置為固定比例因子(1 1)，或者用戶可以先前指定任何期望的比例因子。此外，在描述 中，分屏數(shù)目(N)被設(shè)置為“2”，但是可以被設(shè)置為大于2，并且可以按期望設(shè)置屏幕比率。如果在步驟SlOl的處理期間、用戶再次按下“分屏模式按鈕”而未等待顯示，則屏 幕構(gòu)成管理部分103結(jié)束分屏模式處理(在步驟S102的“是”)。另一方面，如果繼續(xù)分屏 模式，則屏幕構(gòu)成管理部分103繼續(xù)處理(在步驟S102的“否”)。接下來，將討論到“補(bǔ)充信息提取處理”的流程。在步驟S101，分屏數(shù)目(N)被設(shè)置 為“2”，因此在表示為N = 2的輸入圖像2開始補(bǔ)充信息提取處理。首先，由視頻輸入部分 104的第二調(diào)諧器109b通過天線200接收的信號被解碼器IlOb解碼。然后，解碼器IlOb 將通過解碼而提供的輸入視頻傳送至區(qū)域確定部分112。區(qū)域確定部分112對于從解碼器IlOb傳送的輸入視頻執(zhí)行補(bǔ)充信息提取處理(步驟S103)。稍后將討論該處理的細(xì)節(jié)。如果存在要被設(shè)置為補(bǔ)充信息的字符區(qū)域，并且作為補(bǔ)充信息提取處理的結(jié)果提 取了補(bǔ)充信息，則區(qū)域確定部分112將所提取的補(bǔ)充信息存儲在補(bǔ)充信息存儲部分113中。 如果輸入視頻包含補(bǔ)充信息(在步驟S104的“是”)，并且滿足預(yù)定確定條件(在步驟S105 的“是”)，則補(bǔ)充信息顯示確定部分115指示屏幕構(gòu)成管理部分103將補(bǔ)充信息疊加在輸 入視頻的指定位置上(最高層)(步驟S106)。根據(jù)該指令，在顯示器上顯示圖10中示出的 補(bǔ)充信息屏幕1(1005)和補(bǔ)充信息屏幕2 (1006)。在步驟S105使用的確定條件是“補(bǔ)充信 息的出現(xiàn)頻率等于或多于預(yù)定出現(xiàn)頻率閾值(例如50% ) ”、“所提取的補(bǔ)充信息的字符大 小X當(dāng)前輸入視頻比例因子等于或小于預(yù)定字符大小閾值(例如12個點(diǎn))”等等。接下來，如果在作為補(bǔ)充信息的歷史而存儲在補(bǔ)充信息存儲部分113中的先前保 存的補(bǔ)充信息和當(dāng)前提取的補(bǔ)充信息中發(fā)生改變，則補(bǔ)充信息顯示確定部分115將改變標(biāo) 志改變?yōu)闋顟B(tài)“真”。如果改變標(biāo)志為“真”(在步驟S107的“是”)，則補(bǔ)充信息顯示確定部 分115附加地顯示對于所顯示的補(bǔ)充信息的增強(qiáng)表示(步驟S108)。也就是，作為補(bǔ)充信息 顯示確定部分115的增強(qiáng)表示，顯示圖10中所示的補(bǔ)充信息屏幕2 (1006)的外框陰影、或 星型等的符號(1007)。另一方面，如果改變標(biāo)志是“假”，則補(bǔ)充信息顯示確定部分115轉(zhuǎn) 到下個步驟，而不顯示增強(qiáng)表示(在步驟S107的“否”)。此外，補(bǔ)充信息顯示確定部分115管理“指引線顯示模式”，作為可以由用戶改變 的設(shè)置。如果設(shè)置指引線顯示模式(在步驟S109的“是”)，則補(bǔ)充信息顯示確定部分115 用虛線顯示連接輸入視頻的補(bǔ)充信息目標(biāo)區(qū)域和補(bǔ)充信息屏幕的指引線(步驟S110)。另 一方面，如果未設(shè)置指引線顯示模式，則補(bǔ)充信息顯示確定部分115不顯示指引線，并且轉(zhuǎn) 到下個步驟(在步驟S109的“否”)。在本實(shí)施例中，已經(jīng)描述了對補(bǔ)充信息1和補(bǔ)充信息2的提取、在補(bǔ)充信息屏幕2 中涉及的增強(qiáng)表示、以及指引線顯示的構(gòu)成要素的確定處理。為了簡化描述，同時描述補(bǔ)充 信息1和補(bǔ)充信息2的顯示確定處理；然而，如在圖12的流程圖的步驟Slll和S112所示， 順序地執(zhí)行對于補(bǔ)充信息1和補(bǔ)充信息2的顯示確定處理。此外，在輸入視頻2的顯示確 定處理之后，執(zhí)行輸入視頻1的顯示確定處理，如在步驟S113和S114所示。顯示確定處理 的順序取決于實(shí)施方式。例如，在步驟S114，如果不執(zhí)行輸入視頻1的顯示確定處理(在 步驟S114的“否”)，則對于輸入視頻1，處理返回至步驟S103。因為在圖10中的輸入視頻 1中不存在作為補(bǔ)充信息的適當(dāng)?shù)淖址麉^(qū)域，所以，如果執(zhí)行了步驟S103，則不提取補(bǔ)充信 息，因此在步驟S104確定出不存在補(bǔ)充信息(在步驟S104的“否”)。如果輸入視頻1和輸 入視頻2的顯示確定處理完成(在步驟S114的“是”)，則在預(yù)定等待時間(Tw秒)期間， 在顯示器上顯示圖10中所示的包含補(bǔ)充信息的屏幕1000 (步驟S115)。在步驟S115的等待處理結(jié)束之后，如果分屏模式繼續(xù)(在步驟S102的“否”)，則 視頻輸出設(shè)備100重復(fù)步驟S103至S115以更新補(bǔ)充信息。另一方面，如果分屏模式結(jié)束 (在步驟S102的“是”)，則屏幕構(gòu)成管理部分103在全屏上顯示任何輸入視頻(例如，輸入 視頻1)。因此，屏幕構(gòu)成管理部分103通過終端控制部分102，指示視頻輸入部分104的處 理部分Illa改變比例因子，并指示合成部分107改變屏幕構(gòu)成。因此，在顯示器上顯示在 圖7 (a)中所示的屏幕(步驟S116)。接下來，將參考圖13至15和圖18來詳細(xì)討論在圖12中的步驟S103所示的區(qū)域確定部分112的“補(bǔ)充信息提取處理”。圖13是示出補(bǔ)充信息提取處理的流程圖。圖14是 示出輸入視頻2中的字符區(qū)域和對象區(qū)域的圖。圖15是示出由補(bǔ)充信息存儲部分113保 存的字符區(qū)域表的圖。圖16是示出由補(bǔ)充信息存儲部分113保存的對象區(qū)域表的圖。圖 18是示出輸入視頻2中的字符區(qū)域和對象區(qū)域的疊加狀態(tài)的圖。將參考圖13的流程圖來討論在圖12中的步驟S103所示的補(bǔ)充信息提取處理的 預(yù)處理。區(qū)域確定部分112檢測通過解碼器IlOb解碼由視頻輸入部分104的第二調(diào)諧器 109b接收的信號而提供的輸入視頻2中的字符區(qū)域的存在或不存在(步驟S201)。為了通 過區(qū)域確定部分112檢測字符區(qū)域，使用廣泛已知的傳統(tǒng)技術(shù)，諸如使用亮度差提取字符 部分的方法。如果區(qū)域確定部分112檢測到字符部分(在步驟S202的“是”)，則其確定“字符 區(qū)域存在”，并且在內(nèi)部保持該狀態(tài)(步驟S203)。另一方面，如果區(qū)域確定部分112未檢測 到字符部分(在步驟S202的“否”)，則區(qū)域確定部分112確定“字符區(qū)域不存在”，并且結(jié) 束該處理(步驟S204)。如果字符部分存在(在步驟S202的“是”)，則區(qū)域確定部分112向補(bǔ)充信息存儲 部分113查詢是否存在輸入視頻的字符區(qū)域表(步驟S205)。如果來自補(bǔ)充信息存儲部分 113的響應(yīng)是“不存在字符區(qū)域表”(在步驟S205的“否”)，則區(qū)域確定部分112請求補(bǔ)充 信息存儲部分113創(chuàng)建新的字符區(qū)域表(步驟S206)。另一方面，如果來自補(bǔ)充信息存儲 部分113的響應(yīng)是“存在字符區(qū)域表”(在步驟S205的“是”)，則區(qū)域確定部分112在所提 取的字符串與先前的字符串之間進(jìn)行比較，并且更新補(bǔ)充信息存儲部分113的字符區(qū)域表 (S207)。對于圖14中所示的輸入視頻2，區(qū)域確定部分112確定并提取下面的部分作為字 符區(qū)域。例如，所提取的字符區(qū)域是屏幕(1400)的左上角所示的“32(1401)”、“83(1402)” 和“02(1403)”、屏幕(1400)的右下部分所示的“9th (1404) ”和“2_3 (1405) ”、以及屏幕 (1400)的右上角所示的“142Km/h”。如圖15中所示，區(qū)域確定部分112將關(guān)于字符區(qū)域的 信息存儲在補(bǔ)充信息存儲部分113的字符區(qū)域表中(步驟S208)。在字符區(qū)域表中記錄諸 如每個字符區(qū)域中所提取的字符串、字符大小(點(diǎn))、寬度(W)、高度(H)以及指示在屏幕中 的位置的橫軸(X)和豎軸(Y)之類的信息。此外，區(qū)域確定部分112檢測諸如在圖14中的屏幕(1400)和圖18中的屏 幕(1800)上顯示的符號或標(biāo)記之類的不是字符的對象作為對象區(qū)域。例如，所檢測到 的對象區(qū)域是屏幕(1400/1800)的左上部分中表示棒球的球場的符號(1407/1807)、屏 幕(1400/1800)的右下部分中表示棒球的隊的logo (1408/1808和1409/1809)、屏幕 (1400/1800)的左下部分中站在投球區(qū)土墩上的投手(1410/1810)、屏幕(1400/1800)的右 上部分的裁判員和擊球手(1411/1811和1412/1812)，等等。如果區(qū)域確定部分112檢測到對象區(qū)域(在步驟S209的“是”)，則其向補(bǔ)充信息 存儲部分113查詢是否存在用于輸入視頻的對象區(qū)域表(步驟S209)。如果來自補(bǔ)充信息 存儲部分113的響應(yīng)是“不存在對象區(qū)域表”(在步驟S209的“否”)，則區(qū)域確定部分112 請求補(bǔ)充信息存儲部分113創(chuàng)建新的對象區(qū)域表(步驟S210)。另一方面，如果來自補(bǔ)充信 息存儲部分113的響應(yīng)是“存在對象區(qū)域表”(在步驟S209的“是”)，則區(qū)域確定部分112 比較所提取的對象與先前的對象，并且更新補(bǔ)充信息存儲部分113的對象區(qū)域表(S211)。
例如，如圖16中所示，區(qū)域確定部分112將對象區(qū)域表記錄在補(bǔ)充信息存儲部分 113中(S212)。對象ID、每個對象區(qū)域的寬度(W)和高度(H)、以及指示屏幕中的位置的橫 軸(X)和豎軸(Y)被記錄在對象區(qū)域表中。稍后將參考圖17至21來描述在圖13中的步驟S213所示的“字符區(qū)域組定義處 理”以及在步驟S214所示的“補(bǔ)充信息定義處理”。圖17是示出圖13的流程圖中的步驟 S213所示的字符區(qū)域組定義處理的流程圖。圖18是將圖14中所示的屏幕的字符區(qū)域和對 象區(qū)域在與由補(bǔ)充信息存儲部分113保存的字符區(qū)域表和對象區(qū)域表中管理的ID(T.*和 Oj.*)相關(guān)聯(lián)的圖。圖19是示出由補(bǔ)充信息存儲部分113保存的字符區(qū)域組表的圖。圖20 是示出疊加狀態(tài)檢測型式的圖。圖21是示出在內(nèi)部處理中使用的邊緣寬度的示例的圖。“字符區(qū)域組”意味著作為一個信息單位操縱多個提取的字符區(qū)域的重疊的組。在 第一實(shí)施例中，確定“τ. 1/T. 2/T. 3”和“Τ. 4/T. 5”重疊，而“T. 6”不與任何其它字符區(qū)域重 疊。下面將討論對三個字符區(qū)域組的定義首先，區(qū)域確定部分112向補(bǔ)充信息存儲部分113查詢是否存在輸入視頻的字符 區(qū)域組表。如果來自補(bǔ)充信息存儲部分113的響應(yīng)是“不存在字符區(qū)域組表”(在步驟S301 的“否”)，則區(qū)域確定部分112請求補(bǔ)充信息存儲部分113創(chuàng)建新的字符區(qū)域組表(步驟 S302)。另一方面，如果來自補(bǔ)充信息存儲部分113的響應(yīng)是“存在字符區(qū)域組表”(在步 驟S301的“是”)，則區(qū)域確定部分112引用由補(bǔ)充信息存儲部分113保存的字符區(qū)域組表 (圖 19)。區(qū)域確定部分112引用由補(bǔ)充信息存儲部分113保存的圖15中所示的字符區(qū)域 表，并且將疊加檢測邊緣添加至所有字符區(qū)域(τ. *)以檢測疊加狀態(tài)(步驟S303)。在本實(shí) 施例中，例如，預(yù)設(shè)如圖21中所示的響應(yīng)于輸入視頻的比例因子而改變的邊緣寬度(像素 單位)。例如，假設(shè)當(dāng)輸入視頻的比例因子是25%時，邊緣寬度是10個像素，根據(jù)下面的計 算式計算疊加檢測邊緣寬度(W)=寬度(W) +左邊緣(10) +右邊緣(10)高度(H)=高度(H)+上邊緣(10)+下邊緣(10)橫軸⑴=橫軸(X)-左邊緣(10)豎軸⑴=豎軸(Y)-上邊緣(10)圖20是示出當(dāng)檢測到區(qū)域η和區(qū)域n+1的疊加狀態(tài)時的型式的圖?！癮”至“d”四邊 在區(qū)域η中存在，并且需要對于全部四邊檢查與要被檢查的區(qū)域n+1的疊加狀態(tài)。然而，在 下面的描述中，為了簡化描述，將僅討論從圖14中所示的輸入視頻2中提取的“S2(1401)，， 和“B3(1402)”的“Τ. 1(1801)的下邊和Τ. 2(1802)的上邊的重疊”，即，圖18中的屏幕 (1800)中所示的“Τ. 1 (1801) ”和“Τ. 2(1802) ”。將僅討論圖20中的Τ. 1 (區(qū)域η)頂點(diǎn)T. Ic 和頂點(diǎn)Τ. Id與Τ. 2 (區(qū)域n+1)的頂點(diǎn)T. 2a和頂點(diǎn)T. 2d重疊的部分，而將不討論其它重疊 部分。用于檢測二維平面上的分散對象的重疊的算法不限于第一實(shí)施例中的算法，且可以 使用任何其它方法。在將邊緣添加至當(dāng)前要被檢查的T. 1的下邊和T. 2的上邊中的每一個之后，區(qū)域 確定部分112對于字符區(qū)域而使用下列計算式來檢測疊加Τ. η (Xe) = Τ. η (X) +Τ. η (W)Τ. η (Xd) = Τ. η (X)
Δ τ. η (Y) = {Τ. η (Y) +Τ. η (H)}-Τ. m (Y)在所述式子中，假設(shè)m = n+l，以及Τ.η表示Τ.1而T.m表示Τ.2。假設(shè)“Xe”是在 T. 1的頂點(diǎn)C處的橫軸(X)的數(shù)值分配，“Xd”是在T. 1的頂點(diǎn)d處的橫軸(X)的數(shù)值分配， 而“T.m(Y)”是在T.2的頂點(diǎn)a(或b)處的豎軸⑴的數(shù)值分配(步驟S304)。接下來，區(qū)域確定部分112使用下列確定式來確定T. 1的下邊和T. 2的上邊的重 疊{T. m (X) ^T. η (Xe)彡 Τ· m (X) +Τ. m (W)或者 Τ. m (X)彡 Τ· η (Xd)彡 Τ· m (X) +Τ. m (W)} 且0彡Δ Τ. η (Y)彡邊緣寬度閾值(10)所述式子意味著“Τ. 1的頂點(diǎn)c存在于Τ. 2的頂點(diǎn)a和b之間”和“T. 1的頂點(diǎn)d 存在于T. 2的頂點(diǎn)a和b之間”中的任一種、且“由ΔΤ. η⑴表示的Τ. 1的下邊與Τ. 2的 上邊位置之間的差等于或大于0、且等于或小于預(yù)定邊緣寬度閾值”。如果滿足所述式子，則 區(qū)域確定部分112確定Τ. 1的下邊與Τ. 2的上邊重疊(步驟S305)。如果確定要被檢查的字符重疊(在步驟305的“是”)，則區(qū)域確定部分112引用補(bǔ) 充信息存儲部分113的字符區(qū)域組表。如果區(qū)域確定部分112確定“字符區(qū)域ID(T. η)存 在于先前的疊加ID中”或者“字符區(qū)域ID(Τ. η)存在于最新近的疊加ID中”(在步驟S306 的“是”)，則區(qū)域確定部分112引用現(xiàn)有的字符區(qū)域組并且將字符區(qū)域ID (Τ.η和T.m)記 錄在最新近的疊加ID中(步驟S307)。如果區(qū)域確定部分112確定“字符區(qū)域ID (Τ. η)不 存在于所述疊加ID的任一個中”(步驟S306的“否”)，則區(qū)域確定部分112定義新的字符 區(qū)域組，并且將字符區(qū)域ID (Τ. η和Τ. m)記錄在最新近的疊加ID中(步驟S308)。如果區(qū)域確定部分112確定不滿足確定式(在步驟S305的“否”)，則區(qū)域確定部 分112確定T. 1的下邊和T. 2的上邊不重疊，并且引用由補(bǔ)充信息存儲部分113保存的字符 區(qū)域組表。如果區(qū)域確定部分112確定“字符區(qū)域ID(T. η)被記錄在先前的疊加ID中”(步 驟S309的“是”)，則區(qū)域確定部分112引用現(xiàn)有的字符區(qū)域組，并且僅將字符區(qū)域ID (Τ. η) 記錄在最新近的疊加ID中(步驟S310)。另一方面，如果區(qū)域確定部分112確定“字符區(qū) 域ID(T. η)未被記錄在先前的疊加ID中”(在步驟S309的“否”)，則區(qū)域確定部分112定 義新的字符區(qū)域組，并且僅將字符區(qū)域ID (Τ.η)記錄在最新近的疊加ID中(步驟S311)。因此，區(qū)域確定部分112對于要被檢查的字符區(qū)域(Τ.η)而根據(jù)計算式(m = m+1) 等來改變要在疊加狀態(tài)中計算的字符區(qū)域(T.m)(步驟S312)。如果計算目標(biāo)保持，則處理 返回至步驟S304(在步驟S313的“否”)。在對于全部計算目標(biāo)(T.m)而確認(rèn)疊加狀態(tài)(在 步驟S313的“是”)之后，區(qū)域確定部分112為下個要被檢查的字符區(qū)域(T.n+1)確認(rèn)疊 加狀態(tài)(步驟S314和在S315的“否”)。最后，區(qū)域確定部分112確認(rèn)輸入視頻的所有字 符區(qū)域的疊加狀態(tài)(在步驟S315的“是”)。然后，區(qū)域確定部分112計算最小的字符大小 (Pt 點(diǎn)單位)，并將其記錄在由補(bǔ)充信息存儲部分113保存的字符區(qū)域組表的每個字符區(qū) 域組(Tx.*)所引用的最新近的疊加ID(T.*)中(步驟S316)。此外，區(qū)域確定部分112計 算包括由每個字符區(qū)域組(Tx. *)引用的最新近的疊加ID(T. *)中的每個字符區(qū)域的矩形， 并且記錄在字符區(qū)域組表中(步驟S317)。因此，完成如圖19中所示的字符區(qū)域組表。接下來，將參考圖22至24來詳細(xì)討論圖13中的步驟S214所示的“補(bǔ)充信息定義 處理”。圖22是示出圖13的流程圖中的步驟S214所示的補(bǔ)充信息定義處理的流程圖。圖23示出輸入視頻2中的字符區(qū)域組區(qū)域和補(bǔ)充信息區(qū)域的定義。圖23是將圖14和18中 所示的屏幕的字符區(qū)域組、對象區(qū)域和補(bǔ)充信息與在由補(bǔ)充信息存儲部分113保存的字符 區(qū)域組表和對象區(qū)域表中管理的ID (T. *、Oj. *和SA-*)相關(guān)聯(lián)的圖。圖24是示出由補(bǔ)充 信息存儲部分113保存的補(bǔ)充信息表的圖。將討論圖13中的步驟S214所示的補(bǔ)充信息定義處理?！把a(bǔ)充信息”是具有作 為基礎(chǔ)的提取的字符區(qū)域組的信息單位，并且可以作為一個信息單位共同地操縱重疊對 象區(qū)域的信息。在圖23中所示的示例中，屏幕(2300)的“Tx. 1 (2301)”被確定為重疊 "0j. 1(2304) ” 的補(bǔ)充信息 1 (SA-1 :2310)，而“Tx. 2 (2302) ” 被確定為重疊“0j. 5 (2308) ”和 “0j. 6(2309) ”的補(bǔ)充信息2(SA-2 2311)。"Tx. 3(2303) ”被確定為不重疊任何其它對象區(qū) 域的補(bǔ)充信息3(SA-3 2312)。下面將討論對三條補(bǔ)充信息的定義首先，區(qū)域確定部分112向補(bǔ)充信息存儲部分113查詢是否存在對于輸入視頻 的補(bǔ)充信息表。如果來自補(bǔ)充信息存儲部分113的響應(yīng)是“不存在補(bǔ)充信息表”(在步驟 S401的“否”)，則區(qū)域確定部分112請求補(bǔ)充信息存儲部分113創(chuàng)建新的補(bǔ)充信息表(步 驟S402)。另一方面，如果來自補(bǔ)充信息存儲部分113的響應(yīng)是“存在字符區(qū)域組表”(在 步驟S401的“是”)，則區(qū)域確定部分112引用由補(bǔ)充信息存儲部分113保存的補(bǔ)充信息表 (圖 24)。區(qū)域確定部分112引用由補(bǔ)充信息存儲部分113保存的字符區(qū)域組表和對象區(qū)域 表，并且將疊加檢測邊緣添加至所有對象區(qū)域組(Oj.*)來創(chuàng)建疊加狀態(tài)(步驟S403)。例 如，預(yù)設(shè)如圖21中所示的響應(yīng)于輸入視頻的比例因子而改變的邊緣寬度(像素單位)。例 如，假設(shè)當(dāng)輸入視頻的比例因子是25%時，邊緣寬度是10個像素，根據(jù)下面的計算式計算 疊加檢測邊緣寬度(W)=寬度(W) +左邊緣(10) +右邊緣(10)高度(H)=高度(H) +上邊緣(10) +下邊緣(10)橫軸(X)=橫軸(X)-左邊緣(10)豎軸(Y)=豎軸(Y)-上邊緣(10)在下面的描述中，為了簡化描述，將僅討論圖23中所示的“Tx. 1 (2301)”和 “0j. 1(2304) ”的“Tx. 1的右邊和Oj. 1的左邊的重疊”，如上述字符區(qū)域組提取處理一樣。 也就是說，將僅討論圖20中的Tx. 1 (區(qū)域η)的右邊Tx. Ib和Tx. Ic與Oj. 1 (區(qū)域n+1)的 左邊0j. Ia和0j. Id重疊的部分，而將不討論其它重疊部分。在將邊緣添加至當(dāng)前要被檢查的Tx. 1的右邊和Oj. 1的左邊中的每一個之后，區(qū) 域確定部分112對于對象區(qū)域而使用下列計算式來檢測疊加Tx. η (Yb) = Tx. η (Y) Tx. η (Yc) = Tx. η (Y) +Tx. η (N)Δ Tx. η (X) = {Tx. η(Χ) +Tx. η (W)}-0j. m (X)在所述式子中，假設(shè)m= 1，以及Τχ.η表示Τχ.1而Oj.m表示Oj.l。假設(shè)“Yb”是 在Tx. 1的頂點(diǎn)b處的豎軸⑴的數(shù)值分配，“Yc”是在Tx. 1的頂點(diǎn)c處的豎軸⑴的數(shù)值 分配，而“0j.m(X)”是在0j. 1的頂點(diǎn)a(或d)處的橫軸(X)的數(shù)值分配(步驟S404)。接下來，區(qū)域確定部分112使用下列確定式來確定Tx. 1的右邊和0j. 1的左邊的
重疊
{Oj.m(Y)彡 Tx. η (Yb)彡 Oj. m(Y) +Oj. m(H)或者 Oj. m(Y)彡 Tx. η (Yc)彡 Oj. m(Y)+Oj.m(H)}且O彡Δ Tx. η (X)彡邊緣寬度閾值(10)所述式子意味著“Τχ. 1的頂點(diǎn)b存在于Oj. 1的頂點(diǎn)a和d之間”和“Tx. 1的頂 點(diǎn)c存在于Oj. 1的頂點(diǎn)a和d之間”中的任一種、且“由ΔΤχ. n(X)表示的Tx. 1的右邊與 Oj. 1的左邊位置之間的差等于或大于0、且等于或小于預(yù)定邊緣寬度閾值”。如果滿足所述 式子，則區(qū)域確定部分112確定Tx. 1的右邊與Oj. 1的左邊重疊(步驟S405)。如果確定要被檢查的字符區(qū)域組和對象區(qū)域重疊(在步驟405的“是”)，則區(qū)域 確定部分112引用由補(bǔ)充信息存儲部分113保存的補(bǔ)充信息表。如果區(qū)域確定部分112確 定“對應(yīng)的字符區(qū)域組(Tx. η)被記錄在父ID中”(在步驟S406的“是”)，則區(qū)域確定部分 112引用現(xiàn)有的補(bǔ)充信息，記錄對象區(qū)域ID (0j. m)，并且將將疊加標(biāo)志設(shè)置為“真”(步驟 S407)。如果“對應(yīng)的字符區(qū)域組(Tx. η)未被記錄在父ID中”(步驟S406的“否”)，則區(qū)域 確定部分112定義新的補(bǔ)充信息，記錄對象區(qū)域ID (0j. m)，并且將疊加標(biāo)志設(shè)置為“真”(步 驟 S408)。如果區(qū)域確定部分112確定不滿足確定式(在步驟S405的“否”)，則區(qū)域確定部 分112確定Tx. 1的右邊和Oj. 1的左邊不重疊，并且引用由補(bǔ)充信息存儲部分113保存的補(bǔ) 充信息表。如果區(qū)域確定部分112確定“對應(yīng)的字符區(qū)域組(Tx. η)被記錄在父ID中”(步 驟S409的“是”)，則區(qū)域確定部分112引用現(xiàn)有的補(bǔ)充信息，記錄對象區(qū)域ID (0j. m)，并且 將疊加標(biāo)志設(shè)置為“假”(步驟S410)。另一方面，如果區(qū)域確定部分112確定“對應(yīng)的字符 區(qū)域組(Tx.n)未被記錄在父ID中”(在步驟S409的“否”)，則區(qū)域確定部分112定義新 的補(bǔ)充信息，記錄對象區(qū)域ID (0j. m)，并且將疊加標(biāo)志設(shè)置為“假”(步驟S411)。因此，區(qū)域確定部分112對于要被檢查的字符區(qū)域組(Τ. η)而根據(jù)計算式(m = m+1)等來改變要在疊加狀態(tài)中計算的對象區(qū)域(Oj.m)(步驟S412)。如果計算目標(biāo)保持， 則處理返回至步驟S404(在步驟S413的“否”)。在對于全部計算目標(biāo)(Oj.m)而確認(rèn)疊加 狀態(tài)(在步驟S413的“是”)之后，區(qū)域確定部分112基于從補(bǔ)充信息表的第一創(chuàng)建時間起 的累積總和來計算補(bǔ)充信息(SA-n)的出現(xiàn)頻率(％)，并且將該出現(xiàn)頻率記錄在補(bǔ)充信息 表中(步驟S414)。然后，區(qū)域確定部分112為要被檢查的下個字符區(qū)域組(Tx. n+1)順序 地確認(rèn)疊加狀態(tài)(步驟S415和在S416的“否”)。最后，區(qū)域確定部分112為輸入視頻確認(rèn) 所有字符區(qū)域組的疊加狀態(tài)(在步驟S416的“是”)。然后，區(qū)域確定部分112計算包括由 補(bǔ)充信息存儲部分113保存的每個字符區(qū)域組(Tx. *)與疊加的對象區(qū)域(0j. *)的重疊的 矩形，并且記錄在補(bǔ)充信息表中(步驟S417)。因此，完成如圖24中所示的字符區(qū)域組表。如上所述，區(qū)域確定部分112根據(jù)圖12、13、17和22中所示的流程圖而執(zhí)行處理， 由此圖24中所示的補(bǔ)充信息表被創(chuàng)建或更新，并且被保存在補(bǔ)充信息存儲部分113中。區(qū) 域確定部分112每次等待時間(Tw秒)重復(fù)該處理，由此遵循輸入視頻的改變而更新補(bǔ)充 信息的描述，使得在顯示器上繼續(xù)顯示如圖10中所示的屏幕。下面將參考圖25來詳細(xì)討論補(bǔ)充信息的繪圖定時。圖25是示出響應(yīng)于輸入視頻 的比例因子和分屏模式的補(bǔ)充信息顯示確定標(biāo)準(zhǔn)的圖。在補(bǔ)充信息顯示確定標(biāo)準(zhǔn)中，僅在 圖12的流程圖中所示的步驟S105滿足預(yù)定確定調(diào)節(jié)的情況下才顯示補(bǔ)充信息。預(yù)定確定 調(diào)節(jié)是“由補(bǔ)充信息存儲部分113保存的補(bǔ)充信息表中記錄的出現(xiàn)頻率(％ ) ”等于或大于“出現(xiàn)頻率的閾值(例如，50%)”；以及記錄在字符區(qū)域組表中的“字符大小” X “當(dāng)前 輸入視頻比例因子”等于或小于“字符閾值(例如，12個點(diǎn))，，；等等。補(bǔ)充信息顯示確定標(biāo)準(zhǔn)中的在前條件是用于確定在輸入視頻的一個給定時段中 顯示的字符串是廣播臺等的節(jié)目提供公司預(yù)期的補(bǔ)充信息的條件。提供該條件，由此，例 如，可以防止將當(dāng)劃分屏幕時不一定需要的信息(諸如突然地并在如電視廣告的單鏡頭中 顯示的字符串、或在棒球轉(zhuǎn)播中提供的信息)顯示為補(bǔ)充信息。在第一實(shí)施例中，補(bǔ)充信息 3(SA-3 棒球轉(zhuǎn)播中的投手所投的球的速度)的出現(xiàn)頻率是“12%”，因此，補(bǔ)充信息顯示確 定部分115確定補(bǔ)充信息3不滿足作為補(bǔ)充信息的條件。補(bǔ)充信息顯示確定標(biāo)準(zhǔn)中的在后條件是用于確定當(dāng)為顯示而縮小輸入視頻時、僅 在確定所顯示的字符串對于用戶難辨認(rèn)的情況下才將其顯示為補(bǔ)充信息的條件。例如，為 了顯示補(bǔ)充信息，對于在圖7(c)至7(f)中所示的“雙屏顯示狀態(tài)A至D”、如圖25中所示 的當(dāng)100%顯示輸入視頻作為初始狀態(tài)時的字符大小為如下字符區(qū)域組l(Tx. 1)的字符 大小是“18個點(diǎn)”，而字符區(qū)域組2(Τχ. 2)的字符大小是“26個點(diǎn)”。在“雙屏顯示狀態(tài)Α” 中，輸入視頻2的比例因子是“75%”，字符區(qū)域組1(Τχ. 1)的字符大小是“約14點(diǎn)”，字符 區(qū)域組2(Τχ.2)的字符大小是“約19個點(diǎn)”并且超過閾值(12個點(diǎn))，因此，確定信息對于 用戶是清楚可辨的，并且不顯示補(bǔ)充信息(圖7(c))。接下來，在達(dá)到“雙屏顯示狀態(tài)B”之前，字符區(qū)域組1(Τχ. 1)的字符大小下降到閾 值(12個點(diǎn))之下，補(bǔ)充信息顯示確定部分115開始顯示補(bǔ)充信息。在“雙屏顯示狀態(tài)B” 中，字符區(qū)域組2 (Τχ. 2)的字符大小超過閾值(12個點(diǎn))少許，因此僅顯示補(bǔ)充信息1(圖 7(d))。此外，剛好在經(jīng)過“雙屏顯示狀態(tài)B”之后，在達(dá)到“雙屏顯示狀態(tài)C”之前，字符區(qū)域 組2(Τχ.2)的字符大小下降到閾值(12個點(diǎn))之下，因此，在“雙屏顯示狀態(tài)C”中，也顯示 補(bǔ)充信息2 (圖7 (e))。然后，在“雙屏顯示狀態(tài)D”時以及之后，字符區(qū)域組1和2兩者的 字符大小均下降到閾值(12個點(diǎn))之下，因此繼續(xù)顯示補(bǔ)充信息1和補(bǔ)充信息2(圖7(f))。在所述描述中，“顯示出現(xiàn)頻率為‘50%’或更多的補(bǔ)充信息”，但是此確定標(biāo)準(zhǔn)能 夠由用戶按期望改變。在所述描述中，通過舉例，用于確定顯示的字符大小的閾值是“12個 點(diǎn)”，但是能夠由用戶按期望改變，這是因為，對于用戶難辨認(rèn)的字符大小從一個人到另一 個人而不同?？梢耘c用于顯示字符串的應(yīng)用中設(shè)置的大小(諸如，由終端系統(tǒng)管理的菜單 屏幕等的字體大小設(shè)置、終端中安裝的瀏覽器的字體大小設(shè)置、或終端中安裝的EPG的字 體大小設(shè)置)(上次的設(shè)置大小)相關(guān)聯(lián)地，確定用于確定顯示的字符大小的閾值。下面將參考圖26和27而詳細(xì)討論補(bǔ)充信息的繪圖位置。圖26是示出用于確定 補(bǔ)充信息的顯示位置的因素的示例的圖。圖27是示出顯示屏幕的布局構(gòu)成的示例的圖。如圖26中所示，為輸入視頻屏幕(2600)定義補(bǔ)充信息1 (SA-1 :2601)、補(bǔ)充信息 2 (SA-2 :2602)、以及補(bǔ)充信息3(SA-3 :2603)。在第一實(shí)施例中，定義通過將屏幕劃分為四 個而提供的第一象限到第四象限的區(qū)域，并且補(bǔ)充信息顯示確定部分115確定每個補(bǔ)充信 息屬于哪個象限，由此確定補(bǔ)充信息的粗略的顯示位置。例如，補(bǔ)充信息I(SA-I)屬于第二 象限，補(bǔ)充信息2(SA-2)屬于第四象限，而補(bǔ)充信息3 (SA-3)屬于第一象限。圖27示出圖7(e)中所示的“雙屏顯示狀態(tài)C”的屏幕布局構(gòu)成。補(bǔ)充信息顯示 確定部分115在圖12的流程圖中所示的步驟S106確定補(bǔ)充信息的顯示位置，并且傳送至 屏幕構(gòu)成管理部分103作為屏幕布局構(gòu)成。這里，例如，如圖26中所示，在屏幕2上顯示的輸入視頻2中包含的補(bǔ)充信息I(SA-I)被定位在第二象限中。因此，在圖27中，減去屏幕 1和2之間的邊界線的預(yù)定顯示邊緣，并且信息被左對齊在屏幕2的上部分中，并且以實(shí)際 大小顯示。此外，如圖26中所示，在屏幕2上顯示的輸入視頻2中包含的補(bǔ)充信息2(SA-2) 被定位在第四象限中。因此，在圖27中，減去對于顯示幀的右端的顯示邊緣、而非屏幕1和 2之間的邊界線的顯示邊緣，并且信息被右對齊在屏幕2的下部分，并且以實(shí)際大小顯示。在該示例中，分屏的構(gòu)成比率是3 1，并且關(guān)于作為界線的屏幕1和2之間的邊 界線而進(jìn)行定中心，但是顯示方法不限于其。例如，在該顯示方法中，可以在屏幕之間提供 顯示邊緣，或者可以將幀給予每個屏幕。在本實(shí)施例中，以實(shí)際大小(即，剪切輸入圖像的 100%顯示的部分的格式)顯示補(bǔ)充信息，但是能夠由用戶按期望選擇放大或縮小?？梢耘c 屏幕的布局構(gòu)成關(guān)聯(lián)地自動改變補(bǔ)充信息的縮放比例。當(dāng)屏幕構(gòu)成管理部分103交叉引用 與輸入視頻關(guān)聯(lián)的且保存的補(bǔ)充信息的區(qū)域，并且顯示輸入視頻2中的補(bǔ)充信息時，屏幕 構(gòu)成管理部分103可以考慮輸入視頻1中的字符區(qū)域組的位置而執(zhí)行處理。具體地，該處 理是改變補(bǔ)充信息的位置或顯示大小以使得輸入視頻2的補(bǔ)充信息不疊加輸入視頻1的字 符區(qū)域組的處理、或不顯示補(bǔ)充信息的處理。在本實(shí)施例中，以從廣播臺廣播的節(jié)目(例如，戲劇或棒球轉(zhuǎn)播)作為輸入視頻的 示例。然而，其不是廣播節(jié)目，并且可以是任何頻道或任何格式，諸如由另一設(shè)備通過記錄 等存儲的存儲節(jié)目、由個人拍攝的視頻、由第三方創(chuàng)建的視頻剪輯、或通過網(wǎng)絡(luò)發(fā)布的運(yùn)動 圖像。通過舉例，由補(bǔ)充信息顯示確定部分115通過圖12中所示的條件確定(步驟 S105)來確定是否顯示本實(shí)施例的補(bǔ)充信息存儲部分113保存的補(bǔ)充信息。然而，補(bǔ)充信息 顯示確定部分115可以以這樣的方式添加條件確定，該方式即其與伴隨廣播的節(jié)目概要 等的文本數(shù)據(jù)進(jìn)行比較，并且僅在其匹配內(nèi)容的情況下才顯示補(bǔ)充信息。如上所述，本實(shí)施例的視頻輸出設(shè)備100動態(tài)地管理至少一個輸入視頻的繪圖位 置和繪圖大小，并且執(zhí)行這樣的處理自動地放大其中在縮小的輸入圖像中確定字符串的 擠壓的出現(xiàn)的區(qū)域作為補(bǔ)充信息。因此，在本實(shí)施例中，放大顯示所需的用戶的操作次數(shù)減 少，并且以清楚可辨的字符大小提供易于理解的信息，由此可以防止用戶的信息辨認(rèn)的偶 爾丟失。在縮小的輸入視頻中，除了確定字符串的擠壓的出現(xiàn)的區(qū)域之外，不是字符串的 附近的logo標(biāo)記等的符號也被自動放大用以作為補(bǔ)充信息而顯示。因此，在本實(shí)施例中， 防止通過簡單的文本放大的諸如logo標(biāo)記的符號的信息丟失，并且可以為用戶提供準(zhǔn)確 的補(bǔ)充信息。當(dāng)縮小至少一個輸入圖像用以顯示時，補(bǔ)充信息被顯示在未使用的區(qū)域中，而非 縮小的顯示屏幕中(例如，在雙屏劃分時的黑帶的部分)。因此，在本實(shí)施例中，未擾亂主要 觀看的視頻，并且可以有效地利用空區(qū)域。當(dāng)縮小至少一個輸入圖像用以顯示時，在接近于變?yōu)榭s小的顯示屏幕上的補(bǔ)充信 息的引用源的字符區(qū)域的位置顯示補(bǔ)充信息。因此，在本實(shí)施例中，用戶可以通過直觀確定 在縮小的屏幕上放大哪個信息用以顯示，并且可以提供易于理解的信息。當(dāng)縮小至少一個輸入圖像用以顯示時，變?yōu)檠a(bǔ)充信息的引用源的區(qū)域以及放大的 補(bǔ)充信息區(qū)域通過縮小顯示屏幕上的指引線而在視覺上彼此關(guān)聯(lián)。因此，用戶可以通過直觀確定放大哪個信息用以在縮小的屏幕上顯示，并且可以提供易于理解的信息。為了以疊加視頻的格式顯示補(bǔ)充信息，考慮在視頻的什么位置存在字符區(qū)域而確 定補(bǔ)充信息的顯示位置。因此，補(bǔ)充信息或任何其它視頻不被疊加在視頻上的字符區(qū)域上， 并且可以防止遮蔽視頻上的字符區(qū)域顯示。如果輸入視頻中存在多個字符區(qū)域，則自動地優(yōu)先顯示包括所述多個字符區(qū)域的 字符區(qū)域組中被確定為最小的字符區(qū)域的補(bǔ)充信息。因此，在本實(shí)施例中，不需要用戶的額 外操作，并且可以提供通過縮小視頻而擠壓的字符信息中的最難看見的字符串信息而作為 補(bǔ)充信息。在本實(shí)施例中，僅顯示在提取的字符區(qū)域中對于給定時間顯示的信息而作為補(bǔ)充 信息。因此，在本實(shí)施例中，可以防止對瞬間顯示的副標(biāo)題、視頻上偶然顯示的廣告標(biāo)記、或 突然地并在廣告中的單鏡頭中顯示的字符串等的過多的補(bǔ)充信息顯示，并且可以抑制可能 的屏幕閃爍的出現(xiàn)。在本實(shí)施例中，確定提取的字符串中的改變，并且將補(bǔ)充信息的改變報告為屏幕 上的增強(qiáng)表示。因此，在本實(shí)施例中，用戶不需要總是考慮補(bǔ)充信息的改變，并且可以通過 自動提供的可視增強(qiáng)顯示，通過直觀辨認(rèn)縮小的屏幕中的狀態(tài)改變。在本實(shí)施例中，優(yōu)先顯示從視頻提取的補(bǔ)充信息中的匹配伴隨視頻的副主題 (subsidiary)的補(bǔ)充信息。因此，在本實(shí)施例中，可以防止顯示不直接涉及在視頻的內(nèi)容中 的字符區(qū)域，如在視頻上偶然顯示的廣告標(biāo)記的字符串等。(第二實(shí)施例)第一實(shí)施例示出這樣的情況從輸入視頻中提取每個字符區(qū)域和每個對象區(qū)域， 并且如果每個字符區(qū)域重疊對象區(qū)域，則剪切區(qū)域作為一個補(bǔ)充信息，并且疊加補(bǔ)充信息， 用以在由屏幕構(gòu)成管理部分103響應(yīng)于輸入視頻的比例因子而管理的屏幕布局構(gòu)成的空 區(qū)域上顯示。在第二實(shí)施例中，將討論這樣的情況除了由視頻輸出輸出設(shè)備100的區(qū)域確 定部分112提取的補(bǔ)充信息之外，視頻輸出設(shè)備100通過網(wǎng)絡(luò)600獲取并顯示來自外部服 務(wù)器的補(bǔ)充信息。在本實(shí)施例中，將參考圖28至30來討論獲取并顯示來自外部服務(wù)器的補(bǔ)充信息 的處理。圖28是示出第二實(shí)施例的視頻輸出設(shè)備以及其相關(guān)設(shè)備的框圖。在圖28中，未 示出視頻輸出設(shè)備100的視頻輸入部分104的內(nèi)部構(gòu)成。圖29是示出由補(bǔ)充信息提供設(shè) 備提供的屏幕構(gòu)成數(shù)據(jù)的圖。圖30是示出基于屏幕構(gòu)成數(shù)據(jù)的補(bǔ)充信息的顯示示例的圖。本實(shí)施例的視頻輸出設(shè)備100具有與第一實(shí)施例的視頻輸出設(shè)備100的構(gòu)成類似 的構(gòu)成。圖28中的第二實(shí)施例不同于圖6中所示的第一實(shí)施例，主要在于連接至網(wǎng)絡(luò)600 的通信部分109d連接至屏幕構(gòu)成管理部分103 ；以及補(bǔ)充信息提供設(shè)備800被添加作為連 接至網(wǎng)絡(luò)600的外部服務(wù)器。除了上述之外的構(gòu)成與圖6中的構(gòu)成相同，因此在圖28中， 與圖6中的部分相同的部分被標(biāo)注以相同的附圖標(biāo)記，并且將不再討論。本實(shí)施例的屏幕構(gòu)成管理部分103請求與通過合成部分107而在輸出部分108上 顯示的輸入視頻關(guān)聯(lián)的補(bǔ)充信息提供設(shè)備800 按需要通過通信部分109d獲取屏幕構(gòu)成數(shù) 據(jù)。補(bǔ)充信息提供設(shè)備800返回如圖29中所示的屏幕構(gòu)成數(shù)據(jù)，其描述響應(yīng)于來自視頻輸 出設(shè)備100的請求而在視頻輸出設(shè)備100中觀看的輸入視頻的屏幕構(gòu)成中的補(bǔ)充信息的顯 示位置等。屏幕構(gòu)成管理部分103分析通過通信部分109d獲取的屏幕構(gòu)成數(shù)據(jù)，并且為輸入視頻確定在哪個區(qū)域中顯示補(bǔ)充信息。例如，對于在第一實(shí)施例的描述中使用的輸入視頻2 (棒球轉(zhuǎn)播)，如圖29中所示， 定義了三條補(bǔ)充信息1至3。作為第二實(shí)施例中的補(bǔ)充信息1至3，存在擊球手計分(RP-I)、 進(jìn)展信息(RP-2)和投球速度(RP-3)，并且將寬度(W)、高度(H)、橫軸⑴和豎軸⑴的信 息描述作為每個補(bǔ)充信息的顯示位置。此外，作為一個實(shí)施例，添加日語版本和英語版本的 補(bǔ)充信息URL(統(tǒng)一資源定位器)。對于補(bǔ)充信息URL，除了關(guān)于補(bǔ)充信息的顯示位置的信 息之外，補(bǔ)充信息提供設(shè)備800還提供補(bǔ)充信息，并且該信息可以通過網(wǎng)絡(luò)600獲取。將討論這樣的情況將語言設(shè)置選擇為日語，作為可以按操作視頻輸出設(shè)備100 的用戶的期望而選擇的簡檔(profile)之一。包含語言設(shè)置的簡檔被記錄在本實(shí)施例的屏 幕構(gòu)成管理部分103或視頻輸出設(shè)備具有的記錄介質(zhì)中。例如，假設(shè)用英語表示進(jìn)展信息 (RP-2)和投球速度(RP-3)。屏幕構(gòu)成管理部分103根據(jù)語言設(shè)置，使用補(bǔ)充信息URL來獲 取由補(bǔ)充信息提供設(shè)備800提供的“日語版本的補(bǔ)充信息”，并且將其作為補(bǔ)充信息而疊加 在輸入視頻上用以顯示。例如，如圖30中所示，可以根據(jù)屏幕構(gòu)成數(shù)據(jù)而在屏幕(3000)中 確定由廣播臺預(yù)期的補(bǔ)充信息1至3的顯示區(qū)域(3001至3003)。屏幕構(gòu)成管理部分103 根據(jù)使用補(bǔ)充信息URL獲取的圖像，將在本來的輸入視頻2中顯示為“9th”的部分顯示為 “9回”，而將顯示為“142Km/h”的部分顯示為“時速142Km”。在第二實(shí)施例中，使用補(bǔ)充信息URL獲取圖像，但是可以獲取以流方式分發(fā)的運(yùn) 動圖像或文本。在第二實(shí)施例中，通過舉例，通過網(wǎng)絡(luò)600而從補(bǔ)充信息提供設(shè)備800獲取的圖像 構(gòu)成數(shù)據(jù)包含由廣播臺等的節(jié)目提供方指示的補(bǔ)充信息的概要、顯示區(qū)域的位置信息、以 及對于由補(bǔ)充信息提供設(shè)備800提供的補(bǔ)充信息的補(bǔ)充信息URL。然而，所包含的信息不限 于它們，并且可以包含相關(guān)信息、用于訪問相關(guān)信息的URL、可以通過網(wǎng)絡(luò)600獲取的第二 音頻節(jié)目頻道等等。用戶可以通過視頻輸出設(shè)備100的應(yīng)用處理部分105、或個人計算機(jī)的 瀏覽器等中之一來改變補(bǔ)充信息提供設(shè)備800的設(shè)置。為了改變設(shè)置，可以改變補(bǔ)充信息 相對于輸入視頻的顯示位置、或當(dāng)縮小輸入屏幕(或者執(zhí)行輸入視頻的分屏)時的補(bǔ)充信 息對于屏幕(3000)的相對顯示位置，作為補(bǔ)充信息顯示指定區(qū)域。如上所述，在本實(shí)施例中，從不同類型的補(bǔ)充信息中，根據(jù)用戶的簡檔選擇并顯示 補(bǔ)充信息。因此，在將日語設(shè)置為語言設(shè)置的視頻輸出設(shè)備中，顯示日語版本的補(bǔ)充信息。 屏幕構(gòu)成管理部分103可以將補(bǔ)充信息翻譯為不同的語言。例如，屏幕構(gòu)成管理部分103 根據(jù)英日詞典將提取為應(yīng)用的文本翻譯為日語用以顯示。因此，在本實(shí)施例中，可以響應(yīng)于 由用戶選擇的語言設(shè)置而顯示補(bǔ)充信息。視頻輸出設(shè)備可以使用從視頻輸出設(shè)備外部獲取的補(bǔ)充信息區(qū)域型式數(shù)據(jù)中包 含的補(bǔ)充信息區(qū)域，提取并顯示變?yōu)檠a(bǔ)充信息的視頻。補(bǔ)充信息區(qū)域型式數(shù)據(jù)是指示輸入 視頻中的補(bǔ)充信息區(qū)域的位置的數(shù)據(jù)。在此情況下，減輕了計算補(bǔ)充信息區(qū)域所需的視頻 輸出設(shè)備上的處理負(fù)荷，并且視頻輸出設(shè)備可以可靠地確定由視頻制作方預(yù)期的補(bǔ)充信息 區(qū)域。視頻輸出設(shè)備可以根據(jù)從視頻輸出設(shè)備外部獲取的屏幕構(gòu)成數(shù)據(jù)中包含的補(bǔ)充 信息顯示指定區(qū)域來顯示補(bǔ)充信息。在此情況下，減輕了計算補(bǔ)充信息的顯示位置和大小 所需的視頻輸出設(shè)備上的處理負(fù)荷，并且視頻輸出設(shè)備可以可靠地在由用戶預(yù)期的指定區(qū)
本發(fā)明不限于上述第一或第二實(shí)施例。下列情況也包括在本發(fā)明中(1)具體地，上述每個設(shè)備是由微處理器、ROM、RAM、硬盤部分、顯示器部分、鍵盤、 鼠標(biāo)等組成的計算機(jī)系統(tǒng)。計算機(jī)程序被存儲在RAM或硬盤單元中。微處理器根據(jù)計算機(jī) 程序而操作，由此每個設(shè)備實(shí)現(xiàn)功能。計算機(jī)程序由指示用于計算機(jī)實(shí)現(xiàn)預(yù)定功能的命令 的指令代碼。(2)組成上述每個設(shè)備的組件中的一些或全部可以被實(shí)施為一個系統(tǒng)LSI (大規(guī) 模集成)。系統(tǒng)LSI是通過將多個組件集成在一個芯片上而制造的超多功能LSI，具體地是 由微處理器、ROM、RAM等組成的計算機(jī)系統(tǒng)。計算機(jī)程序被存儲在RAM中。微處理器根據(jù) 計算機(jī)程序而操作，由此系統(tǒng)LSI實(shí)現(xiàn)功能。(3)組成上述每個設(shè)備的組件中的一些或全部可以被實(shí)施為可以附連至每個設(shè)備 或從每個設(shè)備解除附連的IC卡或單個模塊。IC卡或模塊是由微處理器、R0M、RAM等組成的 計算機(jī)系統(tǒng)。IC卡或模塊可以包含上面提及的超多功能LSI。微處理器根據(jù)計算機(jī)程序而 操作，由此IC卡或模塊實(shí)現(xiàn)功能。(4)本發(fā)明可以是上述方法。所述方法可以是由計算機(jī)執(zhí)行的計算機(jī)程序。本發(fā)明可以被記錄在計算機(jī)程序或數(shù)字信號的計算機(jī)可讀記錄介質(zhì)中，例如，軟 盤、硬盤、光盤、半導(dǎo)體存儲器等。本發(fā)明可以經(jīng)由電信線路、無線或有線通信線路、以因特網(wǎng)為代表的網(wǎng)絡(luò)、數(shù)據(jù)廣 播等來傳送計算機(jī)程序。本發(fā)明可以是包括微處理器和存儲器的計算機(jī)系統(tǒng)，并且存儲器可以存儲計算機(jī) 程序，而微處理器可以根據(jù)計算機(jī)程序操作。程序或數(shù)字信號被記錄在記錄介質(zhì)中，并且記錄介質(zhì)是移動的，或者程序或數(shù)字 信號經(jīng)由網(wǎng)絡(luò)等移動，由此可以通過另一個獨(dú)立的計算機(jī)系統(tǒng)來執(zhí)行程序或信號。(5)可以結(jié)合所述實(shí)施例和修改的示例。雖然已經(jīng)參考具體實(shí)施例而詳細(xì)描述了本發(fā)明，但是對于本領(lǐng)域中的技術(shù)人員將 是顯而易見的是，在不違背本發(fā)明的精神和范疇的情況下，可以進(jìn)行各種改變和修改。此申請基于2008年10月10日提交的日本專利申請(No. 2008-264004)，通過引用 將其合并在此。工業(yè)適用性根據(jù)本發(fā)明的視頻輸出設(shè)備可以被應(yīng)用于數(shù)字電視接收機(jī)、數(shù)字視頻光盤記錄 器、機(jī)頂盒、投影儀、外部監(jiān)控器、用于將視頻輸出到外部的個人計算機(jī)、具有視頻顯示輸出 功能的移動設(shè)備等。附圖標(biāo)記說明100視頻輸出設(shè)備101輸入部分102終端控制部分103屏幕構(gòu)成管理部分104視頻輸入部分105應(yīng)用處理部分
106屏幕生成部分
107合成部分
108輸出部分
109a第一調(diào)諧器
109b第二調(diào)諧器
109c外部輸入部分
109d通信部分
110解碼器
111處理部分
112區(qū)域確定部分
113補(bǔ)充信息存儲部分
115補(bǔ)充信息顯示確定部分
200天線
300廣播臺
400發(fā)送臺
500視頻提供設(shè)備A
600網(wǎng)絡(luò)
700視頻提供設(shè)備B
800補(bǔ)充信息提供設(shè)備
權(quán)利要求
一種視頻輸出設(shè)備，包括屏幕構(gòu)成管理部分，其管理用于顯示至少一個視頻的屏幕的布置或縮放比例；區(qū)域確定部分，其確定輸入視頻中的字符區(qū)域；補(bǔ)充信息存儲部分，其剪切出包括由所述區(qū)域確定部分確定的至少一個字符區(qū)域的補(bǔ)充信息區(qū)域上的視頻，并且將所述補(bǔ)充信息區(qū)域上的視頻存儲作為補(bǔ)充信息；補(bǔ)充信息顯示確定部分，其基于由所述屏幕構(gòu)成管理部分管理的屏幕構(gòu)成，確定是否除了輸入視頻之外還顯示由所述補(bǔ)充信息存儲部分存儲的補(bǔ)充信息；以及輸出部分，其根據(jù)來自所述屏幕構(gòu)成管理部分和所述補(bǔ)充信息顯示確定部分的命令，輸出所述輸入視頻和所述補(bǔ)充信息，其中，所述補(bǔ)充信息顯示確定部分基于在響應(yīng)于由所述屏幕構(gòu)成管理部分管理的縮放比例而改變的輸入視頻中的字符區(qū)域中包括的字符的大小，確定是否顯示所述補(bǔ)充信息。
2.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，當(dāng)在所述輸入視頻中確定存在所述字符 區(qū)域時，所述區(qū)域確定部分確定在所述字符區(qū)域的附近是否存在對象區(qū)域，以及其中，所述補(bǔ)充信息區(qū)域包括由所述區(qū)域確定部分確定的至少一個字符區(qū)域和對象區(qū)域。
3.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息顯示確定部分確定與用于 顯示所述至少一個視頻的區(qū)域不同的區(qū)域是所述補(bǔ)充信息的顯示位置。
4.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息顯示確定部分根據(jù)包括所 述補(bǔ)充信息的輸入視頻中的補(bǔ)充信息區(qū)域的位置、與另一屏幕的相對位置、以及預(yù)定邊緣 寬度，確定所述補(bǔ)充信息的顯示位置和顯示大小。
5.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，當(dāng)顯示所述補(bǔ)充信息時，所述補(bǔ)充信息顯 示確定部分執(zhí)行處理，以便在所述輸入視頻中顯示指示包括所述補(bǔ)充信息的輸入視頻中的 補(bǔ)充信息區(qū)域的幀，并且顯示指示所述補(bǔ)充信息與所述幀之間的關(guān)系的指引。
6.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息顯示確定部分確定所述補(bǔ) 充信息的顯示位置和顯示大小，以便不重疊通過剪切出包括由所述區(qū)域確定部分提取的另 一字符區(qū)域的補(bǔ)充信息區(qū)域上的視頻而獲得的其它補(bǔ)充信息。
7.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息顯示確定部分優(yōu)先顯示通 過剪切出補(bǔ)充信息區(qū)域上的視頻而得到的補(bǔ)充信息，其中，所述補(bǔ)充信息區(qū)域包括在由所 述區(qū)域確定部分提取的至少一個字符區(qū)域之中的、字符大小被確定為最小的字符區(qū)域。
8.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息顯示確定部分將所述區(qū)域 確定部分的確定結(jié)果存儲到所述補(bǔ)充信息存儲部分中，并確定優(yōu)先顯示在包括由所述區(qū)域 確定部分提取的至少一個字符區(qū)域或?qū)ο髤^(qū)域的補(bǔ)充信息區(qū)域之中的、在所述輸入視頻中 存在預(yù)定時間或更長的補(bǔ)充信息區(qū)域。
9.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息存儲部分存儲從所述補(bǔ)充 信息中的字符區(qū)域提取的字符串；以及其中，當(dāng)存儲在所述補(bǔ)充信息存儲部分中的字符串不同于從同一字符區(qū)域最新近提取 的字符串時，所述補(bǔ)充信息顯示確定部分執(zhí)行處理，以強(qiáng)調(diào)所述補(bǔ)充信息用以顯示。
10.如權(quán)利要求1所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息存儲部分除了所述補(bǔ)充信 息之外還存儲從所述補(bǔ)充信息中的字符區(qū)域提取的字符串；以及其中，所述補(bǔ)充信息顯示確定部分執(zhí)行處理，以便根據(jù)所述視頻輸出設(shè)備的用戶簡檔 來轉(zhuǎn)換所述字符串，并且顯示經(jīng)轉(zhuǎn)換的字符串。
11.如權(quán)利要求1所述的視頻輸出設(shè)備，包括通信部分，其從外部服務(wù)器接收屏幕構(gòu)成數(shù)據(jù)，所述屏幕構(gòu)成數(shù)據(jù)指示用于顯示至少 一個視頻的屏幕的布置和大小，其中，所述屏幕構(gòu)成管理部分根據(jù)通過所述通信部分從所述外部服務(wù)器獲取的屏幕構(gòu) 成數(shù)據(jù)，管理所述屏幕構(gòu)成；以及其中，所述補(bǔ)充信息顯示確定部分執(zhí)行處理，以便在由所述屏幕構(gòu)成數(shù)據(jù)指定的區(qū)域 中顯示所述補(bǔ)充信息。
12.如權(quán)利要求11所述的視頻輸出設(shè)備，其中，所述補(bǔ)充信息顯示確定部分執(zhí)行處理， 以便基于在響應(yīng)于由所述屏幕構(gòu)成管理部分管理的縮放比例而改變的輸入視頻中的字符 區(qū)域中包括的字符的大小，在由所述屏幕構(gòu)成數(shù)據(jù)指定的區(qū)域中顯示所述補(bǔ)充信息。
13.如權(quán)利要求1所述的視頻輸出設(shè)備，包括通信部分，其從外部服務(wù)器接收指示輸入視頻中的補(bǔ)充信息區(qū)域的位置的信息， 其中，通過使用在通過所述通信部分從所述外部服務(wù)器獲取的信息中包含的補(bǔ)充信息 區(qū)域，提取并顯示充當(dāng)補(bǔ)充信息的視頻。
14.一種視頻輸出設(shè)備，包括屏幕構(gòu)成管理部分，其管理用于顯示至少一個視頻的屏幕的布置或縮放比例； 區(qū)域確定部分，其確定輸入視頻中的字符區(qū)域；通信部分，其從外部服務(wù)器獲取在由所述區(qū)域確定部分確定的至少一個字符區(qū)域中包 括的字符串作為補(bǔ)充信息；補(bǔ)充信息顯示確定部分，其基于由所述屏幕構(gòu)成管理部分管理的屏幕構(gòu)成，確定是否 除了輸入視頻之外還顯示通過所述通信部分獲取的補(bǔ)充信息；以及輸出部分，其根據(jù)來自所述屏幕構(gòu)成管理部分和所述補(bǔ)充信息顯示確定部分的命令， 輸出所述輸入視頻和所述補(bǔ)充信息，其中，當(dāng)在由所述區(qū)域確定部分確定的至少一個字符區(qū)域中包括的字符的大小小于閾 值時，所述補(bǔ)充信息顯示確定部分顯示所述補(bǔ)充信息。
15.如權(quán)利要求14所述的視頻輸出設(shè)備，其中，所述通信部分從外部服務(wù)器接收指示 用于顯示至少一個視頻的屏幕的布置和大小的屏幕構(gòu)成數(shù)據(jù)，其中，所述屏幕構(gòu)成管理部分根據(jù)通過所述通信部分從所述外部服務(wù)器獲取的屏幕構(gòu) 成數(shù)據(jù)，管理所述屏幕構(gòu)成；以及其中，所述補(bǔ)充信息顯示確定部分執(zhí)行處理，以便在由所述屏幕構(gòu)成數(shù)據(jù)指定的區(qū)域 中顯示所述補(bǔ)充信息。
16.一種視頻輸出方法，包括 確定輸入視頻中的字符區(qū)域；剪切出包括至少一個字符區(qū)域的補(bǔ)充信息區(qū)域上的視頻，并且將所述補(bǔ)充信息區(qū)域上 的視頻存儲作為補(bǔ)充信息；基于用于定義用于顯示至少一個視頻的屏幕的布置或縮放比例的屏幕構(gòu)成，確定是否 除了輸入視頻之外還顯示所述補(bǔ)充信息；以及根據(jù)所述屏幕構(gòu)成和確定結(jié)果，輸出所述輸入視頻和所述補(bǔ)充信息， 其中基于在所述輸入視頻中的字符區(qū)域中包括的字符的大小，確定顯示所述補(bǔ)充信息。
17. —種視頻輸出方法，包括 確定輸入視頻中的字符區(qū)域；從外部服務(wù)器獲取在至少一個字符區(qū)域中包括的字符串作為補(bǔ)充信息； 基于用于定義用以顯示至少一個視頻的屏幕的布置或縮放比例的屏幕構(gòu)成，確定是否 除了輸入視頻之外還顯示從所述外部服務(wù)器獲取的補(bǔ)充信息；以及根據(jù)所述屏幕構(gòu)成和確定結(jié)果，輸出所述輸入視頻和所述補(bǔ)充信息， 其中，當(dāng)在所述至少一個字符區(qū)域中包括的字符大小小于閾值時，確定顯示所述補(bǔ)充 fn息ο
全文摘要
提供了一種視頻輸出設(shè)備，包括屏幕構(gòu)成管理部分，其管理顯示至少一個視頻的屏幕的布置或縮放比例；區(qū)域確定部分，其確定來自輸入視頻的字符區(qū)域；補(bǔ)充信息存儲部分，其剪切出包括由所述區(qū)域確定部分確定的至少一個字符區(qū)域的補(bǔ)充信息區(qū)域上的視頻作為補(bǔ)充信息；補(bǔ)充信息顯示確定部分，其基于由所述屏幕構(gòu)成管理部分管理的屏幕構(gòu)成，確定是否除了輸入視頻之外還顯示由所述補(bǔ)充信息存儲部分存儲的補(bǔ)充信息；以及輸出部分，其根據(jù)來自所述屏幕構(gòu)成管理部分和所述補(bǔ)充信息顯示確定部分的命令，輸出所述輸入視頻和所述補(bǔ)充信息。所述補(bǔ)充信息顯示確定部分基于輸入視頻中的字符區(qū)域中包括的字符的大小，確定是否將顯示所述補(bǔ)充信息，其中所述大小根據(jù)由所述屏幕構(gòu)成管理部分管理的縮放比例而改變。因此，可以根據(jù)輸入視頻的顯示大小的縮放比例而改變顯示補(bǔ)充信息的格式。
文檔編號H04N7/16GK101897178SQ20098010132
公開日2010年11月24日 申請日期2009年10月8日 優(yōu)先權(quán)日2008年10月10日
發(fā)明者幸裕弘 申請人:松下電器產(chǎn)業(yè)株式會社