專利名稱：節(jié)目推薦裝置的制作方法
技術領域：
本發(fā)明涉及推薦進行再現(xiàn)、發(fā)布或錄像的節(jié)目的節(jié)目推薦裝置，即 使針對沒有節(jié)目屬性等節(jié)目信息的節(jié)目，該節(jié)目推薦裝置也能進行節(jié)目 推薦。
背景技術：
作為從廣播節(jié)目中推薦符合視聽者喜好的節(jié)目的方法， 一般使用這
樣的方法從廣播或網(wǎng)絡接收EPG (Electronic Program Guide,電子節(jié)目 指南)，使用EPG信息具有的類別，推薦視聽者想要視聽的類別的節(jié)目。 而且，還有這樣的方法除EPG信息之外單獨接收視聽者希望視聽的類 別，將其分類為EGP類別(參照專利文獻l)。并且，還有這樣的方法 為了分析視聽者的喜好，根據(jù)視聽者的節(jié)目選擇等的操作歷史分析喜好， 生成基于視聽傾向的節(jié)目表(專利文獻2)。而且，還有這樣的方法為 了更準確地判定視聽者的喜好，利用節(jié)目開始、結束時有無操作來進行 判定(專利文獻3)。
專利文獻1日本特開2000—115646號公報(段落0015—0016、
圖2)
專利文獻2日本特開2000—13708號公報(段落0008、圖2)專利文獻3日本特開2002—369090號公報(段落0038、圖1) 然而，在上述現(xiàn)有方法中，存在不能推薦沒有節(jié)目信息的節(jié)目的問題。

發(fā)明內容
因此，本發(fā)明是為了解決上述現(xiàn)有技術的問題而作成的，本發(fā)明的 目的是提供一種節(jié)目推薦裝置，該節(jié)目推薦裝置即使在所錄像的節(jié)目預先沒有節(jié)目信息或屬性信息的情況下，也能根據(jù)喜好和興趣，從所錄像 的節(jié)目中向用戶推薦應再現(xiàn)節(jié)目。
本發(fā)明的節(jié)目推薦裝置，其特征在于，該節(jié)目推薦裝置具有場景 屬性提取單元，其提取作為視頻音頻內容的一部分的場景的屬性；頻度 分布取得單元，其對按每一所述場景所提取的場景的屬性的產(chǎn)生頻度進 行計數(shù)，求出所提取的每一屬性的頻度；以及推薦節(jié)目選出單元，其根
據(jù)由所述頻度分布取得單元所取得的頻度分布，推薦進行錄像或再現(xiàn)的 視頻音頻內容。
根據(jù)本發(fā)明的節(jié)目推薦裝置，即使針對沒有節(jié)目信息的節(jié)目，也能 通過以場景為單位總計節(jié)目屬性，由此推薦要進行錄像、再現(xiàn)或發(fā)布的 節(jié)目。


圖1是示出具有本發(fā)明的實施方式1的節(jié)目推薦裝置的記錄再現(xiàn)裝 置的結構的框圖。
圖2是示出在實施方式1中使用的場景屬性的一例和對應的判定基 準的表。
圖3是示出在實施方式1中以場景為單位檢測了屬性的結果的一例 的圖。
圖4是在實施方式1中檢測出的場景屬性的直方圖。
圖5是實施方式1中表示用戶視聽歷史的直方圖。
圖6是實施方式1中表示再現(xiàn)了節(jié)目的特定區(qū)間時的場景屬性的出
現(xiàn)頻度的直方圖。
圖7 (a) (d)是示出根據(jù)實施方式l，基于視聽歷史所生成的推
薦直方圖、以及多個節(jié)目各自的直方圖的圖。
圖8是示出實施方式1的錄像時的場景屬性提取處理進程的流程圖。 圖9是示出實施方式1的再現(xiàn)時的場景屬性提取處理進程的流程圖。 圖IO是示出實施方式1的節(jié)目推薦處理進程的流程圖。 圖11 (a) (c)是示出實施方式l中的直方圖合成方法的圖。一例的圖。 圖13是示出實施方式1中的用戶界面的另一例的圖。圖14是示出具有本發(fā)明的實施方式2的節(jié)目推薦裝置的記錄再現(xiàn)裝 置的結構的框圖。圖15是示出在實施方式2中使用的關鍵字與屬性的對應關系的一例 的圖。圖16 (a)和(b)是示出實施方式2中的屬性與各場景的對應結果 的一例的圖。圖17是在實施方式2中生成的場景屬性直方圖。圖18是示出具有本發(fā)明的實施方式3的節(jié)目推薦裝置的記錄再現(xiàn)裝 置的結構的框圖。圖19是在實施方式3中使用的用戶喜好直方圖。圖20是示出具有本發(fā)明的實施方式4的節(jié)目推薦裝置的記錄再現(xiàn)裝 置的結構的框圖。標號說明1:記錄再現(xiàn)裝置；2:系統(tǒng)控制部；3:數(shù)字調諧器；4:模擬調諧 器；5:外部模擬輸入部；11:編碼器；12:再編碼器；13:輸入流控制 部；14:節(jié)目記錄部；15:場景屬性數(shù)據(jù)庫；16:輸出流控制部；17: 再現(xiàn)解碼器；18:元數(shù)據(jù)記錄部；20:輸入場景分析部；21:分析用解 碼器；22:特征量提取部；23:場景提取部；24:場景屬性選擇部；25: 屬性列表存儲器；26:幀緩存器；30:再現(xiàn)場景分析部；31:場景時間 信息提取部；32:場景屬性提取部；33:用戶喜好數(shù)據(jù)庫更新部；40: 節(jié)目推薦部；42:推薦節(jié)目選出部；43:用戶喜好數(shù)據(jù)庫；74:編輯流 控制；75:流編輯；76:編輯場景屬性提?。?7:編輯場景時間信息提 ??；50: EPG控制部；51: EPG數(shù)據(jù)庫；52: EPG檢索部；53: EPG取 得部；60:輸入場景分析部；67:元數(shù)據(jù)提取部；68:元數(shù)據(jù)場景屬性 匹配部；81:遙控接收部；82:用戶操作接收部；87:外部數(shù)字輸出部； 88:外部數(shù)字輸出端子；91:天線；92:網(wǎng)絡；93:監(jiān)視器。
具體實施方式
實施方式1圖1是示出具有本發(fā)明的實施方式1的節(jié)目推薦裝置的記錄再現(xiàn)裝 置l的結構的框圖。使用圖1首先說明節(jié)目的記錄和再現(xiàn)方法。記錄再現(xiàn)裝置1能與外部的天線91和網(wǎng)絡92連接，并根據(jù)需要可將未圖示的其它視頻再現(xiàn)裝 置與外部模擬輸入部5連接。天線91能接收發(fā)布視頻音頻內容的數(shù)字廣播或模擬廣播。 在接收數(shù)字廣播的情況下，利用數(shù)字調諧器3對用戶指定的頻道進 行選臺。數(shù)字調諧器3解調廣播波，將所指定的頻道的傳送流發(fā)送到輸 入流控制部13。輸入流控制部13取入所發(fā)送的傳送流的視頻音頻內容， 將其記錄在節(jié)目記錄部14內。在普通數(shù)字廣播中，將MPEG—2視頻和AAC (Advanced Audio Coding,高級音頻編碼)音頻與MPEG—2傳送流進行復用。當要以MPEG 一2視頻傳送高清晰(highvision)廣播、并直接進行記錄時，需要系統(tǒng) 速率為20Mbps以上的記錄速率，從而對由HDD等實現(xiàn)的節(jié)目記錄部14 的容量帶來壓力。因此，為了提高記錄密度，具有使用MPEG—4AVC/H. 264編碼進行高壓縮的方法。在本實施方式中，為了延長節(jié)目記錄部14 中的能錄像時間，配備了從MPEG—2視頻再編碼成MPEG—4 AVC/H.264 的再編碼器12。在再編碼成MPEG—4 AVC/H.264的情況下，將從數(shù)字調諧器3輸出 的傳送流經(jīng)由再編碼器12發(fā)送到輸入流控制部13。以后的處理與MPEG 一2視頻的情況相同。在模擬廣播的情況下，當由模擬調諧器4對用戶指定的頻道進行了 選臺時，所指定的頻道的視頻信號被輸出，由未圖示的A/D轉換部進行 A/D轉換，之后被輸入到編碼器ll，被壓縮編碼成例如MPEG—2，即進 行比特流化。在進行了比特流化后被發(fā)送到輸入流控制部13，以后的處理與數(shù)字廣播的情況相同。從外部模擬輸入部5輸入的視頻信號也與模擬廣播一樣進行比特流輸入流控制部13具有未圖示的配備在內部的緩存器，以便對節(jié)目記 錄部14實現(xiàn)穩(wěn)定寫入，發(fā)送到輸入流控制部13的比特流暫時被記錄在內部緩存器內，保持在輸入流控制部13的上述緩存器內，直到處于能執(zhí) 行節(jié)目記錄部14的寫入請求的狀態(tài)。節(jié)目記錄部14例如包含HDD (Hard Disk Drive，硬盤驅動器)、閃 存、光盤驅動器、光磁盤驅動器等，不特別要求介質種類。并且，在節(jié)目記錄部14內，除了記錄有廣播節(jié)目即內容被壓縮后的 流以外，還記錄有與流對應的再現(xiàn)控制信息。再現(xiàn)控制信息中記錄有-內容的標題、時長、記錄開始時間、流的編碼方式，以及被稱為進入點 (entrypoint)的各單位的時間信息和從流開頭的位置信息，表示被稱為 章節(jié)(chapter)的通過跳過操作進行跳躍的目的地的時間(從開頭到該 點的再現(xiàn)時間)和地址的信息。該再現(xiàn)控制信息中的標題、記錄開始時 間、時長、編碼方式是在用戶的內容選擇時使用的。另一方面，進入點 信息和章節(jié)信息用于在內容的再現(xiàn)和編輯時，從節(jié)目記錄部14讀出流， 或者將其送入到解碼器或編輯單元。下面說明預約錄像動作。在按照用戶等的請求將任意節(jié)目登記為預 約錄像的情況下，預約節(jié)目管理部10進行與通過預約想要錄像的節(jié)目(預 約節(jié)目)的有效無效的判斷、與其他預約節(jié)目的干擾判斷等的管理。當用戶有對任意節(jié)目進行預約錄像的意思的請求時，預約節(jié)目管理 部10從未圖示的EPG (Electronic Program Guide,電子節(jié)目指南)等取 得節(jié)目開始、結束時間、頻道序號、種類等的信息，檢查在相同時段是 否沒有其他預約節(jié)目等，在沒有問題的情況下，對調度管理部9進行調 度登記，以便在指定時間開始所指定的節(jié)目的錄像。在被指定為要進行預約錄像的節(jié)目的開始時間少許之前(例如5分 鐘之前)，根據(jù)調度管理部9的指示，自動接通記錄再現(xiàn)裝置1的主電源， 按照調度管理部9的指示開始錄像動作。錄像動作與上述一樣。另外， 調度管理部9自身在錄像再現(xiàn)裝置1的主電源斷開的狀態(tài)下，另行接收 電源供給來繼續(xù)動作。下面說明再現(xiàn)。當用戶例如使用未圖示的遙控器對記錄再現(xiàn)裝置1 進行了再現(xiàn)請求時，首先，遙控接收部81接收遙控器的信號，將其請求 內容發(fā)送到用戶操作接收部82。
用戶操作接收部82除了遙控器以外，還接收來自記錄再現(xiàn)裝置1的 操作面板的請求、操作后述的用戶界面畫面而輸入的請求、以及來自網(wǎng) 絡92的請求，將來自遙控器的請求與這些信號一起發(fā)送到系統(tǒng)控制部2。
系統(tǒng)控制部2對記錄再現(xiàn)裝置l"是否未再現(xiàn)其他節(jié)目"、"是否存在 被指定再現(xiàn)的節(jié)目"、"記錄再現(xiàn)裝置1是否無異常"等的狀態(tài)轉移和裝置 狀態(tài)進行檢查，之后在判斷為能再現(xiàn)的狀態(tài)的情況下，將用于進行再現(xiàn) 的控制信號送出到裝置各部。結果，記錄在節(jié)目記錄部14內的比特流被 發(fā)送到輸出流控制部16，比特流暫時被寫入在配備于輸出流控制部16內 部的未圖示的內部緩存器內。
再現(xiàn)解碼器17從輸出流控制部16接收視頻和音頻比特流的供給， 進行比特流的解碼、以及解碼后的視頻和音頻的輸出。這里，為了不中 斷地進行視頻和音頻的再現(xiàn)，在輸出流控制部16內設有內部緩存器。以 下說明該內部緩存器。視頻輸出定時是以被稱為幀速率的周期性定時來 輸出的，在NTSC的情況下，以29.97Hz的幀速率進行視頻輸出。然而， 在MPEG—2和MPEG—4/AVC等的編碼中，比特流的秒單位的比特量不 恒定，比特量根據(jù)視頻的復雜性而變動。并且，視頻和音頻的再現(xiàn)輸出 定時需要一致，因此需要控制視頻解碼器和音頻解碼器中的任一方的動 作的接通/斷開。因此，從節(jié)目記錄部14讀入的比特流不是以相同速度進 入解碼器，而是根據(jù)輸出圖像的狀況動態(tài)地被讀入解碼器。另一方面， 作為實現(xiàn)節(jié)目記錄部14的設備的HDD和光盤不能立即輸出所需要的數(shù) 據(jù)。這樣在再現(xiàn)時，不能以恒定速度從節(jié)目記錄部14輸出比特流。因此， 在輸出流控制部16內部配備有緩存器，以便可暫時保持比特流，可根據(jù) 再現(xiàn)解碼器17的比特流請求立即傳送比特流。
記錄再現(xiàn)裝置1還具有用于將解碼后的視頻數(shù)據(jù)輸出到例如HDMI (High-Definition Multimedia Interface,高清晰多媒體接口)的外部數(shù)字 輸出部87，并從外部數(shù)字輸出端子88進行數(shù)字視頻和音頻的輸出。
10而且，雖然未圖示，然而也能不經(jīng)由再現(xiàn)解碼器17，而將比特流照
原樣輸出到例如網(wǎng)絡端子或正EE 1394端子。
這樣輸出的視頻信號和音頻信號例如可用于發(fā)布。
下面，對在錄像時從視頻音頻的比特流中提取視頻音頻的特征量、 并提取場景屬性的輸入場景分析部20進行說明。輸入流控制部13暫時 記錄比特流，以便對節(jié)目記錄部14進行穩(wěn)定記錄。在對普通視頻信息進 行編碼和壓縮的MPEG—2和MPEG—4/AVC等的壓縮編碼方式中，利用 視頻的幀的相關性來進行高度壓縮，然而，為了用于在特殊再現(xiàn)時重新 開始解碼，在流的到處都存在進行幀內壓縮的幀(以下稱為關鍵幀)。在 本實施方式中，按各關鍵幀實施以下說明的場景分析。
當檢測出關鍵幀時，輸入流控制部13將其所具有的緩存器上的關鍵 幀的開始地址、該關鍵幀的數(shù)據(jù)尺寸和到下一關鍵幀的數(shù)據(jù)尺寸、以及 關鍵幀的時間信息發(fā)送到分析用解碼器21 。
分析用解碼器21從關鍵幀的開始地址開始解碼處理，使幀緩存器 26保持解碼后的視頻數(shù)據(jù)。
特征量提取部22根據(jù)保持在幀緩存器26內的視頻數(shù)據(jù)生成視頻信 息直方圖。
視頻信息直方圖例如是以視頻數(shù)據(jù)的亮度Y和色差(Cb、 Cr)為要 素的頻度分布。另外，這里作為對視頻賦予特征的直方圖，使用了亮度 和色差的直方圖，然而也可以使用RGB等其它的色彩表示空間。并且， 除了直方圖以外，還可以使用運動矢量、焦點位置等的相機參數(shù)。
場景提取部23檢測視頻音頻內容中的場景變換，將從該場景變換到 下一場景變換作為一個場景來提取。
場景提取部23按視頻輸出順序將前一幀的視頻信息直方圖保持在 內部，將其與新的解碼后的幀的視頻信息直方圖進行比較，求出差值d， 將該差值與預先設定的閾值進行比較，在該差值超過閾值的情況下，可
判斷為是場景變換。
這里，將第i幀的視頻信息直方圖設定為Hi，艮P，
巧=化(1)、 hi(2)、…、,}則根據(jù)下式求出第i幀的視頻信息直方圖Hi與前一幀即第i一l幀的
視頻信息直方圖Hw之間的差值d。另外，K是等級的總數(shù)(針對亮度的 等級的總數(shù)與針對各個色差Cb、 Cr的等級的總數(shù)的合計)。
這里，N是l幀內的像素數(shù)。其中，假定對表示亮度Y的像素和表 示色差Cb、 Cr的像素分別進行計數(shù)。由此，差值d取從0到2的值，在 第i幀的視頻和第i一l幀的視頻是相同視頻的情況下，差值d為0，在第 i幀的視頻和第i一l幀的視頻的差異大的情況下，差值d為接近2。
當在場景提取部23判定為是場景變換時，到下一場景變換發(fā)生前作 為一個場景來處理。將在場景變換的判定中所利用的關鍵幀的視頻用作 該場景的代表圖像(以下稱為場景縮略圖)。
在屬性列表存儲器25內保持有模式數(shù)據(jù)，該模式數(shù)據(jù)用于根據(jù)場景 縮略圖的圖像性特征信息來判定場景的特性和傾向。例如，記錄有在模 式匹配中使用的信息(圖形信息)，該信息用于在根據(jù)視頻信息直方圖判 定為包含綠色較多的情況下，判斷為自然或風景視頻，或者在綠色多、 且基于節(jié)目的EPG的種類信息是體育的情況下，判斷為室外體育，或者 在相機參數(shù)的焦點位置包含有膚色的情況下，判斷為人物；而且，根據(jù) 場景變換的產(chǎn)生頻度，記錄有用于在相機的搖攝視頻多的情況下判斷為 體育視頻的模式信息，而且記錄有用于在利用臉檢測功能等檢測出臉的 情況下判斷為會話的模式信息。
更具體地說，例如作為場景屬性預先設定了圖2所示的場景屬性 (C1 C10)，分別通過是否滿足圖2的"判定基準"欄內記載的條件等的 模式匹配，來進行各場景屬性的判定。
場景屬性選擇部24按各場景提取由場景提取部23所提取的場景屬 性，將所提取的場景屬性與記錄在屬性列表存儲器25內的上述判定基準 進行對照，在滿足上述判定基準的比例高的情況下，換句話說，在與使 視頻和屬性相對應的模式信息一致的情況下(一致程度高的情況下)，根 據(jù)該判斷結果，確定場景屬性，將針對該場景所確定的屬性信息C1 C10 與場景的時間信息(開始時間、結束時間、時長)和地址信息(從節(jié)目開頭計算的位置、字節(jié)長度) 一起記錄在場景屬性數(shù)據(jù)庫15內。
通過從節(jié)目開始到結束、或者針對任意區(qū)間執(zhí)行本分析處理，可對
該期間(從節(jié)目開始到結束的期間或者任意區(qū)間)中的場景屬性的產(chǎn)生
次數(shù)(頻度)進行計數(shù)，可求出節(jié)目整體或任意區(qū)間中的各場景的頻度
分布即場景屬性直方圖。
場景屬性選擇部24還通過累積多個場景各自的屬性的頻度分布，生
成表示節(jié)目屬性的頻度分布(直方圖)。
這樣，由場景屬性選擇部24、屬性列表存儲器25以及場景屬性數(shù)據(jù)庫15構成頻度分布取得單元，該頻度分布取得單元針對所記錄的視頻音頻內容，對按各場景所提取的場景屬性的產(chǎn)生次數(shù)(頻度)進行計數(shù)，求出通過計數(shù)所求出的各屬性的頻度。
圖3示意性示出將節(jié)目劃分為場景、并使屬性與各場景相對應的狀態(tài)。由于各場景是每當發(fā)生場景變換時被劃分為場景，因而時間和位置被不規(guī)則地劃分。針對所劃分的場景，在屬性列表存儲器25內存在一致程度高的模式(匹配模式)的情況下，如圖3中的屬性C1至C6所示，分配場景屬性(使場景屬性與其相對應)。這樣，當繼續(xù)實施分配各場景的屬性并對各屬性的分配次數(shù)進行計數(shù)的處理后，如圖4所示，可獲得各場景屬性的頻度分布即場景屬性直方圖。該場景屬性直方圖表示節(jié)目整體或任意區(qū)間中的場景特性分布。根據(jù)圖4可知，對于作為對象的視頻，屬性C4較多，接下來屬性C9和C5較多。另一方面，還可知屬性C6幾乎不產(chǎn)生。由此可知，在圖3所示的例子中，激烈的(即有移動的)場景多，被識別為體育關聯(lián)的視頻的場景多。這樣通過對各場景的屬性的產(chǎn)生次數(shù)進行計數(shù)，可獲得場景屬性的頻度分布，結果能把握節(jié)目整體或任意區(qū)間的視頻傾向。
并且，例如針對體育節(jié)目等，還可以使用視頻或音頻來分析各場景的高漲氣氛。例如對于視頻信號，在亮度分布集中于高級別的情況下、在視頻的移動劇烈的情況下、或者在每單位時間的場景變換多的情況下，判定為是氣氛高漲的場景，對于音頻信號，在音頻能量(音量級別)大的情況下，判定為是氣氛高漲的場景。然后，在節(jié)目整體中氣氛高漲的場景多的情況下，可估計為該體育節(jié)目是非常有趣的節(jié)目。
下面，說明再現(xiàn)時的處理。 一般對于DVD錄像機或HDD錄像機中的再現(xiàn)，有時節(jié)目從最初到最后既不停止、不跳過也不快進地進行再現(xiàn)，另一方面，有時跳過不需要的場景或者只選擇喜歡的場景來進行再現(xiàn)的情況也較多。在本實施方式所示的記錄再現(xiàn)裝置1中，用戶所再現(xiàn)的場景的頻度由再現(xiàn)場景分析部30進行分析，根據(jù)該分析結果來估計用戶的喜好。
再現(xiàn)時，在輸出流控制部16的緩存器內暫時保持有解碼前的比特流。與錄像動作一樣，當輸出流控制部16在所保持的比特流中檢測出關鍵幀時，該關鍵幀的時間信息和地址信息被發(fā)送到場景時間信息提取部31，場景時間信息提取部31根據(jù)這些信息求出對應的場景，場景屬性提取部32從場景屬性數(shù)據(jù)庫15求出該場景的屬性信息。
在用戶喜好數(shù)據(jù)庫43內記錄有用戶視聽歷史直方圖(其一例如圖5所示)，該用戶視聽歷史直方圖是根據(jù)截至目前的用戶的再現(xiàn)或操作歷史來生成的，使用頻度分布表示以何種程度再現(xiàn)了何種屬性信息。而且，還記錄有根據(jù)用戶視聽歷史直方圖所生成的用戶喜好直方圖。用戶喜好直方圖可以通過例如根據(jù)過去所錄像、再現(xiàn)、編輯的節(jié)目的種類，對用戶視聽歷史直方圖的對應屬性的頻度相加來生成。而且，還可以將用戶視聽歷史直方圖直接用作用戶喜好直方圖。
每當檢測出場景時、或者每當以節(jié)目為單位的再現(xiàn)處理完成時，用戶喜好數(shù)據(jù)庫更新部33就更新記錄在用戶喜好數(shù)據(jù)庫43內的視聽歷史直方圖。由此，每當進行再現(xiàn)或其他動作時，可隨時反映用戶喜好。
圖6示出當再現(xiàn)了特定區(qū)間時生成的場景屬性直方圖。在圖6所示的節(jié)目的特定區(qū)間中可知，場景屬性C4比其他屬性包含得多。
在以上中，由用戶喜好數(shù)據(jù)庫更新部33和用戶喜好數(shù)據(jù)庫43構成頻度分布取得單元，該頻度分布取得單元針對所再現(xiàn)或發(fā)布的視頻音頻內容，對按各場景所提取的場景屬性的產(chǎn)生次數(shù)(頻度)進行計數(shù)，求出通過計數(shù)所求出的各屬性的頻度。
接下來，對用戶請求推薦隨后應視聽的節(jié)目的情況進行說明。由遙控接收部81接受到的來自遙控器的作為用戶操作事件的操作信號經(jīng)由用
戶操作接收部82被輸入到系統(tǒng)控制部2。
系統(tǒng)控制部2向節(jié)目推薦部40內的推薦節(jié)目選出部42發(fā)出請求， 請求推薦符合用戶喜好的節(jié)目。
推薦節(jié)目選出部42根據(jù)表示用戶操作歷史的視聽歷史直方圖(圖 5)、或者針對用戶曾視聽的節(jié)目的特定區(qū)間的場景屬性直方圖(圖6)， 生成推薦直方圖(圖7 (a))。
作為推薦直方圖，可以直接利用針對用戶曾視聽的節(jié)目的圖6所示 的特定區(qū)間的場景屬性直方圖，也可以根據(jù)再現(xiàn)了多個節(jié)目時的場景屬 性直方圖，生成對當前的記錄再現(xiàn)裝置的狀態(tài)，例如當前時刻、記錄在 節(jié)目記錄部14內的節(jié)目的種類作了考慮后的推薦直方圖。
將這樣生成的推薦直方圖(圖7 (a))與記錄在場景屬性數(shù)據(jù)庫15 內的各節(jié)目分別具有的場景屬性直方圖(各節(jié)目的各場景的場景屬性的 頻度分布(圖7 (b)、 (c)、 (d)))進行比較，(例如按相關性從高到低的 順序)推薦相關性高的節(jié)目。
推薦結果例如被提供給輸出流控制部16,與視頻信息進行組合，經(jīng) 由再現(xiàn)解碼器17被提供給監(jiān)視器93，顯示在監(jiān)視器93上。在圖7 (b)、 (c)、 (d)所示的例子中，選擇節(jié)目#1、節(jié)目#2、節(jié)目#3的直方圖中與 圖7 (a)的直方圖的相關性最高的節(jié)目#3。
另外，在上述例子中，由于將直方圖的相關性作了比較，因而節(jié)目 #3按推薦順序為第一位，然而作為用于決定節(jié)目推薦順序的方法，不僅 限于直方圖的相關性，例如如果是使用例如選擇同一類型的場景的頻度 最高的節(jié)目的判定基準，就選擇屬性C4的頻度高的節(jié)目弁2。此外，可以 使用統(tǒng)計方法，或者為了求出相關性，可以使用秩相關系數(shù)等。
下面使用圖8來說明錄像時的處理流程。當錄像開始時(SIOO，錄 像用的比特流被陸續(xù)送入到輸入流控制部13 。
輸入流控制部13進行錄像流的末尾檢測(S102)，在未檢測出末尾 的狀態(tài)下繼續(xù)進行關鍵幀的提取S103。當提取出關鍵幀時，輸入流控制 部13提取關鍵幀的信息(關鍵幀的開始地址、關鍵幀的數(shù)據(jù)尺寸、到下一關鍵幀的數(shù)據(jù)尺寸、以及關鍵幀的時間信息)。然后，分析用解碼器21
對關鍵幀或從關鍵幀到下一關鍵幀的任意幀進行解碼(S104)，特征量提 取部22生成YCbCr的視頻信息直方圖(S105)。
除了所生成的視頻信息直方圖是開頭幀的視頻信息直方圖的情況以 外，場景提取部23將過去的(前l(fā)幀的)幀視頻信息直方圖與最新的視 頻信息直方圖進行比較(S106)，根據(jù)視頻信息直方圖的差值是否超過預 先設定的閾值來判定是否是場景變換(S107),在判定為不是場景變換的 情況下(S107，否)，回到步驟S102，在判定為是場景變換的情況下(S107， 是)，進到步驟S108，場景屬性選擇部24根據(jù)與配備在屬性列表存儲器 25內的視頻信息直方圖和/或場景變換的產(chǎn)生頻度的模式信息的一致程 度，來判定該場景的屬性(S108)。即，如果存儲在屬性列表存儲器25 內的屬性中有一致程度(近似度)高于規(guī)定值的屬性，則選擇其中一致 程度最高的屬性。
接著，場景屬性選擇部24將在步驟S108中所提取的場景屬性與場 景信息(時間信息、地址信息) 一起記錄在場景屬性數(shù)據(jù)庫15內(S109)。
在檢測出錄像流的末尾為止，在輸入流控制部13中實施上述的處 理，當檢測出末尾時(S102，是)，場景屬性選擇部24生成整個節(jié)目或 者所錄像的區(qū)間的場景屬性直方圖(SllO)。此時，也可以進行場景屬性 直方圖的規(guī)一化、或者針對頻度最小、或具有某一閾值以下的頻度的屬 性，使其頻度變?yōu)镺等的統(tǒng)計處理；以及使用根據(jù)EPG信息等視頻音頻 信息獲得的屬性信息來對頻度分布進行加工等的處理。場景屬性選擇部 24進一步通過累積多個場景各自的屬性的頻度分布，來生成表示節(jié)目屬 性(或其傾向)的頻度分布(直方圖)(Slll)。
下面，使用圖9來說明在再現(xiàn)時實施的用戶喜好分析處理。當根據(jù) 用戶請求開始指定節(jié)目的再現(xiàn)時(S201)，在輸出流控制部16的內部緩 存器內暫時存儲從節(jié)目記錄部14所讀出的比特流。暫時存儲的比特流根 據(jù)來自再現(xiàn)解碼器17的請求而依次被讀出。輸出流控制部16檢測再現(xiàn) 流的末尾以及暫時停止，并檢測場景邊界(S203)。場景的劃分可通過使 用記錄在場景屬性數(shù)據(jù)庫15內的節(jié)目的各場景的時間信息和/或地址信息來判定。另外，可以利用章節(jié)劃分、時間劃分、GOP劃分等。當輸出
流控制部16判定為是場景變換時(S203，是)，場景時間信息提取部31 根據(jù)該判定結果，從場景屬性數(shù)據(jù)庫15中提取場景的開始時間和時長 (S204)，場景屬性提取部32還提取該場景的屬性信息(S205)。
接著，在步驟S206中，用戶喜好數(shù)據(jù)庫更新部33讀出記錄在用戶 喜好數(shù)據(jù)庫43內的用戶截至目前所再現(xiàn)的場景屬性的頻度分布(圖5所 例示的視聽歷史直方圖)，將當前再現(xiàn)的該場景的屬性信息加在所讀出的 視聽歷史直方圖的頻度分布上。
直至輸出流控制部16檢測出再現(xiàn)流的末尾或者停止(S202)進行本 處理，在檢測出末尾的情況下(S202，是)，進行視聽歷史直方圖(圖5) 的校正處理(S207)。這里所說的"校正處理"是指，使用通過上述步驟S206 的處理獲得的新的視聽歷史直方圖來改寫(更新)存儲在用戶嗜好數(shù)據(jù) 庫43內的視聽歷史直方圖。
在步驟S207后結束處理(S208)。
通過上述處理，與用戶所再現(xiàn)的場景、特別是重復視聽的場景對應 的屬性的頻度上升，另一方面，不怎么觀看的場景的頻度不增加，因而 能生成反映了用戶喜好的屬性的直方圖。
下面使用圖IO示出提取推薦節(jié)目的方法。當來自用戶的節(jié)目推薦請 求從用戶操作接收部82被傳遞到系統(tǒng)控制部2時(S302)，系統(tǒng)控制部2 根據(jù)該請求，請求推薦節(jié)目選出部42進行節(jié)目推薦。
推薦節(jié)目選出部42從用戶喜好數(shù)據(jù)庫43中讀出視聽歷史直方圖(圖 5) (S303)。推薦節(jié)目選出部42接下來從場景屬性數(shù)據(jù)庫15檢索所錄像 的節(jié)目中未進行后述的步驟S305以后的處理的節(jié)目(S304)，在存在作 為對象的節(jié)目的情況下，讀出該節(jié)目的屬性直方圖(S305)，接著使用設 在推薦節(jié)目選出部42內的相關性比較部來求出所讀出的各節(jié)目的場景屬 性直方圖(圖4或圖7 (b)、 (c)、 (d))與視聽歷史直方圖(圖5)或推 薦直方圖(圖7 (a))之間的相關性(S306)，根據(jù)該相關性進行各節(jié)目 的排序(S307)。對所錄像的節(jié)目整體進行本操作，當沒有新的節(jié)目時(即， 當對全部所錄像的節(jié)目的處理結束時)(S304，否)，根據(jù)步驟S307的排
17序決定l個或多個推薦節(jié)目(S30S)。表示推薦節(jié)目的信息例如被提供給 輸出流控制部16，與視頻信息進行組合，經(jīng)由再現(xiàn)解碼器17被提供給監(jiān) 視器93，顯示在監(jiān)視器93上。在步驟S308之后結束處理(S309)。
然后，對以下功能進行說明，即推薦節(jié)目選出部42所利用的用戶 喜好數(shù)據(jù)庫43內記錄的視聽歷史直方圖(圖5)不是每當再現(xiàn)某一場景 時就被更新，而是在1個節(jié)目的再現(xiàn)完成之前不被更新，在1個節(jié)目的 再現(xiàn)完成時被更新，在用戶看完了某一節(jié)目的情況下，推薦與該節(jié)目類 似的節(jié)目。
在用戶進行任意節(jié)目的再現(xiàn)期間，每當進行某一場景的再現(xiàn)時，就 由場景屬性提取部32求出與該場景對應的屬性信息。場景屬性提取部32 還累積各場景的屬性信息。通過該累積，生成所再現(xiàn)的節(jié)目的直方圖(圖 11 (b))。該直方圖表示最新近再現(xiàn)的節(jié)目屬性的傾向。另一方面，在用 戶喜好數(shù)據(jù)庫43內記錄有對除了最新近再現(xiàn)的節(jié)目以外的截至目前為止 所再現(xiàn)的節(jié)目和場景的屬性進行了累積后的視聽歷史直方圖(圖ll(a))。
除了某一節(jié)目的再現(xiàn)結束狀態(tài)等的用戶對記錄再現(xiàn)裝置內的某一節(jié) 目留有較強印象的狀態(tài)以外，只要按照圖ll (a)所示的基于視聽歷史的 直方圖推薦接近用戶的喜好傾向的節(jié)目即可，而在某一節(jié)目的再現(xiàn)結束 狀態(tài)等對某一節(jié)目留有較強印象(對該節(jié)目留有較強意識)的情況下， 大多期望推薦與之前剛再現(xiàn)的節(jié)目類似的節(jié)目。因此，期望的是，根據(jù) 將圖11 (b)所示的基于最近的視聽節(jié)目獲得的直方圖與基于在此之前的 視聽歷史的直方圖(圖11 (a))合成后的結果，來進行節(jié)目推薦。并且， 在進行該合成的情況下，通過對根據(jù)最近的視聽節(jié)目獲得的直方圖進行 更大加權而合成的直方圖即圖ll(c)所示的直方圖搜索相關性高的節(jié)目， 可在對用戶的喜好(或視聽歷史)加以考慮的同時，推薦與最近所再現(xiàn) 的節(jié)目更接近的節(jié)目。這樣通過準備多個直方圖的模式，對各方進行加 權的同時進行合成，由此能調整推薦方法。
下面，示出提供給用戶的用戶界面畫面的例子。使用該用戶界面畫 面而輸入的操作信號被提供給用戶操作接收部82。在本裝置中假定作為 用于起動向用戶推薦節(jié)目的功能的專用按鈕，例如在未圖示的菜單畫面、或當進行其他處理時顯示的畫面上，有未圖示的"節(jié)目推薦"按鈕。這里， 對在某一節(jié)目的再現(xiàn)后按下了"節(jié)目推薦"按鈕的情況下的例子(圖12)、 以及在再現(xiàn)途中按下了暫時停止按鈕的狀態(tài)下按下了"節(jié)目推薦"按鈕的 情況(圖13)進行說明。
在再現(xiàn)完某一節(jié)目后，自動或者由用戶按下"節(jié)目推薦"按鈕時，出
現(xiàn)圖12所示的畫面。該畫面是將用戶目前觀看的節(jié)目的隨后推薦再現(xiàn)的 節(jié)目的列表1101以菜單形式進行顯示的畫面。在圖示的列表1101內顯 示有表示3個節(jié)目的文字信息1101a、 1101b和1101c。在各節(jié)目的文字 信息內包含有表示標題、種類、錄像日的文字。在圖示的例子中示出， 表示第2個節(jié)目的文字信息1101b由框線1102包圍，由此處于被選擇的 狀態(tài)的情況。
例如，當觀看了正(嚴肅或正經(jīng))劇的情況下，存在隨后推薦相同 的正劇節(jié)目，或者在觀看了某一系列節(jié)目的情況下，推薦其下一次節(jié)目 的情況。這是根據(jù)曾經(jīng)再現(xiàn)的節(jié)目的場景屬性直方圖推薦相關性高的節(jié) 目的情況，即類似節(jié)目的推薦功能。
下面，圖13示出在某一節(jié)目的再現(xiàn)中暫時停止、在畫面靜止的狀態(tài) 下按下"節(jié)目推薦"按鈕的情況。在本例中，再現(xiàn)中的某一場景是背景為"天 空"1201、前景為樹木1202繁茂的場景，進行針對該場景的"節(jié)目推薦" 的情況。此時，從場景屬性數(shù)據(jù)庫15中提取1個或多個具有本場景的屬 性、或者具有與本場景的屬性的頻度分布最接近的場景的其他節(jié)目(也 可以是當前節(jié)目)，將這些節(jié)目的代表圖像(縮略圖)顯示在畫面上。在 圖13中可知，在畫面的下部1203，從左開始依次推薦"山"的風景、"河 流"的風景、"街道林蔭樹"的風景、"海邊"的風景、"草原"的風景等的外 部風景。各個風景的下部的"T4"、 "T12"等表示各圖像的標題號碼，"C7"、 "C3"等表示各圖像的章節(jié)號碼。畫面的右上角的"T2、 C10"表示顯示在主 畫面上的圖像的標題號碼和章節(jié)號碼。用戶通過使用遙控器的光標鍵來 從縮略圖1203a 1203e中選擇最想觀看的節(jié)目(在圖13中示出，縮略 圖1203C由框線1204包圍，由此被選擇的情況)，從而可進行類似場景 的再現(xiàn)。這一功能根據(jù)當前正在再現(xiàn)的該場景、或者相關聯(lián)的前后場景的場景屬性直方圖來推薦一致或者相關性高的場景的序列。
另外，在以上說明的本實施方式中，假定預先設定了場景屬性，然 而當然可以動態(tài)進行新生成、刪除等。特別是在頻度集中于某一屬性值 的情況下，可以抑制頻度的最大值，將表示大的頻度的屬性細分為多個 屬性。
另外，如針對圖2的屬性C7、 C8所說明那樣，場景屬性的判定不 限于利用視頻的方法，還可以使用音頻信息(音量、頻率)等。
另外，在本實施方式中，在錄像時和再現(xiàn)時，以對視頻進行了壓縮 編碼后的比特流的關鍵幀為單位分析了場景屬性，然而分析單位可以采 用指定的或任意的時間單位、章節(jié)單位、以及其他依賴于元數(shù)據(jù)的處理 單位。另外，也可以針對全部的幀單位進行實施。
在按以上構成的實施方式1的節(jié)目推薦裝置中，可以以場景為單位 求出屬性。另外，可使用所求出的以場景為單位的屬性信息來以場景為 單位進行屬性分類。
另外，通過累積以場景為單位的屬性，可求出節(jié)目整體或節(jié)目的特 定區(qū)間的屬性和/或傾向。
另外，由于可從視頻或音頻信息中提取場景特征，因而不需要EPG 那樣的節(jié)目自身之外的信息。因此，即使在不能接收EPG信息那樣的狀 態(tài)下，也能進行屬性分類。
另外，在利用EPG的屬性分類中，只能分類為由EPG信息所決定 的屬性，然而在直接分析視頻音頻的方法中，還能分類為由EPG信息設 定的屬性以外的屬性。例如，能根據(jù)寧靜的視頻、自然風景包含得多的 視頻、包含有搖滾音樂的音頻、孩子的聲音等來對節(jié)目的場景進行分類。 而且，還能具有由EPG決定的屬性以外的屬性。
另外，由于由多個場景構成的節(jié)目的屬性是使用對各場景屬性進行 了累積后的頻度分布來表現(xiàn)的，因而能使用多個屬性級別來表現(xiàn)節(jié)目屬 性，與使用表示是否具有某一屬性的2值來表現(xiàn)節(jié)目屬性的情況相比， 能進行自由度更高的屬性表現(xiàn)。
另外，由于使用頻度分布來表現(xiàn)節(jié)目屬性，因而在進行多個節(jié)目比較的情況下，可根據(jù)各個節(jié)目具有的任意屬性的級別進行比較，而不是 根據(jù)是否具有任意屬性進行比較，因此可多階段地表現(xiàn)近似程度或相關 性。
另外，在求多個節(jié)目的相關性的情況下，通過求出各個節(jié)目的頻度 分布的相關性，能求出節(jié)目間的相關性。
另外，在分析用戶喜好的情況下，不是以節(jié)目為單位根據(jù)再現(xiàn)或編 輯的有無來求出用戶喜好，而是以場景為單位求出用戶喜好，因而在求 出場景屬性的累積頻度時，能進行以下這樣的以場景為單位的判定和處 理例如重復的(重復再現(xiàn)的)場景是用戶喜歡的，對該場景屬性進行 相加，或者反之判斷為跳過或快進的場景是不喜歡的，對該場景屬性的 計數(shù)次數(shù)(頻度)進行相減，或者剪輯掉的場景的屬性是不喜歡的，因 而減去該場景的屬性的計數(shù)次數(shù)(頻度)等，從而可更細致地反映用戶 喜好。
另外，在表示用戶喜好的直方圖的生成中，通過將根據(jù)最近所再現(xiàn) 的節(jié)目而生成的直方圖與利用截至目前的再現(xiàn)所生成的直方圖分別乘以 權重來進行相加，能進行這樣的調整使推薦節(jié)目的傾向針對用戶喜好 的變化敏感地進行反應(即，針對喜好變化迅速進行變化、或者針對最 近的喜好賦予更大權重來進行變化)，或者反之鈍感地進行反應(即，更 重視在較長期間內蓄積的喜好傾向)。
另外，通過在錄像時分析節(jié)目屬性，在再現(xiàn)時分析用戶喜好，不使 用戶進行操作即能進行節(jié)目推薦。
另外，在使場景的屬性值反映在直方圖上的情況下，通過對各場景 的時長加以考慮，例如附加與再現(xiàn)時間(秒數(shù))對應的頻度(例如每再 現(xiàn)時間1秒加上頻度1)等的處理，可進一步生成對場景的長度和/或再 現(xiàn)時間也作了考慮的表示用戶喜好的直方圖。
另外，場景屬性不是固定的，在想要限制直方圖的頻度的最大值的 情況下等，通過對某一屬性進行細分(為此新生成屬性)，或者將使用頻 度少的屬性進行結合來生成新的場景屬性，或者在存在完全不使用的屬 性的情況下將該屬性進行廢棄等的處理，可更適當?shù)剡M行依照實際錄像和再現(xiàn)節(jié)目的屬性的分類。 實施方式2
在先前的實施方式1中，錄像節(jié)目的各場景的屬性是通過分析視頻 或音頻來求出的，而在本實施方式中，不同點在于，通過預先對賦予給 節(jié)目的各場景的元數(shù)據(jù)進行分析，針對各場景賦予屬性。本實施方式所 示的元數(shù)據(jù)是指表示各場景、或者節(jié)目的任意區(qū)間或特定幀的特征的關 鍵字、和/或具有某種意義的數(shù)值。在關鍵字的例子中，在節(jié)目是棒球的 情況下，可舉出"本壘打"、"失誤"、"三擊不中"和選手的姓名等。并且， 在節(jié)目是電視劇等的情況下，有上場人物的姓名、表示"公園"、"車站" 之類的一般場所或者表示"東京站"之類的特定場所的信息、表示"雨"、"晴 天"之類的天氣的信息，不管怎樣大多用關鍵字表現(xiàn)。并且，說到數(shù)值的
例子，為了表現(xiàn)視頻的特征量，有時用256等級表現(xiàn)RGB的R (紅)， 有時表示棒球的得分。本實施方式不限于僅關鍵字或僅數(shù)值，在此以更 抽象的、且難以唯一地作為場景特征進行處理的關鍵字為例進行說明。
圖14示出具有實施方式2的節(jié)目推薦裝置的記錄再現(xiàn)裝置1的結 構。圖14的記錄再現(xiàn)裝置1與圖1的記錄再現(xiàn)裝置大致相同，然而具有 輸入場景分析部60而取代圖1的輸入場景分析部20。該輸入場景分析部 60在以下方面與輸入場景分析部20不同。以下以不同點為中心進行說明。 在本實施方式中，假定元數(shù)據(jù)重疊在從廣播波或網(wǎng)絡92取入的視頻音頻 流上。該元數(shù)據(jù)是賦予或附加給各場景的元數(shù)據(jù)，包含表示關鍵字的數(shù) 據(jù)。
當在輸入流控制部13中檢測出重疊有元數(shù)據(jù)的流和分組時，在元數(shù) 據(jù)提取部67中提取包含有元數(shù)據(jù)的分組，并提取元數(shù)據(jù)自身。
關鍵字屬性映射圖存儲器65預先存儲有表示關鍵字與對應于該關 鍵字而分配的1個或多個屬性信息的對應關系的關鍵字/屬性對應映射圖 (以下有時簡稱為"對應映射圖")。
在元數(shù)據(jù)場景屬性匹配部68中，將從賦予給各場景的元數(shù)據(jù)所提取 的關鍵字與上述對應映射圖進行對照，在所提取的關鍵字包含在上述對 應映射圖內的情況下，判斷為賦予有所提取的關鍵字的場景具有在該映射圖中與該關鍵字對應的屬性。并且，在不包含關鍵字自身、且關鍵字 的同義詞包含在上述對應映射圖內的情況下也同樣進行處理。各場景有 時被判定為具有多個屬性。
圖15的表示出表示關鍵字與屬性的對應關系的上述對應映射圖的 具體例子。
在圖15的表的左欄記載有節(jié)目屬性，在右欄列舉有分配給各屬性的 關鍵字。在對應映射圖內記載的關鍵字中，既存在與多個屬性對應的關 鍵字，也存在僅與1個屬性對應的關鍵字。并且，針對某一關鍵字，即 使未記載在該對應映射圖內，但在記載有同義詞的情況下，有時也與記 載有該關鍵字一樣進行處理。
圖15示出，例如在從某場景的元數(shù)據(jù)中提取出"雨"的關鍵字的情況 下，該場景可以說具有"電影"、"電視劇"、"旅游"的屬性。
在所提取的關鍵字表示人的姓名的情況下，元數(shù)據(jù)場景屬性匹配部
68進一步判斷為，被賦予了該關鍵字的場景具有"電影"、"電視劇"、"動
畫"的屬性。
下面，圖16 (a)和(b)示出使用圖15的對應映射圖來對廣播節(jié)目 的各場景分配屬性的例子。圖16 (a)示出針對例如從廣播波接收到的視 頻音頻流所劃分的場景、場景幵頭的時刻、附加給場景的關鍵字。圖16 (b)示出使該各關鍵字與圖15所示的對應映射圖進行對照，而分配屬 性信息。在圖16 (b)中，針對與圖16 (a)的場景No.l No.l2各方對 應的屬性，計入'T'，對于未對應的屬性，什么也不計入。賦予給各場景 的屬性的數(shù)量有時為0個(例如場景No.lO)，有時為l個(場景No.4、 5),有時為2個以上。當針對節(jié)目整體或特定區(qū)間實施該對應(分配)、 對屬性頻度進行相加、并進行了規(guī)一化時，生成圖17所示的以橫軸表示 各屬性、以縱軸表示對頻度進行了規(guī)一化后的值的圖(直方圖)。從該結 果可以確認，所例示的節(jié)目的電視劇性的場景非常多，另一方面，具有 體育或動畫的屬性的場景非常少。
這樣，通過根據(jù)賦予給場景的元數(shù)據(jù)求出場景屬性，而取得各場景 屬性的頻度分布，能提取節(jié)目屬性和屬性傾向。當元數(shù)據(jù)場景屬性匹配部68檢測出各場景的場景屬性時，檢測出的 各該場景的屬性信息C1 C10與場景的時間信息(開始時間、結束時間、 時長)和地址信息(從節(jié)目開頭的位置、字節(jié)長度) 一起被記錄在場景
屬性數(shù)據(jù)庫15內。
通過從節(jié)目開始到結束、或者針對任意區(qū)間執(zhí)行本分析處理，可對 該期間(從節(jié)目開始到結束的期間或者任意區(qū)間)中的場景屬性的產(chǎn)生 次數(shù)(頻度)進行計數(shù)，可求出節(jié)目整體或任意區(qū)間中的各場景的頻度 分布即場景屬性直方圖。
元數(shù)據(jù)場景屬性匹配部68還通過累積多個場景各自的屬性的頻度
分布，生成表示節(jié)目屬性的頻度分布(直方圖)。
這樣，由元數(shù)據(jù)場景屬性匹配部68、關鍵字屬性映射圖存儲器65 以及場景屬性數(shù)據(jù)庫15構成元數(shù)據(jù)場景屬性頻度分布取得單元，該元數(shù) 據(jù)場景屬性頻度分布取得單元對根據(jù)元數(shù)據(jù)按每一場景所提取的場景屬 性的產(chǎn)生次數(shù)(頻度)進行計數(shù)，求出通過計數(shù)所求出的各屬性的頻度。
關于以后的提取用戶喜好的方法、以及決定推薦節(jié)目的方法，由于 與實施方式l相同，因而省略說明。
在按以上構成的實施方式2的節(jié)目推薦裝置中，可以以場景為單位 根據(jù)賦予給視頻或音頻信息的元數(shù)據(jù)求出屬性。并且，可使用所求出的 以場景為單位的屬性信息來以場景為單位進行屬性分類。因此，即使在 不能接收EPG信息的狀態(tài)下也能進行屬性分類。
另外，在利用EPG的屬性分類中，只能分類為由EPG信息決定的 屬性，然而只要是利用與元數(shù)據(jù)對應的映射圖來求出場景屬性的方法， 就能超出EPG等的提供信息即提供屬性的范圍，能更詳細地設定更加多 樣的屬性。
另外，在利用EPG的情況下，以節(jié)目為單位來決定屬性，而根據(jù)本 實施方式所示的方法，可以以場景為單位來決定屬性，因而可以以場景 為單位進行屬性分類，可進行以場景為單位的檢索。
另外，由于不需要節(jié)目自身即視頻和音頻的分析，因而與直接分析 視頻和音頻的方法相比，可減少處理負荷。另外，由于由多個場景構成的節(jié)目的屬性是使用對各場景屬性進行 了累積后的頻度分布來表現(xiàn)的，因而可使用多個屬性級別來表現(xiàn)節(jié)目屬 性，與使用表示是否具有某屬性的2值來表現(xiàn)節(jié)目屬性的情況相比，能 進行自由度更高的屬性表現(xiàn)。
另外，由于使用頻度分布來表現(xiàn)節(jié)目屬性，因而在進行多個節(jié)目比 較的情況下，可根據(jù)各個節(jié)目具有的任意屬性的級別進行比較，而不是 根據(jù)是否具有任意屬性進行比較，因此可多階段地表現(xiàn)近似程度或相關 性。
另外，在求出多個節(jié)目的相關性的情況下，通過求出各個節(jié)目的頻 度分布的相關性，能求出節(jié)目間的相關性。
另外，在分析用戶喜好的情況下，不是以節(jié)目為單位根據(jù)再現(xiàn)或編 輯的有無來求出用戶喜好，而是以場景為單位求出用戶喜好，因而能進 行例如判定為重復的(重復再現(xiàn)的)場景是用戶喜歡的場景之類的以場 景為單位的處理，從而可更細致地反映用戶喜好。
另外，在表示用戶喜好的直方圖的生成中，通過將根據(jù)最近所再現(xiàn) 的節(jié)目而生成的直方圖與利用截至目前的再現(xiàn)所生成的直方圖分別乘以 權重來進行相加，能進行這樣的調整使推薦節(jié)目的傾向針對用戶喜好 的變化敏感地進行反應，或反之鈍感地進行反應。
另外，在使場景的屬性值反映在直方圖上的情況下，通過對各場景 的時長加以考慮，例如加上與再現(xiàn)時間(秒數(shù))對應的頻度(例如每再 現(xiàn)時間1秒加上頻度1)等的處理，可進一步生成對場景的長度和/或再 現(xiàn)時間也作了考慮的表示用戶喜好的直方圖。
另外，在本實施方式中，示出了從關鍵字提取節(jié)目屬性的方法，然 而可以使用表示節(jié)目特性的數(shù)值，例如RGB信息和/或表示精彩場景的級 別值等。
實施方式3
在先前的實施方式1中，具有從所錄像的節(jié)目中推薦符合用戶喜好 的節(jié)目，而在本實施方式中，從未廣播節(jié)目中推薦符合用戶喜好的節(jié)目， 并將其用于視聽預約和錄像預約。圖18示出具有本實施方式3的節(jié)目推薦裝置的記錄再現(xiàn)裝置1的結
構。圖18的記錄再現(xiàn)裝置對圖1的記錄再現(xiàn)裝置追加了 EPG控制部50， 而且節(jié)目推薦部40的結構有差異。
EPG控制部50通過EPG取得部53從廣播波或網(wǎng)絡92取得EPG信 息，將各節(jié)目的標題、時間信息、屬性、演出者、解說等記錄在EPG數(shù) 據(jù)庫51內。
EPG檢索部52提供對EPG信息的檢索功能，在輸入關鍵字的情況 下，可提取包含該關鍵字的節(jié)目，或者在指定種類的情況下，可推薦包 含相應種類的節(jié)目。這里所說的種類是EPG信息內包含的節(jié)目屬性信息， 是根據(jù)EPG的格式唯一決定的。
節(jié)目推薦部40的推薦節(jié)目選出部42根據(jù)記錄在用戶喜好數(shù)據(jù)庫43 內的用戶喜好直方圖，從未廣播節(jié)目中推薦與用戶喜好接近的一個或多 個節(jié)目。
系統(tǒng)控制部2向用戶提供使用預約節(jié)目管理部10來自動進行預約視 聽和預約錄像的功能，或者將由節(jié)目推薦部40所推薦的節(jié)目自動登記在 預約節(jié)目管理部10內，而且為了進行該節(jié)目的錄像或視聽，在調度管理 部9內進行登記，以便在指定時間開始錄像或視聽。
下面說明動作。當從系統(tǒng)控制部2提供了節(jié)目推薦請求時，節(jié)目推 薦部40的推薦節(jié)目選出部42從用戶喜好數(shù)據(jù)庫43中讀出根據(jù)用戶的操 作、再現(xiàn)歷史(例如，圖5所示的用戶視聽歷史直方圖)所生成的用戶 喜好直方圖(圖19)。
推薦節(jié)目選出部42可使用EPG檢索部52，對EPG數(shù)據(jù)庫51進行 訪問，進行EPG數(shù)據(jù)的檢索。作為使用用戶喜好直方圖根據(jù)EPG數(shù)據(jù)推 薦節(jié)目的方法，有根據(jù)用戶喜好直方圖的頻度分布表示的各屬性的比例 來決定多個推薦節(jié)目的方法。
例如，在用戶喜好直方圖是圖19所示的情況下，頻度分布為電影
電視劇體育紀實旅游動畫=60 : 80 : 40 : 50 : 30 : 20的比例，
因而可使用EPG檢索部52的種類檢索功能以使推薦節(jié)目為相同比率的 比例的方式來決定推薦節(jié)目。并且，作為另一例子，在用戶喜好直方圖是圖19的情況下，由于頻度最高的屬性是電視劇，因而還可以使用EPG
檢索部52的種類檢索功能來僅選出電視劇節(jié)目。
在按以上構成的實施方式3的節(jié)目推薦裝置中，可以從視頻或音頻
信息中提取場景特征，因而可進行以場景為單位的屬性分類，可進行以 場景為單位的檢索。
另外，由于由多個場景構成的節(jié)目的屬性是使用對各場景屬性進行
了累積后的頻度分布來表現(xiàn)的，因而與使用表示是否具有某屬性的2值
來表現(xiàn)節(jié)目屬性相比，可使用多個屬性級別表現(xiàn)節(jié)目屬性，從而能進行 自由度更高的屬性表現(xiàn)。
另外，在求出多個節(jié)目的節(jié)目相關性的情況下，通過求出各個節(jié)目 的頻度分布的相關性，能求出節(jié)目間的相關性。
另外，在分析用戶喜好的情況下，與以節(jié)目為單位根據(jù)再現(xiàn)或編輯 的有無來求出用戶喜好相比，以場景為單位來求出用戶喜好，因而能進 行例如判定為重復的(重復再現(xiàn)的)場景是用戶更喜歡的場景之類的以 場景為單位的處理，從而可更細致地反映用戶喜好。
實施方式4
在先前的實施方式1中，具有從所錄像的節(jié)目中推薦符合用戶喜好 的節(jié)目的功能，而在本實施方式中，根據(jù)用戶進行了節(jié)目編輯后的節(jié)目 和節(jié)目的各場景的屬性，分析用戶喜好，推薦符合用戶喜好的節(jié)目，并 將其用于視聽預約和錄像預約。
圖20示出具有本實施方式3的節(jié)目推薦裝置的記錄再現(xiàn)裝置1。圖 20的記錄再現(xiàn)裝置1與圖1的記錄再現(xiàn)裝置1大致相同，然而在以下方 面不同。即，取代圖1的再現(xiàn)場景分析部30而設有編輯場景分析部70， 該編輯場景分析部70具有編輯場景時間信息提取部77，編輯場景屬性 提取部76，以及用戶喜好數(shù)據(jù)庫更新部33。
該記錄再現(xiàn)裝置l還設有編輯流控制部74，其針對記錄在節(jié)目記 錄部14內的流，讀出與成為編輯對象的節(jié)目或場景對應的流；以及流編 輯部75，其對所讀出的流進行剪輯、組合、刪除、或者在任意位置對章 節(jié)進行設定解除。而且，在以下方面還有差異針對由編輯流控制部74所讀出的流，由編輯場景時間信息提取部77提取成為編輯對象的場景的 時間信息，編輯場景屬性提取部76根據(jù)該時間信息從場景屬性數(shù)據(jù)庫15
求出編輯對象場景的場景屬性，由用戶喜好數(shù)據(jù)庫更新部33更新用戶喜 好數(shù)據(jù)庫43的內容。
首先，說明編輯方法。這里以剪輯編輯為例，該剪輯編輯是用戶僅 保留喜歡的場景，而刪除除此以外的場景。具體地說，針對再現(xiàn)時間是5 分鐘的內容，從開頭起第2分鐘和第3分鐘設定章節(jié)，之后保留第2分 鐘到第3分鐘的區(qū)間，刪除除此以外的部分。首先，用戶通過使用未圖 示的用戶界面等來輸入操作信號，選擇成為編輯對象的內容，通過再現(xiàn) 等確認內容。然后，讀出再現(xiàn)控制信息，在記錄有章節(jié)信息的區(qū)域內， 在從開頭起第2分鐘的位置設定章節(jié)#2，在從開頭起第3分鐘的位置設 定章節(jié)#3。另外，這里假定在流開頭一定賦予章節(jié)(章節(jié)#1)。章節(jié)實際 上不是被賦予給流自身，而是被記錄在與流同時記錄的再現(xiàn)控制信息內。 作為章節(jié)信息而記錄的信息是章節(jié)號碼、章節(jié)位置的時間和從流開頭起 的位置信息等。在再現(xiàn)控制信息內記錄了章節(jié)信息之后，編輯場景時間 信息提取部77讀出設定有章節(jié)的位置的時間信息，然后，編輯場景屬性 提取部76根據(jù)該時間信息，從場景屬性數(shù)據(jù)庫中讀出場景屬性信息，用 戶喜好數(shù)據(jù)庫更新部33更新用戶喜好數(shù)據(jù)庫43，以使與記錄在用戶喜好 數(shù)據(jù)庫43內的相應場景的屬性一致的屬性的頻度增加。
下面，說明剪輯編輯的情況。在剪輯編輯的情況下，針對記錄在節(jié) 目記錄部14內的流，從編輯流控制部74暫時讀出流，在編輯流上刪除 從開頭到第2分鐘的流，然后還刪除從開頭起第3分鐘以后的流。與此 同時，將再現(xiàn)控制信息的時長修正為1分鐘，然后對于進入點信息，僅 保留從開頭起第2分鐘到從開頭起第3分鐘的區(qū)間，將除此以外的部分 刪除。這樣進行流的剪輯編輯。這里，由編輯流控制部74和流編輯部75 從節(jié)目記錄部14中暫時讀出流，然而可以在節(jié)目記錄部14上直接進行 編輯。在剪輯編輯中保留的區(qū)間的時間由編輯場景時間信息提取部77讀 出，然后，編輯場景屬性提取部76根據(jù)該時間信息，從場景屬性數(shù)據(jù)庫 中讀出場景屬性信息，用戶喜好數(shù)據(jù)庫更新部33更新用戶喜好數(shù)據(jù)庫43 ，以使與記錄在用戶喜好數(shù)據(jù)庫43內的剩余的場景屬性一致的屬性的頻度 增加。并且，與使剩余的場景屬性的頻度增加相反，也可以使與所刪除 的場景對應的屬性的頻度減少。
如上述所說明那樣，針對在章節(jié)編輯和剪輯編輯中成為對象的場景， 求出其屬性，進行使記錄在用戶喜好數(shù)據(jù)庫內的對應屬性的頻度增加或 減少的操作，從而可反映用戶喜好。
用戶能利用編輯功能對比節(jié)目更小的單位的場景進行各種操作，而 不是進行以節(jié)目為單位的操作。通過對該場景的編輯操作，可判定用戶 對各場景的喜好。例如，從某節(jié)目中僅提取喜歡的場景，使其組成1個 新節(jié)目的操作、或者在原始節(jié)目之外單獨生成僅收集了喜歡場景而得到 的播放列表的操作，可確定用戶喜歡的場景。另一方面，通過從某節(jié)目 中刪除不需要的場景的行為，可確定用戶不喜歡的場景。并且，用戶利 用設定成可對某場景進行簡單訪問的章節(jié)，可判定為在所設定的章節(jié)之 后的場景是非常重要的場景。
特別是，編輯操作與錄像和再現(xiàn)之類的功能相比， 一般不是以高頻 度進行的操作，而是根據(jù)用戶強烈意愿來進行，因而可以解釋為強烈反
映了用戶的意圖和喜好，在本實施方式所示的用戶喜好數(shù)據(jù)庫43內加進 考慮成為編輯對象的場景的信息，并且將其反映在用戶喜好上，這對進 一步提高用戶喜好數(shù)據(jù)庫43的精度是非常有用的。并且，在再現(xiàn)時進行 的用戶操作雖然也反映用戶喜好，但快進和跳過之類的行為是暫時的， 因而不像永久記錄在流內的編輯那樣強烈反映用戶喜好。
在按以上構成的實施方式4的節(jié)目推薦裝置中，可通過編輯操作以 場景為單位取得用戶喜好。
特別是，由于通過通常較少進行頻繁操作的編輯操作來求出用戶喜 好，因而可高精度地求出用戶喜好。
另外，還能對各編輯操作進行加權，可以這樣根據(jù)操作種類變更上
升頻度的值，即例如針對進行了章節(jié)設定的場景的屬性，使頻度上升1，
針對播放列表內的場景的屬性，使頻度上升2。
在本實施方式中，假定預先準備場景屬性，然而可以在編輯操作中
29對成為編輯操作對象的場景的場景屬性進行分析。在該情況下，無需在 錄像時進行場景屬性的提取。
以上，對本發(fā)明的記錄再現(xiàn)裝置作了說明，然而本發(fā)明還能應用于 沒有記錄功能而有再現(xiàn)功能的裝置(再現(xiàn)裝置)、以及有記錄功能而沒有 再現(xiàn)功能的裝置(記錄裝置)。并且，還能應用于沒有記錄功能而僅有編 輯功能的裝置。
權利要求
1.一種節(jié)目推薦裝置，其特征在于，該節(jié)目推薦裝置具有場景屬性提取單元，其提取作為視頻音頻內容的一部分的場景的屬性；頻度分布取得單元，其對按每一所述場景所提取的場景的屬性的產(chǎn)生頻度進行計數(shù)，求出所提取的每一屬性的頻度；以及推薦節(jié)目選出單元，其根據(jù)由所述頻度分布取得單元所取得的頻度分布，推薦進行錄像或再現(xiàn)的視頻音頻內容。
2. 根據(jù)權利要求l所述的節(jié)目推薦裝置，其特征在于，所述節(jié)目推 薦裝置還具有錄像單元，該錄像單元記錄視頻音頻內容，當由所述錄像單元記錄視頻音頻內容時，所述場景屬性提取單元提 取所記錄的視頻音頻內容的每一場景的屬性。
3. 根據(jù)權利要求l所述的節(jié)目推薦裝置，其特征在于，所述場景屬 性提取單元根據(jù)每一屬性的產(chǎn)生頻度，分割任意的場景屬性來生成新的場景屬性， 將已有的場景屬性進行結合來生成新的場景屬性，或者 廢棄已有的場景屬性。
4. 一種節(jié)目推薦裝置，其特征在于，該節(jié)目推薦裝置具有 元數(shù)據(jù)取得單元，其取得視頻音頻內容的元數(shù)據(jù)； 頻度分布取得單元，其提取元數(shù)據(jù)的場景屬性，對各場景屬性的產(chǎn)生頻度進行計數(shù)，求出每一屬性的頻度；以及推薦節(jié)目選出單元，其根據(jù)由所述頻度分布取得單元所取得的頻度 分布，推薦進行錄像或再現(xiàn)的視頻音頻內容。
5. —種節(jié)目推薦裝置，其特征在于，該節(jié)目推薦裝置具有 再現(xiàn)單元，其再現(xiàn)或發(fā)布視頻音頻內容；場景屬性提取單元，當由所述再現(xiàn)單元再現(xiàn)或發(fā)布視頻音頻內容時， 該場景屬性提取單元提取所再現(xiàn)或發(fā)布的視頻音頻內容的每一場景的屬頻度分布取得單元，其對由所述場景屬性提取單元所提取的場景屬性的產(chǎn)生頻度進行計數(shù)，求出所提取的每一屬性的頻度；以及推薦節(jié)目選出單元，其根據(jù)由所述頻度分布取得單元所取得的場景 屬性的頻度分布，推薦進行錄像或再現(xiàn)的視頻音頻內容。
6. 根據(jù)權利要求5所述的節(jié)目推薦裝置，其特征在于，所述場景屬 性提取單元根據(jù)每一屬性的產(chǎn)生頻度，分割任意的場景屬性來生成新的場景屬性， 將已有的場景屬性進行結合來生成新的場景屬性，或者 廢棄已有的場景屬性。
7. —種節(jié)目推薦裝置，其特征在于，該節(jié)目推薦裝置具有編輯單元，其編輯視頻音頻內容；場景屬性提取單元，其提取成為所述編輯單元的編輯對象的場景屬性；頻度分布取得單元，其對由所述場景屬性提取單元所提取的場景屬性進行計數(shù)，求出所提取的每一屬性的頻度；以及推薦節(jié)目選出單元，其根據(jù)由所述頻度分布取得單元所取得的場景 屬性的頻度分布，推薦進行錄像或再現(xiàn)的視頻音頻內容。
8. —種節(jié)目推薦裝置，其特征在于，該節(jié)目推薦裝置具有-錄像單元，其記錄視頻音頻內容；錄像場景屬性提取單元，當由所述錄像單元記錄視頻音頻內容時， 該錄像場景屬性提取單元提取所記錄的視頻音頻內容的每一場景的屬 性；錄像場景屬性頻度分布取得單元，其對由所述錄像場景屬性提取單 元所提取的場景的屬性的產(chǎn)生頻度進行計數(shù)，以視頻音頻內容為單位求出所提取的每一屬性的頻度；再現(xiàn)單元，其再現(xiàn)或發(fā)布視頻音頻內容；再現(xiàn)場景屬性提取單元，當由所述再現(xiàn)單元再現(xiàn)或發(fā)布視頻音頻內 容時，該再現(xiàn)場景屬性提取單元提取所再現(xiàn)或發(fā)布的視頻音頻內容的每 一場景的屬性；再現(xiàn)場景屬性頻度分布取得單元，其對由所述再現(xiàn)場景屬性提取單 元所提取的場景屬性的產(chǎn)生頻度進行計數(shù)，求出所提取的每一屬性的頻度；以及推薦節(jié)目選出單元，其根據(jù)由所述錄像場景屬性頻度分布取得單元 所取得的場景屬性的頻度分布、以及由所述再現(xiàn)場景屬性頻度分布取得 單元所取得的場景屬性的頻度分布，推薦隨后進行再現(xiàn)的視頻音頻內容。
9.根據(jù)權利要求8所述的節(jié)目推薦裝置，其特征在于，根據(jù)由所述 錄像場景屬性頻度分布取得單元所取得的場景屬性的頻度分布與由所述 再現(xiàn)場景屬性頻度分布取得單元所取得的場景屬性的頻度分布的相關 性，推薦隨后進行再現(xiàn)的視頻音頻內容。
全文摘要
本發(fā)明提供一種節(jié)目推薦裝置，該節(jié)目推薦裝置即使在所錄像的節(jié)目預先沒有節(jié)目信息或屬性信息的情況下，也能根據(jù)用戶的喜好和興趣，從所錄像的節(jié)目中向用戶推薦應再現(xiàn)節(jié)目。該節(jié)目推薦裝置具有場景屬性提取單元(24、32)，其提取作為視頻音頻內容的一部分的場景的屬性；頻度分布取得單元(25、15)，其對按每一所述場景所提取的場景的屬性的產(chǎn)生頻度進行計數(shù)，求出所提取的各屬性的頻度；以及推薦節(jié)目選出單元(42)，其根據(jù)由頻度分布取得單元(25、15)所取得的頻度分布，推薦進行錄像或再現(xiàn)的視頻音頻內容。
文檔編號H04N5/445GK101677376SQ200910170599
公開日2010年3月24日 申請日期2009年9月18日 優(yōu)先權日2008年9月18日
發(fā)明者楠惠明 申請人:三菱電機株式會社