專利名稱：用于生成內(nèi)容元數(shù)據(jù)的方法和設(shè)備的制作方法
技術(shù)領(lǐng)域：
與本發(fā)明相一致的方法和設(shè)備涉及內(nèi)容的元數(shù)據(jù)，更具體地講，涉及生 成包括用戶對多媒體內(nèi)容的印象的情緒信息或者有關(guān)情緒信息的元數(shù)據(jù)。
已經(jīng)廣泛地普及了提供多媒體內(nèi)容的在線服務(wù)。然而，在用戶欣賞內(nèi)容 后有關(guān)用戶的情緒、感情等的反饋取決于用戶自愿提供信息。因此，難于在 用戶欣賞內(nèi)容后獲得用戶的情緒信息。雖然用戶提供他或她的情緒信息，但
是不能夠確保信息的準(zhǔn)確性或客觀性。
本發(fā)明提供一種用于自動(dòng)地取得關(guān)于用戶欣賞的內(nèi)容的用戶的情緒信息 并且將所述情緒信息反映在所述內(nèi)容的元信息中的方法和設(shè)備，和存儲(chǔ)所述 方法的計(jì)算機(jī)可讀記錄介質(zhì)。
根據(jù)本發(fā)明的一方面，提供一種生成內(nèi)容的元數(shù)據(jù)的方法，包括從接 收和再現(xiàn)內(nèi)容的至少一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情緒信息；使用所述情緒 信息生成情緒的元數(shù)據(jù)；和將情緒的元數(shù)據(jù)結(jié)合到所述內(nèi)容。
所述生成情緒的元數(shù)據(jù)的步驟包括確定代表所述內(nèi)容的情緒的代表類型。
所述生成情緒的元數(shù)據(jù)的步驟包括在內(nèi)容的再現(xiàn)期間，為每個(gè)預(yù)定時(shí) 間周期確定情緒的代表類型。
所述將情緒的元數(shù)據(jù)結(jié)合到所述內(nèi)容的步驟包括將情緒的元數(shù)據(jù)添加到
背景技術(shù)：

發(fā)明內(nèi)容
奮景的情緒的代
表類型。
內(nèi)容的現(xiàn)有元數(shù)據(jù)。
所述添加情緒的元數(shù)據(jù)的步驟包括如果所述內(nèi)容是廣播節(jié)目，則將所 述情緒的元數(shù)據(jù)添加到所述廣播節(jié)目的電子節(jié)目指南(EPG )。
所述添加情緒的元數(shù)據(jù)的步驟包括將所述情緒的元數(shù)據(jù)添加到所述內(nèi)容 的頭標(biāo)信息。
所述方法還包括在將所述內(nèi)容提供給所述至少一個(gè)客戶系統(tǒng)之前，將 關(guān)于取得用戶圖像要求的時(shí)間的信息添加到所述內(nèi)容的元數(shù)據(jù)，以便允許所 述至少一個(gè)客戶系統(tǒng)取得情緒信息。
根據(jù)本發(fā)明的另一方面，提供一種生成關(guān)于內(nèi)容的情緒信息的方法，包 括當(dāng)再現(xiàn)內(nèi)容時(shí)，取得用戶圖像；從用戶圖像提取臉部信息；通過將臉部 信息與臉部表情模板信息相比較，生成關(guān)于內(nèi)容的情緒信息；和將情緒信息 發(fā)送給提供內(nèi)容的服務(wù)器。
所述取得用戶圖像的步驟包括每當(dāng)再現(xiàn)內(nèi)容的每個(gè)情景時(shí)取得所述用 戶圖像。
所述取得用戶圖像的步驟包括當(dāng)再現(xiàn)內(nèi)容時(shí)，從圖像輸入單元接收至 少兩個(gè)用戶圖像。
所述生成情緒信息的步驟包括生成代表從所述至少兩個(gè)用戶圖像生成 的情緒信息的代表情緒信息。
所述取得用戶圖像的步驟包括在與包括在內(nèi)容的元數(shù)據(jù)中的情緒信息 取得時(shí)間相對應(yīng)的時(shí)間取得所述用戶圖像。
所述生成情緒信息的步驟包括如果多項(xiàng)臉部信息從用戶圖像被提取， 則生成與所述臉部信息的每項(xiàng)相應(yīng)的情緒信息。
所述生成情緒信息的步驟包括參照臉部表情模板信息，當(dāng)取得用戶圖 像時(shí)，生成包括情緒的類型和強(qiáng)度的情緒信息。
根據(jù)本發(fā)明的另一方面，提供一種用于生成內(nèi)容的元數(shù)據(jù)的設(shè)備，包括 通信單元，從接收和再現(xiàn)內(nèi)容的至少一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情緒信息； 和元數(shù)據(jù)生成單元，使用情緒信息生成情緒的元數(shù)據(jù)，并且將情緒的元數(shù)據(jù) 結(jié)合到所述內(nèi)容。
根據(jù)本發(fā)明的另 一方面，提供一種用于生成關(guān)于內(nèi)容的情緒信息的設(shè)備， 包括圖像輸入單元，當(dāng)再現(xiàn)內(nèi)容時(shí)，取得用戶圖像；臉部圖像提取單元， 從用戶圖像提取臉部信息；情緒信息生成單元，將臉部信息與臉部表情模板
信息相比較，并且基于比較的結(jié)果生成關(guān)于內(nèi)容的情緒信息；和通信單元，
將情緒信息發(fā)送給提供內(nèi)容的服務(wù)器。
當(dāng)欣賞內(nèi)容(如電影、音樂或運(yùn)動(dòng)畫面)時(shí)觀看內(nèi)容的觀眾的反應(yīng)通過 他們的表情表現(xiàn)出來。特別地，通過分析用戶的表情可以客觀地辨別相應(yīng)內(nèi) 容生產(chǎn)者是否根據(jù)用戶的意圖激發(fā)用戶的情緒。本發(fā)明使用用戶(使用內(nèi)容 的用戶)的表情信息生成情緒信息，并且將所述情緒信息提供給相應(yīng)內(nèi)容生 產(chǎn)者，從而允許用戶的情緒信息被使用為相應(yīng)內(nèi)容的元數(shù)據(jù)。此后，示出內(nèi) 容(如電影或運(yùn)動(dòng)畫面)被再現(xiàn)的情形，然而，本發(fā)明不限于此。本發(fā)明還 可被應(yīng)用于不同類型的內(nèi)容。


通過下面結(jié)合附圖對本發(fā)明的示例性實(shí)施例進(jìn)行的詳細(xì)描述，本發(fā)明的
上述和其他方面將會(huì)變得更加清楚，其中
圖1是^^艮據(jù)本發(fā)明的示例性實(shí)施例的情緒信息生成設(shè)備的方框圖2是根據(jù)本發(fā)明的示例性實(shí)施例的情緒信息生成方法的流程圖3是示出根據(jù)本發(fā)明的示例性實(shí)施例的臉部表情模板信息的示圖4是列出根據(jù)本發(fā)明的示例性實(shí)施例的情緒信息的類型的表；
圖5是示出根據(jù)本發(fā)明的示例性實(shí)施例生成的情緒信息的示圖6是根據(jù)本發(fā)明的另一示例性實(shí)施例的情緒信息生成方法的流程圖7是解釋根據(jù)本發(fā)明的示例性實(shí)施例的在內(nèi)容提供者和內(nèi)容接收者之
間的關(guān)系的示圖；和
具體實(shí)施例方式
圖1是根據(jù)本發(fā)明的示例性實(shí)施例的情緒信息生成設(shè)備的方框圖。 參照圖1，情緒信息生成設(shè)備100包括圖像輸入單元110,用于取得被 照相機(jī)等拍攝的用戶(或多個(gè)用戶)的圖像；存儲(chǔ)單元130，用于存儲(chǔ)臉部 表情模板信息132和用戶的情緒信息134，在所述臉部表情模板信息132中 人的各種臉部表情被創(chuàng)建為模板；和控制單元120，包括臉部圖像提取單元 122、臉部圖像規(guī)范化單元124和情緒信息生成單元126,在再現(xiàn)內(nèi)容時(shí)，控
制不同的部件生成用戶的情緒信息。
圖像輸入單元110接收通過使用照相機(jī)等來拍攝欣賞內(nèi)容的用戶而獲得 的用戶圖像。在預(yù)定的時(shí)間取得用戶圖像。根據(jù)不同的方法，對于內(nèi)容的每 項(xiàng)可以取得兩個(gè)或更多用戶圖像，并且可以以秒、分鐘等為單位周期性地或 者每當(dāng)內(nèi)容的情景改變時(shí)取得用戶圖像。可以通過解釋預(yù)存在情緒信息生成 設(shè)備100中的時(shí)間信息、從內(nèi)容提供者接收的時(shí)間信息或包括在內(nèi)容的元數(shù) 據(jù)中的情緒信息取得時(shí)間信息來識(shí)別用于取得用戶圖像的預(yù)定時(shí)間。
臉部圖像提取單元122從用戶圖像提取臉部圖像信息。為了從用戶圖像 提取臉部圖像信息，可以使用Gabor濾波器響應(yīng)。在多個(gè)臉部圖像從多個(gè)用 戶圖像被提取的情況下，對應(yīng)于每個(gè)臉部圖像的情緒信息被生成。臉部圖像 規(guī)范化單元124根據(jù)包括在臉部表情模板信息132中的模板的大小調(diào)整被提 取的臉部圖像。
情緒信息生成單元126通過模板匹配來確定用戶的臉部表情，并且根據(jù) 用戶的臉部表情生成和輸出情緒信息。如果多個(gè)臉部圖像被從(多個(gè))用戶 圖像提取，則生成包括人數(shù)和各人臉部表情信息的情緒信息。如果取得兩個(gè) 或更多用戶圖像，然后取得對于同一用戶的兩個(gè)或更多臉部表情圖像，則生 成多項(xiàng)情緒信息。在這種情況下，可生成多項(xiàng)情緒信息的代表情緒信息。此 時(shí)，在多項(xiàng)情緒信息當(dāng)中用戶最常具有的情緒的類型可以被確定為情緒的代 表類型。然而，本發(fā)明并不限于此，根據(jù)應(yīng)用，各種方法可被使用。所述情 緒信息被用作相應(yīng)內(nèi)容的元數(shù)據(jù)，并且可通過各種方法被統(tǒng)計(jì)地處理或集成。 例如，輸出包括對于內(nèi)容的每個(gè)情景的情緒的代表類型的數(shù)據(jù)或者包括個(gè)人 情緒信息的數(shù)據(jù)。此外，所述情緒信息可進(jìn)一步包括有關(guān)情緒的強(qiáng)度 (strength)以及情緒的類型的信息。
圖2是根據(jù)本發(fā)明的示例性實(shí)施例的情緒信息生成方法的流程圖。
參照圖2，首先，再現(xiàn)內(nèi)容(操作202)。當(dāng)再現(xiàn)內(nèi)容時(shí)，在預(yù)定時(shí)間取 得用戶圖像(操作204)。然后，從取得的用戶圖像僅提取臉部圖像部分，從 而生成臉部信息(操作206)。將所述臉部信息與存儲(chǔ)在存儲(chǔ)單元130中的臉 部表情模板信息相比較，以便獲得匹配的臉部表情，然后生成用于匹配的臉 部表情的情緒信息(操作208 )。所述情緒信息可以被存儲(chǔ)在存儲(chǔ)單元130中， 被發(fā)送給內(nèi)容提供服務(wù)器，或者被附加地記錄在內(nèi)容的元數(shù)據(jù)中。
圖3是示出根據(jù)本發(fā)明的示例性實(shí)施例的臉部表情模板信息的示圖。
參照圖3,與代表中性、快樂等的臉部表情相關(guān)聯(lián)的多個(gè)臉部表情模板 被存儲(chǔ)在存儲(chǔ)單元130中。每個(gè)臉部表情與一種情緒類型對應(yīng)?？梢愿郊拥?存儲(chǔ)代表針對每個(gè)情緒類型的不同強(qiáng)度的臉部表情模板。例如，根據(jù)其強(qiáng)度，
代表快樂的臉部表情可被分為5個(gè)級(jí)別。
圖4是列出根據(jù)本發(fā)明的示例性實(shí)施例的情緒信息的類型的表。參照圖 4，情緒類型402和情緒強(qiáng)度404被示出。
圖5是示出根據(jù)本發(fā)明的示例性實(shí)施例生成的情緒信息的示圖。參照圖 5,所述情緒信息包括用于各情景的情緒信息的類型504和內(nèi)容的代表情緒 502。在這個(gè)示例性實(shí)施例中，在四個(gè)情景中，作為所述內(nèi)容的代表情緒的"悲 傷"是用戶的情緒，并且是當(dāng)觀看所述內(nèi)容時(shí)用戶最常具有的臉部表情表達(dá) 的情緒。用于每個(gè)情景的情緒信息的類型504可以是通過在每個(gè)情景期間數(shù) 次或周期性地取得用戶圖像而獲得的情緒信息的代表情緒。
圖6是根據(jù)本發(fā)明的另 一示例性實(shí)施例的情緒信息生成方法的流程圖， 其中，生成的情緒信息被反饋回內(nèi)容提供者，并且被內(nèi)容提供者用作元數(shù)據(jù)。
參照圖6，從內(nèi)容提供服務(wù)器接收內(nèi)容并再現(xiàn)內(nèi)容(操作602)。如果接 收到拍攝信號(hào)(操作604)，則通過使用安裝在圖l示出的情緒信息生成設(shè)備 100中的照相機(jī)等來拍攝用戶來取得用戶圖像(操作606)。在預(yù)定時(shí)間生成 所述拍攝信號(hào)。例如，在內(nèi)容的元數(shù)據(jù)指定的預(yù)定時(shí)間、以預(yù)定時(shí)間周期為 單位或者每當(dāng)情景改變時(shí)生成所述拍攝信號(hào)。通過更頻繁地拍攝用戶，可以 更準(zhǔn)確地分析用戶的情緒。然后，根據(jù)所述臉部表情識(shí)別方法，分析用戶圖 像的臉部表情。為了識(shí)別臉部表情，首先，從用戶圖像分離臉部區(qū)域，并且 從臉部區(qū)域提取臉部信息(操作608 )。將所述提取的臉部信息規(guī)范化(操作 610)，并且將所述規(guī)范化的臉部信息與臉部表情模板信息相比較，從而分析 所述臉部表情并且生成與所述臉部表情相對應(yīng)的情緒信息(操作612)。然后， 存儲(chǔ)所述情緒信息(操作614 )。重復(fù)操作604到操作614的處理，直到內(nèi)容 再現(xiàn)被終止(操作616)。
在內(nèi)容再現(xiàn)被終止后，生成代表生成的情緒信息的代表情緒信息(操作 618),并且將所述代表情緒信息發(fā)送給內(nèi)容提供服務(wù)器(操作620)。根據(jù)應(yīng) 用，可以將所有生成的情緒信息和/或通過統(tǒng)計(jì)地處理或集成所述生成的情緒 信息而得到的結(jié)果以及所述代表情緒信息提供給內(nèi)容提供服務(wù)器。
圖7是解釋根據(jù)本發(fā)明的示例性實(shí)施例的在內(nèi)容提供者和內(nèi)容接收者之
間的關(guān)系的示圖。在圖7中，所述內(nèi)容接收者與在圖1中示出的情緒信息生 成設(shè)備100相對應(yīng)，并且內(nèi)容提供者與元數(shù)據(jù)生成設(shè)備相對應(yīng)，所述元數(shù)據(jù) 生成設(shè)備包括從內(nèi)容接收者接收情緒信息的通信單元和使用接收的情緒信息 生成情緒的元數(shù)據(jù)并且將所述元數(shù)據(jù)結(jié)合到內(nèi)容的元數(shù)據(jù)生成單元。
參照圖7，內(nèi)容提供者生成將要提供的內(nèi)容(操作702)，并且將所述內(nèi) 容發(fā)送給內(nèi)容接收者(操作704)。當(dāng)接收和再現(xiàn)內(nèi)容(操作706)時(shí)，所述 內(nèi)容接收者取得用戶圖像(操作708 )。從取得的用戶圖像識(shí)別用戶的臉部表 情，并且生成與識(shí)別的臉部表情相對應(yīng)的情緒信息(操作710),并且將所述 情緒信息發(fā)送給內(nèi)容提供者(操作712 )。內(nèi)容提供者從內(nèi)容接收者接收所述 情緒信息(操作714 )，并且將所述情緒信息反映在內(nèi)容的元數(shù)據(jù)(操作716 )。 然后，已經(jīng)接收到相應(yīng)內(nèi)容的不同內(nèi)容接收者參照所述元數(shù)據(jù)可以識(shí)別人們 對該內(nèi)容的反應(yīng)。
可以將本發(fā)明應(yīng)用到各種類型的內(nèi)容。在廣播內(nèi)容的情形下，由于元數(shù) 據(jù)被包括在EPG的節(jié)目明細(xì)中，所以參照所述EPG信息可以識(shí)別對于所述 廣播內(nèi)容的用戶情緒。在音樂內(nèi)容的情形下，可能通過使用安裝在再現(xiàn)所述 音樂內(nèi)容的內(nèi)容接收端的元數(shù)據(jù)生成設(shè)備中的照相機(jī)來在預(yù)定時(shí)間或以預(yù)定 的時(shí)間周期拍攝用戶，識(shí)別用戶的臉部表情，并且生成與用戶的臉部表情相 對應(yīng)的情緒信息。在畫面內(nèi)容的情形下，可能通過使用安裝在再現(xiàn)所述畫面 內(nèi)容的內(nèi)容接收端的元數(shù)據(jù)生成設(shè)備中的照相機(jī)識(shí)別用戶的臉部表情。本發(fā)
明也可被應(yīng)用到游戲、視頻電話業(yè)務(wù)等。
參照圖8，元數(shù)據(jù)生成設(shè)備首先從至少一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情 緒信息(操作802 )。當(dāng)從所述元數(shù)據(jù)生成設(shè)備或不同內(nèi)容提供服務(wù)器接收和 再現(xiàn)內(nèi)容時(shí)，所述至少一個(gè)客戶系統(tǒng)生成內(nèi)容的情緒信息。所述元數(shù)據(jù)生成 設(shè)備使用所述接收的情緒信息生成情緒的元數(shù)據(jù)(操作804)。此時(shí)，集成從 多個(gè)客戶系統(tǒng)接收的所述情緒信息。然后，確定代表內(nèi)容的情緒的代表類型，
確定代表所述內(nèi)容的每個(gè)情景的情緒的代表類型，或者確定用于每個(gè)預(yù)定時(shí) 間周期的情緒的代表類型，從而可以生成包括確定的情緒類型的情緒的元數(shù) 據(jù)。作為從多個(gè)情緒類型當(dāng)中確定情緒的代表類型的示例性方法，如上所述， 可以使用確定用戶最常具有的情緒類型為情緒的代表類型的方法。生成的情 緒元數(shù)據(jù)被結(jié)合到內(nèi)容(操作806 )。為了將所述元數(shù)據(jù)結(jié)合到內(nèi)容，可以使
用將所述元數(shù)據(jù)添加到內(nèi)容的現(xiàn)有元數(shù)據(jù)的方法。在所述內(nèi)容是廣播節(jié)目的 情況下，所述元數(shù)據(jù)可以被添加到EPG。在以頭標(biāo)的形式將元數(shù)據(jù)記錄在其 中的內(nèi)容的情形下，可以將元數(shù)據(jù)添加到頭標(biāo)信息。在將所述內(nèi)容提供給所 述至少一個(gè)客戶系統(tǒng)之前，元數(shù)據(jù)生成設(shè)備可以將關(guān)于客戶系統(tǒng)獲得用戶圖 像的時(shí)間周期或時(shí)間的信息添加到內(nèi)容的元數(shù)據(jù)，以取得情緒信息。
結(jié)合到內(nèi)容的情緒的元數(shù)據(jù)在再次使用所述內(nèi)容時(shí)可被應(yīng)用到各種領(lǐng) 域。所述包括在元數(shù)據(jù)中的情緒信息可以被用于公布所述內(nèi)容，并且可以將 情緒的元數(shù)據(jù)提供給用戶，從而用戶可以選擇內(nèi)容。此外，從內(nèi)容僅提取與 用戶期望的情緒相應(yīng)的部分，從而他或她可以僅觀看期望的部分，或者可以 生成僅包括提取的部分的新內(nèi)容。
讀記錄介質(zhì)上的計(jì)算機(jī)可讀代碼。
如上所述，根據(jù)本發(fā)明的示例性實(shí)施例，可以通過使用欣賞多媒體內(nèi)容 的用戶的臉部表情，自動(dòng)地取得情緒信息。此外，根據(jù)圖像內(nèi)容的各情景可
情緒信息。
通過使用根據(jù)本發(fā)明的示例性實(shí)施例生成的元數(shù)據(jù)，內(nèi)容提供者可以客 觀地識(shí)別用戶對內(nèi)容的反應(yīng)，并且將識(shí)別的信息反映在隨后的內(nèi)容的加工中 或者用戶反應(yīng)分析中。此外，對于內(nèi)容的用戶情緒信息可以被應(yīng)用于醫(yī)療目的。
參照包括不同用戶的情緒信息的內(nèi)容元數(shù)據(jù)，通過使用內(nèi)容做產(chǎn)品廣告 的廣告商可以容易地獲知廣告效果，內(nèi)容使用者可以容易地搜索期望的內(nèi)容。
例如，通過將情緒信息作為搜索關(guān)鍵詞使用，用戶可以搜索在觀看時(shí)可以使 許多人發(fā)笑的電影，或者僅搜索和觀看搞笑的電影片段。
雖然已參照本發(fā)明的示例性實(shí)施例具體地示出和描述了本發(fā)明，但是本 領(lǐng)域的普通技術(shù)人員將會(huì)理解，在不脫離由權(quán)利要求限定的本發(fā)明的精神和 范圍的情況下，可以在形式和細(xì)節(jié)上進(jìn)行各種變形和修改。
權(quán)利要求
1、一種生成內(nèi)容的元數(shù)據(jù)的方法，所述方法包括從接收和再現(xiàn)內(nèi)容的至少一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情緒信息；使用所述情緒信息生成情緒的元數(shù)據(jù)；和將情緒的元數(shù)據(jù)結(jié)合到所述內(nèi)容。
2、 如權(quán)利要求l所述的方法，其中，所述生成情緒的元數(shù)據(jù)的步驟包括 確定代表所述內(nèi)容的情緒的代表類型。
3、 如權(quán)利要求l所述的方法，其中，所述生成情緒的元數(shù)據(jù)的步驟包括 確定代表內(nèi)容的每個(gè)情景的情緒的代表類型。
4、 如權(quán)利要求1所述的方法，其中，所述生成情緒的元數(shù)據(jù)的步驟包括 在內(nèi)容的再現(xiàn)期間，為每個(gè)預(yù)定時(shí)間周期確定情緒的代表類型。
5、 如權(quán)利要求l所述的方法，其中，所述將情緒的元數(shù)據(jù)結(jié)合到所述內(nèi) 容的步驟包括將情緒的元數(shù)據(jù)添加到內(nèi)容的現(xiàn)有元數(shù)據(jù)。
6、 如權(quán)利要求5所述的方法，其中，所述添加情緒的元數(shù)據(jù)的步驟包括 如果所述內(nèi)容是廣播節(jié)目，則將所述情緒的元數(shù)據(jù)添加到所述廣播節(jié)目的電 子節(jié)目指南。
7、 如權(quán)利要求5所述的方法，其中，所述添加情緒的元數(shù)據(jù)的步驟包括 將所述情緒的元凄t據(jù)添加到所述內(nèi)容的頭標(biāo)信息。
8、 如權(quán)利要求l所述的方法，還包括在將所述內(nèi)容提供給所述至少一 個(gè)客戶系統(tǒng)之前，將關(guān)于取得用戶圖像要求的時(shí)間的信息添加到所述內(nèi)容的 元數(shù)據(jù)，以便允許所述至少一個(gè)客戶系統(tǒng)取得情緒信息。
9、 一種存儲(chǔ)用于執(zhí)行生成內(nèi)容的元數(shù)據(jù)的方法的計(jì)算機(jī)程序的計(jì)算機(jī)可 讀記錄介質(zhì)，所述方法包括從接收和再現(xiàn)內(nèi)容的至少 一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情緒信息； 使用所述情緒信息生成情緒的元數(shù)據(jù)；和 將情緒的元數(shù)據(jù)結(jié)合到所述內(nèi)容。
10、 一種生成關(guān)于內(nèi)容的情緒信息的方法，所述方法包括 當(dāng)再現(xiàn)內(nèi)容時(shí)，取得用戶圖像；從用戶圖像提取臉部信息；通過將臉部信息與臉部表情模板信息相比較，生成關(guān)于內(nèi)容的情緒信息；和將情緒信息發(fā)送給提供內(nèi)容的服務(wù)器。
11、 如權(quán)利要求IO所述的方法，其中，所述取得用戶圖像的步驟包括 每當(dāng)再現(xiàn)內(nèi)容的每個(gè)情景時(shí)取得所述用戶圖像。
12、 如權(quán)利要求IO所述的方法，其中，所述取得用戶圖像的步驟包括: 當(dāng)再現(xiàn)內(nèi)容時(shí)，從圖像輸入單元接收至少兩個(gè)用戶圖像。
13、 如權(quán)利要求12所述的方法，其中，所述生成情緒信息的步驟包括: 生成代表從所述至少兩個(gè)用戶圖像生成的情緒信息的代表情緒信息。
14、 如權(quán)利要求IO所述的方法，其中，所述取得用戶圖像的步驟包括: 在與包括在內(nèi)容的元數(shù)據(jù)中的情緒信息取得時(shí)間相對應(yīng)的時(shí)間取得所述用戶 圖像。
15、 如權(quán)利要求IO所述的方法，其中，所述生成情緒信息的步驟包括: 如果多項(xiàng)臉部信息從用戶圖像被提取，則生成與所述臉部信息的每項(xiàng)相應(yīng)的 情緒信息。
16、 如權(quán)利要求IO所述的方法，其中，所述生成情緒信息的步驟包括 參照臉部表情模板信息，當(dāng)取得用戶圖像時(shí)，生成包括情緒的類型和強(qiáng)度的 情緒信息。
17、 如權(quán)利要求IO所述的方法，還包括，在生成所述情緒信息之前，與 臉部表情模板信息的大小相應(yīng)，將提取的臉部信息的大小規(guī)范化。
18 、 一種存儲(chǔ)用于執(zhí)行生成關(guān)于內(nèi)容的情緒信息的方法的計(jì)算機(jī)程序的 計(jì)算機(jī)可讀記錄介質(zhì)，所述方法包括 當(dāng)再現(xiàn)內(nèi)容時(shí)，取得用戶圖像； 從用戶圖像提取臉部信息；通過將臉部信息與臉部表情模板信息相比較，生成關(guān)于內(nèi)容的情緒信息;和將情緒信息發(fā)送給提供內(nèi)容的服務(wù)器。
19、 一種用于生成內(nèi)容的元數(shù)據(jù)的設(shè)備，所述設(shè)備包括 通信單元，從接收和再現(xiàn)內(nèi)容的至少一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情緒 信息；和元數(shù)據(jù)生成單元，使用情緒信息生成情緒的元數(shù)據(jù)，并且將情緒的元數(shù) 據(jù)結(jié)合到所述內(nèi)容。
20、 如權(quán)利要求19所述的設(shè)備，其中，所述元數(shù)據(jù)生成單元確定代表內(nèi) 容的情緒的代表類型。
21、 如權(quán)利要求19所述的設(shè)備，其中，所述元數(shù)據(jù)生成單元確定代表內(nèi) 容的每個(gè)情景的情緒的代表類型。
22、 如權(quán)利要求19所述的設(shè)備，其中，所述元數(shù)據(jù)生成單元確定每個(gè)預(yù) 定時(shí)間周期的情緒的代表類型。
23、 如權(quán)利要求19所述的設(shè)備，其中，所述元數(shù)據(jù)生成單元將情緒的元 數(shù)據(jù)添加到內(nèi)容的現(xiàn)有元數(shù)據(jù)。
24、 如權(quán)利要求23所述的設(shè)備，其中，如果所述內(nèi)容是廣播節(jié)目，則元 數(shù)據(jù)生成單元將所述情緒的元數(shù)據(jù)添加到所述廣播節(jié)目的電子節(jié)目指南。
25、 如權(quán)利要求23所述的設(shè)備，其中，所述元數(shù)據(jù)生成單元將情緒的元 數(shù)據(jù)添加到內(nèi)容的頭標(biāo)信息。
26、 如權(quán)利要求19所述的設(shè)備，其中，在將內(nèi)容提供給所述至少一個(gè)客 戶系統(tǒng)之前，所述元數(shù)據(jù)生成單元將關(guān)于取得用戶圖像要求的時(shí)間的信息添 加到內(nèi)容的元數(shù)據(jù)，以便允許所述至少一個(gè)客戶系統(tǒng)取得所述情緒信息。
27、 一種用于生成關(guān)于內(nèi)容的情緒信息的設(shè)備，所述設(shè)備包括 圖像輸入單元，當(dāng)再現(xiàn)內(nèi)容時(shí)，取得用戶圖像；臉部圖像提取單元，從用戶圖像提取臉部信息；情緒信息生成單元，將臉部信息與臉部表情模板信息相比較，并且基于 比較的結(jié)果生成關(guān)于內(nèi)容的情緒信息；和通信單元，將情緒信息發(fā)送給提供內(nèi)容的服務(wù)器。
28、 如權(quán)利要求27所述的設(shè)備，其中，每當(dāng)再現(xiàn)內(nèi)容的每個(gè)情景時(shí)，所 述圖像輸入單元取得用戶圖像。
29、 如權(quán)利要求27所述的設(shè)備，其中，當(dāng)再現(xiàn)內(nèi)容時(shí)，所述圖像輸入單 元取得至少兩個(gè)用戶圖像。
30、 如權(quán)利要求29所述的設(shè)備，其中，所述情緒信息生成單元生成代表 從所述至少兩個(gè)用戶圖像生成的情緒信息的代表情緒信息。
31、 如權(quán)利要求27所述的設(shè)備，其中，所述圖像輸入單元在與包括在內(nèi) 容的元數(shù)據(jù)中的情緒信息取得時(shí)間相應(yīng)的時(shí)間取得所述用戶圖像。
32、 如權(quán)利要求27所述的設(shè)備，其中，如果多項(xiàng)臉部信息從用戶圖像被 提取，則所述情緒信息生成單元生成與所述臉部信息的每項(xiàng)對應(yīng)的情緒信息。
33、 如權(quán)利要求27所述的設(shè)備，其中，參照臉部表情模板信息，當(dāng)取得 用戶圖像時(shí)，所述情緒信息生成單元生成包括情緒的類型和強(qiáng)度的情緒信息。
34、 如權(quán)利要求27所述的設(shè)備，還包括臉部圖像規(guī)范化單元，與臉部 表情模板信息的大小相對應(yīng)，將所述提取的臉部信息的大小規(guī)范化，其中， 所述情緒信息生成單元將規(guī)范化的臉部信息與臉部表情模板信息相比較。
全文摘要
提供一種用于生成包括關(guān)于多媒體內(nèi)容的用戶的印象的情緒信息或者有關(guān)所述情緒信息的元數(shù)據(jù)的方法和設(shè)備，和存儲(chǔ)所述方法的計(jì)算機(jī)可讀記錄介質(zhì)。所述元數(shù)據(jù)生成方法包括從接收和再現(xiàn)內(nèi)容的至少一個(gè)客戶系統(tǒng)接收關(guān)于內(nèi)容的情緒信息；使用所述情緒信息生成情緒的元數(shù)據(jù)；和將情緒的元數(shù)據(jù)結(jié)合到所述內(nèi)容。由此，可以通過使用正在欣賞多媒體內(nèi)容的用戶的臉部表情來自動(dòng)地取得情緒信息，并且將所述情緒信息作為元數(shù)據(jù)使用。
文檔編號(hào)G11B20/10GK101169955SQ20071010476
公開日2008年4月30日 申請日期2007年4月26日 優(yōu)先權(quán)日2006年10月27日
發(fā)明者徐俊奎 申請人:三星電子株式會(huì)社