相片日記的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明針對于計算裝置且特定來說針對于在計算裝置上創(chuàng)建相片日記。
【背景技術(shù)】
[0002]人們通常用其手機(jī)來拍攝短視頻以捕獲其日?；顒?。許多人使用因特網(wǎng)協(xié)議(IP)相機(jī)來記錄其家庭、孩子、寵物或工作，且通常將IP相機(jī)視頻存儲于服務(wù)器處使得其被存檔且可從任何地方存取。雖然這些視頻捕獲人們的生活，但其通常存留在手機(jī)或服務(wù)器上而不被充分利用。

【發(fā)明內(nèi)容】

[0003]一個實施例涉及一種用以創(chuàng)建相片日記的方法，其包括:在所述相片日記中針對一時間周期創(chuàng)建一條目，包括:從在所述時間周期中創(chuàng)建或接收的數(shù)字視頻選擇候選幀，包括:對所述數(shù)字視頻執(zhí)行人及寵物檢測；從所述數(shù)字視頻提取具有人及寵物的幀；對具有人的所述幀執(zhí)行人辨識以識別具有經(jīng)辨識人的幀；基于準(zhǔn)則而將具有經(jīng)辨識人及寵物的所述候選幀分類成若干群組；從所述群組選擇代表幀；及在所述條目中呈現(xiàn)所述代表幀。
【附圖說明】
[0004]在圖式中:
[0005]圖1是在本發(fā)明的實例中具有相片日記創(chuàng)建器的計算裝置的框圖；
[0006]圖2是在本發(fā)明的實例中用以創(chuàng)建相片日記的方法的流程圖；
[0007]圖3圖解說明在本發(fā)明的實例中從數(shù)字視頻選擇候選幀；
[0008]圖4圖解說明在本發(fā)明的實例中將圖3的候選幀歸類；
[0009]圖5圖解說明在本發(fā)明的實例中的相片日記的日歷視圖；
[0010]圖6圖解說明在本發(fā)明的實例中呈相冊格式的相片日記的條目；
[0011]圖7圖解說明在本發(fā)明的實例中呈時間線格式的相片日記的條目；
[0012]圖8圖解說明在本發(fā)明的實例中呈拼貼畫格式的相片日記的條目；且
[0013]圖9是在本發(fā)明的實例中用以通過組合相冊日記而創(chuàng)建完整日記的方法的流程圖。
[0014]在不同圖中使用相同參考編號指示類似或等同的元件。
【具體實施方式】
[0015]如本文中所使用，術(shù)語“包含(include)”意指包含但不限于，術(shù)語“包含(including)”意指包含但不限于。術(shù)語“一(a及an)”打算表示至少一個特定元素。術(shù)語“基于”意指至少部分地基于。使用術(shù)語“或(or)”來指代非排他性，使得“A或B”包含“A但非B”、“B但非A”及“A及B”，除非另有指示。
[0016]在本發(fā)明的實例中，一種用以創(chuàng)建相片日記的方法包含在所述相片日記中針對一時間周期創(chuàng)建一條目。創(chuàng)建所述條目包含從在所述時間周期中創(chuàng)建或接收的數(shù)字視頻選擇候選幀。選擇所述候選幀包含對所述數(shù)字視頻執(zhí)行人及寵物檢測，從所述數(shù)字視頻提取具有人及寵物的幀，對具有人的所述幀執(zhí)行人辨識以識別具有經(jīng)辨識人的幀。所述方法進(jìn)一步包含基于準(zhǔn)則而將具有經(jīng)辨識人及寵物的所述候選幀分類成若干群組，從所述群組選擇代表幀，并在所述條目中呈現(xiàn)所述代表幀。
[0017]圖1是在本發(fā)明的實例中包含相片日記創(chuàng)建器122的計算裝置102的框圖。計算裝置102可為桌上型計算機(jī)、膝上型計算機(jī)、平板計算機(jī)、智能電話或服務(wù)器計算機(jī)。
[0018]計算裝置102包含處理器108、易失性存儲器110、非易失性存儲器112、相機(jī)114及有線或無線網(wǎng)絡(luò)接口卡(NIC) 120。非易失性存儲器112存儲相片日記創(chuàng)建器122的代碼、相片日記123及數(shù)字視頻124。處理器108將相片日記創(chuàng)建器122的代碼從非易失性存儲器112加載到易失性存儲器110，執(zhí)行所述代碼及將應(yīng)用數(shù)據(jù)存儲于易失性存儲器110中。相片日記創(chuàng)建器122從可用相機(jī)114捕獲或經(jīng)由網(wǎng)絡(luò)128用NIC 120接收的數(shù)字視頻124創(chuàng)建相片日記123。舉例來說，當(dāng)計算裝置102為向用戶提供相片日記服務(wù)的服務(wù)器計算機(jī)時，計算裝置102從用戶的IP相機(jī)130接收數(shù)字視頻124。IP相機(jī)130可在用戶的家或公司中的各種已知位置處。相片日記123可包含周期性地從數(shù)字視頻124產(chǎn)生的條目。
[0019]圖2為在本發(fā)明的實例中用以創(chuàng)建相片日記123(圖1)的方法200的流程圖。方法200可由執(zhí)行相片日記創(chuàng)建器122 (圖1)的代碼的處理器108 (圖1)來實施。方法200可包含由一或多個框圖解說明的一或多個操作、功能或動作。雖然本文中描述的方法200及其它方法的框是以循序次序圖解說明的，但還可并行地或以不同于本文中描述的次序的次序來執(zhí)行這些框。而且，可基于所要實施方案而將各種框組合成較少框，劃分成額外框或消除。方法200可在框202中開始。
[0020]在框202中，處理器108接收相片日記123的主題的用戶輸入。所述用戶輸入可為本地的或經(jīng)由計算機(jī)網(wǎng)絡(luò)從客戶端裝置接收的。在本發(fā)明的一些實例中，用戶可通過選擇可由面部辨識算法識別的一或多個人而挑選相片日記123的主題。舉例來說，用戶可希望創(chuàng)建關(guān)于他或她的相片日記123。在本發(fā)明的其它實例中，用戶可通過選擇可由特性辨識識別的一或多個人類特性而挑選主題。舉例來說，人類特性可為可分別由年齡估計及性別檢測算法識別的年齡(例如，兒童、成年人或老人)及性別(例如，男性或女性)。面部辨識及特性辨識可統(tǒng)稱為人辨識。在本發(fā)明的其它實例中，用戶可通過選擇一或多個寵物類型來挑選主題。舉例來說，寵物類型可為貓、狗、鳥或馬。用戶還可選擇所描述主題的組合。舉例來說，用戶可希望創(chuàng)建關(guān)于兒童與狗及貓的主題的相片日記。在本發(fā)明的一些實例中，處理器108可自動地或在用戶的命令下創(chuàng)建關(guān)于未經(jīng)辨識人的相片日記?？?02可后續(xù)接著框204。
[0021]在框204中，處理器108接收相片日記123的參數(shù)的用戶輸入。所述用戶輸入可為本地的或經(jīng)由網(wǎng)絡(luò)從客戶端裝置接收的。用戶可挑選在相片日記123中創(chuàng)建新條目的頻率。舉例來說，用戶可希望每天、每幾天、每周或每月創(chuàng)建新條目。用戶可挑選相片日記123的每一條目中的最大幀數(shù)目及相片日記123中的最大幀數(shù)目?；蛘撸幚砥?08可使用這些參數(shù)的默認(rèn)值?？?04可后續(xù)接著框206。
[0022]在框206中，處理器108針對相片日記123中的條目從數(shù)字視頻124 (圖1)選擇候選幀。所述條目表示在特定時間跨度內(nèi)相片日記123的主題發(fā)生了什么。針對所述條目，處理器108選擇在相同時間跨度中創(chuàng)建或接收的數(shù)字視頻124?？?06可包含子框206-1及 206-2。
[0023]在框206-1中，處理器108對選定數(shù)字視頻124中的幀執(zhí)行人及寵物檢測以提取具有由用戶挑選的人的幀并將其置于一個群組中且提取具有由用戶挑選的寵物類型的幀并將其置于另一群組中。在本發(fā)明的實例中，此以圖形方式圖解說明于圖3中。在圖3中，處理器108對數(shù)字視頻302-1、302-2...302-n的幀執(zhí)行人及寵物檢測以提取具有人的幀并將其置于群組304中且提取具有寵物的幀并將其置于群組306中。注意，群組304及306中的幀可重疊，因為一些幀可包含人及寵物兩者。子框206-1可后續(xù)接著子框206-2。處理器108追蹤群組306的幀中的寵物類型(例如,貓、狗、鳥或馬)，例如在表中記錄對應(yīng)性或注釋所述幀。
[0024]返回參考圖2，在子框206-2中，處理器108執(zhí)行面部辨識或人類特性(年齡及性別)辨識以提取具有由用戶挑選的人或人類特性的幀并將其置于一個群組中且提取不具有由用戶挑選的人或人類特性的幀并將其置于另一群組中。在本發(fā)明的實例中，此同樣以圖形方式圖解說明于圖3中。在圖3中，處理器108執(zhí)行面部辨識或人類特性辨識以提取具有由用戶挑選的經(jīng)辨識人或人類特性的幀并將其置于群組308中且提取不具有由用戶挑選的人或人類特性的幀并將其置于群組310中。注意，群組308及310中的幀可重疊，因為一些幀可包含經(jīng)辨識人及具有經(jīng)辨識人類特性的人兩者。處理器108追蹤群組308的幀中的經(jīng)辨識人或人類特性，例如在表中記錄對應(yīng)性或注釋所述幀。在一些實例中，當(dāng)用戶挑選相片日記123的主題時，群組306或群組308中的幀為候選幀。在其它實例中，例如當(dāng)處理器108自動地或在用戶的命令下創(chuàng)建關(guān)于未經(jīng)辨識人的相片日記時，群組310中的幀為候選中貞O
[0025]返回參考圖2，子框206-2可后續(xù)接著框208。
[0026]在框208中，處理器108針對條目的時間周期中的每一天將來自框206的候選幀歸類。框208可包含子框208-1、208-2及208-3。在子框208-1中，處理器108基于候選幀的源視頻而確定所述候選幀的所捕獲或所接收時間并依據(jù)時間增量將所述候選幀排序。舉例來說，如果每周創(chuàng)建一條目，那么時間增量可為一周中的天。如果每天創(chuàng)建一條目，那么時間增量可為上午、下午、傍晚及夜晚。在本發(fā)明的實例中，此針對一天條目以圖形方式進(jìn)行圖解說明。在圖4中，處理器108將候選幀置于若干時間群組中，例如上午群組402、下午群組404、傍晚群組406及夜晚群組408。返回參考圖2，子框208-1可后續(xù)接著子框208-2。
[0027]在子框208-2中，處理器108通過場景檢測確定在候選幀中捕獲的情景并依據(jù)情景將來自每一時間群組的候選幀歸類。在本發(fā)明的實例中，此以圖形方式圖解說明于圖4中。針對每一時間群組，處理器108將其候選幀置于情景群組410-1到410-1中。為清晰起見，此僅針對上午群組402進(jìn)行圖解說明。情景包含早餐、午餐、晚餐、出門上班、下班回家、出門上學(xué)、放學(xué)回家、聚會或其它活動。場景檢測可基于在幀中檢測到的時間及對象(包含人)而檢測情景。返回參考圖2，子框208-2可后續(xù)接著子框208-3。
[0028]在子框208-3中，處理器108確定在候選幀中捕獲的位置并依據(jù)位置將來自每一情景群組的候選幀歸類。在本發(fā)明的實例中，此以圖形方式圖解說明于圖4中。針對每一情景群組，處理器108將其候選幀置于位置群組412-1到412-j中。為清晰起見，此僅