圖像處理方法和支持該方法的電子設(shè)備的制造方法
【專利摘要】公開了圖像處理方法和支持該方法的電子設(shè)備。提出了一種用于收集多個圖像的電子設(shè)備。該電子設(shè)備可以通過用相機(jī)拍攝圖片/視頻或者通過從外部設(shè)備接收圖像來收集圖像。該電子設(shè)備還包括處理器，處理器能夠確定在通過相機(jī)拍攝圖像時的至少一部分時間期間的活動類型，或者確定原始生成從外部設(shè)備接收到的圖像的設(shè)備的活動類型。處理器能夠基于活動類型來選擇所收集的圖像中的至少一些以生成加亮內(nèi)容。
【專利說明】圖像處理方法和支持該方法的電子設(shè)備
[0001 ] 本申請要求2015年I月27日遞交的韓國專利申請N0.10-2015-0012655的優(yōu)先權(quán)，將其內(nèi)容合并在此作為參考。
技術(shù)領(lǐng)域
[0002]本公開涉及電子設(shè)備，更具體地涉及將圖像分類成組的電子設(shè)備。
【背景技術(shù)】
[0003]諸如常規(guī)智能電話之類的各種電子設(shè)備對電子設(shè)備上拍攝的圖片或視頻和/或下載的圖片或視頻提供圖像收集功能。然而，由常規(guī)電子設(shè)備提供的圖像收集功能關(guān)注于簡單地收集圖像。但是，尤其考慮到常規(guī)電子設(shè)備通常支持大量存儲器，用戶可能收集大量的照片和視頻。因此，用戶可能花費(fèi)大量的時間和精力來搜索所收集的照片和視頻，以選擇他們想要保留或與他人共享的照片和視頻。

【發(fā)明內(nèi)容】

[0004]本公開的各個方面是為了至少解決上述問題和/或缺點(diǎn)，并且至少提供以下描述的優(yōu)點(diǎn)。
[0005]根據(jù)本公開的一個方面，提供了一種電子設(shè)備。該電子設(shè)備可以包括:存儲器，配置為存儲多個圖像；以及處理器，配置為與存儲器功能相連。處理器能夠確定在該多個圖像的源收集該多個圖像時的一部分時間期間與源相關(guān)聯(lián)的活動類型。該多個圖像的源可以是該電子設(shè)備或外部電子設(shè)備。處理器可以配置為使用與活動類型相對應(yīng)的圖像處理方案以將該多個圖像中一個或多個圖像確定為突出圖像。處理器還可以配置為根據(jù)突出圖像生成突出內(nèi)容。
[0006]根據(jù)本公開的另一方面，提出了一種圖像處理方法。。該圖像處理方法可以包括將多個圖像存儲在電子設(shè)備的存儲器中。該方法可以包括確定在該多個圖像的源收集該多個圖像時的一部分時間期間與源相關(guān)聯(lián)的活動類型。該多個圖像的源可以是該電子設(shè)備或外部電子設(shè)備?？梢曰诨顒宇愋蛠泶_定具有某種濾波條件的圖像處理方案。可以將該圖像處理方案應(yīng)用于該多個圖像以從該多個圖像中選擇至少一個圖像作為突出圖像，并且可以根據(jù)突出圖像來生成突出內(nèi)容。
[0007]根據(jù)結(jié)合附圖公開了本公開各種實(shí)施例的以下詳細(xì)描述，本公開的其他方面、優(yōu)點(diǎn)和突出特征對于本領(lǐng)域普通技術(shù)人員將變得清楚明白。
【附圖說明】
[0008]根據(jù)結(jié)合附圖的以下詳細(xì)描述，本公開一些實(shí)施例的上述和其他方面、特征以及優(yōu)點(diǎn)將更清楚，在附圖中:
[0009]圖1是示出了根據(jù)本公開各種實(shí)施例的網(wǎng)絡(luò)環(huán)境中的電子設(shè)備的配置的方框圖；
[0010]圖2A是示出了根據(jù)本公開各種實(shí)施例的圖像操作模塊的配置的方框圖；
[0011]圖2B是示出了根據(jù)本公開各種實(shí)施例的應(yīng)用了基于邊緣處理的質(zhì)量濾波器(QF)的示例的圖示；
[0012]2C是示出了根據(jù)本公開各種實(shí)施例的應(yīng)用了基于像素分布處理的質(zhì)量濾波器(QF)的示例的圖示；
[0013]圖3是示出了根據(jù)本公開各種實(shí)施例的圖像處理方法的流程圖；
[0014]圖4是示出根據(jù)本公開各種實(shí)施例的使用圖像的活動分析方法的流程圖；
[0015]圖5是示出了根據(jù)本公開各種實(shí)施例的使用傳感器信息的活動分析方法的流程圖；
[0016]圖6是示出了根據(jù)本公開各種實(shí)施例的使用場景信息的活動分析方法的流程圖；
[0017]圖7A是示出根據(jù)本公開各種實(shí)施例的突出圖像收集方法的流程圖:
[0018]圖7B是示出根據(jù)本公開各種實(shí)施例的突出內(nèi)容提供方法的流程圖:
[0019]圖8是示出了根據(jù)本公開各種實(shí)施例的與圖像操作相關(guān)聯(lián)的系統(tǒng)信號處理的示例的信號時序圖；
[0020]圖9是示出了根據(jù)本公開各種實(shí)施例的與圖像處理相關(guān)聯(lián)的屏幕界面的圖；
[0021 ]圖10是示出了根據(jù)本公開各種實(shí)施例的程序模塊的配置的框圖；以及
[0022]圖11是示出根據(jù)本公開各實(shí)施例的電子設(shè)備的配置的方框圖。
[0023]貫穿附圖，應(yīng)注意，相同的附圖標(biāo)記用于描述相同或相似的元件、特征和結(jié)構(gòu)。
【具體實(shí)施方式】
[0024]提供以下參照附圖的描述以幫助全面理解由權(quán)利要求及其等同物限定的本公開的各實(shí)施例。所述描述包括各種具體細(xì)節(jié)以輔助理解，但這些具體細(xì)節(jié)應(yīng)視為僅僅是示例性性的。因此，本領(lǐng)域普通技術(shù)人員將認(rèn)識到，在不脫離本公開的范圍的情況下，可以對這里描述的各種實(shí)施例進(jìn)行各種改變和修改。另外，為了清楚和簡潔起見，可以省略已知功能和結(jié)構(gòu)的描述。
[0025]在本公開中，這里使用的表達(dá)“具有”、“可以具有”、“包含”和“包括”或“可以包含”和“可以包括”表示存在相應(yīng)的特征(例如，諸如數(shù)值、功能、操作或組件之類的要素)，但是不排除存在附加的特征。
[0026]在本公開中，這里使用的表達(dá)“A或B”、“A和/或B中的至少一個”或“A和/或B中的一個或多個”等可以包括相關(guān)列出項目中一個或多個的任意和全部組合。例如，術(shù)語“A和/或B”、“A和B中的至少一個”或“A或B中的至少一個”可以表示以下全部情況:(I)包括至少一個A，(2)包括至少一個B，或者(3)包括至少一個A和至少一個B。
[0027]在本公開各種實(shí)施例中使用的“第一”或“第二”等表達(dá)可以表示各種要素，而無論相應(yīng)要素的順序和/或優(yōu)先級如何，但是并不限制相應(yīng)的要素。該措辭可以用于將元件彼此區(qū)分。例如，“第一用戶設(shè)備”和“第二用戶設(shè)備”表示彼此不同的用戶設(shè)備，而與相應(yīng)要素的順序和/或優(yōu)先級無關(guān)。例如，在不脫離本公開范圍的情況下，第一部件可稱為第二元件，反之亦然。
[0028]應(yīng)該理解，當(dāng)一要素(例如，第一要素)被稱為“(操作地或者通信地)耦接至”或者“連接至”另一要素(例如，第二要素)時，該要素可以與該另一要素直接耦接或連接，或者可以存在中間要素(例如，第三要素)。相反，當(dāng)一要素(例如，第一要素)被稱為“直接連接到”或“直接耦接到”另一要素(例如，第二要素)時，應(yīng)理解，不存在中間要素(例如，第三要素)。
[0029]根據(jù)情況，在本公開中使用的表達(dá)“(被)配置為”可以用作例如表達(dá)“適用于”、“具有…的能力”、“(被)設(shè)計為”、“適于”、“(被)制造為”或者“能夠”。術(shù)語“(被)配置為”不必表示僅在硬件方面“專門被設(shè)計用于”。相反，表述“(被)配置為...的設(shè)備”可以表示該設(shè)備與另一設(shè)備或其他組件一起操作“能夠..””。例如，短語“(被)配置為執(zhí)行A、B和C的處理器”可以是可通過執(zhí)行一個或多個軟件程序來執(zhí)行相應(yīng)操作的通用處理器(例如，中央處理單元(CPU)或應(yīng)用處理器)，或者通過執(zhí)行機(jī)器可讀代碼來執(zhí)行相應(yīng)操作的專用處理器(例如，嵌入式處理器)。
[0030]說明書使用的術(shù)語用于描述本公開的各種實(shí)施例，而不是為了限制本公開的范圍。除非另有規(guī)定，單數(shù)形式的術(shù)語可以包括多數(shù)形式。除非這里另有說明，這里使用的所有術(shù)語(包括技術(shù)和科學(xué)術(shù)語)可具有與本公開所屬領(lǐng)域的技術(shù)人員通常所理解的含義相同的含義。還應(yīng)該理解，在通用字典中定義并且常用的術(shù)語應(yīng)該按相關(guān)技術(shù)中的慣例進(jìn)行解釋，而不應(yīng)該解釋為具有理想化或過度刻板的含義，除非在本公開中明確限定。在本公開中限定的術(shù)語不應(yīng)該解釋為排除了本公開的示例性實(shí)施例，除非明確說明。
[0031]根據(jù)本公開各種實(shí)施例的電子設(shè)備可以包括以下至少一項:例如，智能電話、平板個人計算機(jī)(PC)、移動電話、視頻電話、電子書閱讀器、臺式PC、膝上型PC、上網(wǎng)本計算機(jī)、工作站、服務(wù)器、個人數(shù)字助理(PDA)、便攜式多媒體播放器(PMP)、運(yùn)動圖片專家組(MPEG-1SMPEG-2)音頻層3(MP3)播放器、移動醫(yī)療設(shè)備、相機(jī)或可穿戴設(shè)備(例如，智能眼鏡、頭戴式設(shè)備(HMD)、電子服飾、電子手環(huán)、電子項鏈、電子配飾、電子紋身、智能鏡子或智能手表)。
[0032]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以是智能家電。例如，智能家電可以包括以下至少一項:例如，電視(TV )、數(shù)字多功能盤(DVD)播放器、藍(lán)光盤(BRD)播放器、音響、冰箱、空調(diào)、吸塵器、烤箱、微波爐、洗衣機(jī)、空氣凈化器、機(jī)頂盒、家庭自動控制面板、安?？刂泼姘濉V盒(例如Samsung HomeSync?,Apple TV?或Google TV?)、游戲機(jī)(例如Xbox?和PlayStat1n?)、電子詞典、電子鑰匙、便攜式攝像機(jī)或電子相框。
[0033]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以包括以下至少一項:多種醫(yī)療設(shè)備如多種便攜式醫(yī)療測量設(shè)備(例如，血糖儀、心率計、血壓計或體溫計)、磁共振血管造影(MRA)設(shè)備、磁共振成像(MRI)設(shè)備、計算斷層掃描(CT)設(shè)備、掃描儀或超聲波設(shè)備等，導(dǎo)航設(shè)備，全球定位系統(tǒng)(GPS)接收機(jī)和/或其他全球?qū)Ш叫l(wèi)星系統(tǒng)(GNSS)接收機(jī)，事件數(shù)據(jù)記錄儀(EDR)，飛行數(shù)據(jù)記錄儀(FDR)，車輛信息娛樂設(shè)備，船用電子設(shè)備(例如，導(dǎo)航系統(tǒng)、羅盤等)，航空電子設(shè)備，安保設(shè)備，車頭單元，工業(yè)或家用機(jī)器人，自動柜員機(jī)(ATM)，銷售點(diǎn)(POS)或物聯(lián)網(wǎng)(例如，燈泡、各種傳感器、電表或氣表、灑水器、火警、恒溫器、街燈、烤面包機(jī)、運(yùn)動器材、熱水箱、加熱器、鍋爐等)。
[0034]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以包括以下至少一項:家具或建筑物/結(jié)構(gòu)的一部分、電子板、電子簽名接收設(shè)備、投影儀或各種測量儀表(例如，水表、電表、氣表或測波計等)。根據(jù)本公開各種實(shí)施例的電子設(shè)備是上述多種設(shè)備的一個或多個組合。根據(jù)本公開各種實(shí)施例的電子設(shè)備可以是柔性電子設(shè)備。此外，根據(jù)本公開各種實(shí)施例的電子設(shè)備不限于上述設(shè)備，并可以包括隨著技術(shù)發(fā)展而引入的新型電子設(shè)備。
[0035]下文中，將參照附圖描述根據(jù)本公開各種實(shí)施例的電子設(shè)備。這里使用的術(shù)語“用戶”可以表示使用電子設(shè)備的人，或者可以表示使用電子設(shè)備的設(shè)備(例如，人造電子設(shè)備)。
[0036]圖1是示出了根據(jù)本公開各種實(shí)施例的網(wǎng)絡(luò)環(huán)境中的電子設(shè)備的配置的方框圖。
[0037]參考圖1，網(wǎng)絡(luò)系統(tǒng)環(huán)境中的電子設(shè)備100可以包括總線110、處理器120、存儲器130、輸入/輸出接口 170、顯示器150、圖像操作模塊180、相機(jī)190和通信接口 160。在本公開的各種實(shí)施例中，可以從電子設(shè)備100中省略所述部件中的至少一個，和/或可以在電子設(shè)備100中另外包括其他部件。
[0038]例如，總線110可以是將處理器120、存儲器130、輸入和輸出接口 170、顯示器150、圖像操作模塊180、相機(jī)190和通信接口 160彼此連接并且可以在這些部件之間傳輸通信(例如，控制消息和/或數(shù)據(jù))的電路。根據(jù)本公開的實(shí)施例，總線110可以將相機(jī)190收集的圖像(例如，運(yùn)動圖像或靜止圖像)發(fā)送至圖像操作模塊180或處理器120中的至少一個。例如，運(yùn)動圖像可以是TV節(jié)目圖像、點(diǎn)播視頻(VOD)、用戶創(chuàng)建內(nèi)容(UCC)、音樂視頻或者YouTube圖像，并且通?？梢苑Q為視頻。也可以由用戶在電子設(shè)備上拍攝視頻。根據(jù)本公開的各種實(shí)施例，總線110可以將在圖像操作模塊180或處理器120中處理的分組圖像(或者會議圖像、人群圖像、聚類圖像等)發(fā)送至存儲器130、顯示器150或者通信接口 160中的至少一個。
[0039]處理器120可以包括以下中的一個或多個:中央處理器(CPU)、應(yīng)用處理器(AP)和通信處理器(CP)。處理器120可以執(zhí)行例如用于電子設(shè)備100的至少一個其它組件的控制和/或通信的計算或數(shù)據(jù)處理。根據(jù)本公開的實(shí)施例，處理器120可以響應(yīng)于輸入事件來控制相機(jī)190。處理器120可以支持對相機(jī)190收集的圖像進(jìn)行處理所需的計算。根據(jù)本公開的各種實(shí)施例，圖像操作模塊180可以包括至少一個處理器。備選地，圖像操作模塊180可以配置為與處理器120相關(guān)聯(lián)的至少一個軟件模塊或至少一個硬件模塊。
[0040]存儲器130可以包括易失性存儲器和/或非易失性存儲器。存儲器130可以存儲與電子設(shè)備100的至少一個其它組件相關(guān)的指令和/或數(shù)據(jù)。例如，存儲器130可以存儲相機(jī)190收集的圖像。此外，存儲器130可以存儲根據(jù)收集的圖像所生成的分組圖像。分組圖像可以包括多個靜止圖像和/或按照恒定的時間間隔來自于視頻的多個圖像。來自視頻的圖像也可以稱作視頻幀。
[0041]根據(jù)本公開的實(shí)施例，存儲器130可以存儲至少一個程序140。程序140可以包括內(nèi)核141、中間件143、應(yīng)用編程接口(API) 145和/或應(yīng)用程序147(或“應(yīng)用”)。內(nèi)核141、中間件143和/SAPI 145中的至少一部分可以稱作操作系統(tǒng)(OS)。
[0042]例如，內(nèi)核141可以控制或管理例如用于執(zhí)行在其它程序(例如，中間件143、API145或應(yīng)用程序147)中實(shí)施的操作或功能的系統(tǒng)資源(例如，總線110、處理器120或存儲器130等)。此外，當(dāng)中間件143、API 145或應(yīng)用程序147訪問電子設(shè)備100的分離部件時，內(nèi)核141可以提供可控制或管理系統(tǒng)資源的接口。根據(jù)本公開的各種實(shí)施例，內(nèi)核141可以提供與控制相機(jī)190相關(guān)聯(lián)的接口、可以控制或管理與圖像處理相關(guān)聯(lián)的系統(tǒng)資源的接口等。
[0043]例如，中間件143可以起到例如中介的作用，使得API145或應(yīng)用程序147可以與內(nèi)核141通信命令和/或數(shù)據(jù)。此外，中間件143可以根據(jù)優(yōu)先級處理從應(yīng)用程序147接收到的一個或多個工作請求。例如，中間件143可以向應(yīng)用程序147中的至少一個提供使用電子設(shè)備100的系統(tǒng)資源(總線110、處理器120、存儲器130等)的優(yōu)先級。例如，中間件143可以根據(jù)與工作請求相關(guān)聯(lián)的優(yōu)先級來調(diào)度工作請求或?qū)ぷ髡埱筮M(jìn)行負(fù)載平衡。根據(jù)本公開的實(shí)施例，中間件143可以支持對與電子設(shè)備100的操作場景、操作環(huán)境、信息存儲狀態(tài)或鍛煉狀態(tài)中的至少一個相對應(yīng)的活動進(jìn)行分析的調(diào)度。因此，中間件143可以響應(yīng)于活動類型來選擇圖像處理方案，并且根據(jù)通過使用該圖像處理方案所選擇的圖像生成突出(highlight)內(nèi)容。
[0044]例如，API145可以是例如應(yīng)用程序147用以控制從內(nèi)核141或中間件143提供的功能的接口。例如，API 145可以包括用于文件控制、窗口控制、圖像處理、文本控制等的至少一個接口或功能(例如，指令)。根據(jù)本公開的各種實(shí)施例，API 145可以包括與操作相機(jī)190相關(guān)聯(lián)的AP1、與分析所收集圖像的活動相關(guān)聯(lián)的API以及定義針對至少一種活動的圖像處理方案的API。此外，API 145可以包括與圖像處理方案中包括的至少一個處理模塊相對應(yīng)的至少一個APIt3API 145可以包括根據(jù)通過向所收集的圖像應(yīng)用特定的圖像處理方案而生成的分組凸顯來生成突出內(nèi)容的AP1、與輸出和存儲或發(fā)送所生成的突出內(nèi)容相關(guān)聯(lián)的API等。
[0045]輸入和輸出接口170可以用作例如可以向電子設(shè)備100的其他組件發(fā)送從用戶或其他外部設(shè)備輸入的指令或數(shù)據(jù)的接口。此外，輸入和輸出接口 170可以向用戶或其他外部設(shè)備輸出從電子設(shè)備100的其他組件接收到的指令或數(shù)據(jù)。根據(jù)本公開的實(shí)施例，輸入和輸出接口 170可以生成與激活相機(jī)190相關(guān)聯(lián)的輸入信號、與控制使用激活的相機(jī)190進(jìn)行的圖像收集相關(guān)聯(lián)的輸入信號等。輸入和輸出接口 170可以生成與輸出和存儲或發(fā)送所生成的突出內(nèi)容相關(guān)聯(lián)的輸入信號。附加地或備選地，輸入和輸出接口 170可以生成用于響應(yīng)于用戶輸入來選擇生成特定形式分組圖像的至少一個圖像處理方案的輸入信號。
[0046]根據(jù)本公開的各種實(shí)施例，輸入和輸出接口170可以包括音頻模塊。例如，如果激活相機(jī)190的運(yùn)動圖像收集功能，則可以自動激活音頻模塊。由音頻模塊收集的音頻可以與所收集的視頻相鏈接和存儲。
[0047]顯示器150可以包括例如液晶顯示器(LCD)、發(fā)光二極管(LED)顯示器、有機(jī)LED(OLED)顯示器、微機(jī)電系統(tǒng)(MEMS)顯示器或電子紙顯示器。顯示器150可以向用戶顯示例如各種內(nèi)容(例如，文本、圖像、視頻、圖標(biāo)或符號等)。顯示器150可以包括觸摸屏，并可以接收例如通過使用電子筆或用戶的身體部位進(jìn)行的觸摸、手勢、接近或懸停輸入。
[0048]根據(jù)本公開的多種實(shí)施例，顯示器150可以輸出與圖像操作相關(guān)聯(lián)的多種屏幕。例如，顯示器150可以輸出其上設(shè)置有用于激活相機(jī)190的圖標(biāo)或菜單等的主屏幕或等待屏幕。此外，顯示器150可以輸出響應(yīng)于激活相機(jī)190而獲得的預(yù)覽圖像，以及根據(jù)圖像收集請求而捕獲的圖像(例如靜止圖像或運(yùn)動圖像)。根據(jù)本公開多個實(shí)施例，顯示器150可以顯示至少一個突出內(nèi)容。根據(jù)本公開的各種實(shí)施例，顯示器150可以提供用于選擇至少一個圖像處理方案的屏幕和用于顯示分組圖像作為縮略圖像的屏幕。根據(jù)本公開的各種實(shí)施例，顯示器150可以提供設(shè)置屏幕，用于手動地設(shè)置或調(diào)節(jié)與設(shè)置的活動模式相對應(yīng)的圖像處理方案。
[0049]例如，通信接口 160可以在例如電子設(shè)備100和外部設(shè)備(例如，外部電子設(shè)備102、外部電子設(shè)備200或服務(wù)器設(shè)備106)之間建立通信。例如，通信接口 160可以通過無線通信或有線通信與網(wǎng)絡(luò)162相連，并且可以與外部設(shè)備(例如，外部電子設(shè)備200或服務(wù)器設(shè)備106)進(jìn)彳丁通{目ο
[0050]無線通信可以使用例如長期演進(jìn)(LTE)、高級LTE(LTE-A)、碼分多址(CDMA)、寬帶CDMA(WCDMA)、通用移動電信系統(tǒng)(UMTS)、無線寬帶(WiBro)或全球移動通信系統(tǒng)(GSM)等中的至少一個，作為蜂窩通信協(xié)議。此外，無線通信可以包括例如局域通信。局域通信可以包括例如以下至少一項=WiFi通信、藍(lán)牙(BT)通信、近場通信(NFC)、全球定位系統(tǒng)(GPS)等。有線通信可以包括以下至少一項:例如，通用串行總線(USB)通信、高清多媒體接口(HDMI)通信、推薦標(biāo)準(zhǔn)232(RS-232)或普通老式電話業(yè)務(wù)(POTS)通信等。網(wǎng)絡(luò)162可以包括電信網(wǎng)絡(luò)，例如計算機(jī)網(wǎng)絡(luò)(例如，局域網(wǎng)(LAN)或廣域網(wǎng)(WAN))、因特網(wǎng)或電話網(wǎng)中至少之一。
[0051]根據(jù)本公開的各種實(shí)施例，通信接口160可以建立與外部設(shè)備102的局域通信信道。通信接口 160可以向外部電子設(shè)備102發(fā)送與外部電子設(shè)備102的圖像捕獲相關(guān)聯(lián)的控制信號發(fā)送。此外，通信接口 160可以接收由外部電子設(shè)備102捕獲的圖像。通信接口 160可以向外部電子設(shè)備102發(fā)送使用從外部電子設(shè)備102接收的圖像而生成的突出內(nèi)容或者使用由相機(jī)190捕獲的圖像而生成的突出內(nèi)容。
[0052]根據(jù)本公開的各種實(shí)施例，通信接口160可以向外部電子設(shè)備200和/或服務(wù)器設(shè)備106發(fā)送所生成的突出內(nèi)容。備選地，通信接口 160可以從外部設(shè)備200和/或服務(wù)器設(shè)備106接收突出內(nèi)容。
[0053]根據(jù)本公開的各種實(shí)施例，在電子設(shè)備100中執(zhí)行的操作中的全部或一些可以在另一電子設(shè)備或多個電子設(shè)備(例如，外部電子設(shè)備102和200以及服務(wù)器設(shè)備106中的一個或多個)中執(zhí)行。根據(jù)本公開的實(shí)施例，如果自動地或者根據(jù)請求執(zhí)行任意功能或服務(wù)，電子設(shè)備100可以請求另一設(shè)備(例如，外部電子設(shè)備102和200以及服務(wù)器106中的一個)來執(zhí)行與該功能或服務(wù)相關(guān)聯(lián)的至少部分功能，而不是自己執(zhí)行該功能或服務(wù)。其他電子設(shè)備(例如，外部電子設(shè)備102和200以及服務(wù)器設(shè)備106中的一個)可以執(zhí)行所請求的功能或者附加功能，并且可以將執(zhí)行的結(jié)果發(fā)送至電子設(shè)備100。電子設(shè)備100可以無改變地使用接收到的結(jié)果，或者響應(yīng)于所請求的功能或服務(wù)來執(zhí)行附加的處理。為此，例如可以使用云計算技術(shù)、分布式計算技術(shù)或客戶端-服務(wù)器計算技術(shù)。
[0054]照相機(jī)相機(jī)190可以響應(yīng)于圖像操作模塊180的請求來收集圖像，并且可以提供所收集的圖像。根據(jù)本公開的一個實(shí)施例，如果激活了突出內(nèi)容提供功能，則相機(jī)190可以激活并在預(yù)定的時間期間拍攝圖像預(yù)定的次數(shù)。備選地，相機(jī)190可以響應(yīng)于用戶按壓快門按鈕(或者，虛擬快門按鈕)來拍攝圖像(例如，靜止圖像或視頻)，并且可以將拍攝的視頻傳輸至圖像操作模塊180。如果完成了突出內(nèi)容提供功能，則相機(jī)190可以自動地去激活。備選地，如果接收到與結(jié)束相機(jī)190相關(guān)聯(lián)的輸入信號，則相機(jī)190也可以去激活。
[0055]圖像操作模塊180可以控制與突出內(nèi)容提供功能相關(guān)聯(lián)的圖像獲取和處理。例如，圖像操作模塊180可以經(jīng)由與突出內(nèi)容提供功能相關(guān)聯(lián)的菜單或圖標(biāo)來控制相機(jī)190的激活以及圖像的收集，其中用戶可以經(jīng)由所述菜單或圖標(biāo)來請求突出內(nèi)容提供功能。此外，圖像操作模塊180可以收集與圖像收集環(huán)境有關(guān)的信息，并且可以根據(jù)圖像收集環(huán)境來分析活動。圖像操作模塊180可以響應(yīng)于所分析的活動來選擇將要應(yīng)用的圖像處理方案，并且可以根據(jù)所選擇的圖像處理方案來分類和處理圖像以生成分組圖像。圖像操作模塊180還可以控制根據(jù)分組圖像來生成突出內(nèi)容以及所生成突出內(nèi)容的發(fā)送和輸出或者存儲。
[0056]圖2A是示出了根據(jù)本公開各種實(shí)施例的圖像操作模塊的配置的方框圖。圖2B是示出了根據(jù)本公開各種實(shí)施例的應(yīng)用了基于邊緣處理的質(zhì)量濾波器(QF)的示例的圖示。圖2C是示出了根據(jù)本公開各種實(shí)施例的應(yīng)用了基于像素分布處理的QF的示例的圖示。
[0057]參考圖2A，圖像操作模塊180可以包括圖像收集模塊181、活動處理模塊183、聲源處理模塊185和內(nèi)容處理模塊187。
[0058]圖像收集模塊181可以獲得(或收集)圖像(例如，靜止圖像或視頻)。例如，圖像收集模塊181可以響應(yīng)于輸入事件的發(fā)生來激活相機(jī)190，并且可以獲得靜止圖像或視頻等。根據(jù)本公開的各種實(shí)施例，在激活相機(jī)190之后，圖像收集模塊181可以在預(yù)定的時間期間按照恒定的時間間隔自動獲取圖像。因此，如果激活了相機(jī)190，則圖像收集模塊181可以根據(jù)快門輸入獲得一個或多個圖像。備選地，圖像收集模塊181可以根據(jù)輸入事件的發(fā)生在預(yù)定的時間段拍攝視頻，并且還可以從視頻捕獲靜止圖像。圖像收集模塊181可以將收集的圖像傳輸至內(nèi)容處理模塊187。備選地，圖像收集模塊181可以將收集的圖像中的至少一些傳輸至活動處理模塊183。
[0059]活動處理模塊183可以從圖1的電子設(shè)備100中包括的傳感器或者與電子設(shè)備100相連的外部電子設(shè)備中包括的傳感器收集傳感器信號?；顒犹幚砟K183可以根據(jù)所收集的傳感器信號來分析電子設(shè)備100或外部電子設(shè)備的運(yùn)動、位置或手勢輸入中的至少一個?；顒犹幚砟K183可以根據(jù)分析的結(jié)果來確定活動類型。
[0060]根據(jù)本公開的各種實(shí)施例，活動處理模塊183可以分析從圖像收集模塊181提供的圖像，并且可以確定活動類型。例如，活動處理模塊183可以分析所收集的圖像中的運(yùn)動?？梢酝ㄟ^將兩個或多個連續(xù)的靜止圖像或視頻幀中的對象進(jìn)行比較來估計圖像中包括的至少一個對象的運(yùn)動距離或速度。備選地，活動處理模塊183可以分析所收集的圖像的幀之間的差異。這可以稱作差異分析。例如，如果傳輸了多個圖像，則活動處理模塊183可以分析每一個圖像的變化程度。備選地，活動處理模塊183可以分析特定的對象，例如所收集的圖像中包括的人。這可以稱作對象的差異變化分析。例如，活動處理模塊183可以分析圖像中包括的人的臉部尺寸、面部表情或者拍攝角度。
[0061]根據(jù)本公開的各種實(shí)施例，活動處理模塊183可以根據(jù)預(yù)定的日程信息或用戶輸入來分析活動。例如，活動處理模塊183可以收集通過電子設(shè)備100的輸入和輸出接口 170輸入的場景類型信息(例如，用于表達(dá)特定場景的文本輸入信息)、用戶概括信息或者存儲的日程信息中的至少一個。用戶概況信息可以包括例如用戶所處區(qū)域的天氣信息和時間信息、用戶的性別、用戶的年齡等。存儲的日程信息可以包括例如鬧鐘時間信息、商務(wù)日程信息、休息日程信息、散步日程信息、會議日程信息、集會日程信息、閉幕(或結(jié)賬離開)日程信息、出席日程信息等。活動處理模塊183可以根據(jù)所收集的信息來確定活動類型?；顒犹幚砟K183可以將與所確定的活動類型有關(guān)的信息發(fā)送至內(nèi)容處理模塊187。
[0062 ]聲源處理模塊185可以在圖像收集模塊181收集圖像的同時收集聲源，或者可以分析所收集的聲源并且可以用預(yù)定的聲源來代替(或者交換)所分析的聲源。例如，在圖像收集模塊181收集圖像的同時，活動處理模塊183可以激活麥克風(fēng)以記錄聲音(這可以稱作“收集聲音”)。聲音的記錄可以稱作聲源?；顒犹幚砟K183可以將所收集的聲源提供給內(nèi)容處理模塊187。根據(jù)本公開的各種實(shí)施例，如果通過麥克風(fēng)收集的聲源沒有滿足預(yù)定條件，例如如果在預(yù)定時間期間或者在預(yù)定的時間間隔沒有收集到恒定分貝范圍的聲源，則聲源處理模塊185可以將預(yù)定的聲源提供給內(nèi)容處理模塊187。例如，聲源處理模塊185可以將特定的音樂文件或特定的節(jié)奏文件等提供給內(nèi)容處理模塊187。
[0063]源處理模塊185可以在執(zhí)行圖像收集處理的同時將所收集的聲源與所存儲的音頻數(shù)據(jù)進(jìn)行比較，并且可以將發(fā)現(xiàn)的任意合適聲源提供給內(nèi)容處理模塊187。在這種操作中，聲源處理模塊185可以將所收集的聲源與電子設(shè)備100中存儲的音頻數(shù)據(jù)進(jìn)行比較，并且可以搜索可與所收集的聲源至少部分地匹配的音頻數(shù)據(jù)。備選地，聲源處理模塊185可以通過圖1的通信接口 160將所收集的聲源提供給圖1的服務(wù)器設(shè)備106，并且可以從服務(wù)器設(shè)備106接收匹配的音頻數(shù)據(jù)。盡管“音頻數(shù)據(jù)”和“聲源”可以是同義的，但是使用這兩個術(shù)語來降低混淆。當(dāng)這兩個術(shù)語在同一個句子中使用時，區(qū)分用途時的重要描述符是“存儲的”或“收集的”。
[0064]根據(jù)本公開的各種實(shí)施例，在生成背景聲源時，聲源處理模塊185可以考慮所收集的音樂或活動類型(例如，諸如活動內(nèi)容、位置、天氣、區(qū)域和流行音樂之類的各種因素)來選擇聲源。根據(jù)本公開的各種實(shí)施例，聲源處理模塊185可以選擇聲源作為針對所獲得的圖像的突出內(nèi)容的背景聲源。
[0065]內(nèi)容處理模塊187可以根據(jù)活動類型對接收到的圖像進(jìn)行過濾/濾波。例如，內(nèi)容處理模塊187可以根據(jù)活動類型按照不同方式來應(yīng)用質(zhì)量濾波器(QF)、重復(fù)濾波器(DF)或者分類濾波器(CF)(例如，臉部、對象或場景)中至少之一。例如，關(guān)于應(yīng)用質(zhì)量濾波器(QF)，內(nèi)容處理模塊187可以通過邊緣檢測來測量模糊程度，并且可以通過所測量的像素分布來測量照度。
[0066]根據(jù)本公開的實(shí)施例，關(guān)于應(yīng)用QF，如圖2B所示，內(nèi)容處理模塊187可以檢測圖像上的邊緣。如果因為圖像的分割線不清楚而出現(xiàn)了模糊，則檢測到的邊緣的數(shù)目可以減小。因此，內(nèi)容處理模塊187可以相對于從特定圖像檢測到的邊緣數(shù)目來檢測相應(yīng)圖像中的模糊量或者模糊質(zhì)量。
[0067]根據(jù)本公開的各種實(shí)施例，關(guān)于應(yīng)用QF，如圖2C所示，內(nèi)容處理模塊187可以測量像素分布。內(nèi)容處理模塊187可以通過像素分布(或者直方圖)來確定預(yù)定圖像的總體照度值。例如，當(dāng)在圖2C的右側(cè)上存在較多的峰值時，內(nèi)容處理模塊187可以將該特定圖像確定為亮圖像。當(dāng)在圖2C的左側(cè)上存在較多的峰值時，內(nèi)容處理模塊187可以將該特定圖像確定為暗圖像。
[0068]關(guān)于應(yīng)用重復(fù)濾波器(DF)，內(nèi)容處理模塊187可以通過基于特征的描述符匹配來測量重復(fù)圖像，并且可以執(zhí)行重復(fù)檢測。關(guān)于DF，內(nèi)容處理模塊187可以根據(jù)活動類型來調(diào)節(jié)重復(fù)程度(例如，用于確定重復(fù)的閾值)。如果調(diào)節(jié)了重復(fù)程度，則可以改變由DF濾波的幀的數(shù)目。
[0069]結(jié)合關(guān)于分類濾波器(CF)，內(nèi)容處理模塊187可以使用基于學(xué)習(xí)的圖像分類算法來執(zhí)行圖像分類。內(nèi)容處理模塊187可以使用對象(例如，車、人等)分類和場景(例如，森林、海岸、城市等)分類來選擇有意義的圖像。內(nèi)容處理模塊187可以對接收到的圖像執(zhí)行內(nèi)容分組(CG)。例如，內(nèi)容處理模塊187可以通過向接收到的圖像應(yīng)用基于時間或位置的分組算法來對接收到的圖像進(jìn)行分類。
[0070]根據(jù)本公開的各種實(shí)施例，結(jié)合要生成的內(nèi)容的類型(例如，靜止圖像或運(yùn)動圖像)，內(nèi)容處理模塊187可以根據(jù)活動類型按照不同的方式應(yīng)用突出內(nèi)容生成方法。例如，如果設(shè)置或請求了生成視頻突出，則內(nèi)容處理模塊187可以相對于已濾波的關(guān)鍵幀，基于視頻的特定幀來執(zhí)行視頻復(fù)用或轉(zhuǎn)碼(即，對視頻進(jìn)行解碼、然后按照另一種格式對已解碼的視頻進(jìn)行編碼)。根據(jù)本公開的各種實(shí)施例，內(nèi)容處理模塊187可以在所獲得的圖像之間添加預(yù)定的圖像過渡效果，并且可以將圖像編碼為視頻以生成突出視頻內(nèi)容。此外，內(nèi)容處理模塊187可以從原始圖像或者原始運(yùn)動圖像中按照恒定的時間間隔來僅提取圖像或者幀，并且可以將所提取的圖像或者幀編碼為視頻以生成突出視頻內(nèi)容。因此，內(nèi)容處理模塊187可以迅速地從長視頻提供突出視頻內(nèi)容。根據(jù)本公開的各種實(shí)施例，內(nèi)容處理模塊187可以使用從聲源處理模塊185發(fā)送的聲源作為所生成的突出內(nèi)容的背景聲源。
[0071]根據(jù)本公開的各種實(shí)施例，電子設(shè)備100可以包括以下至少一項:相機(jī)，配置為捕獲多個圖像;通信接口，配合為接收多個圖像;存儲器，配置為存儲圖像；以及處理器，配置為與存儲器在功能上相連。處理器可以確定獲得圖像時的活動類型，可以使用與活動類型相對應(yīng)的圖像處理方案來檢測多個獲得的圖像中的至少一些圖像，并且可以使用所檢測的圖像來生成突出內(nèi)容。
[0072]如上所述，根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以包括以下至少一項:配置為捕獲多個圖像的相機(jī)或者配置為接收多個圖像的通信接口；以及圖像操作模塊，配置為確定獲得圖像時與電子設(shè)備相關(guān)聯(lián)的活動類型，使用與活動類型相對應(yīng)的圖像處理方案來檢測多個獲得的圖像中的至少一些圖像，以及使用所檢測的圖像來生成突出內(nèi)容。
[0073]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以根據(jù)多個圖像的差異分析或圖像中包括的對象的差異變化分析中的至少一個來確定與電子設(shè)備相關(guān)聯(lián)的活動類型。
[0074]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以根據(jù)與電子設(shè)備相關(guān)聯(lián)的傳感器信息或者從發(fā)送該多個圖像的外部電子設(shè)備接收的傳感器信息中的至少一個，來確定與電子設(shè)備相關(guān)聯(lián)的活動類型。
[0075]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以根據(jù)在電子設(shè)備的存儲器中存儲的場景信息或者在發(fā)送該多個圖像的外部電子設(shè)備中存儲的場景信息中的至少一個，來確定與電子設(shè)備相關(guān)聯(lián)的活動類型。
[0076]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以獲得在電子設(shè)備的存儲器中存儲的信息中的以下至少一項作為場景信息:鬧鐘時間信息、商務(wù)日程信息、休息日程信息、散步日程信息、集會日程信息、閉幕日程信息、出席日程信息或者會議日程信息。
[0077]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以根據(jù)活動類型來選擇其中按照不同的方式設(shè)置是否應(yīng)用QF、DF或CF中至少一個的圖像處理方案或者其中按照不同的方式設(shè)置QF、DF或CF中至少一個的參數(shù)的圖像處理方案。
[0078]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以通過在預(yù)定的恒定時間或者預(yù)定的恒定位置按照相同的方式應(yīng)用所選擇的圖像處理方案來生成突出內(nèi)容。
[0079]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以根據(jù)從與電子設(shè)備無線地連接的可穿戴電子設(shè)備接收的多個圖像來生成突出內(nèi)容。
[0080]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以控制與所確定的活動類型有關(guān)的信息、所選擇的圖像處理方案或者與突出內(nèi)容相關(guān)聯(lián)的顯示信息中的至少一個的輸出。
[0081]根據(jù)本公開的各種實(shí)施例，圖像操作模塊可以響應(yīng)于用戶輸入來改變所確定的活動類型信息或者圖像處理方案中的至少一個，并且可以響應(yīng)于所述改變來控制突出內(nèi)容的重新生成。
[0082]圖3是示出了根據(jù)本公開各種實(shí)施例的圖像處理方法的流程圖。
[0083]參考圖3，在該圖像處理方法的操作301中，圖1的電子設(shè)備100的圖像操作模塊180可以確定是否接收到圖像。就此，圖像操作模塊180可以控制相機(jī)190的激活，或者可以建立用于從外部電子設(shè)備接收圖像的通信信道。如果沒有接收到圖像，則圖像操作模塊180可以在操作303中執(zhí)行與當(dāng)前生成的事件或設(shè)置的調(diào)度事件相對應(yīng)的功能。例如，圖像操作模塊180可以根據(jù)用戶輸入的類型來支持圖像搜索功能、搜索存儲的突出內(nèi)容的功能、共享存儲的突出內(nèi)容的功能，或者可以通過拍攝圖片或視頻來生成圖像。
[0084]如果接收到圖像，則在操作305中，圖像操作模塊180可以分析活動。例如，如果從相機(jī)190接收到圖像或者從外部電子設(shè)備(例如，與電子設(shè)備100連接的可穿戴設(shè)備)接收到圖像，則圖像操作模塊180可以分析電子設(shè)備100或外部電子設(shè)備的活動。關(guān)于活動分析，圖像操作模塊180可以分析例如所收集的圖像中至少一個對象的變化。備選地，當(dāng)激活外部電子設(shè)備或相機(jī)190時，圖像操作模塊180可以激活至少一個傳感器(例如，電子設(shè)備100中包括的傳感器或者外部電子設(shè)備中包括的傳感器)。圖像操作模塊180可以根據(jù)從傳感器提供的傳感器信息來分析電子設(shè)備100或外部電子設(shè)備的運(yùn)動狀態(tài)、周圍的照明狀態(tài)、位置等。備選地，圖像操作模塊180可以根據(jù)在存儲器130中存儲的信息(例如，日程信息、承諾信息、周年信息、商務(wù)信息、集會日程信息、閉幕日程信息、出席日程信息等)來分析場景信息。
[0085]在操作307中，圖像操作模塊180可以驗證活動類型。例如，圖像操作模塊180可以驗證與圖像分析信息、傳感器分析信息或存儲器130中存儲的場景信息中至少之一相對應(yīng)的活動類型。根據(jù)本公開的實(shí)施例，圖像操作模塊180可以驗證散步活動、跑步活動、車輛移動活動、夜晚場景活動、雨天場景活動、特定位置活動等類型。
[0086]圖像操作模塊180可以選擇與驗證的活動類型相映射的圖像處理方案。就此，圖像操作模塊180可以存儲和管理映射列表，該映射列表存儲與針對每一種活動類型的圖像處理方案有關(guān)的信息。如果驗證了活動，則圖像操作模塊180可以參考映射列表來確定是否應(yīng)用任意圖像處理方案。根據(jù)本公開的實(shí)施例，映射列表可以包括如下圖像處理方案，在所述圖像處理方案中，根據(jù)活動類型按照不同的方式定義QF、DF或CF中至少一個的濾波器參數(shù)(例如，應(yīng)用至QF、DF或CF中至少一個的閾值)。
[0087]在操作311中，圖像操作模塊180可以根據(jù)所選擇的圖像處理方案來執(zhí)行圖像處理。例如，圖像操作模塊180可以根據(jù)所選擇的圖像處理方案中定義的過濾程度按照不同的方式來分類和選擇所收集的圖像。根據(jù)本公開的實(shí)施例，圖像操作模塊180可以根據(jù)圖像處理方案的QF、DF或CF的程度來處理圖像。
[0088]在操作313中，圖像操作模塊180可以生成突出內(nèi)容。例如，圖像操作模塊180可以順序地布置所選擇的圖像以生成運(yùn)動圖像形式的突出內(nèi)容。備選地，圖像操作模塊180可以生成將每一選定圖像表示預(yù)定時間間隔的幻燈片突出內(nèi)容?；脽羝怀鰞?nèi)容還可以包括例如選定圖像之間的圖像過渡效果。
[0089]圖4是示出根據(jù)本公開各種實(shí)施例的使用圖像的活動分析方法的流程圖。
[0090]參考圖4，在該活動分析方法中，在操作401中，圖1的電子設(shè)備100中的圖像操作模塊180可以收集圖像。就此，圖像操作模塊180可以激活相機(jī)190，或者可以建立與外部電子設(shè)備102的通信信道以接收圖像。根據(jù)本公開的各種實(shí)施例，圖像操作模塊180可以接收外部電子設(shè)備102中存儲的圖像。
[0091]在操作403中，圖像操作模塊180可以確定對象是否移動。例如，圖像操作模塊180可以將所收集的圖像進(jìn)行比較，以確定所收集的圖像中的對象是否移動了預(yù)定值或者更多。備選地，圖像操作模塊180可以確定圖像中包括的至少一個對象的姿態(tài)變化是否是預(yù)定值或更多。
[0092]在操作405，圖像操作模塊180可以分析對象運(yùn)動、圖像之間的差異或者對象類型中的至少一個。如果存在與對象運(yùn)動相對應(yīng)的圖像差異，則圖像操作模塊180可以分析圖像中的對象的運(yùn)動、圖像之間的差異或者對象類型，并且可以檢測運(yùn)動信息、對象類型等。例如，圖像操作模塊180可以檢測對象是否沿任意方向移動。此外，圖像操作模塊180可以檢測圖像中是否包括預(yù)定對象(例如，人、臉等)。
[0093]在操作407，圖像操作模塊180可以分析與運(yùn)動信息和對象類型相對應(yīng)的活動。例如，圖像操作模塊180可以根據(jù)來自電子設(shè)備100的運(yùn)動信息來驗證擁有電子設(shè)備100的用戶是否正在散步、跑步或下降。備選地，圖像操作模塊180可以根據(jù)對象類型來驗證是否捕獲了風(fēng)景、人物或特定對象。因此，圖像操作模塊180可以確定諸如散步、跑步或下降之類的活動類型，和/或可以確定活動是否涉及某人和/或?qū)ο蟆?br>[0094]在操作409中，圖像操作模塊180可以確定是否結(jié)束活動分析。例如，當(dāng)圖像收集已經(jīng)結(jié)束時，圖像操作模塊180可以停止活動分析。備選地，圖像操作模塊180可以確定是否發(fā)生與去激活照片功能相關(guān)聯(lián)的事件。
[0095]根據(jù)本公開的各種實(shí)施例，圖像操作模塊180可以使用傳感器數(shù)據(jù)、場景數(shù)據(jù)等以及通過使用圖像分析來對活動進(jìn)行分析。例如，圖像操作模塊180可以通過時間、位置、用戶場景數(shù)據(jù)等的傳感器數(shù)據(jù)來識別圖像或視頻的用戶活動，并且可以控制與生成突出內(nèi)容相關(guān)聯(lián)的處理。用戶場景數(shù)據(jù)可以包括用戶設(shè)置的捕獲起點(diǎn)和終點(diǎn)信息以及與明確限定的活動類型有關(guān)的信息。捕獲起點(diǎn)和終點(diǎn)時間可以在內(nèi)容分組處理中使用。例如，如果設(shè)置了捕獲起點(diǎn)和終點(diǎn)，則可以跳過分組。如果沒有設(shè)置捕獲起點(diǎn)和捕獲終點(diǎn)，則圖像操作模塊180可以根據(jù)位置、時間或者一些圖像特性中的至少一個來對所獲得的突出圖像或所獲得的突出內(nèi)容進(jìn)行分組。
[0096]圖5是示出了根據(jù)本公開各種實(shí)施例的使用傳感器信息的活動分析方法的流程圖。
[0097]參考圖5，在該活動分析方法的操作501中，圖1的電子設(shè)備100中的圖像操作模塊180可以收集傳感器信息。根據(jù)本公開的實(shí)施例，當(dāng)激活相機(jī)190或者當(dāng)從圖1的外部電子設(shè)備102接收到圖像時，圖像操作模塊180可以激活至少一個傳感器。備選地，圖像操作模塊180可以從外部電子設(shè)備102連同圖像一起接收傳感器信息。
[0098]在操作503，圖像操作模塊180可以分析設(shè)備運(yùn)動、設(shè)備位置或姿勢中的至少一個。例如，圖像操作模塊180可以分析電子設(shè)備100或外部電子設(shè)備102中至少一個的運(yùn)動方向或運(yùn)動程度(例如，速度、加速度等)。此外，圖像操作模塊180可以根據(jù)傳感器信息來分析電子設(shè)備100或外部電子設(shè)備102的位置改變或當(dāng)前位置。此外，圖像操作模塊180可以根據(jù)傳感器信息，根據(jù)恒定時間內(nèi)的設(shè)備運(yùn)動來分析姿勢(例如，擺動姿勢、拍打姿勢、轉(zhuǎn)動姿勢或者傾斜姿勢等)。
[0099]在操作505，圖像操作模塊180可以根據(jù)運(yùn)動和位置來分析活動。例如，圖像操作模塊180可以根據(jù)電子設(shè)備100或外部電子設(shè)備102的速度或加速度或者電子設(shè)備100或外部電子設(shè)備102的運(yùn)動方向來確定可能與活動相關(guān)聯(lián)的運(yùn)動方式(例如，散步、自行車、摩托車、汽車等)。圖像操作模塊180也能夠基于海拔信息和運(yùn)動信息來確定活動可以是登山，或者可以根據(jù)運(yùn)動、位置或姿勢確定鍛煉活動(例如，游泳、網(wǎng)球、高爾夫球、乒乓球、棒球等活動)。如果確定了活動類型，則圖像操作模塊180可以選擇合適的圖像處理方案來生成突出內(nèi)容。
[0100]在操作507中，圖像操作模塊180可以確定是否發(fā)生了結(jié)束事件。如果沒有發(fā)生結(jié)束事件，則圖像操作模塊180可以從操作501重復(fù)操作。當(dāng)發(fā)生結(jié)束事件時，圖像操作模塊180可以結(jié)束(或終止)突出內(nèi)容的生成，并且可以結(jié)束傳感器信息的收集。
[0101 ]圖6是示出了根據(jù)本公開各種實(shí)施例的使用場景信息的活動分析方法的流程圖。
[0102]參考圖6，在該活動分析方法的操作601中，圖1的電子設(shè)備100中的圖像操作模塊180可以收集場景信息。例如，圖像操作模塊180可以在存儲器130中搜索日程信息、備忘錄文本消息或聊天消息、電子郵件、鬧鐘等。這些類型的信息可以存儲在存儲器130中的某些文件中，這些文件中的一些可能已經(jīng)通過文件名稱或應(yīng)用名稱進(jìn)行了標(biāo)識。這些信息也可以存儲在存儲器130的某些地址范圍內(nèi)。因此，圖像操作模塊180可以在存儲器130的某些地址范圍或者存儲器130中的某些文件中來搜索與預(yù)定關(guān)鍵字相對應(yīng)的術(shù)語(例如，與人物、時間或位置中的至少一個相關(guān)聯(lián)的術(shù)語)。圖像操作模塊180可以根據(jù)與關(guān)鍵字相對應(yīng)的術(shù)語來收集與特定的時間、位置、人物等相關(guān)聯(lián)的場景信息。
[0103]在操作603中，圖像操作模塊180可以收集當(dāng)前的場景信息。例如，圖像操作模塊180可以收集電子設(shè)備100(或圖1的外部電子設(shè)備102)的當(dāng)前位置信息和關(guān)于當(dāng)前時間的信息。根據(jù)本公開的各種實(shí)施例，圖像操作模塊180可以對電子沒備100周圍的區(qū)域進(jìn)行掃描，并且可以收集圖1的外部電子設(shè)備200(可以結(jié)合預(yù)定的人進(jìn)行登記)的信息。
[0104]在操作605，圖像操作模塊180可以根據(jù)當(dāng)前的場景信息來分析場景信息。例如，圖像操作模塊180可以驗證在操作601中獲得的場景信息中包括的時間信息、位置信息和人物信息是否在某一預(yù)定誤差范圍內(nèi)與當(dāng)前場景中獲得的時間信息、位置信息和人物信息相同。如果當(dāng)前的場景信息在誤差范圍內(nèi)與場景信息相同，則圖像操作模塊180可以確定執(zhí)行了根據(jù)當(dāng)前場景信息的場景。
[0105]在操作607中，圖像操作模塊180可以分析活動。例如，圖像操作模塊180可以根據(jù)場景信息來分配活動類型。根據(jù)本公開的實(shí)施例，圖像操作模塊180可以根據(jù)場景信息來確定例如會見活動、會議活動、商務(wù)旅行活動、閉幕活動、出席活動等。圖像操作模塊180可以根據(jù)每一種活動來設(shè)置針對另一捕獲(或者，另一圖像獲取間隔)的開始和結(jié)束時間。這只是本公開針對圖像處理方案的一個實(shí)施例。圖像操作模塊180可以使用各種其他圖像處理方案來處理圖像。
[0106]在操作609中，圖像操作模塊180可以確定是否發(fā)生了結(jié)束事件。圖像操作模塊180可以確定是否已經(jīng)發(fā)生了與去激活突出內(nèi)容生成功能相關(guān)聯(lián)的事件。如果發(fā)生了與去激活突出內(nèi)容生成功能相關(guān)聯(lián)的事件，則圖像操作模塊180可以結(jié)束場景信息的收集和分析。
[0107]圖7A是示出根據(jù)本公開各種實(shí)施例的突出圖像收集方法的流程圖。
[0108]參考圖7A，如果確定了活動類型并且如果根據(jù)活動類型確定了圖像處理方案，則圖1的電子設(shè)備100中的圖像操作模塊180可以在操作701中確定是否已經(jīng)關(guān)于收集突出圖像輸入了視頻。例如，圖像操作模塊180可以確定是否從相機(jī)190輸入了視頻(例如，運(yùn)動圖像)或者是否從圖1的外部電子設(shè)備102接收了視頻。確定活動類型的方式可以根據(jù)圖4至圖6的上述方法中的至少一個來確定。
[0109]在操作703中，如果輸入了視頻，則在操作703中，圖像操作模塊180可以提取關(guān)鍵幀。如果輸入了靜止圖像而不是視頻，那么該處理可以前進(jìn)至操作705，其中圖像操作模塊180可以通過使用例如對輸入靜止圖像的聯(lián)合圖像專家組(JPEG)解碼來執(zhí)行針對靜止圖像的解碼。在操作707中，圖像操作模塊180可以生成位圖圖像。例如，圖像操作模塊180可以將所提取的關(guān)鍵幀轉(zhuǎn)換為位圖圖像。備選地，圖像操作模塊180可以將JPEG解碼的圖像轉(zhuǎn)換為位圖圖像。
[0110]在操作709中，圖像操作模塊180可以確定位圖圖像是否需要低質(zhì)量圖像濾波。例如，圖像操作模塊180可以確定位圖圖像的分辨率是否大于預(yù)定值。備選地，圖像操作模塊180可以確定在位圖圖像中是否存在像素斷裂、像素展寬、像素模糊等大于預(yù)定閾值的區(qū)域?？梢愿鶕?jù)活動類型按照不同的方式來確定低質(zhì)量圖像濾波的參數(shù)(例如，定義質(zhì)量程度的參數(shù))。
[0111]如果需要低質(zhì)量圖像濾波，那么圖像操作模塊180可以在操作711中向位圖圖像應(yīng)用低質(zhì)量圖像濾波。圖像操作模塊180的一種選項可以是排除相應(yīng)的位圖圖像用于生成突出內(nèi)容。
[0112]在操作713中，圖像操作模塊180可以確定位圖圖像是否需要重復(fù)濾波。就此，圖像操作模塊180可以確定在當(dāng)前的位圖圖像和另一位圖圖像(例如，先前獲得的突出圖像)之間是否存在足夠的相似性。例如，圖像操作模塊180可以確定當(dāng)前獲得的圖像和另一圖像之間的相似程度。如果相似程度大于預(yù)定閾值，那么可以將這些圖像視為是重復(fù)的。可以根據(jù)活動類型按照不同的方式來確定兩個圖像之間的相似性信息。
[0113]如果對于位圖圖像需要重復(fù)濾波(例如，如果相似程度大于閾值)，則圖像操作模塊180可以在操作715中對這些圖像進(jìn)行集成(組合或者合并)。例如，圖像操作模塊180可以將所獲得的圖像與另一突出圖像(在確定這兩個圖像重復(fù)時)相集成。備選地，圖像操作模塊180可以將所獲得的圖像標(biāo)記為重復(fù)，以將其從突出圖像中排除。
[0114]在操作717中，圖像操作模塊180可以檢測對象。例如，如果所獲得的圖像與突出圖像相差大于閾值量，則圖像操作模塊180能夠檢測所獲得的圖像中可能與突出圖像不同的至少一個對象。在檢測到對象之后，在操作719中，圖像操作模塊180可以執(zhí)行圖像分類。例如，圖像操作模塊180可以根據(jù)檢測到的對象的類型對圖像進(jìn)行分類。就此，電子設(shè)備100可以在存儲器130中存儲并管理關(guān)于預(yù)定類型對象如人、車輛、自行車等的信息。圖像操作模塊180可以將檢測到的對象的特征點(diǎn)與存儲器中存儲的對象進(jìn)行比較以確定檢測到的對象的類型。圖像操作模塊180然后能夠?qū)D像進(jìn)行分類。
[0115]在操作721中，圖像操作模塊180可以計算突出圖像的數(shù)目。例如，圖像操作模塊180可以將分類為一種類型的圖像的數(shù)目加到先前獲得的相同類型的突出圖像上(例如，有多少幀)。
[0116]如上所述，圖像操作模塊180可以在與特定活動類型相對應(yīng)的環(huán)境中響應(yīng)于輸入事件，來控制諸如靜止圖像或視頻(例如，運(yùn)動圖像)的捕獲等。例如，擁有電子設(shè)備100的用戶可以按照落在某個范圍內(nèi)的速度(例如，散步速度、跑步速度、自行車速度等)運(yùn)動。如果根據(jù)運(yùn)動確定了活動類型，則圖像操作模塊180可以從所確定的活動類型的圖像和視頻中提取圖像集合。例如，圖像操作模塊180可以存儲在執(zhí)行濾波之后留下的至少一個幀作為針對一個幀集合的突出圖像。
[0117]圖7B是示出根據(jù)本公開各種實(shí)施例的突出內(nèi)容提供方法的流程圖。
[0118]參考圖7B，在該突出內(nèi)容提供方法的操作723中，圖1的電子設(shè)備的圖像操作模塊180可以確定突出圖像的數(shù)目是否大于預(yù)定的閾值(例如，一定的數(shù)目范圍)。根據(jù)本公開的實(shí)施例，如果突出圖像的數(shù)目超過了用戶設(shè)置或自動設(shè)置的閾值，則圖像操作模塊180可以附加地執(zhí)行包括參考圖7A描述的濾波在內(nèi)的突出內(nèi)容生成處理。例如，圖像操作模塊180可以通過調(diào)節(jié)QF的參數(shù)(例如，模糊程度)或者CF的參數(shù)(例如，某“人”的場景重要性以及背景場景(例如，森林場景)的重要性)，來減少突出圖像的數(shù)目。例如，圖像操作模塊180可以通過調(diào)節(jié)濾波參數(shù)以及調(diào)節(jié)整個活動時間段期間所有圖像的數(shù)目與突出圖像的數(shù)目之比或者調(diào)節(jié)所有圖像的數(shù)目與運(yùn)動圖像的數(shù)目之比，來去除靜止圖像或視頻。
[0119]如果突出圖像的數(shù)目大于預(yù)定閾值，則圖像操作模塊180可以在操作725中執(zhí)行非突出圖像處理。例如，圖像操作模塊180可以將相應(yīng)的圖像(例如，超過預(yù)定閾值數(shù)目的至少一個突出圖像)標(biāo)記為不是突出圖像的圖像。當(dāng)生成突出內(nèi)容時，圖像操作模塊180可以排除這些標(biāo)記的圖像。
[0120]如果突出圖像的數(shù)目沒有滿足預(yù)定條件，例如，如果因為突出圖像的數(shù)目小于或等于預(yù)定圖像數(shù)目而需要獲得附加的突出圖像，則圖像操作模塊180可以在操作727中確定是否輸入了視頻。如果輸入是視頻，則在操作729中，圖像操作模塊180可以執(zhí)行突出關(guān)鍵幀處理。如果輸入不是視頻，則在操作731中，圖像操作模塊180可以執(zhí)行突出圖像處理。例如，圖像操作模塊180可以將至少一個另一圖像改變?yōu)橥怀鰣D像。
[0121]在操作733中，圖像操作模塊180可以確定是否發(fā)生了與結(jié)束相關(guān)聯(lián)的事件。如果沒有發(fā)生與結(jié)束處理相關(guān)聯(lián)的事件，則圖像操作模塊180可以分支到圖7A的操作701，并且可以重復(fù)從操作701開始的操作。
[0122]如果發(fā)生了與結(jié)束處理相關(guān)聯(lián)的事件，則在操作735中，圖像操作模塊180可以生成分組的視頻或圖像。例如，圖像操作模塊180可以管理突出圖像以成為一個圖像集合。在操作737中，圖像操作模塊180可以執(zhí)行內(nèi)容分組。例如，圖像操作模塊180可以根據(jù)事件或位置中的至少一個對突出圖像集合進(jìn)行分組。例如，圖像操作模塊180可以將在預(yù)定時間范圍內(nèi)生成的突出圖像集合分組為一個內(nèi)容。該突出圖像的內(nèi)容可以稱作突出內(nèi)容。備選地，如果位置(或者，時間和位置)在預(yù)定范圍內(nèi)彼此相同，則圖像操作模塊180可以將突出圖像集合分組為一個內(nèi)容。
[0123]在操作739中，圖像操作模塊180可以生成、存儲和/或突出內(nèi)容。例如，圖像操作模塊180可以將突出內(nèi)容存儲在圖1的電子設(shè)備100的存儲器130中，或者可以將突出內(nèi)容發(fā)送至圖1的外部電子設(shè)備102或者預(yù)定的服務(wù)器設(shè)備。
[0124]如上所述，根據(jù)本公開的各種實(shí)施例，圖像處理方法可以包括:在電子設(shè)備中收集圖像，確定獲得圖像時電子設(shè)備的活動類型，選擇各種圖像處理方案中具有與所確定的活動類型相對應(yīng)的濾波條件的圖像處理方案，通過應(yīng)用所選擇的圖像處理方案來處理所獲得的圖像中的一些圖像，根據(jù)所處理的數(shù)據(jù)來生成突出內(nèi)容，以及輸出或存儲所述突出內(nèi)容。
[0125]如上所述，根據(jù)本公開的各種實(shí)施例，圖像處理方法可以包括:在電子設(shè)備中收集圖像，確定獲得圖像時電子設(shè)備的活動類型，選擇具有與所確定的活動類型相對應(yīng)的濾波條件的圖像處理方案，通過應(yīng)用所選擇的圖像處理方案來選擇或處理所獲得的圖像中的一些圖像，以及根據(jù)所選擇或所處理的圖像來生成突出內(nèi)容。
[0126]根據(jù)本公開的各種實(shí)施例，確定活動類型可以包括:根據(jù)圖像的差異分析或圖像中包括的對象的差異變化分析中的至少一個來確定與電子設(shè)備相關(guān)聯(lián)的活動類型。
[0127]根據(jù)本公開的各種實(shí)施例，確定活動類型可以包括:接收與電子設(shè)備相關(guān)聯(lián)的傳感器信息，或者來自發(fā)送圖像的外部電子設(shè)備的傳感器信息；以及根據(jù)接收到的傳感器信息來確定與電子設(shè)備相關(guān)聯(lián)的活動類型。
[0128]根據(jù)本公開的各種實(shí)施例，確定活動類型可以包括:收集電子設(shè)備的存儲器中存儲的場景信息或者收集發(fā)送圖像的外部電子設(shè)備中存儲的場景信息；以及根據(jù)所收集的場景信息來確定活動類型。
[0129]根據(jù)本公開的各種實(shí)施例，收集場景信息可以包括獲得在存儲器中存儲的信息中的以下至少一項作為場景信息:鬧鐘時間信息、商務(wù)日程信息、休息日程信息、散步日程信息、集會日程信息、閉幕日程信息、出席日程信息或者會議日程信息。
[0130]根據(jù)本公開的各種實(shí)施例，選擇圖像處理方案可以包括:根據(jù)活動類型來選擇其中按照不同的方式設(shè)置是否應(yīng)用QF、DF或CF中至少一個的圖像處理方案或者其中按照不同的方式設(shè)置QF、DF或CF中至少一個的參數(shù)的圖像處理方案。
[0131]根據(jù)本公開的各種實(shí)施例，生成突出內(nèi)容可以包括:在預(yù)定的恒定時間或者預(yù)定的恒定位置按照相同的方式應(yīng)用所選定的圖像處理方案來生成突出內(nèi)容。
[0132]根據(jù)本公開的各種實(shí)施例，生成突出內(nèi)容可以包括:根據(jù)從與電子設(shè)備無線地連接的可穿戴電子設(shè)備接收的圖像來生成突出內(nèi)容。
[0133]根據(jù)本公開的各種實(shí)施例，該方法還可以包括:輸出與所確定的活動類型有關(guān)的信息、所選擇的圖像處理方案或者與突出內(nèi)容相關(guān)聯(lián)的顯示信息中的至少一個。
[0134]根據(jù)本公開的各種實(shí)施例，該方法還可以包括:響應(yīng)于用戶輸入來改變與所確定的活動類型有關(guān)的信息或者圖像處理方案中的至少一個，并且可以響應(yīng)于所述改變來再次生成突出內(nèi)容。
[0135]圖8是示出了根據(jù)本公開各種實(shí)施例的與圖像操作相關(guān)聯(lián)的系統(tǒng)信號處理的示例的信號時序圖。
[0136]參考圖8，與圖像操作相關(guān)聯(lián)的系統(tǒng)信號處理的操作801中，外部電子設(shè)備102可以響應(yīng)于輸入事件或者電子設(shè)備100的請求來收集圖像或傳感器信息。例如，外部電子設(shè)備102可以響應(yīng)于用戶輸入來激活至少一個傳感器，可以通過其相機(jī)獲得圖像，并且可以收集傳感器信息。
[0137]在操作803，外部電子設(shè)備102可以將所收集的圖像和/或所收集的傳感器信息發(fā)送至電子設(shè)備100。根據(jù)本公開的各種實(shí)施例，外部電子設(shè)備102可以收集運(yùn)動速度信息、運(yùn)動方向信息等作為傳感器信息，并且可以將所收集的傳感器信息與所獲得的圖像一起發(fā)送至電子設(shè)備100。
[0138]在操作805，電子設(shè)備100可以分析活動類型。例如，電子設(shè)備100可以根據(jù)從外部電子設(shè)備102提供的運(yùn)動速度信息、運(yùn)動方向信息等來分析活動類型。根據(jù)本公開的實(shí)施例，電子設(shè)備100可以根據(jù)運(yùn)動速度信息、運(yùn)動方向信息等來確定散步活動、跑步活動或自行車運(yùn)動活動等。
[0139]如果完成了活動類型的分析，則在操作807中，電子設(shè)備100可以根據(jù)活動類型來確定圖像處理方案。例如，電子設(shè)備100可以根據(jù)活動類型來確定配置有具有預(yù)定參數(shù)的濾波器的圖像處理方案。就此，電子設(shè)備100可以參考可以存儲在存儲器130中的映射表，在該映射表中根據(jù)活動類型映射了圖像處理方案。
[0140]在操作809中，電子設(shè)備100可以生成突出內(nèi)容。例如，電子設(shè)備100可以順序地布置根據(jù)圖像處理方案而選擇的至少一個突出圖像并且可以將突出圖像編碼為視頻，或者可以將至少一個突出圖像改變?yōu)樽兂身樞蛟佻F(xiàn)的圖像。例如，電子設(shè)備100可以使至少一個P幀(預(yù)測幀)與該至少一個突出圖像相關(guān)聯(lián)。電子設(shè)備100可以使用該P(yáng)幀來實(shí)現(xiàn)順序再現(xiàn)的圖像，或者將該P(yáng)幀與該至少一個突出圖像進(jìn)行組合。
[0141]在操作811中，電子設(shè)備100可以將突出內(nèi)容傳輸至外部電子設(shè)備102。附加地或者備選地，電子設(shè)備100可以輸出和/或存儲突出內(nèi)容。在操作813中，外部電子設(shè)備102可以輸出和/或存儲接收到的突出內(nèi)容。
[0142]根據(jù)本公開的各種實(shí)施例，在該圖像操作方法中，描述了根據(jù)外部電子設(shè)102的傳感器信息來分析活動的示例。然而，本公開的范圍不限于此。例如，在根據(jù)本公開各種實(shí)施例的圖像操作方法中，可以通過從外部電子設(shè)備102發(fā)送的圖像分析結(jié)果來執(zhí)行活動分析。此外，在根據(jù)本公開各種實(shí)施例的圖像操作方法中，可以根據(jù)在外部電子設(shè)備102的存儲器中存儲的場景信息來執(zhí)行活動分析。
[0143]根據(jù)本公開的各種實(shí)施例，描述了在電子設(shè)備100中執(zhí)行活動分析、活動類型確定和圖像處理方案選擇的示例。然而，本公開的范圍不限于此。例如，可以在外部電子設(shè)備102中執(zhí)行與活動相關(guān)聯(lián)的處理、圖像處理方案的選擇以及圖像的處理。
[0144]如上所述，根據(jù)本公開各種實(shí)施例的圖像操作方法和設(shè)備可以根據(jù)基于活動類型預(yù)設(shè)的預(yù)定圖像處理方案來處理所收集的圖像，并且可以根據(jù)活動類型來生成突出內(nèi)容。例如，電子設(shè)備100可以根據(jù)實(shí)際場景來分析輸入數(shù)據(jù)，可以評估活動，并且可以根據(jù)所收集的信息按照不同的方式來選擇和應(yīng)用圖像處理方案。
[0145]根據(jù)本公開的實(shí)施例，當(dāng)擁有電子設(shè)備100的用戶散步時，圖像操作模塊180可以獲得按照某個散步速度周期性上下移動的圖像。備選地，圖像操作模塊180可以從加速度傳感器獲得約每小時4至5千米的典型速度的信息?；蛘撸瑘D像操作模塊180可以獲得在鍛煉記錄或者日程表的相應(yīng)時間輸入為“散步”的場景信息。因此，本公開的各種實(shí)施例可以使用圖像操作模塊180使用適當(dāng)?shù)腁PI來確定用戶當(dāng)前正在散步。
[0146]一旦圖像操作模塊180根據(jù)上述輸入數(shù)據(jù)分析將活動類型確定為散步活動，圖像操作模塊180可以選擇針對散步活動的圖像處理方案。例如，圖像操作模塊180可以粗略地執(zhí)行圖像穩(wěn)定器的運(yùn)動補(bǔ)償。圖像操作模塊180可以選擇包括具備關(guān)于濾波的預(yù)定參數(shù)的QF、DF和CF在內(nèi)的圖像處理方案。關(guān)于內(nèi)容分組，圖像操作模塊180可以應(yīng)用基于時間或位置的分組，可以將組之間的絕對時間間隔設(shè)置為三小時，并且可以將絕對距離間隔設(shè)置為10千米。備選地，圖像操作模塊180可以根據(jù)由調(diào)度器、日歷、保健功能等生成的起始/結(jié)束事件或者根據(jù)用戶輸入的起始/結(jié)束事件來處理內(nèi)容分組。關(guān)于生成突出內(nèi)容，圖像操作模塊180可以生成時滯(time lapse)視頻，并且可以響應(yīng)于散步活動的確定來生成5分鐘間隔的圖像。
[0147]根據(jù)本公開的各種實(shí)施例，當(dāng)擁有電子設(shè)備100的用戶跑步時，圖像操作模塊180可以獲得按照相對較快的速率發(fā)生上下移動的圖像。備選地，圖像操作模塊180可以從加速度傳感器獲得約每小時10至15千米的速度以及存在規(guī)律的上下運(yùn)動和左右晃動運(yùn)動的的信息。備選地，圖像操作模塊180可以在鍛煉記錄或日程表中的相應(yīng)時間處獲得“慢跑”或“跑步”(這兩種活動都稱為“跑步”)的場景信息。
[0148]圖像操作模塊180可以使用API來驗證用戶當(dāng)前正處于跑步場景中。因此，圖像操作模塊180可以確定發(fā)生了跑步活動。圖像操作模塊180可以根據(jù)跑步活動的發(fā)生來執(zhí)行圖像穩(wěn)定器的運(yùn)動補(bǔ)償，并且可以選擇用于應(yīng)用預(yù)定參數(shù)的QF、DF或CF中至少之一的圖像處理方案。關(guān)于內(nèi)容分組，圖像操作模塊180可以應(yīng)用基于時間或位置的分組，可以將組之間的絕對時間間隔設(shè)置為三小時，并且可以將絕對距離間隔設(shè)置為10千米。備選地，關(guān)于內(nèi)容分組，圖像操作模塊180可以接收相關(guān)應(yīng)用如日歷應(yīng)用、保健應(yīng)用等的起始/結(jié)束事件，并且可以執(zhí)行分組處理。關(guān)于生成突出內(nèi)容，圖像操作模塊180可以從視頻提取圖像集合，并且可以配置突出內(nèi)容。
[0149]根據(jù)本公開的各種實(shí)施例，當(dāng)用戶與孩子一起玩耍時，圖像操作模塊180可以獲得這樣的圖像，在該圖像中在預(yù)定的時間間隔內(nèi)對象改變了預(yù)定的次數(shù)或更多，并且相同的對象(例如，同一個人)不斷出現(xiàn)。備選地，圖像操作模塊180可以獲得由位置傳感器感測的不存在太多位置變化的位置信息、不規(guī)律的加速度傳感器信息以及不規(guī)律的陀螺儀傳感器信息。備選地，圖像操作模塊180可以收集不存在特定用戶輸入的場景信息。因此，圖像操作模塊180可以確定正在發(fā)生日常的未安排活動。圖像操作模塊180可以選擇包括具有預(yù)定參數(shù)的QF、DF和CF在內(nèi)的圖像處理方案。圖像操作模塊180可以應(yīng)用基于時間或位置的分組，可以將組之間的絕對時間間隔設(shè)置為三小時，并且可以將絕對距離間隔設(shè)置為5千米。圖像操作模塊180可以通過每一個組生成一個視頻(包括圖像滑動效果)來生成突出內(nèi)容。
[0150]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以通過識別活動并且調(diào)節(jié)與所識別的活動相對應(yīng)的用于生成突出圖像的圖像處理方案來改進(jìn)突出內(nèi)容的質(zhì)量，并可以減少不必要的計算，這導(dǎo)致電池使用減少且電子設(shè)備發(fā)熱減少，并允許電子設(shè)備的處理器可以更多地用于其他功能。
[0151]圖9是示出了根據(jù)本公開各種實(shí)施例的與圖像處理相關(guān)聯(lián)的屏幕界面的圖。
[0152]參考圖9，根據(jù)本公開的各種實(shí)施例，圖1的電子設(shè)備100可以激活相機(jī)190，并且可以獲得針對特定對象的圖像。在這一操作中，在狀態(tài)901，電子設(shè)備100的顯示器150可以輸出圖像獲取屏幕。在狀態(tài)901中顯示的屏幕可以顯示例如對象的靜止圖像或視頻中的至少一個。根據(jù)本公開的各種實(shí)施例，在顯示器150上輸出的圖像可以是由圖1的外部電子設(shè)備102捕獲并發(fā)送的圖像。電子設(shè)備100可以針對生成突出內(nèi)容來激活至少一個傳感器。備選地，電子設(shè)備100可以收集場景信息。
[0153]根據(jù)本公開的各種實(shí)施例，如果完成了圖像的獲取(例如，如果相機(jī)190去激活)或者如果請求了突出內(nèi)容生成功能，則電子設(shè)備100可以使用所獲得的圖像生成突出內(nèi)容。備選地，如果通過突出內(nèi)容生成功能激活了相機(jī)190，則電子設(shè)備100可以獲得預(yù)定時間期間的圖像。備選地，在開始捕獲圖像之后，如果發(fā)生了結(jié)束輸入事件，則電子設(shè)備100可以生成突出內(nèi)容。
[0154]根據(jù)本公開的各種實(shí)施例，電子設(shè)備100可以針對生成突出內(nèi)容來分析活動類型，并且可以根據(jù)分析的活動類型來選擇圖像處理方案。因此，電子設(shè)備100可以在顯示器150上顯示如圖9中所示的信息。例如，在狀態(tài)903，顯示器150可以輸出突出內(nèi)容信息屏幕930。突出內(nèi)容信息屏幕930可以包括例如活動信息區(qū)域931、圖像處理方案區(qū)域933和用于顯示通過選定圖像處理方案933c而生成的突出內(nèi)容的突出內(nèi)容顯示區(qū)域935。
[0155]活動信息區(qū)域931可以顯示例如與根據(jù)圖像分析信息、傳感器信息或場景信息中的至少一個而分析的活動類型(例如，自行車運(yùn)動活動)有關(guān)的信息。根據(jù)本公開的各種實(shí)施例，活動信息區(qū)域931可以響應(yīng)于用戶輸入的控制來輸出包括另一種活動類型(例如，諸如散步項目、跑步項目和車輛項目之類的項目)在內(nèi)的列表。如果響應(yīng)于用戶輸入改變了活動類型，則可以響應(yīng)于改變的活動類型來自動地改變選定圖像處理方案區(qū)域933的內(nèi)容。
[0156]圖像處理方案區(qū)域933可以響應(yīng)于活動類型來顯示預(yù)定的信息。可以利用數(shù)字或字符來分類并顯示圖像處理方案區(qū)域933。例如，圖像處理方案區(qū)域933可以顯示所選擇的與活動類型相對應(yīng)的圖像處理方案933c?？梢皂憫?yīng)于用戶輸入的控制將所選擇的圖像處理方案933c改變?yōu)榱硪粩?shù)目字或字符。通過該另一數(shù)字或字符來設(shè)置響應(yīng)于該另一數(shù)字或字符的濾波器應(yīng)用方案或者具有不同參數(shù)值的濾波器。
[0157]根據(jù)本公開的各種實(shí)施例，圖像處理方案區(qū)域933可以包括陽(male)項目933a或陰(female)項目933b。陽項目933a或陰項目933b可以是相對于設(shè)置的特定值的已濾波圖像的處理類型的項目。例如，陽項目933a或陰項目933b可以是用于將圖像分類為突出圖像的權(quán)重值項目，包括多個獲得的圖像中所包括的對象之中與預(yù)定類別相對應(yīng)的對象。根據(jù)本公開的各種實(shí)施例，如果選擇了陽項目933a，則圖像操作模塊180可以將多個所獲得的圖像中人物對象與背景對象之比是恒定比率或更大的圖像(例如，驗證了人物對象整個形狀的圖像)檢測為突出圖像。根據(jù)本公開的實(shí)施例，如果選擇了陰項目933b，則圖像操作模塊180可以將多個所獲得的圖像中關(guān)于人物對象設(shè)置的周圍對象(例如，衣服、配飾、包等)的比率是恒定比率或更大的圖像檢測為突出圖像。
[0158]加亮突出內(nèi)容顯示區(qū)域935可以是顯示通過所選擇的圖像處理方案933c而生成的突出內(nèi)容937的至少一部分圖像的區(qū)域。可以響應(yīng)于例如活動的改變、圖像處理方案的改變以及陽項目933a或陰項目933b的選擇按照各種方式來改變突出內(nèi)容937。電子設(shè)備100可以生成并存儲一個所獲得的組的內(nèi)容，例如應(yīng)用了陽項目933a的突出內(nèi)容和應(yīng)用了陰項目933b的突出內(nèi)容。
[0159]根據(jù)本公開的各種實(shí)施例，在狀態(tài)905，電子設(shè)備100的顯示器150可以輸出用于搜索突出內(nèi)容的內(nèi)容列表屏幕950。內(nèi)容列表屏幕950可以包括例如活動分類列表951、時間分類列表953和位置分類列表955?；顒臃诸惲斜?51可以包括例如根據(jù)活動而分類的多種突出內(nèi)容，例如基于自行車活動的突出內(nèi)容951a、基于散步活動的突出內(nèi)容951b、基于兒童活動的突出內(nèi)容951c以及基于旅行活動的突出內(nèi)容951d。時間分類列表953可以包括例如以小時為基礎(chǔ)、以天為基礎(chǔ)、以月為基礎(chǔ)、以年為基礎(chǔ)等而分類的突出內(nèi)容。位置分類列表955可以包括例如按預(yù)定的位置單位(例如公司、家庭等)而分類的突出內(nèi)容。
[0160]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以使用通過可穿戴相機(jī)捕獲的圖像和視頻來生成適于用戶活動的突出內(nèi)容，使得他或者她能夠容易地找到圖像，并且將突出內(nèi)容與他人共享。
[0161]根據(jù)本公開的各種實(shí)施例，電子設(shè)備100可以自動地制作突出內(nèi)容，然后制作在用戶穿戴著可穿戴照相機(jī)旅行時所拍攝的圖像和/或視頻的相冊。根據(jù)本公開的各種實(shí)施例，在早晨用戶穿戴了可穿戴相機(jī)并慢跑時，電子設(shè)備100可以每500米提取照片，并且可以提供突出內(nèi)容。此外，電子設(shè)備100可以提供特定風(fēng)景的照片作為突出內(nèi)容。根據(jù)本公開的各種實(shí)施例，如果用戶穿戴上可穿戴相機(jī)并且騎著自行車，則電子設(shè)備100可以提供例如整個路徑的時滯視頻/圖像。根據(jù)本公開的各種實(shí)施例，如果用戶穿戴上可穿戴相機(jī)并且參加家庭聚會，并且如果通過例如用戶的輸入將參加家庭聚會的人群確定為不同家庭的成員，則電子設(shè)備100可以生成針對每一個家庭的家庭視頻以及整個突出視頻，并且可以將相應(yīng)的視頻與各家庭共享。
[0162]在根據(jù)本公開各種實(shí)施例的散步活動的情況下，擁有電子設(shè)備100的用戶可以按照與散步相關(guān)聯(lián)的一定速度和方向來散步。如果用戶收集了散步的視頻，則電子設(shè)備100可以將所收集的輸入輸入分析為具有上下運(yùn)動。根據(jù)本公開的實(shí)施例，電子設(shè)備100中包括的傳感器(例如，加速度傳感器)可以收集到與速度為約每小時4至5千米的運(yùn)動相關(guān)聯(lián)的傳感器信息。電子設(shè)備100可以根據(jù)用戶輸入(例如，用戶場景)來驗證鍛煉記錄或者預(yù)定日程，以驗證當(dāng)前時間是與輸入為“散步”的場景信息相對應(yīng)的時間。電子設(shè)備100可以確定用戶處于正在散步的狀態(tài)。
[0163]電子設(shè)備100可以向圖像信息、傳感器信息和用戶輸入信息應(yīng)用不同的權(quán)重值，或者可以向閾值信息應(yīng)用權(quán)重值，并且可以最終將當(dāng)前狀態(tài)評估為散步活動狀態(tài)?？梢源嬖陔娮釉O(shè)備100向信息應(yīng)用權(quán)重值的各種方式。例如，電子設(shè)備100可以根據(jù)用戶輸入信息的類型按照各種方式來規(guī)定權(quán)重值。根據(jù)本公開的實(shí)施例，如果用戶輸入信息是預(yù)定信息(例如，與散步有關(guān)的信息)，則電子設(shè)備100可以將用于活動評估的圖像信息權(quán)重值分?jǐn)?shù)指派為被傳感器信息相對要高。
[0164]因此，如果在活動評估時圖像信息的改變滿足預(yù)定條件(例如，檢測到圖像中與散步相對應(yīng)的上下運(yùn)動)，則電子設(shè)備100可以將當(dāng)前狀態(tài)確定為散步活動狀態(tài)，并且可以將當(dāng)前活動校正為散步活動。例如，盡管因為所獲得的傳感器信息大于或等于預(yù)定條件從而可以將當(dāng)前狀態(tài)顯示為跑步活動狀態(tài)，誕生如果將圖像信息確定為散步場景信息，則電子設(shè)備100可以將當(dāng)前狀態(tài)確定為散步活動狀態(tài)。備選地，如果針對傳感器信息的權(quán)重大于針對圖像信息的權(quán)重，則盡管圖像的分析可能已經(jīng)將當(dāng)前活動確定為散步活動，誕生電子設(shè)備100可以將當(dāng)前狀態(tài)確定為跑步活動狀態(tài)。
[0165]如果在活動評估時將當(dāng)前狀態(tài)確定為散步活動狀態(tài)，則電子設(shè)備100可以按照針對所收集圖像的圖像穩(wěn)定器的濾波、質(zhì)量濾波(QF)、重復(fù)濾波器(DF)、面部濾波器CF(使用針對人所識別的面部特征對人臉進(jìn)行濾波)和對象/場景分類濾波(CF)的順序來確定流程控制。如果確定了流程控制，則電子識別100可以響應(yīng)于相應(yīng)的流程控制來處理所收集的圖像。如上所述，電子設(shè)備100的流程控制可以是根據(jù)活動評估的結(jié)果來使用預(yù)定濾波器的方式。備選地，電子設(shè)備100可以根據(jù)活動評估的結(jié)果和圖像信息或傳感器信息的狀態(tài)來對預(yù)定濾波器的特性進(jìn)行校正。例如，電子設(shè)備100可以根據(jù)散步活動狀態(tài)的確定來確定流程控制，并且可以根據(jù)圖像信息的上下移動值或者傳感器信息值來粗略地應(yīng)用濾波器的特性或者嚴(yán)格地應(yīng)用濾波器的特性。就此，電子設(shè)備100可以包括圖像信息的至少一個上下移動條件或者傳感器信息的至少一個幅度條件等。電子設(shè)備100可以驗證所獲得的與當(dāng)前圖像信息相關(guān)聯(lián)的信息或者所獲得的傳感器信息是相對于圖像信息的至少一個上下移動條件或傳感器信息的至少一個幅度條件的任意參考值。電子設(shè)備100可以根據(jù)所驗證的參考值來改變或保持流程控制的濾波器特性值。
[0166]結(jié)合關(guān)于散步活動，圖像中檢測到的上下運(yùn)動對于散步來說與站立相比相對較強(qiáng)。此外，因為圖像中檢測到的上下運(yùn)動對于散步來說與跑步相比相對較弱，所以電子設(shè)備100可以粗略地應(yīng)用運(yùn)動補(bǔ)償級別。因此，在本發(fā)明的實(shí)施例中，電子設(shè)備100可以應(yīng)用QF以對質(zhì)量為預(yù)定值或更少的圖像進(jìn)行濾波?？梢愿鶕?jù)評估活動的結(jié)果或者根據(jù)上下運(yùn)動的平均級別或者預(yù)定時間期間的平均級別來改變與質(zhì)量相關(guān)聯(lián)的預(yù)定值。
[0167]電子設(shè)備100可以針對視為重復(fù)預(yù)定值或者更大的圖像使用DF。在散步的情況下，因為用戶可能在散步期間四處張望(或者因為他或她按照預(yù)定級別或更小的運(yùn)動速度散步)，電子設(shè)備100可以通過臉部識別來對圖像進(jìn)行濾波。這里，電子設(shè)備100可以根據(jù)評估的活動的類型(例如，散步活動)來控制對包括預(yù)定尺寸或更大的臉部特征點(diǎn)在內(nèi)的圖像進(jìn)行濾波。這里，所述預(yù)定尺寸可以小于另一種活動(例如，跑步活動等)的預(yù)定尺寸。
[0168]如果背景包括有意義的信息，則電子設(shè)備100可以通過對象或場景識別來對有意義的信息進(jìn)行濾波。就此，電子設(shè)備100可能已經(jīng)存儲了用于驗證所獲得的圖像是否包括有意義信息的多種條件信息，或者可以向用于分析語義信息的服務(wù)器設(shè)備提供相應(yīng)的圖像信息。
[0169]電子設(shè)備100可以對根據(jù)流程控制而濾波的圖像進(jìn)行分組。在這一操作中，電子設(shè)備100可以定義相對于評估的活動(例如，散步活動)的分組特性。例如，電子設(shè)備100可以應(yīng)用基于時間或基于位置的分組，可以將所生成的分組之間的絕對時間間隔確定為預(yù)定的第一時間(例如，三小時)，并且可以將絕對距離間隔(或者，絕對位置間隔)確定為預(yù)定的第一距離(例如，10千米)。根據(jù)本公開的各種實(shí)施例，電子設(shè)備100可以存儲與時間或位置中的至少一個有關(guān)的參考信息(例如，第一時間或第一距離等)。電子設(shè)備100可以執(zhí)行相對于參考信息的分組。可以響應(yīng)于相關(guān)的活動統(tǒng)計地或者經(jīng)驗地根據(jù)數(shù)據(jù)來計算參考信息，或者可以由設(shè)計者或用戶預(yù)先設(shè)置參考信息。備選地，如果結(jié)合操作用戶的活動來收集恒定參考值或更多的數(shù)據(jù)，則可以根據(jù)相應(yīng)數(shù)據(jù)的模式分析來確定參考信息。
[0170]根據(jù)本公開的各種實(shí)施例，可以通過接收相關(guān)應(yīng)用中的起始/結(jié)束事件來處理分組操作。相關(guān)應(yīng)用可以是例如日歷應(yīng)用、S-健康應(yīng)用等。此外，電子設(shè)備100可以與預(yù)定的鍛煉應(yīng)用(例如，計步器)交互，并且可以在分組操作中采取從起始時間到結(jié)束時間的一個組。
[0171]電子設(shè)備100可以使用評估的活動和分組的組來生成突出內(nèi)容。例如，電子設(shè)備100可以生成時滯視屏，并且可以按照預(yù)定的時間間隔(例如，5分鐘)生成圖像集合。關(guān)于時滯方案，可以基本上或者自動地提供時滯方案以在預(yù)定的時間期間按照將活動鑒賞最大化的方式來展現(xiàn)與整個鍛煉相對應(yīng)的場景信息?？梢愿鶕?jù)用戶輸入的控制或者設(shè)計者的意圖來提供除了上述時滯方案之外的各種其他方案，諸如面向個人的方案或面向風(fēng)景的方案。
[0172]結(jié)合關(guān)于根據(jù)本公開各種實(shí)施例的跑步活動，電子設(shè)備100在跑步場景中獲得的圖像的上下運(yùn)動可以按照預(yù)定的級別或更大而周期性地發(fā)生。此外，傳感器(例如，加速度傳感器)可以獲得主要以約每小時10至15千米的速度前后運(yùn)動的傳感器信息，并且可以獲得上下運(yùn)動和左右運(yùn)動的傳感器信息。關(guān)于用戶輸入信息(例如，用戶場景信息)，用戶可以在鍛煉記錄和日程項目中的當(dāng)前項目中輸入“慢跑”，并且可以在與電子設(shè)備100交互的外部電子設(shè)備(例如，可穿戴電子設(shè)備)中輸入或預(yù)設(shè)跑步項目。電子設(shè)備100可以使用API來確定用戶處于跑步場景中。因此，關(guān)于活動評估，電子設(shè)備100可以將當(dāng)前場景確定為跑步活動。
[0173]結(jié)合關(guān)于流程控制，電子設(shè)備100可以按照以下順序向所獲得的圖像應(yīng)用圖像穩(wěn)定器的濾波(例如，銳利或嚴(yán)格運(yùn)動補(bǔ)償)、QF和DF。流程控制可以是根據(jù)跑步活動的評估的結(jié)果。電子設(shè)備100可以根據(jù)跑步場景按照不同的方式應(yīng)用QF和DF的特性。例如，如果跑步速度是預(yù)定速度或更大，則電子設(shè)備100可以將QF的質(zhì)量值降低至預(yù)定值或更低(或者，預(yù)定值或更高)，并且可以將DF的重復(fù)區(qū)域值增加至預(yù)定值或更高(或者，預(yù)定值或更低)。在跑步的情況下，因為運(yùn)動相對較強(qiáng)，并且用戶難以看見所獲得的圖像，所以電子設(shè)備100可以通過向所獲得的圖像銳利地或者嚴(yán)格地應(yīng)用運(yùn)動補(bǔ)償，來調(diào)節(jié)所獲得的圖像，使得用戶舒服地觀看已調(diào)節(jié)的圖像，并且運(yùn)動不會太強(qiáng)烈。QF可以用于對非常差的圖像(或，預(yù)定尺寸或更小，或者預(yù)定分辨率或更小等)進(jìn)行濾波。DF可以用于對過度重復(fù)的圖像進(jìn)行濾波。在跑步的情況下，因為用戶以比散步時更快的速度跑步，所以他或者她有更大的幾率看前方而不是看側(cè)面。在這種情況下，用戶跑步的前方的圖像可以比特定的人或者對象重要。因此，電子設(shè)備100可以在濾波過程中加強(qiáng)向?qū)η胺郊右詮?qiáng)調(diào)的圖像信息進(jìn)行濾波或校正。
[0174]結(jié)合關(guān)于分組，電子設(shè)備100可以根據(jù)跑步活動的評估來應(yīng)用基于時間或位置的分組，可以將組之間的絕對時間間隔指定為例如三小時，并且可以具有例如10千米的絕對距離間隔。在此，電子設(shè)備100可以存儲與絕對時間間隔或者絕對距離間隔有關(guān)的參考信息(例如，三小時或10千米)?？梢酝ㄟ^統(tǒng)計地或者經(jīng)驗地獲得的數(shù)據(jù)來生成參考信息。備選地，可以與活動評估相關(guān)聯(lián)由設(shè)計者或用戶來預(yù)設(shè)參考信息。備選地，如果與特定活動(例如，跑步活動)相關(guān)聯(lián)的數(shù)據(jù)被收集了恒定參考值或更多，則可以通過所收集的數(shù)據(jù)的模式分析來計算參考信息。
[0175]根據(jù)本公開的實(shí)施例，在跑步的情況下，因為經(jīng)驗地或者統(tǒng)計地存在較高的概率用戶將超過每小時10千米，所以電子設(shè)備100可以根據(jù)設(shè)計者的意圖假設(shè)一個分組為每小時10千米。此外，電子設(shè)備100可以將特定時間(例如，三小時)期間的圖像分組和展示為一個組。如果超過了特定的時間或者特定的距離，則電子設(shè)備100可以確定相對較長時間和相對較大位置改變的發(fā)生，并且可以將該特定時間期間的圖像分組為不同的組。此外，關(guān)于分組，電子設(shè)備100可以接收特定應(yīng)用的起始事件和結(jié)束事件，并且可以將起始事件和結(jié)束事件之間的圖像分組。
[0176]結(jié)合加亮關(guān)于突出，電子設(shè)備100可以根據(jù)跑步活動的評估從視頻中提取圖像集合，并且可以使用所提取的圖像集合來配置突出圖像。在跑步的情況下，因為每一幀中的運(yùn)動(例如，突出圖像的對象的運(yùn)動)相對較大或者較快，由于視頻的運(yùn)動較大，用戶觀看視頻可能會不舒服。因此，在跑步活動的情況下，電子設(shè)備100可以通過對拍攝的視頻的照片進(jìn)行適當(dāng)?shù)亟M合來生成突出內(nèi)容，或者可以使用圖像滑動功能來提供所拍攝的視頻。
[0177]結(jié)合關(guān)于根據(jù)本公開各種實(shí)施例的日?；顒樱?dāng)擁有電子設(shè)備100的用戶進(jìn)行日常動作時，例如當(dāng)他或她與孩子玩耍時，電子設(shè)備100可以從電子設(shè)備100獲得的圖像中連續(xù)地觀察到同一個人。傳感器(例如，全球定位系統(tǒng)(GPS)傳感器)可以獲得位置沒有太大變化的傳感器信息。此外，傳感器(例如，加速度傳感器或者陀螺傳感器)可以獲得連續(xù)地發(fā)生不規(guī)則運(yùn)動的信息。此外，關(guān)于用戶輸入(例如，用戶場景)，電子沒備100可以驗證不存在輸入信息的狀態(tài)。電子設(shè)備100可以根據(jù)圖像信息、傳感器信息和用戶輸入信息的至少一個和預(yù)定參考信息來將當(dāng)前狀態(tài)確定為日?；顒訝顟B(tài)。參考信息可以包括先前獲得的圖像信息、先前獲得的傳感器信息以及先前獲得的用戶輸入信息中的至少一個，其配置為將當(dāng)前狀態(tài)確定為日常活動狀態(tài)。例如，參考信息可以包括如下信息:通過臉部識別在恒定的時間期間或者在恒定數(shù)目的幀中是否重復(fù)地輸出關(guān)于同一個人的信息。
[0178]結(jié)合關(guān)于流程控制，電子設(shè)備100可以響應(yīng)于評估的日常活動結(jié)果，來應(yīng)用包括QF、DF、面部濾波器以及對象和場景CF在內(nèi)的預(yù)定流程控制。在日?；顒訄鼍爸蝎@得的圖像統(tǒng)計地或者經(jīng)驗地表現(xiàn)出特定模式的概率可能相對較低。因此，電子設(shè)備100可以通過QF和DF對具有預(yù)定級別或更低的質(zhì)量并且連續(xù)地重復(fù)特定值或更多的圖像進(jìn)行濾波。因此，如果不存在運(yùn)動(或者，如果存在預(yù)定大小或更小的運(yùn)動)，則可以通過DF對拍攝的圖像進(jìn)行濾波。電子設(shè)備100可以存儲用于確定活動的參考信息(特定的人作為日常活動場景中的重要因素)。可以由用戶或設(shè)計者預(yù)設(shè)或者改變參考信息。備選地，可以通過統(tǒng)計地或者經(jīng)驗地獲得的數(shù)據(jù)來獲得或改變參考信息。如果選擇具有特定人的活動因素作為參考信息，則電子設(shè)備100可以經(jīng)由人臉識別來找到圖像，并且可以通過對象和場景識別來附加地檢測包括具有特定含義的對象在內(nèi)的圖像。具有特定含義的對象可以是具有特定的對象。
[0179]結(jié)合關(guān)于分組，電子設(shè)備100可以應(yīng)用基于時間或位置的分組，可以將組之間的絕對時間間隔指定為三小時，并且可以將絕對距離間隔指定為5千米。在鍛煉之外的情況下，統(tǒng)計地或者經(jīng)驗地，或者根據(jù)在電子設(shè)備100中存儲的恒定參考信息，電子設(shè)備100可以將預(yù)定的距離(例如，約5千米)假設(shè)為運(yùn)動半徑，并且可以將預(yù)定的時間(例如，約3小時)假設(shè)為一個有意義的活動分組單位?？梢愿鶕?jù)用戶輸入的控制或設(shè)計者的設(shè)計變化來改變上述的時間和距離。備選地，可以將預(yù)定的距離或時間作為參考信息存儲在電子設(shè)備100中?？梢愿鶕?jù)統(tǒng)計或經(jīng)驗數(shù)據(jù)或者從根據(jù)電子設(shè)備100的操作而獲得的恒定參考值或更多的數(shù)據(jù)所獲得的模式數(shù)據(jù)，來計算參考信息。
[0180]結(jié)合關(guān)于生成突出內(nèi)容，電子沒備100可以響應(yīng)于所評估的日?；顒咏Y(jié)果來生成每組一視頻(包括圖像滑動效果)。電子設(shè)備100可以對通過在濾波發(fā)現(xiàn)的有意義的幀上連接幀組以生成一個視頻。
[0181]如上所述，根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以通過根據(jù)場景來識別活動，并且根據(jù)所識別的活動來執(zhí)行用于生成突出的流程控制，來改進(jìn)突出內(nèi)容的質(zhì)量。電子設(shè)備可以通過減少不必要的計算來減少電子設(shè)備的發(fā)熱，并且改進(jìn)電子設(shè)備的電池的可用性。如上所述，根據(jù)本公開的各種實(shí)施例，圖像處理方法可以包括:接收多個圖像，分析用戶的場景，根據(jù)所分析的用戶場景從該多個圖像中提取至少一個或多個圖像，以及使用所提取的圖像生成至少一個圖像。
[0182]根據(jù)本公開的各種實(shí)施例，該多個圖像可以根據(jù)預(yù)定的設(shè)置來自動地捕獲。
[0183]根據(jù)本公開的各種實(shí)施例，分析用戶的場景可以包括:分析接收的該多個圖像的模式，并且根據(jù)該模式來確定用戶的場景。
[0184]根據(jù)本公開的各種實(shí)施例，該圖像處理方法還可以包括從至少一個或多個傳感器接收傳感器數(shù)據(jù)。分析用戶的場景可以包括根據(jù)傳感器數(shù)據(jù)來分析用戶的場景。
[0185]根據(jù)本公開的各種實(shí)施例，該圖像處理方法還可以包括提取一個或多個應(yīng)用數(shù)據(jù)。分析用戶的場景可以包括根據(jù)應(yīng)用數(shù)據(jù)來分析用戶的場景。
[0186]圖10是示出了根據(jù)本公開各個實(shí)施例的程序模塊1010的配置的框圖。
[0187]參考圖1O，根據(jù)本公開的實(shí)施例，程序模塊11(例如，圖1的程序140)可以包括用于控制與電子設(shè)備(例如，圖1的電子設(shè)備100)相關(guān)的資源的操作系統(tǒng)(OS)和/或在OS上執(zhí)行的各種應(yīng)用(例如，圖1的應(yīng)用程序147)。OS可以是例如Android、1S、Windows、Symbian、Tizen、Bada 等。
[0188]程序模塊1010可以包括內(nèi)核1020、中間件1030、應(yīng)用編程接口(API )1060和/或應(yīng)用1070。程序模塊1010的至少一部分可以預(yù)加載到電子設(shè)備上，或可以從外部電子設(shè)備(例如，圖1的外部電子設(shè)備102、200和服務(wù)器設(shè)備106)下載。
[0189]內(nèi)核1020(例如，圖1的內(nèi)核141)可以包括例如系統(tǒng)資源管理器1021和/或設(shè)備驅(qū)動器1023。系統(tǒng)資源管理器1021可以管理對系統(tǒng)資源的訪問和使用。根據(jù)本公開的實(shí)施例，系統(tǒng)資源管理器1021可以包括進(jìn)程管理單元、存儲器管理單元、文件系統(tǒng)管理單元等。設(shè)備驅(qū)動器1023可以包括例如顯示驅(qū)動器、相機(jī)驅(qū)動器、藍(lán)牙(BT)驅(qū)動器、共享存儲器驅(qū)動器、通用串行總線(USB)驅(qū)動器、鍵盤驅(qū)動器、無線保真(W1-Fi)驅(qū)動器、音頻驅(qū)動器或進(jìn)程間通信(IPC)驅(qū)動器。
[0190]中間件1030可以提供例如應(yīng)用1070需要的功能，并且可以通過API1060向應(yīng)用1070提供各種功能，使得應(yīng)用1070高效地使用電子設(shè)備內(nèi)的有限系統(tǒng)資源。根據(jù)本公開的多種實(shí)施例，中間件1030(例如，圖1的中間件143)可以包括以下至少一項:運(yùn)行庫1035、應(yīng)用管理器1041、窗口管理器1042、多媒體管理器1043、資源管理器1044、電源管理器1045、數(shù)據(jù)庫管理器1046、包管理器1047、連接管理器1048、通知管理器1049、位置管理器1050、圖形管理器1051或安全管理器1052。
[0191]運(yùn)行庫1035可以包括例如由編譯器使用的庫模塊，以便在執(zhí)行應(yīng)用1070的同時通過編程語言來添加新的功能。運(yùn)行庫1035可以執(zhí)行與輸入和輸出管理、存儲器管理或算術(shù)功能有關(guān)的的功能。
[0192]應(yīng)用管理器1041可以管理例如至少一個應(yīng)用1070的生命周期。窗口管理器1042可以管理電子設(shè)備的屏幕上使用的圖形用戶界面(GUI)資源。多媒體管理器1043可以掌握再現(xiàn)各種媒體文件所需的格式，并且可以通過使用與相應(yīng)格式相對應(yīng)的編解碼器來對媒體文件進(jìn)行編碼或解碼。資源管理器1044可以管理至少一個應(yīng)用1070的源代碼，并且可以管理存儲器或存儲空間的資源等。
[0193]功率電源管理器1045可以連同基本輸入/輸出系統(tǒng)(B1S)等一起動作，可以管理電池或電源，并且可以提供電子設(shè)備的操作所需的電力信息。數(shù)據(jù)庫管理器1046可以生成、搜索或改變要在至少一個應(yīng)用1070中使用的數(shù)據(jù)庫。包管理器1047可以管理對以包文件類型分發(fā)的應(yīng)用的安裝或更新。
[0194]連接管理器1048可以管理例如無線連接，諸如W1-Fi連接或BT連接等。通知管理器1049可以按照不會干擾用戶的方式來顯示或通知事件，例如到達(dá)消息、約會和接近通知。位置管理器1050可以管理電子設(shè)備的位置信息。圖形管理器1051可以管理要提供給用戶的圖形效果或與圖形效果相關(guān)的用戶界面(UI)。安全管理器1052可以提供系統(tǒng)安全或用戶認(rèn)證等所需的全部安全功能。根據(jù)本公開的實(shí)施例，當(dāng)電子設(shè)備(例如，電子設(shè)備100)具有電話功能時，中間件1030還可以包括電話管理器(未示出)，用于管理電子設(shè)備的語音通信功能或視頻通信功能。
[0195]中間件1030可以包括中間件模塊，所述中間件模塊配置上述部件的各種功能的組合。中間件1030可以提供對于OS而被專門化的模塊，以便提供差異化的功能。此外，中間件1030可以動態(tài)刪除現(xiàn)有組件中的一些，或可以添加新組件。
[0196]API 1060(例如，圖1的API 145)可以是例如API編程功能的集合，并且可以根據(jù)OS而具有不同的組件。例如，在Android或1S的情況下，可以根據(jù)平臺提供一個API集合。在Tizen的情況下，可以根據(jù)平臺提供兩個或更多API集合。
[0197]應(yīng)用1070(例如，圖1的應(yīng)用程序147)可以包括以下一個或多個應(yīng)用:例如，主頁應(yīng)用1071、撥號器應(yīng)用1072、短消息服務(wù)/多媒體消息服務(wù)(SMS/MMS)1073、即時消息(頂)應(yīng)用1074、瀏覽器應(yīng)用1075、相機(jī)應(yīng)用1076、鬧鐘應(yīng)用1077、聯(lián)系人應(yīng)用1078、語音撥號應(yīng)用1079、電子郵件應(yīng)用1080、日歷應(yīng)用1081、媒體播放器應(yīng)用1082、相冊應(yīng)用1083、時鐘應(yīng)用1084以及未示出的其他應(yīng)用如保健應(yīng)用(例如，測量鍛煉量或血糖的應(yīng)用等)或者環(huán)境信息應(yīng)用(例如，用于提供氣壓信息、濕度信息或溫度信息的應(yīng)用等)等。
[0198]根據(jù)本公開的實(shí)施例，應(yīng)用1070可以包括用于在電子設(shè)備(例如，電子設(shè)備100)和外部電子設(shè)備(例如，電子設(shè)備102和200)之間交換信息的應(yīng)用(下文中，為了更好地理解和易于描述，將其稱作“信息交換應(yīng)用”)。例如，信息交換應(yīng)用可以包括用于向外部電子設(shè)備發(fā)送特定信息的通知中繼應(yīng)用或者用于管理外部電子設(shè)備的設(shè)備管理應(yīng)用。
[0199]例如，通知中繼應(yīng)用可以包括向外部電子設(shè)備(例如，夕卜部電子設(shè)備102和200)發(fā)送電子設(shè)備的其他應(yīng)用(例如，SMS/MMS應(yīng)用、電子郵件應(yīng)用、保健應(yīng)用、環(huán)境信息應(yīng)用等)所生成的通知信息的功能。另外，通知中繼應(yīng)用可以從外部電子設(shè)備接收例如通知信息，并且可以將接收到的通知信息提供給電子設(shè)備的用戶。
[0200]設(shè)備管理應(yīng)用可以管理(例如，安裝、刪除或更新)例如與該電子設(shè)備通信的外部電子設(shè)備(例如，外部電子設(shè)備102和200)的至少一個功能(例如，外部電子設(shè)備本身(或一部分組件)的接通/斷開、或調(diào)整顯示器的亮度(或分辨率))、或在外部電子設(shè)備中操作的應(yīng)用、或從外部電子設(shè)備提供的服務(wù)(例如，呼叫服務(wù)或消息服務(wù))。
[0201]根據(jù)本公開的實(shí)施例，應(yīng)用1070可以包括根據(jù)電子設(shè)備的屬性而預(yù)設(shè)的應(yīng)用(例如，移動醫(yī)療設(shè)備的保健應(yīng)用)。根據(jù)本公開的實(shí)施例，應(yīng)用1070可以包括從外部電子設(shè)備(例如，服務(wù)器106或外部電子設(shè)備102和200)接收到的應(yīng)用。根據(jù)本公開的實(shí)施例，應(yīng)用1070可以包括預(yù)加載的應(yīng)用或可以從服務(wù)器下載的第三方應(yīng)用。根據(jù)本公開各種實(shí)施例的程序模塊1010的組件名稱可以根據(jù)OS的類型而改變。
[0202]根據(jù)本公開的各種實(shí)施例，程序模塊1010的至少一部分可以實(shí)現(xiàn)為軟件、固件、硬件或其任意組合。例如，程序模塊1010的至少一部分可以由處理器(例如圖1的處理器120)來實(shí)現(xiàn)(例如，執(zhí)行)。程序模塊1010的至少一部分可以包括例如用于執(zhí)行一個或多個功能的模塊、程序、例程、指令集、進(jìn)程等。
[0203]圖11是示出了根據(jù)本公開各種實(shí)施例的電子設(shè)備1101的配置的框圖。
[0204]參考圖11，電子設(shè)備1101可以包括例如圖1所不的電子設(shè)備100的整體或一部分。電子設(shè)備1101可以包括一個或多個處理器(例如，應(yīng)用處理器(AP))1110、通信模塊1120、訂戶識別模塊(SIM) 1124、存儲器1130、傳感器模塊1140、輸入設(shè)備1150、顯示器1160、接口1170、音頻模塊1180、相機(jī)模塊1191、電源管理模塊1195、電池1196、指示器1197和電機(jī)1198ο
[0205]AP處理器1110可以執(zhí)行例如操作系統(tǒng)(OS)或應(yīng)用程序來控制多個硬件或軟件組件，并且可以處理和計算多種數(shù)據(jù)。例如，處理器1110可用片上系統(tǒng)(SoC)來實(shí)現(xiàn)。根據(jù)本公開的實(shí)施例，處理器Il1還可以包括圖形處理單元(GPU)(未示出)和/或圖像信號處理器(未示出)。處理器1110可以包括圖11所示的部件中的至少一些(例如，蜂窩模塊1121)。處理器1110可以將從至少一個其他部件接收的指令或數(shù)據(jù)加載到易失性存儲器(例如，存儲器1130中)以處理該數(shù)據(jù)，并且可以將各種數(shù)據(jù)存儲在非易失性存儲器(例如，存儲器1130中)。
[0206]通信模塊1120可以具有與圖1的通信接口160相同或相似的配置。通信模塊1120可以包括例如蜂窩模塊1121、無線保真(W1-Fi)模塊1123、藍(lán)牙(BT)模塊1125、全球定位系統(tǒng)(GPS)模塊1127、近場通信(NFC)模塊1128和射頻(RF)模塊1129。
[0207]蜂窩模塊1121可以通過通信網(wǎng)絡(luò)提供例如語音呼叫服務(wù)、視頻呼叫服務(wù)、文本消息服務(wù)、因特網(wǎng)服務(wù)等。根據(jù)本公開的實(shí)施例，蜂窩模塊1121可以使用S頂(例如，S頂1124)在通信網(wǎng)絡(luò)中標(biāo)識和認(rèn)證電子設(shè)備1101。根據(jù)本公開的實(shí)施例，蜂窩模塊1121可以執(zhí)行可由處理器1110提供的功能中的至少一部分。根據(jù)本公開的實(shí)施例，蜂窩模塊1121可以包括通信處理器(CP)。
[0208]W1-Fi模塊1123、81'模塊1125、6?5模塊1127和/,(:模塊1128可以包括例如用于處理經(jīng)對應(yīng)模塊發(fā)送或接收的數(shù)據(jù)的處理器。根據(jù)本公開的各種實(shí)施例，蜂窩模塊1121、W1-Fi模塊1123、BT模塊1125、GPS模塊1127和/或NFC模塊1128中的至少一部分(例如，兩個或更多個)可以包含在一個集成芯片(IC)中或一個IC封裝中。
[0209]RF模塊1129可以發(fā)送和接收例如通信信號(例如，RF信號)。盡管未示出，RF模塊1129可以包括例如收發(fā)機(jī)、功率放大模塊(PAM)、頻率濾波器或低噪聲放大器(LNA)、天線等。根據(jù)本公開的另一實(shí)施例，蜂窩模塊1121、W1-Fi模塊1123、BT模塊1125、GPS模塊1127或NFC模塊1128中的至少一個可以通過單獨(dú)的RF模塊來發(fā)送和接收RF信號。
[0210]例如，S頂卡1124可以包括例如包含S頂和/或嵌入式SM的卡。SIM卡1124可以包括唯一標(biāo)識信息(例如，集成電路卡標(biāo)識符(ICCID))或者訂戶信息(例如，國際移動用戶身份(IMSI))o
[0211]例如，存儲器1130(例如，圖1的存儲器130)可以包括例如嵌入式存儲器1132或者外部存儲器1134。嵌入式存儲器1132可以包括以下至少一項:例如，易失性存儲器(例如，動態(tài)隨機(jī)訪問存儲器(DRAM)、靜態(tài)RAM(SRAM)、同步動態(tài)RAM(SDRAM)等)或者非易失性存儲器(例如，一次性可編程只讀存儲器(OTPROM)、可編程R0M(PR0M)、可擦除可編程ROM(EPROM)、電可擦除可編程ROM(EEPROM)、掩模ROM、閃存R0M、閃存(例如，NAND閃存或NOR閃存等)、硬盤驅(qū)動器或固態(tài)驅(qū)動器(SSD))。
[0212]外部存儲器1134還可以包括閃驅(qū)例如緊湊型閃存(CF)、安全數(shù)字(SD)、微型SD、迷你型SD、極限數(shù)字(xD)、記憶棒等。外部存儲器1134通過各種接口與電子設(shè)備1101功能地和/或物理地相連。
[0213]傳感器模塊1140可以測量例如物理量或可以檢測電子設(shè)備1101的操作狀態(tài)，并將測量或檢測到的信息轉(zhuǎn)換為電信號。傳感器模塊1140可以包括以下至少一項:例如，手勢傳感器1140A、陀螺儀傳感器1140B、氣壓傳感器1140C、磁傳感器1140D、加速度傳感器1140E、握力傳感器1140F、接近傳感器1140G、顏色傳感器1140H(例如，紅、綠、藍(lán)(RGB)傳感器)、生物特征傳感器11401、溫度/濕度傳感器1140J、照度傳感器1140K或紫外線(UV)傳感器1140M。附加地或備選地，傳感器模塊1140還可以包括例如電子鼻傳感器(未示出)、肌電圖(EMG)傳感器(未示出)、腦電圖(EEG)傳感器(未示出)、心電圖(ECG)傳感器(未示出)、紅外(IR)傳感器(未示出)、虹膜傳感器(未示出)和/或指紋傳感器(未示出)等。傳感器模塊1140還可以包括用于控制其中包括的至少一個或多個傳感器的控制電路。根據(jù)本公開的各種實(shí)施例，電子設(shè)備1101還可以包括配置為控制傳感器模塊1140的處理器(作為處理器1110的一部分，或者與處理器1110獨(dú)立)。當(dāng)處理器1110處于休眠狀態(tài)時，電子設(shè)備1101可以控制傳感器模塊1140。
[0214]例如，輸入設(shè)備1150可以包括例如觸摸面板1152、(數(shù)字)筆傳感器1154、按鍵1156或超聲輸入設(shè)備1158。觸摸面板1152可以使用例如電容檢測方法、電阻檢測方法、紅外檢測方法或超聲檢測方法中的至少一種來識別觸摸輸入。此外，觸摸面板1152還可以包括控制電路。觸摸面板1152還可以包括觸覺層，并可以向用戶提供觸覺反應(yīng)。
[0215](數(shù)字)筆傳感器1154可以是例如觸摸面板的一部分，或可以包括用于識別的附加片。按鍵1156可以包括例如物理按鈕、光學(xué)按鍵或鍵區(qū)。超聲輸入單元1158可以允許電子設(shè)備1101使用麥克風(fēng)(例如，麥克風(fēng)1188)檢測聲波以及通過生成超聲信號的輸入工具來驗證數(shù)據(jù)。
[0216]顯示器1160(例如，圖1的顯示器150)可以包括面板1162、全息設(shè)備1164或投影儀1166。面板1162可以包括與顯示器150相同或相似的配置。面板1162可以實(shí)現(xiàn)為例如是柔性的、透明的或可穿戴的。面板1162和觸摸面板1152可以集成為一個模塊。全息設(shè)備1164可以使用光的干涉來示出立體圖像。投影儀1166可以將光投影到屏幕上以便顯示圖像。屏幕可位于例如電子設(shè)備1101內(nèi)部或外部。根據(jù)本公開的實(shí)施例，顯示器1160還可以包括用于控制面板1162、全息設(shè)備1164或投影儀1166的控制電路。
[0217]接口 1170可包括例如高清多媒體接口(HDMI)1172、通用串行總線(USB)1174、光接口 1176或D-超小型元件(D-sub)1178。接口 1170可以包括在例如圖1所示的通信接口 160中。附加地或備選地，接口 1170可以包括例如移動高清鏈路(MHL)接口、SD卡/多媒體卡(MMC)接口或紅外數(shù)據(jù)協(xié)會(IrDA)標(biāo)準(zhǔn)接口。
[0218]音頻模塊1180可以將聲音轉(zhuǎn)換為電信號，反之亦然。音頻模塊1180的至少一部分可以包括在例如圖1所示的輸入和輸出接口 170中。音頻模塊1180可以處理通過例如揚(yáng)聲器1182、接收機(jī)1184、耳機(jī)1186、麥克風(fēng)1188等輸入或輸出的聲音信息。音頻模塊1180中包括的麥克風(fēng)1188可以收集可用作輸入信息和遠(yuǎn)程驗證信息或者本地驗證信息的音頻數(shù)據(jù)。
[0219]相機(jī)模塊1191可以是能夠拍攝靜止圖像和運(yùn)動圖像(視頻)的設(shè)備。根據(jù)本公開的實(shí)施例，相機(jī)模塊1191可以包括一個或多個圖像傳感器(未示出)(例如，正面?zhèn)鞲衅骰虮趁鎮(zhèn)鞲衅?、鏡頭(未示出)、圖像信號處理器(ISP)(未示出)或閃光燈(未示出)(例如，LED或氙燈)。
[0220]電源管理模塊1195可以管理例如電子設(shè)備1101的電力。根據(jù)本公開的實(shí)施例，盡管未示出，電源管理模塊1195可以包括電源管理集成電路(PMIC)、充電IC或電池(燃料)表。PMIC可以具有有線充電方法和/或無線充電方法。無線充電方法可以包括例如磁共振方法、磁感應(yīng)方法、電磁方法等。還可以提供用于無線充電的附加電路，例如線圈回路、共振電路或整流器等。電池表可以測量例如電池1196的剩余量以及對電池1196充電時電池的電壓、電流或溫度。電池1196可以是例如可充電電池和/或太陽能電池。
[0221]指示器1197可以顯示電子設(shè)備1101或其一部分(例如，處理器1110)的具體狀態(tài)，例如引導(dǎo)狀態(tài)、消息狀態(tài)和充電狀態(tài)等。電機(jī)1198可以將電信號轉(zhuǎn)換成機(jī)械振動，并且可以生成振動、觸覺效果等。盡管未示出，電子設(shè)備1101可以包括用于支持移動TV的處理單元(例如，GPU)。用于支持移動TV的處理單元可以根據(jù)諸如數(shù)字多媒體廣播(DMB)標(biāo)準(zhǔn)、數(shù)字視頻廣播(DVB)標(biāo)準(zhǔn)、媒體流標(biāo)準(zhǔn)等標(biāo)準(zhǔn)來處理媒體數(shù)據(jù)。
[0222]根據(jù)本公開多種實(shí)施例的電子設(shè)備的上述元件中的每個元件可以配置為一個或多個組件，并且相應(yīng)元件的名稱可以根據(jù)電子設(shè)備的類型而改變。根據(jù)本公開多種實(shí)施例的電子設(shè)備可以包括上述元件中的至少一個元件，可以從該電子設(shè)備中省略一些元件，或可以在該電子設(shè)備中進(jìn)一步添加其他附加元件。此外，據(jù)本公開各種實(shí)施例的電子設(shè)備的一些元件可以彼此組合以形成一個整體，從而可以按照與組合之前實(shí)質(zhì)上相同的方式執(zhí)行相應(yīng)部件的功能。
[0223]這里使用的術(shù)語“模塊”可以表示例如包括硬件、軟件和固件之一或其組合在內(nèi)的單元。例如，“模塊”可以與術(shù)語“單元”、“邏輯”、“邏輯塊”、“部件”或“電路”等互換使用。“模±夬”可以是集成組件的最小單元或其一部分。“模塊”可以是用于執(zhí)行一個或多個功能的最小單元或其一部分。“模塊”可以機(jī)械或電學(xué)地實(shí)現(xiàn)。例如，“模塊”可以包括專用集成電路(ASIC)芯片、現(xiàn)場可編程門陣列(FPGA)和已知或者將來開發(fā)的用于執(zhí)行某種操作的可編程邏輯器件中的至少一種。
[0224]根據(jù)本公開的實(shí)施例，設(shè)備的至少一部分(例如，模塊或功能)或方法的至少一部分(例如，操作)可以實(shí)現(xiàn)為例如存儲在具有程序模塊的計算機(jī)可讀存儲介質(zhì)中的指令。當(dāng)通過處理器(例如，圖2的處理器120)執(zhí)行指令時，一個或多個處理器可執(zhí)行與指令相應(yīng)的功能。計算機(jī)可瀆存儲介質(zhì)可以是例如圖1的存儲器130。
[0225]計算機(jī)可讀存儲介質(zhì)可以包括硬盤、軟盤、磁介質(zhì)(例如，磁帶)、光介質(zhì)(例如，壓縮盤只讀存儲器(CD-ROM)和數(shù)字多功能盤(DVD))、磁光介質(zhì)(例如，光磁軟盤)、硬件器件(例如，R0M、隨機(jī)訪問存儲器(RAM)、閃存等)等。此外，程序指令不僅可以包括由編譯器編譯的機(jī)器代碼，還可以包括可由計算機(jī)使用解釋程序來執(zhí)行的高級語言等。上述硬件設(shè)備可被配置為操作為一個或多個軟件模塊，以執(zhí)行本公開各種實(shí)施例的操作，反之亦然。
[0226]根據(jù)本公開各種實(shí)施例的模塊或程序模塊可以包括上述組件中的至少一個或多個，可以省略上述組件中的一些，或者還可以包括其他附加的組件。由模塊、程序模塊或其他組件執(zhí)行的操作可以按照連續(xù)方法、并行方法、重復(fù)方法或啟發(fā)式方法來執(zhí)行。另外，一些操作可以按不同順序執(zhí)行，或者可以省略，或者可以增加其他操作。
[0227]根據(jù)本公開的各種實(shí)施例，計算機(jī)可讀存儲介質(zhì)可以存儲可由至少一個處理器執(zhí)行的指令。指令可以設(shè)置為:收集圖像，確定在獲得圖像時電子設(shè)備的活動類型，選擇具有與活動類型相對應(yīng)的濾波條件的圖像處理方案，通過應(yīng)用所選擇的圖像處理方案來選擇或處理所獲得的圖像中的一些圖像，以及根據(jù)所選擇或所處理的圖像來生成突出內(nèi)容。
[0228]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以根據(jù)圖像收集環(huán)境自動地執(zhí)行更加自適應(yīng)和有意義的圖像收集或圖像分組，但是用戶不會花費(fèi)太多的精力。
[0229]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以通過執(zhí)行圖像分類、圖像選擇和效果處理，按照不同的方式應(yīng)用針對每一個場景而分組的圖像中類似圖像的分組程度，或者可以對類似圖像的分組程度進(jìn)行統(tǒng)計地或?qū)徝赖貎?yōu)化，以適應(yīng)圖像收集場景。
[0230]根據(jù)本公開的各種實(shí)施例，電子設(shè)備可以通過減小分組的圖像中難以識別的圖像的分布，來將內(nèi)容容量最小化并且可以改進(jìn)有意義圖像的分布。
[0231]另外，所描述且在附圖中示出的本公開實(shí)施例作為示例，用以描述技術(shù)內(nèi)容并且?guī)椭斫猓皇窍拗票竟_的范圍。因此，應(yīng)理解，除了這里列出的實(shí)施例之外，基于本公開的技術(shù)思想而得出的所有改進(jìn)或改進(jìn)形式均包括在如權(quán)利要求及其等同物限定的本公開的范圍中。
【主權(quán)項】
1.一種電子設(shè)備，包括: 存儲器，配置為存儲多個圖像； 處理器，配置為與所述存儲器功能相連， 其中，所述處理器配置為確定在所述多個圖像的源收集所述多個圖像時的至少一部分時間期間與所述源相關(guān)聯(lián)的活動類型，其中所述源是所述電子設(shè)備和外部電子設(shè)備之一， 其中，所述處理器配置為使用與所述活動類型相對應(yīng)的圖像處理方案以將所述多個圖像中的一個或多個圖像確定為突出圖像，以及 其中，所述處理器配置為根據(jù)所述突出圖像生成突出內(nèi)容。2.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，所述處理器配置為使用所述多個圖像的差異分析和所述多個圖像中的一個或多個對象的差異變化分析中的至少一種，確定與所述源相關(guān)聯(lián)的活動類型。3.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，所述處理器配置為使來自所述源的傳感器信息，確定所述活動類型。4.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，所述處理器配置為使用所述源的場景信息的至少一部分，確定所述活動類型，其中如果所述源是所述電子設(shè)備則從所述電子設(shè)備的存儲器獲得所述源的場景信息，而如果所述源是所述外部電子設(shè)備則從所述外部電子設(shè)備接收所述源的場景信息。5.根據(jù)權(quán)利要求4所述的電子設(shè)備，其中，所述源的場景信息包括鬧鐘時間信息、商業(yè)日程信息、休息日程信息、散步日程信息、集會日程信息、閉幕日程信息、出席日程信息和會議日程信息。6.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，對于所述圖像處理方案，質(zhì)量濾波器“QF”、重復(fù)濾波器“DF”和分類濾波器“CF”中至少一個的使用依賴于所述活動類型，其中所述QF、DF和CF的參數(shù)也依賴于所述活動類型。7.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，所述處理器配置為通過對于由所述源在特定的時間間隔期間收集或者在特定的位置處收集的所述多個圖像按照相同的方式應(yīng)用圖像處理方案，生成所述突出內(nèi)容。8.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，所述外部電子設(shè)備是可穿戴電子設(shè)備。9.根據(jù)權(quán)利要求1所述的電子設(shè)備，其中，所述處理器配置為輸出與所確定的活動類型有關(guān)的信息、所述圖像處理方案以及與所述突出內(nèi)容相關(guān)聯(lián)的顯示信息中的至少一個。10.根據(jù)權(quán)利要求9所述的電子設(shè)備，其中，所述處理器配置為響應(yīng)于用戶輸入來改變所述與所確定的活動類型有關(guān)的信息和所述圖像處理方案中的至少一個，并且響應(yīng)于所述改變來控制突出內(nèi)容的重新生成。11.一種電子設(shè)備的圖像處理方法，所述方法包括: 將多個圖像存儲在所述電子設(shè)備的存儲器中； 確定在所述多個圖像的源收集所述多個圖像時的至少一部分時間期間與所述源相關(guān)聯(lián)的活動類型，其中，所述源是所述電子設(shè)備和外部電子設(shè)備之一； 確定具有依賴于所述活動類型的濾波條件的圖像處理方案； 將所確定的圖像處理方案應(yīng)用于所述多個圖像，以選擇所述多個圖像中的至少一個圖像作為突出圖像;以及 從根據(jù)所述突出圖像生成突出內(nèi)容。12.根據(jù)權(quán)利要求11所述的圖像處理方法，其中，確定與所述源相關(guān)聯(lián)的活動類型包括使用所述多個圖像的差異分析和所述多個圖像中的一個或多個對象的差異改變分析中的至少一種。13.根據(jù)權(quán)利要求11所述的圖像處理方法，其中，確定所述活動類型包括使用來自所述源的傳感器信息。14.根據(jù)權(quán)利要求11所述的圖像處理方法，其中，確定所述活動類型包括:使用所述源的場景信息的至少一部分，其中，如果所述源是所述電子設(shè)備則從所述電子設(shè)備的存儲器獲得所述源的場景信息，而如果所述源是所述外部電子設(shè)備則從所述外部電子設(shè)備接收所述源的場景信息。15.根據(jù)權(quán)利要求14所述的圖像處理方法，其中，所述源的場景信息包括鬧鐘時間信息、商業(yè)日程信息、休息日程信息、散步日程信息、集會日程信息、閉幕日程信息、出席日程信息和會議日程信息。16.根據(jù)權(quán)利要求11所述的圖像處理方法，其中，所述圖像處理方案的濾波條件包括使用具有針對質(zhì)量濾波器“QF”、重復(fù)濾波器“DF”和分類濾波器“CF”的參數(shù)的QF、DF和CF中的至少一個，其中所述QF、DF和CF中任一個的使用依賴于所述活動類型，并且針對QF、DF和CF的參數(shù)也依賴于所述活動類型。17.根據(jù)權(quán)利要求11所述的圖像處理方法，其中，通過對于由所述源在特定的時間間隔期間收集或者在特定的位置處收集的所述多個圖像按照相同的方式應(yīng)用圖像處理方案，來生成所述突出內(nèi)容。18.根據(jù)權(quán)利要求11所述的圖像處理方法，其中，所述外部電子設(shè)備是可穿戴電子設(shè)備。19.根據(jù)權(quán)利要求11所述的圖像處理方法，還包括:顯示與所述活動類型有關(guān)的信息、所確定的圖像處理方案以及與所述突出內(nèi)容相關(guān)聯(lián)的顯示信息中的至少一個。20.根據(jù)權(quán)利要求19所述的圖像處理方法，還包括:響應(yīng)于用戶輸入來改變與所確定的活動類型有關(guān)的信息和圖像處理方案中的至少一個，并且響應(yīng)于所述改變來重新生成突出內(nèi)容。
【文檔編號】G06T7/20GK105825522SQ201610055043
【公開日】2016年8月3日
【申請日】2016年1月27日
【發(fā)明人】曹益煥, 韓承旭, 具欽謀, 閔庚燮, 金根祐, 金相美, 金泰庚, 閔廷基, 鄭星旭
【申請人】三星電子株式會社