本發(fā)明涉及圖像處理技術領域,尤其涉及一種視頻圖像的補光處理方法及裝置。
背景技術:
隨著圖像處理技術的不斷發(fā)展,人們對圖像中細節(jié)的顯示有了更高的要求,在現(xiàn)有技術中,一般采用對圖像進行直方圖均衡處理的方法來調整圖像的顯示效果,具體過程為:計算圖像中像素點與中心像素點之間的距離;根據(jù)圖像中的各像素點與中心像素點之間的距離,計算圖像中的各像素點的直方圖統(tǒng)計權重;基于圖像中的各像素點的直方圖統(tǒng)計權重,對圖像分別進行各個灰度級的加權灰度級直方圖統(tǒng)計;根據(jù)圖像的各個灰度級的加權灰度直方圖統(tǒng)計結果,對圖像進行直方圖均衡處理。該方法通過利用圖像中的像素點的空間分布位置,對各像素點采用不同的統(tǒng)計權重,可以使處理后的圖像突出圖像的中心區(qū)域,實現(xiàn)對圖像的不同區(qū)域進行差異化的對比度增強處理,有效地增強了圖像中的人們的視覺關心區(qū)域的對比度。
但是,由于現(xiàn)有技術中只是將圖像的中心區(qū)域亮度增強,變得突出,對圖像的處理不加選擇,若圖像中有用區(qū)域為左上角,而經過上述處理后,中心區(qū)域亮度加強會使得有用區(qū)域的對比度下降,而且在均衡化處理的過程中,會導致變換后的圖像的灰度級減少,使某些細節(jié)消失;另外,現(xiàn)有技術中,中心區(qū)域亮度直接增強,沒有經過亮度漸變的過程,有可能使得變換后的圖像畫面出現(xiàn)異常。
技術實現(xiàn)要素:
本發(fā)明實施例提供一種視頻圖像的補光處理方法及裝置,用以調整視頻圖像亮度,使暗處細節(jié)顯示更清楚。
本發(fā)明方法包括一種視頻圖像的補光處理方法,該方法包括:
按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,根據(jù)每個矩形區(qū)域的頂點對應的坐標點所在的范圍,確定每個坐標點的亮度均值;
根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖;
在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果;
根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向;
根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù);
根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù);
根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理。
進一步地,所述根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖包括:
當坐標點的亮度均值不小于所述中值時,所述坐標點在所述第一二值圖中對應1;
當坐標點的亮度均值小于所述中值時,所述坐標點在所述第一二值圖中對應0。
進一步地,所述根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值包括:
根據(jù)每個亮度方向,確定所述第一二值圖中對應該亮度方向的方向判斷的邊界處;
當所述第一二值圖中坐標點位于所述方向判斷的邊界處時,該坐標點對應第一權值,否則,該坐標點對應第二權值,其中第一權值與第二權值不同。
進一步地,所述根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果包括:
針對每個亮度方向,根據(jù)該亮度方向,確定該第一二值圖中對應該亮度方向的有效區(qū)域,其中所述有效區(qū)域為該亮度方向的方向判斷的邊界處所對應的亮度較大的區(qū)域;
統(tǒng)計所述有效區(qū)域中,每個坐標點的權值及第一二值圖中每個坐標點對應的數(shù)值的乘積和。
進一步地,所述根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向包括:
針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;
如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
進一步地,所述確定所述圖像對應的目標亮度方向之前,所述方法還包括:
根據(jù)保存的目標亮度均值,確定所述圖像對應的坐標點的第二二值圖;
在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,并根據(jù)所述第二二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第二二值圖統(tǒng)計結果;
所述根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向包括:
針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;且第二二值圖統(tǒng)計結果是否大于設定的第二亮度閾值;
如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,且第二二值圖統(tǒng)計結果是否為所有亮度方向對應的第二二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
進一步地,所述根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù)包括:
針對每個坐標點,將該坐標點的亮度均值與設定的倍數(shù)的乘積作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第一增強倍數(shù);將第一坐標點的亮度均值作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第二增強倍數(shù);并
計算每個坐標點的第一增強倍數(shù)和第二增強倍數(shù)的比值;
并識別所述比值中的最大比值,判斷所述最大比值是否大于預設的比例閾值,如果是,則每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)與所述最大比值的商,否則,每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)。
進一步地,所述根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù)包括:
根據(jù)每個矩形區(qū)域中每個像素點,與所述矩形區(qū)域對應的位于四個頂點的坐標點的亮度增強倍數(shù),采用雙線性插值,確定每個矩形區(qū)域中每個像素點的亮度增強倍數(shù)。
進一步地,所述根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理包括:
當所述場景變化的標識信息標識場景變化時,根據(jù)保存的上一幀的圖像中每個像素點的亮度增強倍數(shù),對當前幀對應的圖像中每個像素點進行補光處理;
當所述場景變化的標識信息標識場景未變化時,判斷所述圖像的目標亮度方向是否與保存的歷史幀的亮度方向相同,如果相同,針對每個像素點,確定該像素點在當前幀對應的圖像中的亮度增強倍數(shù)與上一幀對應的圖像的亮度增強倍數(shù)的差與設定步進閾值的比值,根據(jù)所述比值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理;如果不同,根據(jù)固定的小于1的比例閾值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
進一步地,當所述場景變化的標識信息標識場景變化時,所述方法還包括:
判斷當前幀對應的圖像的目標亮度方向與上一幀對應的圖像的目標亮度方向是否相同,如果不相同,將保存的第一改變數(shù)值加1,否則,將保存的第一改變數(shù)值置零;
判斷更新后的第一改變數(shù)值是否不小于預設的第一改變閾值,如果是,將所述場景變化的標識信息修改為標識場景未變化。
進一步地,當所述場景變化的標識信息標識場景未變化時,所述方法還包括:
判斷當前幀對應的圖像的目標亮度方向與上一幀對應的圖像的目標亮度方向是否相同,如果不相同,將保存的第二改變數(shù)值加1,否則,將保存的第二改變數(shù)值置減1;
判斷更新后的第二改變數(shù)值是否不小于預設的第二改變閾值,如果是,將所述場景變化的標識信息修改為標識場景變化。
進一步地,所述方法還包括:
判斷當前幀對應的圖像的目標亮度方向與保存的歷史幀的亮度方向是否相同;
如果不同,則將保存的第三改變數(shù)值加1,否則,將保存的第三改變數(shù)值減1;
判斷更新后的第三改變數(shù)值是否不小于預設的第三改變閾值,如果是,將歷史幀的亮度方向修改為當前幀對應的圖像的目標亮度方向。
另一方面,本發(fā)明實施例提供了一種視頻圖像的補光處理裝置,所述裝置包括:
第一確定模塊,用于按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,根據(jù)每個矩形區(qū)域的頂點對應的坐標點所在的范圍,確定每個坐標點的亮度均值;
第二確定模塊,用于根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖;
確定統(tǒng)計模塊,用于在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果;
第三確定模塊,用于根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向;
第四確定模塊,用于根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù);
第五確定模塊,用于根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù);
補光模塊,用于根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理。
進一步地,所述第二確定模塊,具體用于當坐標點的亮度均值不小于所述中值時,所述坐標點在所述第一二值圖中對應1;當坐標點的亮度均值小于所述中值時,所述坐標點在所述第一二值圖中對應0。
進一步地,所述確定統(tǒng)計模塊,具體用于根據(jù)每個亮度方向,確定所述第一二值圖中對應該亮度方向的方向判斷的邊界處;當所述第一二值圖中坐標點位于所述方向判斷的邊界處時,該坐標點對應第一權值,否則,該坐標點對應第二權值,其中第一權值與第二權值不同。
進一步地,所述確定統(tǒng)計模塊,具體用于針對每個亮度方向,根據(jù)該亮度方向,確定該第一二值圖中對應該亮度方向的有效區(qū)域,其中所述有效區(qū)域為該亮度方向的方向判斷的邊界處所對應的亮度較大的區(qū)域;統(tǒng)計所述有效區(qū)域中,每個坐標點的權值及第一二值圖中每個坐標點對應的數(shù)值的乘積和。
進一步地,所述第三確定模塊,具體用于針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
進一步地,所述第二確定模塊,還用于根據(jù)保存的目標亮度均值,確定所述圖像對應的坐標點的第二二值圖;
所述確定統(tǒng)計模塊,還用于在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,并根據(jù)所述第二二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第二二值圖統(tǒng)計結果;
所述第三確定模塊,還用于針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;且第二二值圖統(tǒng)計結果是否大于設定的第二亮度閾值;如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,且第二二值圖統(tǒng)計結果是否為所有亮度方向對應的第二二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
進一步地,所述第四確定模塊,具體用于針對每個坐標點,將該坐標點的亮度值與設定的倍數(shù)的乘積作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第一增強倍數(shù);將第一坐標點的亮度值作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第二增強倍數(shù);并計算每個坐標點的第一增強倍數(shù)和第二增強倍數(shù)的比值;并識別所述比值中的最大比值,判斷所述最大比值是否大于預設的比例閾值,如果是,則每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)與所述最大比值的商,否則,每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)。
進一步地,所述第五確定模塊,具體用于根據(jù)每個矩形區(qū)域中每個像素點,與所述矩形區(qū)域對應的位于四個頂點的坐標點的亮度增強倍數(shù),采用雙線性插值,確定每個矩形區(qū)域中每個像素點的亮度增強倍數(shù)。
進一步地,所述補光模塊,具體用于當所述場景變化的標識信息標識場景變化時,根據(jù)保存的上一幀的圖像中每個像素點的亮度增強倍數(shù),對當前幀對應的圖像中每個像素點進行補光處理;當所述場景變化的標識信息標識場景未變化時,判斷所述圖像的目標亮度方向是否與保存的歷史幀的方向相同,如果相同,針對每個像素點,確定該像素點在當前幀對應的圖像中的亮度增強倍數(shù)與上一幀對應的圖像的亮度增強倍數(shù)的差與設定步進閾值的比值,根據(jù)所述比值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理;如果不同,根據(jù)固定的小于1的比例閾值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
進一步地,所述裝置還包括:
標識修改模塊,用于當所述場景變化的標識信息標識場景變化時,判斷當前幀對應的圖像的目標亮度方向與上一幀對應的圖像的目標亮度方向是否相同,如果不相同,將保存的第一改變數(shù)值加1,否則,將保存的第一改變數(shù)值置零;判斷更新后的第一改變數(shù)值是否不小于預設的第一改變閾值,如果是,將所述場景變化的標識信息修改為標識場景未變化。
進一步地,所述標識修改模塊,還用于當所述場景變化的標識信息標識場景未變化時,判斷當前幀對應的圖像的目標亮度方向與上一幀對應的圖像的目標亮度方向是否相同,如果不相同,將保存的第二改變數(shù)值加1,否則,將保存的第二改變數(shù)值置減1;判斷更新后的第二改變數(shù)值是否不小于預設的第二改變閾值,如果是,將所述場景變化的標識信息修改為標識場景變化。
進一步地,所述標識修改模塊,還用于判斷當前幀對應的圖像的目標亮度方向與保存的歷史幀的亮度方向是否相同;如果不同,則將保存的第三改變數(shù)值加1,否則,將保存的第三改變數(shù)值減1;判斷更新后的第三改變數(shù)值是否不小于預設的第三改變閾值,如果是,將歷史幀的亮度方向修改為當前幀對應的圖像的目標亮度方向。
本發(fā)明實施例提供了一種視頻圖像的補光處理方法及裝置,所述方法包括:按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,根據(jù)每個矩形區(qū)域的頂點對應的坐標點所在的范圍,確定每個坐標點的亮度均值;根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖;在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果;根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向;根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù);根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù);根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理。由于在本發(fā)明實施例中,根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度值,確定每個坐標點的亮度增強倍數(shù),進而確定每個像素點的亮度增強倍數(shù),距離第一坐標點越遠,即越暗的像素點的亮度增強倍數(shù)越大,因此,可以調整圖像的亮度,使圖像中暗處的細節(jié)顯示的更清楚。
附圖說明
為了更清楚地說明本發(fā)明實施例中的技術方案,下面將對實施例描述中所需要使用的附圖作簡要介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實施例,對于本領域的普通技術人員來講,在不付出創(chuàng)造性勞動的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1為本發(fā)明實施例1提供一種視頻圖像的補光處理過程示意圖;
圖2為本發(fā)明實施例1提供的圖像劃分區(qū)域示意圖;
圖3A-3B為本發(fā)明實施例2提供的根據(jù)圖像亮度方向判斷圖像邊界處示意圖;
圖4為本發(fā)明各實施例提供的當判斷場景變化標志位為1時,對每個像素點進行補光處理流程圖;
圖5為本發(fā)明各實施例提供的當判斷場景變化標志位為0,對每個像素點進行補光處理流程圖;
圖6為本發(fā)明實施例提供一種視頻圖像的補光處理裝置結構示意圖。
具體實施方式
為了使本發(fā)明的目的、技術方案和優(yōu)點更加清楚,下面將結合附圖對本發(fā)明作進一步地詳細描述,顯然,所描述的實施例僅僅是本發(fā)明一部份實施例,而不是全部的實施例?;诒景l(fā)明中的實施例,本領域普通技術人員在沒有做出創(chuàng)造性勞動前提下所獲得的所有其它實施例,都屬于本發(fā)明保護的范圍。
實施例1:
圖1為本發(fā)明實施例提供一種視頻圖像的補光處理過程示意圖,該過程包括以下步驟:
S101:按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,根據(jù)每個矩形區(qū)域的頂點對應的坐標點所在的范圍,確定每個坐標點的亮度均值。
本發(fā)明實施例提供的視頻圖像的補光處理方法應用于電子設備。所述電子設備包括PC、智能電視、相機及手機等。
所述電子設備按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,將所述多個矩形區(qū)域的頂點作為對應的坐標點,根據(jù)所述坐標點所在的范圍,確定出范圍內所有像素點亮度的均值,將所述均值作為范圍內對應的坐標點的亮度均值。
在對圖像進行劃分時,可以將圖像的長進行n等分,對圖像的寬進行m等分,其中所述m和n相同或不同,劃分后得到多個矩形區(qū)域,將所述多個矩形區(qū)域的頂點作為對應的坐標點,根據(jù)所述坐標點所在的范圍,確定出范圍內所有像素點亮度的均值,將所述均值作為該坐標點的亮度均值。具體的可以將該坐標點上下左右四個像素點對應的范圍,確定為該坐標點所在的范圍,或者將以坐標點為中心,其各個方向的像素點對應的范圍,確定為該坐標點所在的范圍。具體確定坐標點所在的范圍時,可以任意確定,只要不同的坐標點采用相同的范圍確定方法即可。
為了使確定坐標點的亮度均值更加準確,可以將圖像的長寬分別進行n等分,即把圖像分成n2個相同的矩形區(qū)域,將(n+1)2個矩形區(qū)域的頂點確定為坐標點,如圖2所示,對圖像的長寬分別進行4等分,即將圖像分成了16個矩形區(qū)域,將圖像中矩形區(qū)域的25個頂點確定為坐標點,對每個坐標點的周圍像素點的亮度值累加求均值得到每個坐標點的亮度均值。
S102:根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖。
在確定每個坐標點的亮度均值后,對所述坐標點的亮度均值進行排序,確定所述坐標點的亮度均值的中值,進而通過比較每個坐標點的亮度均值與所述確定出的中值的大小,確定所述圖像對應的坐標點的第一二值圖。
具體的,通過比較,當坐標點的亮度均值不小于所述中值時,所述坐標點在所述第一二值圖中對應1;當坐標點的亮度值小于所述中值時,所述坐標點在所述第一二值圖中對應0。
S103:在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果。
圖像的亮度方向可以為從上至下,從左至右或者傾斜等各種方向,針對于不同的亮度方向,圖像中對應有不同的方向判斷的邊界處。
根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)每個方向對應的二值圖和該方向中坐標點的權值,可以統(tǒng)計出每個亮度方向對應的第一二值圖統(tǒng)計結果。具體的,可以根據(jù)二值圖中坐標點的權值的和或者乘積統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果。
S104:根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向。
針對于不同的亮度方向可以得出不同的第一二值圖統(tǒng)計結果,在確定所述圖像對應的目標亮度方向時,可以通過比較各亮度方向對應的第一二值圖統(tǒng)計結果的大小,取第一二值圖統(tǒng)計結果最大的對應的亮度方向為所述圖像對應的亮度方向。
S105:根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度值,確定每個坐標點的亮度增強倍數(shù)。
將補光結果作為補光輸出值Ydlc_out,將每個坐標點的亮度值作為補光輸入值Ydlc_in,并根據(jù)所述每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離W以及所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離Wmax可以確定每個坐標點的亮度增強倍數(shù)T,計算公式如下:
S106:根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù)。
在根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù)時,可以通過計算所述矩形區(qū)域中每個像素點到其所在的矩形區(qū)域的四個坐標點的距離,進而計算得到所述四個坐標點的四個距離的權重,每個權重乘以對應的坐標點的亮度增強倍數(shù)再累加得到所述矩形區(qū)域中每個像素點的亮度增強倍數(shù)?;蛘撸部梢詫⒃摼匦螀^(qū)域對應的四個坐標點的亮度增強倍數(shù)的均值,作為該矩形區(qū)域中每個像素點的亮度增強倍數(shù)。
為了使確定的圖像中每個像素點的亮度增強倍數(shù)更加準確,可以采用雙線性插值,具體的,根據(jù)圖像中矩形區(qū)域的四個頂點的坐標點的增強倍數(shù),通過采用雙線性插值,可以確定出所述矩形區(qū)域內的每一個像素點的增強倍數(shù),進而根據(jù)圖像中所有坐標點的增強倍數(shù),可以確定出圖像中每一個像素點的增強倍數(shù)。
具體根據(jù)坐標點的增強倍數(shù)確定圖像中每個像素點的增強倍數(shù)的過程屬于現(xiàn)有技術,在本發(fā)明實施例中對該過程不進行贅述。
S107:根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理。
根據(jù)確定出的圖像中每個像素點的增強倍數(shù),及當前場景是否變化的標識信息,可以確定圖像中每個像素點的目標增強倍數(shù),進而采用所述每個像素點的目標增強倍數(shù)對圖像中對應的像素點進行補光處理。
由于在本發(fā)明實施例中,根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度值,確定每個坐標點的亮度增強倍數(shù),進而確定每個像素點的增強倍數(shù),距離第一坐標點越遠,即越暗的像素點的增強倍數(shù)越大,根據(jù)所述每個像素點的增強倍數(shù)以及當前場景是否變化的標識信息可以確定每個像素點的目標增強倍數(shù),并根據(jù)所述目標增強倍數(shù)對圖像中每個像素點進行補光處理。因此,可以調整圖像的亮度,使圖像中暗處的細節(jié)顯示的更清楚。
實施例2:
在上述實施例的基礎上,為了確定每個坐標點對應的權值,并統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果,在本發(fā)明實施例中,可以針對坐標點是否位于邊界處對應第一權值或第二權值,因此根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值包括:
根據(jù)每個亮度方向,確定所述第一二值圖中對應該亮度方向的方向判斷的邊界處;
當所述第一二值圖中坐標點位于所述方向判斷的邊界處時,該坐標點對應第一權值,否則,該坐標點對應第二權值,其中第一權值與第二權值不同。
在圖像中對于不同的亮度方向,圖像中存在不同的方向判斷的邊界處,對于一定的亮度方向,將圖像中與所述亮度方向垂直的并且經過圖像的中心點的位置確定為該亮度方向對應的方向判斷的邊界處。例如,將圖像長寬分別進行4等分,則可以確定出25個坐標點,如圖3A所示,當取亮度方向為從上至下時,則圖像中從上至下第三行的5個坐標點位于方向判斷的邊界處;如圖3B所示,當取亮度方向為從左至右時,則圖像中從左至右第三列的5個坐標點位于方向判斷的邊界處。
當所述第一二值圖中坐標點位于所述方向判斷的邊界處時,該坐標點對應第一權值Wboundary,Wboundary為預設的邊界權重經驗參數(shù),當所述第一二值圖中坐標點不位于所述方向判斷的邊界處時,該坐標點對應第二權值Wnboundary,Wnboundary為預設的非邊界權重經驗參數(shù),其中所述第一權值Wboundary和第二權值Wnboundary為不同值,因此,使得二值圖中每個坐標點對應一個權值。
確定每個坐標點對應的權值后,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果包括:
針對每個亮度方向,根據(jù)該亮度方向,確定該第一二值圖中對應該亮度方向的有效區(qū)域,其中所述有效區(qū)域為該亮度方向的方向判斷的邊界處所對應的亮度較大的區(qū)域;統(tǒng)計所述有效區(qū)域中,每個坐標點的權值及第一二值圖中每個坐標點對應的數(shù)值的乘積和。
針對每個亮度方向,確定出該亮度方向對應的圖像中的方向判斷的邊界處,并以所述方向判斷的邊界處將圖像劃分為兩個區(qū)域,將兩個區(qū)域中亮度較大區(qū)域作為有效區(qū)域,根據(jù)所述有效區(qū)域中的坐標點進行統(tǒng)計,例如圖3A中,有效區(qū)域為如圖所示的方向判斷的邊界處以上(圖中所示的上下)的區(qū)域,圖3B中有效區(qū)域為如圖所示的方向判斷的邊界處左側(圖中所示的左右)區(qū)域。具體的,根據(jù)所述亮度較大區(qū)域中的坐標點的權值及第一二值圖中每個坐標點對應的數(shù)值的乘積再累加,得到每個亮度方向對應的第一二值圖統(tǒng)計結果。
實施例3:
在實施例1的基礎上,為了確定所述圖像的目標亮度方向,可以通過將所述第一二值圖統(tǒng)計結果與圖像中設定的第一亮度閾值進行比較,從而確定圖像的目標亮度方向,因此,根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向包括:
針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;
如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
電子設備中預先保存有設定的第一亮度閾值Tcenterlight,根據(jù)不同的亮度方向,可以得到不同的二值圖統(tǒng)計結果。針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于預先保存的設定的第一亮度閾值Tcenterlight,當判斷結果為是時,將所述第一亮度方向對應的第一二值圖統(tǒng)計結果與其他所有亮度方向對應的第一二值圖統(tǒng)計結果進行大小判斷,當判斷所述第一亮度方向對應的第一二值圖統(tǒng)計結果為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值時,則確定所述第一亮度方向為所述圖像對應的目標亮度方向。
實施例4:
在實施例1和實施例3的基礎上,為了使圖像的目標亮度方向判斷更為準確,所述確定所述圖像對應的目標亮度方向之前,所述方法還包括:
根據(jù)保存的目標亮度均值,確定所述圖像對應的坐標點的第二二值圖;
在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,并根據(jù)所述第二二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第二二值圖統(tǒng)計結果;
所述根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向包括:
針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;且第二二值圖統(tǒng)計結果是否大于設定的第二亮度閾值;
如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,且第二二值圖統(tǒng)計結果是否為所有亮度方向對應的第二二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
電子設備中保存有目標亮度均值Tlightvalue,所述目標亮度均值Tlightvalue可以為連續(xù)多幀圖像中所有坐標點的亮度均值的均值,通過比較每個坐標點的亮度均值與所述保存的目標亮度均值Tlightvalue的大小,確定所述圖像對應的坐標點的第二二值圖。具體的,通過比較,當坐標點的亮度值不小于所述保存的目標亮度均值Tlightvalue時,所述坐標點在所述第二二值圖中對應1;當坐標點的亮度值小于所述保存的亮度均值Tlightvalue時,所述坐標點在所述第二二值圖中對應0。
在圖像中對于不同的亮度方向存在不同的方向判斷的邊界處,當所述第二二值圖中坐標點位于所述方向判斷的邊界處時,該坐標點對應第一權值,當所述第二二值圖中坐標點不位于所述方向判斷的邊界處時,該坐標點對應第二權值,其中所述第一權值和第二權值為不同值,因此,使得二值圖中每個坐標點對應一個權值。針對每個亮度方向,確定出該亮度方向對應的圖像中的方向判斷的邊界處,并以所述方向判斷的邊界處將圖像劃分為兩個區(qū)域,將兩個區(qū)域中亮度較大區(qū)域作為有效區(qū)域,根據(jù)所述有效區(qū)域中的坐標點進行統(tǒng)計,具體的,根據(jù)所述亮度較大區(qū)域中的坐標點的權值及第二二值圖中每個坐標點對應的數(shù)值的乘積再累加,得到每個亮度方向對應的第二二值圖統(tǒng)計結果。
在判斷圖像亮度方向時,在第一二值圖中保存有第一亮度閾值Tcenterlight,在第二二值圖中保存有第二亮度閾值Tlightvalue。針對第一亮度方向,當判斷第一亮度方向對應的第一二值圖統(tǒng)計結果大于預先保存的設定的第一亮度閾值Tcenterli,并且經判斷所述第一亮度方向對應的第一二值圖統(tǒng)計結果為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,同時判斷第一亮度方向對應的第二二值圖統(tǒng)計結果是否大于預先保存的第二亮度閾值Tlightvalue,如果是,將所述第一亮度方向對應的第二二值圖統(tǒng)計結果與其他所有方向對應的不同的第二二值圖統(tǒng)計結果進行大小判斷,當判斷所述第一亮度方向對應的第二二值圖統(tǒng)計結果為所有亮度方向對應的第二二值圖統(tǒng)計結果中的最大值,此時將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
由于根據(jù)兩個二值圖進行圖像亮度方向的確定,當?shù)谝涣炼确较驅牡谝欢祱D統(tǒng)計結果大于第一亮度閾值Tcenterlight,并且所述第一亮度方向對應的第一二值圖統(tǒng)計結果為各方向對應的第一二值圖統(tǒng)計結果中的最大值;同時當?shù)谝涣炼确较驅牡诙祱D統(tǒng)計結果大于第二亮度閾值Tlightvalue,并且所述第一亮度方向對應的第二二值圖統(tǒng)計結果為各方向對應的第二二值圖統(tǒng)計結果中的最大值,此時,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。因此,使得圖像亮度方向的判斷更加準確。
實施例5:
在實施例1的基礎上,為了使確定每個坐標點的亮度增強倍數(shù)更加準確,需要對補光結果取兩個不同值,進而確定每個坐標點的增強倍數(shù)。因此所述根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù)包括:
針對每個坐標點,將該坐標點的亮度均值與設定的倍數(shù)的乘積作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第一增強倍數(shù);將第一坐標點的亮度均值作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第二增強倍數(shù);并
計算每個坐標點的第一增強倍數(shù)和第二增強倍數(shù)的比值;
并識別所述比值中的最大比值,判斷所述最大比值是否大于預設的比例閾值,如果是,則每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)與所述最大比值的商,否則,每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)。
將補光結果作為補光輸出值Ydlc_out,根據(jù)補光結果、每個坐標點的亮度值Ydlc_in、所述每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離W以及所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離Wmax可以確定每個坐標點的增強倍數(shù)T,計算公式如下:
針對每個坐標點,將該坐標點的亮度均值與設定的倍數(shù)Tstrength_auto_thr的乘積作為補光結果,所述設定的倍數(shù)Tstrength_auto_thr為圖像中亮度均值不小于預設的亮度閾值的坐標點的亮度均值的平均值與圖像中所有坐標點的亮度均值的平均值的比值。將所述補光結果作為補光輸出值Ydlc_out,將每個坐標點的亮度值作為補光輸入值Ydlc_in,并根據(jù)所述每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離以及所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離可以確定每個坐標點的第一增強倍數(shù)Tstrength_auto。
將第一坐標點的亮度均值Tmaxlight作為補光結果Ydlc_out,將該坐標點的亮度均值作為補光輸入值Ydlc_in,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第二增強倍數(shù)Tstrength_auto_x。
電子設備中預先保存有預設的比例閾值Tstrength,確定所述第一增強倍數(shù)Tstrength_auto和第二增強倍數(shù)Tstrength_auto_x后,計算每個坐標點的第一增強倍數(shù)Tstrength_auto和第二增強倍數(shù)Tstrength_auto_x的比值,經過排序,得到所述比值中的最大值Rstrength_max,并判斷所述最大值Rstrength_max是否大于預設的比例閾值Tstrength,如果是,則每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)Tstrength_a與所述最大比值的商,否則,每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)Tstrength_auto。
由于根據(jù)兩個補光結果值求得第一增強倍數(shù)Tstrength_auto和第二增強倍數(shù)并根據(jù)第一增強倍數(shù)Tstrength_auto與第二增強倍數(shù)Tstrength_auto_x的比值中的最大值Rstrength_max與預設的比例閾值Tstrength的大小關系,確定出每個坐標點的亮度增強倍數(shù)。因此使得確定每個坐標點的亮度增強倍數(shù)更加準確。
實施例6:
在實施例1的基礎上,為了確定每個像素點的目標亮度增強倍數(shù),并對圖像進行補光處理,所述根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理包括:
當所述場景變化的標識信息標識場景變化時,根據(jù)保存的上一幀的圖像中每個像素點的亮度增強倍數(shù),對當前幀對應的圖像中每個像素點進行補光處理;
當所述場景變化的標識信息標識場景未變化時,判斷所述圖像的亮度方向是否與保存的歷史幀的亮度方向相同,如果相同,針對每個像素點,確定該像素點在當前幀對應的圖像中的亮度增強倍數(shù)與上一幀對應的圖像的亮度增強倍數(shù)的差與設定步進閾值的比值,根據(jù)所述比值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理;如果不同,根據(jù)固定的小于1的比例閾值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
當場景變化標志位為1,即所述場景變化的標識信息標識場景變化時,根據(jù)保存的上一幀的圖像中每個像素點的亮度增強倍數(shù),當前幀的每個像素點的亮度增強倍數(shù)直接使用所述上一幀的每個像素點的亮度增強倍數(shù),對當前幀對應的圖像中每個像素點進行補光處理。
電子設備中預先保存有歷史幀的亮度方向、設定步進閾值Tcenter_step和比例閾值,當場景變化標志位為0,即所述場景變化的標識信息標識場景未變化時,判斷所述圖像的目標亮度方向是否與所述保存的歷史幀的亮度方向相同,如果相同,針對每個像素點,確定該像素點在當前幀對應的圖像中的亮度增強倍數(shù)與上一幀對應的圖像的亮度增強倍數(shù)的差與設定步進閾值Tcenter_step的比值,根據(jù)所述比值與該像素點在上一幀對應的圖像的亮度增強倍數(shù)的和,確定該像素點對應的目標亮度增強倍數(shù),將該目標亮度增強倍數(shù)作為當前幀的亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理;
如果不同,根據(jù)固定的小于1的比例閾值與該像素點在上一幀對應的圖像的亮度增強倍數(shù)的乘積,確定該像素點對應的目標亮度增強倍數(shù),將所述目標亮度增強倍數(shù)作為當前幀的亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
在本發(fā)明實施例中,當場景變化標志位為1,即所述場景變化的標識信息標識場景變化時,所述方法還包括:
判斷當前幀對應的圖像的亮度方向與上一幀對應的圖像的亮度方向是否相同,如果不相同,將保存的第一改變數(shù)值Tdirection_change_num加1,否則,將保存的第一改變數(shù)值Tdirection_change_num置零;
判斷更新后的第一改變數(shù)值Tdirection_change_num是否不小于預設的第一改變閾值Tdirection_change_thr,如果是,將場景變化標志位置為0,即所述場景變化的標識信息修改為標識場景未變化。
電子設備中預先保存有第一改變數(shù)值Tdirection_change_num和第一改變閾值Tdirection_change_thr,在進行圖像補光處理的過程中,當場景變化標志位為1時,判斷當前幀對應的圖像的亮度方向與上一幀對應的圖像的亮度方向是否相同,如果不相同,將保存的第一改變數(shù)值Tdirection_change_num加1,如果相同,將保存的第一改變數(shù)值Tdirection_change_num置零,通過判斷當前幀對應的圖像的亮度方向與上一幀的亮度方向是否相同對第一改變數(shù)值Tdirection_change_num進行更新,并判斷更新后的第一改變數(shù)值Tdirection_change_num是否不小于預設的第一改變閾值Tdirection_change_thr,如果是,將場景變化標志位置為0,即所述場景變化的標識信息修改為標識場景未變化,實現(xiàn)所述場景變化的標識信息的更新。
在本實施例中,當場景變化標志位為0,即所述場景變化的標識信息標識場景未變化時,所述方法還包括:
判斷當前幀對應的圖像的亮度方向與上一幀對應的圖像的亮度方向是否相同,如果不相同,將保存的第二改變數(shù)值Tdirection_thr_num加1,否則,將保存的第二改變數(shù)值置Tdirection_thr_num減1;
判斷更新后的第二改變數(shù)值Tdirection_thr_num是否不小于預設的第二改變閾值Tdirection_adj_thr,如果是,將場景變化標志位置為1,即所述場景變化的標識信息修改為標識場景變化。
電子設備中預先保存有第二改變數(shù)值Tdirection_thr_num和第二改變閾值Tdirection_adj_thr,在進行圖像補光處理的過程中,當場景變化標志位為0時,判斷當前幀對應的圖像的亮度方向與上一幀對應的圖像的亮度方向是否相同,如果不相同,將保存的第二改變數(shù)值Tdirection_thr_num加1,如果相同,將保存的第二改變數(shù)值Tdirection_thr_num減一,通過判斷當前幀對應的圖像的亮度方向與上一幀的亮度方向是否相同對第二改變數(shù)值Tdirection_thr_num進行更新,并判斷更新后的第二改變數(shù)值Tdirection_thr_num是否不小于預設的第二改變閾值Tdirection_adj_thr,如果是,將場景變化標志位置為1,即所述場景變化的標識信息修改為標識場景變化,實現(xiàn)所述場景變化的標識信息的更新。
在本實施例中,所述方法還包括:
判斷當前幀對應的圖像的亮度方向與保存的歷史幀的亮度方向是否相同;
如果不同,則將保存的第三改變數(shù)值加1,否則,將保存的第三改變數(shù)值減1;
判斷更新后的第三改變數(shù)值是否不小于預設的第三改變閾值,如果是,將歷史幀的亮度方向修改為當前幀對應的圖像的亮度方向。
電子設備中預先保存有第三改變數(shù)值和第三改變閾值,在進行圖像補光處理的過程中,判斷當前幀對應的圖像的亮度方向與保存的歷史幀的亮度方向是否相同,如果不同,則將所述保存的第三改變數(shù)值加1,如果相同,將保存的第三改變數(shù)值減1,通過判斷當前幀對應的圖像的亮度方向與保存的歷史幀的亮度方向是否相同對第三改變數(shù)值進行更新,并判斷更新后的第三改變數(shù)值是否不小于預設的第三改變閾值,如果判斷結果為是時,將歷史幀的亮度方向修改為當前幀對應的圖像的亮度方向,從而實現(xiàn)對歷史幀方向的更新。
當判斷場景變化標志位為1,即所述場景變化的標識信息標識場景變化時,對圖像中每個像素點進行補光處理流程如圖4所示。
圖4為本發(fā)明實施例提供的當判斷場景變化標志位為1時,對每個像素點進行補光處理流程圖,其中包括以下步驟:
S401:判斷場景變化標志位為1,并進行步驟S402和步驟S403。
其中,步驟S402和步驟S403沒有先后順序,可以先執(zhí)行S402再執(zhí)行S403,也可以先執(zhí)行S403再執(zhí)行S402,或者通過兩個線程同時執(zhí)行。
S402:根據(jù)保存的上一幀的圖像中每個像素點的亮度增強倍數(shù),對當前幀對應的圖像中每個像素點進行補光處理。
S403:判斷當前幀對應的圖像的亮度方向與上一幀對應的圖像的亮度方向是否相同,如果不相同,將保存的第一改變數(shù)值加1,否則,將保存的第一改變數(shù)值置零,并進行步驟S404。
S404:判斷更新后的第一改變數(shù)值是否不小于預設的第一改變閾值,如果是,將場景變化標志位置為0。
當判斷場景變化標志位為0,即所述場景變化的標識信息標識場景未變化時,對圖像中每個像素點進行補光處理流程如圖5所示。
圖5為本發(fā)明實施例提供的當判斷場景變化標志位為0,對每個像素點進行補光處理流程圖,其中包括以下步驟:
S501:判斷場景變化標志位為0,并進行步驟S502、步驟S505和步驟S507。
同樣的步驟S502、步驟S505和步驟S507沒有先后順序,可以先執(zhí)行S502、也可以先執(zhí)行步驟S505,或者先執(zhí)行S507?;蛘咄ㄟ^不同的線程同時執(zhí)行。
S502:判斷所述圖像的目標亮度方向是否與保存的歷史幀的亮度方向相同,如果相同,進行步驟S503,如果不同,進行步驟S504。
S503:針對每個像素點,確定該像素點在當前幀對應的圖像中的亮度增強倍數(shù)與上一幀對應的圖像的亮度增強倍數(shù)的差與設定步進閾值的比值,根據(jù)所述比值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
S504:根據(jù)固定的小于1的比例閾值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
S505:判斷當前幀對應的圖像的亮度方向與上一幀對應的圖像的亮度方向是否相同,如果不相同,將保存的第二改變數(shù)值加1,否則,將保存的第二改變數(shù)值置減1,并進行步驟S506。
S506:判斷更新后的第二改變數(shù)值是否不小于預設的第二改變閾值,如果是,將場景變化標志位置為1。
S507:判斷當前幀對應的圖像的亮度方向與保存的歷史幀的亮度方向是否相同,如果不同,則將保存的第三改變數(shù)值加1,否則,將保存的第三改變數(shù)值減1,并進行步驟S508。
S508:判斷更新后的第三改變數(shù)值是否不小于預設的第三改變閾值,如果是,將歷史幀的亮度方向修改為當前幀對應的圖像的亮度方向。
圖6為本發(fā)明實施例提供的一種視頻圖像的補光處理裝置結構示意圖,應用于電子設備,該裝置包括:
第一確定模塊61,用于按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,根據(jù)每個矩形區(qū)域的頂點對應的坐標點所在的范圍,確定每個坐標點的亮度均值;
第二確定模塊62,用于根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖;
確定統(tǒng)計模塊63,用于在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果;
第三確定模塊64,用于根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向;
第四確定模塊65,用于根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù);
第五確定模塊66,用于根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù);
補光模塊67,用于根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理。
所述第二確定模塊62,具體用于當坐標點的亮度均值不小于所述中值時,所述坐標點在所述第一二值圖中對應1;當坐標點的亮度均值小于所述中值時,所述坐標點在所述第一二值圖中對應0。
所述確定統(tǒng)計模塊63,具體用于根據(jù)每個亮度方向,確定所述第一二值圖中對應該亮度方向的方向判斷的邊界處;當所述第一二值圖中坐標點位于所述方向判斷的邊界處時,該坐標點對應第一權值,否則,該坐標點對應第二權值,其中第一權值與第二權值不同。
所述確定統(tǒng)計模塊63,具體用于針對每個亮度方向,根據(jù)該亮度方向,確定該第一二值圖中對應該亮度方向的有效區(qū)域,其中所述有效區(qū)域為該亮度方向的方向判斷的邊界處所對應的亮度較大的區(qū)域;統(tǒng)計所述有效區(qū)域中,每個坐標點的權值及第一二值圖中每個坐標點對應的數(shù)值的乘積和。
所述第三確定模塊64,具體用于針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
所述第二確定模塊62,還用于根據(jù)保存的目標亮度均值,確定所述圖像對應的坐標點的第二二值圖;
所述確定統(tǒng)計模塊63,還用于在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,并根據(jù)所述第二二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第二二值圖統(tǒng)計結果;
所述第三確定模塊64,還用于針對第一亮度方向,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否大于設定的第一亮度閾值;且第二二值圖統(tǒng)計結果是否大于設定的第二亮度閾值;如果是,判斷第一亮度方向對應的第一二值圖統(tǒng)計結果是否為所有亮度方向對應的第一二值圖統(tǒng)計結果中的最大值,且第二二值圖統(tǒng)計結果是否為所有亮度方向對應的第二二值圖統(tǒng)計結果中的最大值,如果是,將所述第一亮度方向確定為所述圖像對應的目標亮度方向。
所述第四確定模塊65,具體用于針對每個坐標點,將該坐標點的亮度值與設定的倍數(shù)的乘積作為補光結果,將該坐標點的亮度均值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第一增強倍數(shù);將第一坐標點的亮度均值作為補光結果,將該坐標點的亮度值作為補光輸入值,根據(jù)該坐標點與所述第一坐標點在所述目標亮度方向上的距離,及所述第一坐標點和第二坐標點在所述目標亮度方向上的距離,確定該坐標點對應的第二增強倍數(shù);并計算每個坐標點的第一增強倍數(shù)和第二增強倍數(shù)的比值;并識別所述比值中的最大比值,判斷所述最大比值是否大于預設的比例閾值,如果是,則每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)與所述最大比值的商,否則,每個坐標點的亮度增強倍數(shù)為其第一增強倍數(shù)。
所述第五確定模塊66,具體用于根據(jù)每個矩形區(qū)域中每個像素點,與所述矩形區(qū)域對應的位于四個頂點的坐標點的亮度增強倍數(shù),采用雙線性插值,確定每個矩形區(qū)域中每個像素點的亮度增強倍數(shù)。
所述補光模塊67,具體用于當所述場景變化的標識信息標識場景變化時,根據(jù)保存的上一幀的圖像中每個像素點的亮度增強倍數(shù),對當前幀對應的圖像中每個像素點進行補光處理;當所述場景變化的標識信息標識場景未變化時,判斷所述圖像的目標亮度方向是否與保存的歷史幀的方向相同,如果相同,針對每個像素點,確定該像素點在當前幀對應的圖像中的亮度增強倍數(shù)與上一幀對應的圖像的亮度增強倍數(shù)的差與設定步進閾值的比值,根據(jù)所述比值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理;如果不同,根據(jù)固定的小于1的比例閾值與該像素點在上一幀對應的圖像的亮度增強倍數(shù),確定該像素點對應的目標亮度增強倍數(shù),根據(jù)該目標亮度增強倍數(shù),在當前幀對應的圖像中對該像素點進行補光處理。
所述裝置還包括:
標識修改模塊68,用于當所述場景變化的標識信息標識場景變化時,判斷當前幀對應的圖像的目標亮度方向與上一幀對應的圖像的目標亮度方向是否相同,如果不相同,將保存的第一改變數(shù)值加1,否則,將保存的第一改變數(shù)值置零;判斷更新后的第一改變數(shù)值是否不小于預設的第一改變閾值,如果是,將所述場景變化的標識信息修改為標識場景未變化。
所述標識修改模塊68,還用于當所述場景變化的標識信息標識場景未變化時,判斷當前幀對應的圖像的目標亮度方向與上一幀對應的圖像的目標亮度方向是否相同,如果不相同,將保存的第二改變數(shù)值加1,否則,將保存的第二改變數(shù)值置減1;判斷更新后的第二改變數(shù)值是否不小于預設的第二改變閾值,如果是,將所述場景變化的標識信息修改為標識場景變化。
所述標識修改模塊68,還用于判斷當前幀對應的圖像的目標亮度方向與保存的歷史幀的目標亮度方向是否相同;如果不同,則將保存的第三改變數(shù)值加1,否則,將保存的第三改變數(shù)值減1;判斷更新后的第三改變數(shù)值是否不小于預設的第三改變閾值,如果是,將歷史幀的亮度方向修改為當前幀對應的圖像的亮度方向。
本發(fā)明實施例提供了一種視頻圖像的補光處理方法及裝置,所述方法包括:按照設定的規(guī)則將當前幀對應的圖像劃分為多個矩形區(qū)域,根據(jù)每個矩形區(qū)域的頂點對應的坐標點所在的范圍,確定每個坐標點的亮度均值;根據(jù)每個坐標點的亮度均值的中值及每個坐標點的亮度均值,確定所述圖像對應的坐標點的第一二值圖;在每個亮度方向上,根據(jù)每個坐標點是否位于方向判斷的邊界處,確定每個坐標點對應的權值,根據(jù)所述第一二值圖中每個坐標點的值和每個坐標點對應的權值,統(tǒng)計每個亮度方向對應的第一二值圖統(tǒng)計結果;根據(jù)每個亮度方向對應的第一二值圖統(tǒng)計結果,確定所述圖像對應的目標亮度方向;根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度均值,確定每個坐標點的亮度增強倍數(shù);根據(jù)每個坐標點的亮度增強倍數(shù),確定每個坐標點對應的矩形區(qū)域中每個像素點的亮度增強倍數(shù);根據(jù)每個像素點的亮度增強倍數(shù),及當前場景是否變化的標識信息,對所述圖像中每個像素點進行補光處理。由于在本發(fā)明實施例中,根據(jù)每個坐標點與亮度最大的第一坐標點之間在所述目標亮度方向上的距離,所述第一坐標點和亮度最小的第二坐標點在所述目標亮度方向上的距離,及每個坐標點的亮度值,確定每個坐標點的亮度增強倍數(shù),進而確定每個像素點的亮度增強倍數(shù),距離第一坐標點越遠,即越暗的像素點的亮度增強倍數(shù)越大,因此,可以調整圖像的亮度,使圖像中暗處的細節(jié)顯示的更清楚。
本發(fā)明是參照根據(jù)本發(fā)明實施例的方法、設備(系統(tǒng))、和計算機程序產品的流程圖和/或方框圖來描述的。應理解可由計算機程序指令實現(xiàn)流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結合??商峁┻@些計算機程序指令到通用計算機、專用計算機、嵌入式處理機或其他可編程數(shù)據(jù)處理設備的處理器以產生一個機器,使得通過計算機或其他可編程數(shù)據(jù)處理設備的處理器執(zhí)行的指令產生用于實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的裝置。
這些計算機程序指令也可存儲在能引導計算機或其他可編程數(shù)據(jù)處理設備以特定方式工作的計算機可讀存儲器中,使得存儲在該計算機可讀存儲器中的指令產生包括指令裝置的制造品,該指令裝置實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能。
這些計算機程序指令也可裝載到計算機或其他可編程數(shù)據(jù)處理設備上,使得在計算機或其他可編程設備上執(zhí)行一系列操作步驟以產生計算機實現(xiàn)的處理,從而在計算機或其他可編程設備上執(zhí)行的指令提供用于實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的步驟。
盡管已描述了本發(fā)明的優(yōu)選實施例,但本領域內的技術人員一旦得知了基本創(chuàng)造性概念,則可對這些實施例作出另外的變更和修改。所以,所附權利要求意欲解釋為包括優(yōu)選實施例以及落入本發(fā)明范圍的所有變更和修改。
顯然,本領域的技術人員可以對本發(fā)明進行各種改動和變型而不脫離本發(fā)明的精神和范圍。這樣,倘若本發(fā)明的這些修改和變型屬于本發(fā)明權利要求及其等同技術的范圍之內,則本發(fā)明也意圖包含這些改動和變型在內。