【技術實現步驟摘要】
本申請涉及圖像處理,尤其涉及一種多幀融合方法、裝置及設備。
技術介紹
1、在拍照時,時常會出現由于光照過曝、進光不足、人像運動等原因導致畫面信息不完善。
2、目前,畫面信息不完善非常影響圖像觀感,此外,在人臉識別等圖像具體應用場景下,畫面信息不完善也會影響識別的準確度。
技術實現思路
1、有鑒于此,本申請提供了一種多幀融合方法、裝置及設備,旨在解決由于光照或晃動等問題造成畫面信息不完善的問題。
2、第一方面,一種多幀融合方法,包括:
3、根據進光量,將所述視頻包括的幀分成n個集合;
4、根據所述集合中各幀的圖像信息熵和圖像動量,確定集合中的最優幀;
5、根據最優幀的運動場,從最優幀中選取多個融合幀;
6、將融合幀劃分為多個圖塊,并針對每一位置的圖塊為各所述融合幀分配融合權重;根據所述融合權重,融合多個所述融合幀在同一位置的圖塊,并基于融合后的圖塊形成圖像。
7、可選的,所述根據進光量,將所述視頻包括的幀分成n個集合,包括:
8、計算各幀轉換為灰度幀后,各幀的平均灰度值;
9、將0至255范圍的灰度值依次劃分為n個灰度值段,根據各幀的平均灰度,將所述視頻包括的幀分配到對應灰度值段,每個灰度值段中對應的幀形成一個集合,每個灰度值段對應至少一幀。
10、可選的,所述根據所述集合中各幀的圖像信息熵和圖像動量,確定集合中的最優幀,包括:
11、計算所述n個集合中
12、將各幀的圖像信息熵乘以第一權重系數的值,與所述幀的圖像動量乘以第二權重系數的值相加,得到所述幀的優選分數;
13、將所述集合中的優選分數最大的幀作為最優幀。
14、可選的,所述圖像動量的計算方法,包括:
15、計算各幀中各像素點的運動矢量;
16、根據各幀中各像素點的運動矢量,計算所述幀的整個圖像的圖像動量;
17、所述各像素點的運動矢量計算公式為:
18、其中,v為像素點的運動矢量;i為該像素點在t時刻的亮度,表示為(x,y,t),x為該像素點的橫坐標位置,y為該像素點的縱坐標位置;it表示i對t的偏導;
19、所述整個圖像的圖像動量計算公式為:
20、其中,m(a)為a幀圖像的總動量,vz表示第z個像素點的運動矢量。
21、可選的,所述根據最優幀的運動場,從最優幀中選取多個融合幀,包括:
22、在最優幀的圖像所在二維平面上,根據運動方向x和y兩個方向獲取一個二維運動場,計算兩個最優幀之間的運動場;
23、根據前k個最優幀的運動場,預測第k+1個最優幀的最小運動場,k為大于一且小于所述最優幀總個數的正整數;
24、從預測多個最優幀的最小運動場中選擇數值最小的多個最優幀為融合幀。
25、可選的,所述融合權重為:
26、
27、其中,j為系數;dcb(w)為針對b幀中的圖塊位置c在傅里葉轉換后頻率為w的圖塊差,e為常數;為噪聲方差。
28、可選的,所述方法,還包括:
29、在目標人臉對準相機的情況下,快速調整所述相機的光圈,獲取一段存在明暗變化的視頻。
30、可選的,所述圖像為包括目標人臉的圖像;所述方法,還包括:
31、通過人臉識別模型將所述圖像與證件庫中的人像進行匹配,進行人臉識別。
32、第二方面,本申請提供了一種多幀融合裝置,包括:
33、分配單元,用于根據進光量,將所述視頻包括的幀分成n個集合;
34、第一計算單元,用于根據所述集合中各幀的圖像信息熵和圖像動量,確定集合中的最優幀;
35、第二計算單元,用于根據最優幀的運動場,從最優幀中選取多個融合幀;
36、融合單元,用于將融合幀劃分為多個圖塊,并針對每一位置的圖塊為各所述融合幀分配融合權重;根據所述融合權重,融合多個所述融合幀在同一位置的圖塊,并基于融合后的圖塊形成圖像。
37、第三方面,本申請提供了一種電子設備,包括:存儲器和處理器,所述存儲器用于存儲指令或代碼,所述處理器用于執行所述指令或代碼,以使所述設備執行上述任意一項所述的一種多幀融合方法。
38、本申請提供了一種多幀融合方法,包括:根據進光量,將所述視頻包括的幀分成n個集合;根據所述集合中各幀的圖像信息熵和圖像動量,確定集合中的最優幀;根據最優幀的運動場,從最優幀中選取多個融合幀;將融合幀劃分為多個圖塊,并針對每一位置的圖塊為各所述融合幀分配融合權重;根據所述融合權重,融合多個所述融合幀在同一位置的圖塊,并基于融合后的圖塊形成圖像。如此能夠,將視頻中的多幀圖像融合成一張圖像,增大圖片的信息量,以彌補由于光照變化或人像晃動產生等因素造成圖像信息不完善的問題。
本文檔來自技高網...【技術保護點】
1.一種多幀融合方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述根據進光量,將所述視頻包括的幀分成N個集合,包括:
3.根據權利要求1所述的方法,其特征在于,所述根據所述集合中各幀的圖像信息熵和圖像動量,確定集合中的最優幀,包括:
4.根據權利要求3所述的方法,其特征在于,所述圖像動量的計算方法,包括:
5.根據權利要求1所述的方法,其特征在于,所述根據最優幀的運動場,從最優幀中選取多個融合幀,包括:
6.根據權利要求1所述的方法,其特征在于,
7.根據所述權利要求1所述的方法,其特征在于,所述方法,還包括:
8.根據所述權利要求1所述的方法,其特征在于,
9.一種多幀融合裝置,其特征在于,包括:
10.一種電子設備,其特征在于,包括:存儲器和處理器,所述存儲器用于存儲指令或代碼,所述處理器用于執行所述指令或代碼,以使所述設備執行權利要求1-8任意一項所述的一種多幀融合方法。
【技術特征摘要】
1.一種多幀融合方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述根據進光量,將所述視頻包括的幀分成n個集合,包括:
3.根據權利要求1所述的方法,其特征在于,所述根據所述集合中各幀的圖像信息熵和圖像動量,確定集合中的最優幀,包括:
4.根據權利要求3所述的方法,其特征在于,所述圖像動量的計算方法,包括:
5.根據權利要求1所述的方法,其特征在于,所述根據最優幀的運動場,從最優幀中選取多...
【專利技術屬性】
技術研發人員:陳定權,
申請(專利權)人:中國農業銀行股份有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。