基于Bayer格式的圖像融合方法及圖像融合裝置制造方法及圖紙

本發(fā)明專利技術(shù)提供了一種基于Bayer格式的圖像融合方法及圖像融合裝置，該圖像融合方法包括：獲取待融合的多幀Bayer圖像；分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量；對所述多幀Bayer圖像的亮度分量和色度分量分別進行融合處理，得到所述多幀Bayer圖像融合后的亮度分量和色度分量；根據(jù)所述融合后的亮度分量和色度分量，生成融合后的圖像。本發(fā)明專利技術(shù)的技術(shù)方案有效減少了圖像融合時的計算量，進而降低了對系統(tǒng)資源的消耗，提高了圖像融合算法的效率，滿足了實時性的要求，并能有效提高了融合后圖像的清晰度。

Image fusion method based on Bayer format and image fusion device

The invention provides a Bayer format image fusion and image fusion method based on image fusion device, the method comprises the following steps: acquiring multi frame Bayer image fusion; extract the brightness and chroma of multi frame Bayer image per frame Bayer image; brightness and chroma of the multi frame Bayer images are fused respectively, get the multi frame Bayer fused image brightness and chroma; according to the brightness and chroma of the fused, fused image generation. The technical scheme of the invention can effectively reduce the amount of calculation of image fusion, and reduce the system resource consumption, improve the efficiency of image fusion algorithm, meet the real-time requirement, and can effectively improve the fusion image clarity.

【技術(shù)實現(xiàn)步驟摘要】
基于Bayer格式的圖像融合方法及圖像融合裝置
本專利技術(shù)涉及圖像處理
，具體而言，涉及一種基于Bayer格式的圖像融合方法及圖像融合裝置。
技術(shù)介紹
圖像融合是將不同傳感器或相同傳感器獲得的多幅圖像進行綜合處理，得到一張滿足某種需求的新圖像。不同特性的傳感器獲取圖像信息是有所差異的，即使是采用相同的傳感器，在不同觀測時間或不同觀測角度獲取的信息也可能不同，圖像融合能充分利用多幅圖像中的冗余信息和互補信息來融合得到效果較好的圖像。對于多聚焦圖像來說，由于光學傳感器設(shè)備有限的視差深度，導致很難獲得一個多點聚焦的圖像，因為傳感器無法給出距離遠近不同的物體相同的圖像分辨率，這種情況下通常會導致圖像聚焦在某一區(qū)域或者某一側(cè)，而另一區(qū)域或另一側(cè)會出現(xiàn)模糊的現(xiàn)象。多聚焦圖像融合可以將傳感器在同一位置拍攝到的幾幅圖像經(jīng)過適當?shù)膱D像融合算法合成一副多聚焦的高清晰度圖像。圖像融合通常分3個層次：像素級、特征級和決策級。像素級融合最大優(yōu)點是能保持盡可能多的現(xiàn)場數(shù)據(jù)，提供其他融合層次所不能提供的細微信息，但是計算量大，冗余度高，實時性差；特征級融合方式損失了一部分信息，屬于中間級的融合；決策級融合與像素級融合相比，處理的數(shù)據(jù)量大為減少，但是這種融合方式損失信息量最大。目前大多數(shù)圖像融合算法的自適應性差，算法的實時性有待提高。需要說明的是，在上述
技術(shù)介紹
部分公開的信息僅用于加強對本專利技術(shù)的背景的理解，因此可以包括不構(gòu)成對本領(lǐng)域普通技術(shù)人員已知的現(xiàn)有技術(shù)的信息。
技術(shù)實現(xiàn)思路
本專利技術(shù)的目的在于提供一種基于Bayer格式的圖像融合方法及圖像融合裝置，進而至少在一定程度上克服由于相關(guān)技術(shù)的限制和缺陷而導致的一個或者多個問題。本專利技術(shù)的其他特性和優(yōu)點將通過下面的詳細描述變得顯然，或部分地通過本專利技術(shù)的實踐而習得。根據(jù)本專利技術(shù)的一個方面，提供一種基于Bayer格式的圖像融合方法，包括：獲取待融合的多幀Bayer圖像；分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量；對所述多幀Bayer圖像的亮度分量和色度分量分別進行融合處理，得到所述多幀Bayer圖像融合后的亮度分量和色度分量；根據(jù)所述融合后的亮度分量和色度分量，生成融合后的圖像。在本專利技術(shù)的一些實施例中，基于前述方案，分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量的步驟，包括：根據(jù)所述每幀Bayer圖像中的每個2×2的小塊內(nèi)的像素值，計算所述每個2×2的小塊對應的亮度分量和色度分量；根據(jù)所述每幀Bayer圖像中的所有2×2的小塊對應的亮度分量和色度分量，計算所述多幀Bayer圖像融合后的亮度分量和色度分量。在本專利技術(shù)的一些實施例中，基于前述方案，根據(jù)以下公式計算所述每個2×2的小塊對應的亮度分量和色度分量：其中，Gul和Glr分別表示所述每個2×2的小塊內(nèi)的兩個綠色像素的像素值；B表示所述每個2×2的小塊內(nèi)的藍色像素的像素值；R表示所述每個2×2的小塊內(nèi)的紅色像素的像素值；Yul和Ylr分別表示與Gul和Glr相對應的亮度分量；Cr和Cb分別表示所述每個2×2的小塊對應的兩個色度分量。在本專利技術(shù)的一些實施例中，基于前述方案，對所述多幀Bayer圖像的亮度分量進行融合處理，包括：對所述每幀Bayer圖像的亮度分量進行分解，得到所述每幀Bayer圖像的亮度分量對應的高頻分量和低頻分量；對所述多幀Bayer圖像的亮度分量對應的高頻分量和低頻分量分別進行融合處理，得到融合后的高頻分量和低頻分量；基于所述融合后的高頻分量和低頻分量，生成所述多幀Bayer圖像融合后的亮度分量。在本專利技術(shù)的一些實施例中，基于前述方案，對所述多幀Bayer圖像的亮度分量對應的高頻分量進行融合處理，包括：采用區(qū)域標準差最大準則對所述多幀Bayer圖像的亮度分量對應的高頻分量進行融合處理。在本專利技術(shù)的一些實施例中，基于前述方案，對所述多幀Bayer圖像的亮度分量對應的低頻分量進行融合處理，包括：計算所述多幀Bayer圖像的亮度分量對應的低頻分量的加權(quán)平均值，并將計算得到的加權(quán)平均值作為所述融合后的低頻分量。在本專利技術(shù)的一些實施例中，基于前述方案，在計算所述多幀Bayer圖像的亮度分量對應的低頻分量的加權(quán)平均值之前，對所述多幀Bayer圖像的亮度分量對應的低頻分量進行直方圖均衡化處理。在本專利技術(shù)的一些實施例中，基于前述方案，對所述每幀Bayer圖像的亮度分量進行分解的步驟，包括：對所述每幀Bayer圖像的亮度分量進行小波變換處理，以得到所述每幀Bayer圖像的亮度分量對應的高頻分量和低頻分量；基于所述融合后的高頻分量和低頻分量，生成所述多幀Bayer圖像融合后的亮度分量的步驟，包括：對所述融合后的高頻分量和低頻分量進行小波逆變換處理，以得到所述多幀Bayer圖像融合后的亮度分量。在本專利技術(shù)的一些實施例中，基于前述方案，對所述多幀Bayer圖像的色度分量進行融合處理，包括：將所述多幀Bayer圖像的色度分量的最大值作為融合后的色度分量。在本專利技術(shù)的一些實施例中，基于前述方案，根據(jù)所述融合后的亮度分量和色度分量，生成融合后的圖像的步驟，包括：對所述融合后的亮度分量和色度分量進行合并處理，得到Y(jié)CrCb數(shù)據(jù)；將所述YCrCb數(shù)據(jù)轉(zhuǎn)換為Bayer圖像；根據(jù)轉(zhuǎn)換得到的Bayer圖像，生成RGB圖像。根據(jù)本專利技術(shù)的另一方面，還一種基于Bayer格式的圖像融合裝置，包括：獲取單元，用于獲取待融合的多幀Bayer圖像；處理單元，用于分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量；融合單元，用于對所述多幀Bayer圖像的亮度分量和色度分量分別進行融合處理，得到所述多幀Bayer圖像融合后的亮度分量和色度分量；生成單元，用于根據(jù)所述融合后的亮度分量和色度分量，生成融合后的圖像。在本專利技術(shù)的一些實施例中，基于前述方案，所述處理單元配置為：根據(jù)所述每幀Bayer圖像中的每個2×2的小塊內(nèi)的像素值，計算所述每個2×2的小塊對應的亮度分量和色度分量；根據(jù)所述每幀Bayer圖像中的所有2×2的小塊對應的亮度分量和色度分量，計算所述多幀Bayer圖像融合后的亮度分量和色度分量。在本專利技術(shù)的一些實施例中，基于前述方案，根據(jù)以下公式計算所述每個2×2的小塊對應的亮度分量和色度分量：其中，Gul和Glr分別表示所述每個2×2的小塊內(nèi)的兩個綠色像素的像素值；B表示所述每個2×2的小塊內(nèi)的藍色像素的像素值；R表示所述每個2×2的小塊內(nèi)的紅色像素的像素值；Yul和Ylr分別表示與Gul和Glr相對應的亮度分量；Cr和Cb分別表示所述每個2×2的小塊對應的兩個色度分量。在本專利技術(shù)的一些實施例中，基于前述方案，所述融合單元配置為：對所述每幀Bayer圖像的亮度分量進行分解，得到所述每幀Bayer圖像的亮度分量對應的高頻分量和低頻分量；對所述多幀Bayer圖像的亮度分量對應的高頻分量和低頻分量分別進行融合處理，得到融合后的高頻分量和低頻分量；基于所述融合后的高頻分量和低頻分量，生成所述多幀Bayer圖像融合后的亮度分量。在本專利技術(shù)的一些實施例中，基于前述方案，所述融合單元配置為：采用區(qū)域標準差最大準則對所述多幀Bayer圖像的亮度分量對應的高頻分量進行融合處理。在本專利技術(shù)的一些實施例中，基于前述方案，所述融合單元配置為：計算本文檔來自技高網(wǎng)...

【技術(shù)保護點】
一種基于Bayer格式的圖像融合方法，其特征在于，包括：獲取待融合的多幀Bayer圖像；分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量；對所述多幀Bayer圖像的亮度分量和色度分量分別進行融合處理，得到所述多幀Bayer圖像融合后的亮度分量和色度分量；根據(jù)所述融合后的亮度分量和色度分量，生成融合后的圖像。

【技術(shù)特征摘要】
1.一種基于Bayer格式的圖像融合方法，其特征在于，包括：獲取待融合的多幀Bayer圖像；分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量；對所述多幀Bayer圖像的亮度分量和色度分量分別進行融合處理，得到所述多幀Bayer圖像融合后的亮度分量和色度分量；根據(jù)所述融合后的亮度分量和色度分量，生成融合后的圖像。2.根據(jù)權(quán)利要求1所述的基于Bayer格式的圖像融合方法，其特征在于，分別提取所述多幀Bayer圖像中每幀Bayer圖像的亮度分量和色度分量的步驟，包括：根據(jù)所述每幀Bayer圖像中的每個2×2的小塊內(nèi)的像素值，計算所述每個2×2的小塊對應的亮度分量和色度分量；根據(jù)所述每幀Bayer圖像中的所有2×2的小塊對應的亮度分量和色度分量，計算所述多幀Bayer圖像融合后的亮度分量和色度分量。3.根據(jù)權(quán)利要求2所述的基于Bayer格式的圖像融合方法，其特征在于，根據(jù)以下公式計算所述每個2×2的小塊對應的亮度分量和色度分量：其中，Gul和Glr分別表示所述每個2×2的小塊內(nèi)的兩個綠色像素的像素值；B表示所述每個2×2的小塊內(nèi)的藍色像素的像素值；R表示所述每個2×2的小塊內(nèi)的紅色像素的像素值；Yul和Ylr分別表示與Gul和Glr相對應的亮度分量；Cr和Cb分別表示所述每個2×2的小塊對應的兩個色度分量。4.根據(jù)權(quán)利要求1所述的基于Bayer格式的圖像融合方法，其特征在于，對所述多幀Bayer圖像的亮度分量進行融合處理，包括：對所述每幀Bayer圖像的亮度分量進行分解，得到所述每幀Bayer圖像的亮度分量對應的高頻分量和低頻分量；對所述多幀Bayer圖像的亮度分量對應的高頻分量和低頻分量分別進行融合處理，得到融合后的高頻分量和低頻分量；基于所述融合后的高頻分量和低頻分量，生成所述多幀Baye...

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：馬昊辰，宋斌，冉駿，
申請(專利權(quán))人：聚龍智瞳科技有限公司，
類型：發(fā)明
國別省市：北京,11