0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

淺述一種基于局部特征分析的多聚焦圖像融合方法

電子工程師 ? 來源:微型機與應(yīng)用 ? 作者:龍海軍,李金龍, ? 2021-05-05 08:20 ? 次閱讀

摘 要: 提出了一種基于局部特征分析的多聚焦圖像融合方法。首先采用二維經(jīng)驗?zāi)J椒纸猓˙EMD)對不同聚焦圖像進行分解,得到多個內(nèi)蘊模函數(shù)(IMF)分量,然后提取出第一個IMF分量的統(tǒng)計信息作為圖像融合的依據(jù),對多張不同聚焦的圖像進行融合,得到最終的融合圖像。實驗結(jié)果表明,本文提出的均值IMF方案與其他方案相比,具有較高的融合質(zhì)量和較低的計算復(fù)雜度。

隨著科學(xué)技術(shù)的迅速發(fā)展,圖像融合技術(shù)作為計算機圖像處理中重要組成部分也逐漸發(fā)展起來。圖像融合主要是將同一場景中的多張圖像信息加以提取,得到相應(yīng)場景更精確、更詳細、更全面的信息,以便對圖像進行進一步的分析和研究。目前,圖像融合技術(shù)在醫(yī)學(xué)、生物學(xué)、物理學(xué)、電子機械等各個領(lǐng)域都有巨大的發(fā)展?jié)摿?,如顯微鏡多聚焦圖像的融合、醫(yī)學(xué)上CT與核磁共振圖像的融合、軍用圖像傳感系統(tǒng)等方面。

近三十年來,圖像融合技術(shù)的研究在國內(nèi)的各個領(lǐng)域取得很大進步,開發(fā)出了多種圖像融合系統(tǒng)。但是相對于國外先進的技術(shù),國內(nèi)的圖像融合技術(shù)還存在許多理論方面和技術(shù)方面的問題,因此,對于深入展開圖像融合技術(shù)的研究在現(xiàn)階段有很重大的意義。

基于理論的成熟性,目前已提出了很多圖像融合模型和算法。早期的圖像融合方法主要有平均、HIS變換、主分量分析、高通濾波等。這些方法在進行融合處理時都不對待融合圖像進行分解變換,融合處理僅僅只在一個層次上進行,都是比較簡單的圖像融合算法[1]。20世紀80年代中期,BURT D J等人提出了拉普拉斯金字塔算法[2]。后來相繼出現(xiàn)了基于對比度金字塔、基于梯度金字塔等金字塔式融合算法[3]。

隨著小波理論的興起,Chipman等人又提出一種基于小波理論的圖像融合,TANG J S提出了基于DCT變換[4]的圖像融合?;诳臻g域和頻域變換的圖像融合算法是目前研究較多的圖像融合算法。在大部分圖像融合算法的研究中,由于應(yīng)用范圍和要求不同,各種圖像融合算法和模型相對而言各有優(yōu)缺點,因此需要發(fā)展更適用、性能更優(yōu)的圖像融合算法。

本文主要對多聚焦圖像融合算法進行研究。多聚焦圖像融合技術(shù)主要應(yīng)用于電子顯微鏡、數(shù)碼相機等光學(xué)成像系統(tǒng)中,得到一個所有目標都聚焦清晰的融合圖像,以便于人眼觀察或機器進一步處理。圖像融合分為3類:像素級圖像融合、特征級圖像融合和決策級圖像融合[5]。

本文針對特征級圖像融合提出一種基于局部特征分析的多聚焦圖像融合方法,該方法摒棄了基于空間域和頻域的融合算法研究,采用二維經(jīng)驗?zāi)J椒纸釨EMD(Bidimensional Empirical Mode Decomposition)運用到顯微圖像融合中,通過數(shù)學(xué)形式獲取圖像的BIMF分量的均值得到顯微圖像的特征。BEMD分解方法是一種完全自適應(yīng)的數(shù)據(jù)分解表達形式,基于BIMF分量評價方法含有的信息量比基于頻域和基于空間域系數(shù)特征大,具有比傅里葉變換和小波分解更好的特性。

1 基于BEMD分解的顯微圖像融合

1.1 融合圖像特征提取

對輸入圖像I(x,y),采用BEMD[6]將圖像I(x,y)分解成多個內(nèi)蘊模式函數(shù)IMF(Intrinsic Mode Function)分量和殘差分量,分別記為imfi(x,y)和RI(x,y)。由于第一個IMF分量含有圖像的大部分高頻信息,包括了待融合圖像突出的邊緣、線條和區(qū)域邊界等強對比度物理信息,足以表征圖像的模糊特性,因此,本文只對第一個IMF分量進行處理,然后提取出該IMF的圖像特征,根據(jù)圖像特征選用適當(dāng)?shù)膱D像融合規(guī)則。本文設(shè)計了以下3種圖像融合算法。

pIYBAGB5Y-6ARP3HAAKsgjz0i2I104.png

o4YBAGB5ZEWAUKQGAAHffaZAJmA381.png

2 實驗結(jié)果與分析

首先采用自然圖像對本文的各種方案性能進行測試。圖2(a)和(b)給出了2張不同聚焦的自然圖像,圖2(c)、(d)和(e)分別給出了IMF-GGD方案、IMF-Hilbert方案和IMF-Mean方案的融合結(jié)果。從圖中可以看出,IMF-GGD方案以尺度參數(shù)作為圖像融合準則,其融合效果較差,塊效應(yīng)比較明顯,并且高斯擬合的復(fù)雜度較高;IMF-Hilbert方案的融合結(jié)果稍有所提高;IMF-Mean方案得到的融合圖像效果最佳,局部區(qū)域的模糊塊最少,并且采用IMF-Mean方案的計算復(fù)雜度相對其他兩種方案是最低的,非常適合圖像融合應(yīng)用。

進一步采用顯微圖像對本文的各種方案性能進行測試。圖3給出了對2張不同聚焦的顯微圖像采用IMF-GGD方案、IMF-Hilbert方案和IMF-Mean方案得到的融合圖像,圖4給出了對5張不同聚焦的顯微圖像采用IMF-Mean方案得到的融合入圖像。從實驗結(jié)果可以看出,IMF-Mean方案能夠得到較好的融合效果。由于顯微圖像的分辨率較高,對算法的實時性要求較高,而本文提出的IMF-Mean方案復(fù)雜度較低,為數(shù)碼顯微鏡在線融合系統(tǒng)的開發(fā)提供了可能性。

o4YBAGB5ZFiAcqYHAAH8dhxaqB4349.png

本文提出了一種基于局部特征分析的多聚焦圖像融合方法。本文算法的優(yōu)點在于采用BEMD對多聚焦圖像進行分解,提取多個IMF分量,分解過程是自適應(yīng)的,完全由數(shù)據(jù)驅(qū)動,可以提取出各幅源圖像的聚焦清晰的細節(jié)信息;并且,基于均值的融合準則能得到較好的圖像融合效果,計算復(fù)雜度較低。在本文研究的基礎(chǔ)上,將進一步結(jié)合區(qū)域重要性信息進行圖像融合操作。

參考文獻

[1] 王春華。圖像融合研究綜述[J]。科技創(chuàng)新導(dǎo)報,2011(13):11-13.

[2] BURT P J., KOLCZYNSKI R J., Enhances image capture through fusion[C]。 International Conference on Computer Vision, 1993, 173-182.

[3] TOET A, RUYVEN V, VALETON J J, et al. Merging thermal and visual images by a contrast pyramid[J]。 Optical Engineering, 1989, 28(7): 789-792.

[4] Tang Jinshan. A contrast based image fusion technique in the DCT domain[J]。 Digital Signal Processing, 2004, 14(3): 218-226.

[5] 黃偉。像素級圖像融合研究[D]。上海:上海交通大學(xué),2008.

[6] 王珊珊,邵楓,郁梅,等?;诙S經(jīng)驗?zāi)J椒纸獾臒o參考模糊失真立體圖像質(zhì)量評價方法[J]。光電工程,2013,40(9):28-34.

[7] 汪太月,李志明。一種廣義高斯分布的參數(shù)快速估計法[J]。工程地球物理學(xué)報,2006,3(3):172-176.

[8] 喬麗紅。二維Hilbert-Huang變換及其在圖像處理中的應(yīng)用[D]。石家莊:河北師范大學(xué),2010.

[9] 陳穎。顯微圖像融合算法研究[D]。北京:中國科學(xué)院研究生院,2010.

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • HIS
    HIS
    +關(guān)注

    關(guān)注

    0

    文章

    18

    瀏覽量

    10841
  • DCT
    DCT
    +關(guān)注

    關(guān)注

    1

    文章

    55

    瀏覽量

    19818
  • BEMF
    +關(guān)注

    關(guān)注

    0

    文章

    5

    瀏覽量

    4737
收藏 人收藏

    評論

    相關(guān)推薦

    計算機視覺中的圖像融合

    在許多計算機視覺應(yīng)用中(例如機器人運動和醫(yī)學(xué)成像),需要將多個圖像的相關(guān)信息整合到單圖像中。這種圖像融合可以提供更高的可靠性、準確性和數(shù)據(jù)
    的頭像 發(fā)表于 08-01 08:28 ?431次閱讀
    計算機視覺中的<b class='flag-5'>圖像</b><b class='flag-5'>融合</b>

    人臉檢測的五種方法各有什么特征和優(yōu)缺點

    人臉檢測是計算機視覺領(lǐng)域的個重要研究方向,主要用于識別和定位圖像中的人臉。以下是五常見的人臉檢測方法及其特征和優(yōu)缺點的介紹: 基于膚色的
    的頭像 發(fā)表于 07-03 14:47 ?429次閱讀

    卷積神經(jīng)網(wǎng)絡(luò)在圖像識別中的應(yīng)用

    卷積操作 卷積神經(jīng)網(wǎng)絡(luò)的核心是卷積操作。卷積操作是一種數(shù)學(xué)運算,用于提取圖像中的局部特征。在圖像識別中,卷積操作通過滑動窗口(或稱為濾波器
    的頭像 發(fā)表于 07-02 14:28 ?566次閱讀

    一種 IT 和 OT 安全融合的思路

    提出一種 IT 和 OT 安全融合的思路,并給出相應(yīng)建議。 內(nèi)容目錄 : 1 IT 和 OT 融合發(fā)展現(xiàn)狀
    的頭像 發(fā)表于 05-09 11:16 ?326次閱讀

    未來已來,傳感器融合感知是自動駕駛破局的關(guān)鍵

    可以引導(dǎo)本車的攝像頭針對運動目標做快速局部修正曝光(見下圖),以此實時獲取運動目標的分辨細節(jié)特征,并將局部修正曝光的圖像融合雷達數(shù)據(jù)傳輸至自
    發(fā)表于 04-11 10:26

    深度學(xué)習(xí)在偏振圖像融合領(lǐng)域的研究進展與現(xiàn)狀

    基于尺度變換(MST)的偏振圖像融合方法研究開始較早且應(yīng)用廣泛。2016年,中北大學(xué)提出一種紅外偏振與強度
    發(fā)表于 03-11 11:17 ?920次閱讀
    深度學(xué)習(xí)在偏振<b class='flag-5'>圖像</b><b class='flag-5'>融合</b>領(lǐng)域的研究進展與現(xiàn)狀

    紅外與可見光圖像融合方法綜述

    圖像融合旨在將來自不同源圖像的互補信息融合在一起,生成幅具有更高質(zhì)量、更多信息量和更清晰的圖像
    的頭像 發(fā)表于 02-22 09:35 ?2989次閱讀
    紅外與可見光<b class='flag-5'>圖像</b><b class='flag-5'>融合</b><b class='flag-5'>方法</b>綜述

    微美全息(NASDAQ:WIMI)探索全局-局部特征自適應(yīng)融合網(wǎng)絡(luò)框架在圖像場景分類中的創(chuàng)新運用

    面臨著許多挑戰(zhàn),如復(fù)雜的場景等。然而,現(xiàn)有的圖像場景分類方法往往只關(guān)注全局或局部特征的提取,而忽略了全局和局部
    的頭像 發(fā)表于 01-05 16:08 ?298次閱讀
    微美全息(NASDAQ:WIMI)探索全局-<b class='flag-5'>局部</b><b class='flag-5'>特征</b>自適應(yīng)<b class='flag-5'>融合</b>網(wǎng)絡(luò)框架在<b class='flag-5'>圖像</b>場景分類中的創(chuàng)新運用

    OpenCV4圖像分析之BLOB特征分析

    BLOB是圖像中灰度塊的一種專業(yè)稱呼,更加變通點的可以說它跟我們前面二值圖像分析的聯(lián)通組件類似,通過
    的頭像 發(fā)表于 12-28 12:28 ?938次閱讀
    OpenCV4<b class='flag-5'>圖像</b><b class='flag-5'>分析</b>之BLOB<b class='flag-5'>特征</b><b class='flag-5'>分析</b>

    手持RGB-D傳感器廣泛應(yīng)用的情況

    DisCo方法:提出了一種基于擴散的跨模態(tài)形狀重建方法。該方法利用三平面擴散模型,結(jié)合部分點云和視圖
    的頭像 發(fā)表于 12-26 16:44 ?349次閱讀
    手持RGB-D傳感器廣泛應(yīng)用的情況

    基于機器視覺的SAR自聚焦方法研究

    源SAR圖像指的是由不同雷達系統(tǒng)與飛行批次獲得的圖像,它們的雷達波段、分辨率、運動參數(shù)、場景類型和工作模式等均存在著較大差異。現(xiàn)有的SAR自聚焦理論與
    發(fā)表于 12-02 10:36 ?407次閱讀
    基于機器視覺的SAR自<b class='flag-5'>聚焦</b><b class='flag-5'>方法</b>研究

    一種高效、靈巧的通信信號產(chǎn)生方法

    電子發(fā)燒友網(wǎng)站提供《一種高效、靈巧的通信信號產(chǎn)生方法.pdf》資料免費下載
    發(fā)表于 11-07 09:54 ?0次下載
    <b class='flag-5'>一種</b>高效、靈巧的<b class='flag-5'>多</b>通信信號產(chǎn)生<b class='flag-5'>方法</b>

    基于一種電動機網(wǎng)絡(luò)控制系統(tǒng)的設(shè)計方法

    電子發(fā)燒友網(wǎng)站提供《基于一種電動機網(wǎng)絡(luò)控制系統(tǒng)的設(shè)計方法.pdf》資料免費下載
    發(fā)表于 10-19 10:18 ?0次下載
    基于<b class='flag-5'>一種</b><b class='flag-5'>多</b>電動機網(wǎng)絡(luò)控制系統(tǒng)的設(shè)計<b class='flag-5'>方法</b>

    Python如何進行特征重要性分析

    特征重要性分析用于了解每個特征(變量或輸入)對于做出預(yù)測的有用性或價值。目標是確定對模型輸出影響最大的最重要的特征,它是機器學(xué)習(xí)中經(jīng)常使用的一種方法
    發(fā)表于 10-13 12:32 ?315次閱讀
    Python如何進行<b class='flag-5'>特征</b>重要性<b class='flag-5'>分析</b>

    一種基于圖像識別的第五版人民幣成色檢測方法

    電子發(fā)燒友網(wǎng)站提供《一種基于圖像識別的第五版人民幣成色檢測方法.pdf》資料免費下載
    發(fā)表于 10-13 11:19 ?0次下載
    <b class='flag-5'>一種</b>基于<b class='flag-5'>圖像</b>識別的第五版人民幣成色檢測<b class='flag-5'>方法</b>