異源圖像融合及其評價方法的研究.pdf

1、異源圖像融合是協(xié)同使用不同類型的圖像傳感器，并將各種圖像信息有效地結合起來，形成高性能感知系統(tǒng)來獲取對同一目標的一致性描述的過程。該技術從多信息的視角進行處理，可綜合各圖像之間的互補信息和冗余信息，擴大傳感器的工作范圍，增加置信度、改善系統(tǒng)的可靠性和可維護性，降低對單一傳感器的性能要求，可更為準確、可靠、全面地獲取對目標或場景的信息描述，不僅可以使處理后的圖像更適合人的視覺觀察，而且可以為進一步的圖像處理提供更有效的信息。 將異

2、源圖像中具有代表性的紅外圖像和可見光圖像作為研究對象，結合紅外技術、圖像處理與人工智能理論，分析、吸收國內外關于圖像融合的成功經驗，設計了基于空間域和變換域的兩類新型異源圖像融合算法，并建立了一種新型的融合圖像質量綜合評價標準，在此基礎上，建立了閉環(huán)式圖像自適應融合體系，可由系統(tǒng)自動選擇符合用戶需求的融合方案，其分層式處理結構保證了融合算法的快速性和準確性，增強了圖像融合的自動化程度。 首先研究了基于空間域的異源圖像融合方法。對

3、現有的空間域融合方法進行了分析，如加權平均融合法、灰度極值法等，通過融合實驗，比較了各自的優(yōu)缺點。在此基礎上，提出了一種基于K-L變換（Karhunen-Loeve Transform）的自動加權融合算法。它保持了現有的加權平均融合法的快速實用性，通過主成分分析，將源圖像中的有用信息集中到相互獨立的新主成分矩陣中，由此確定加權平均融合方法中源圖像的加權系數，以實現更加理想的融合效果。實驗結果表明，基于K-L變換的自動加權融合算法的效果優(yōu)

4、于現有的常用空間域融合算法。 重點研究了基于變換域的異源圖像融合方法。對變換域中典型的多尺度分析理論進行了論述，對其中具有代表性的小波變換技術及其在圖像融合中的應用做出了詳細說明，結合具體的實驗，討論了不同小波基、不同分解層數和不同融合規(guī)則對融合效果的影響，分析了小波變換融合法的優(yōu)勢和局限性。在此之上，重點討論了各向異性多尺度分析融合法，以NSCT（Non-sampled Contourlet Transform，非下采樣Con

5、tourlet變換）為主要工具，給出了該方法在圖像融合中應用的特點，并以此為基礎，設計了全新的融合規(guī)則，提出了一種基于NSCT和PCNN（Pulse Couple Neural Network，脈沖耦合神經網絡）的異源圖像融合方法，充分利用了NSCT的各向異性、多方向性和平移不變性，消除了以往多尺度分解帶來的頻率混疊現象，又結合了PCNN的全局耦合特性，利用其特有的生物學背景，提高融合圖像的整體視覺效果。實驗結果表明，使用該方法得到的融

6、合圖像清晰自然，適合人眼觀察，其融合效果優(yōu)于現有的小波變換法等變換域融合算法。 研究和分析了異源圖像融合質量的綜合評價方法。在介紹了現有主、客觀圖像評價方法的基礎上，對已有的多種評價指標進行了分類，討論了不同融合目的下的指標選取規(guī)則以及單個評價指標的局限性；而后，重點研究了現有的多評價指標綜合化方法，比較了幾種典型方法的優(yōu)缺點。并在此基礎上，提出了一種基于FNN（Fuzzy Neural Network，模糊神經網絡）的圖像融合

7、質量綜合評價方法，結合了模糊邏輯推理的結構性知識表達能力和神經網絡的自學習能力，將多種典型的圖像融合客觀評價指標進行模糊化，以主觀評價結論作為先驗知識，通過網絡學習自動生成評價指標權重等相關參數，并通過動量因子提高了網絡的學習效率。實驗結果表明，該方法可對圖像融合質量進行全面、準確的評價，在很大程度上克服了單純由人眼判決產生的主觀性和單因素客觀評價指標的片面性。 研究了異源圖像融合自適應體系?；谏弦徽轮薪o出的圖像融合綜合評價方

8、法，建立了一種閉環(huán)式的自適應圖像融合模型，以融合算法的復雜度為標準進行分層，將多種特性不同的圖像融合算法進行串行排列，由系統(tǒng)自動選取符合用戶需求的融合方案，克服了開環(huán)融合系統(tǒng)靈活性差的缺點。此外，模型內的算法可靈活添加，具有很好的可擴展性。為了驗證模型的有效性，選擇加權平均融合法、小波變換融合法、Contourlet融合法和NSCT-PCNN融合法為算法集進行融合實驗。實驗結果表明，該體系建立了融合結果與用戶需要之間的有機聯系，融合過程