第1章　走進圖像融合

1.1 什么是圖像融合

信息融合屬于通信技術(shù)、計算機科學(xué)和人工智能等多種學(xué)科和應(yīng)用的交叉領(lǐng)域。不同研究領(lǐng)域的研究者對信息融合有不同的理解和定義，歸根結(jié)底，信息融合是指綜合利用多源信息以期獲得對同一事物或場景更全面客觀的理解。近年來，隨著現(xiàn)代信息產(chǎn)業(yè)和相關(guān)科學(xué)技術(shù)的飛速發(fā)展，人們對信息的需求也在不斷增加，極大地帶動了信息融合技術(shù)的研究。在軍事方面，信息融合不僅能用于目標(biāo)檢測、識別和追蹤等低級應(yīng)用，也可以用于態(tài)勢評估和威脅估計等高級應(yīng)用。此外，信息融合應(yīng)用已迅速擴展到民用領(lǐng)域，主要包括無人飛機、航空航天應(yīng)用、目標(biāo)檢測和跟蹤，以及機器人技術(shù)。

信息融合包含很多分支，圖像融合是其中應(yīng)用最廣泛的分支之一?，F(xiàn)代社會，圖像作為人類感知、獲取和傳遞外部信息的主要途徑，承載了豐富的視覺信息，并廣泛應(yīng)用于社會生活的方方面面，在國防建設(shè)和國民經(jīng)濟發(fā)展中發(fā)揮著不可替代的作用。得益于新型傳感器和現(xiàn)代成像技術(shù)的進步以及數(shù)字成像設(shè)備的日益普及，圖像的獲取途徑越來越多，獲取方式越來越便捷，進一步推動了視覺信息保存和傳輸技術(shù)的發(fā)展。由于傳感器之間的物理特性和設(shè)計初衷的差異，不同傳感器對同一目標(biāo)場景采集到的信息具有不同的特征。比如，醫(yī)學(xué)成像中的CT和MRI圖像分別側(cè)重于突出骨骼和軟組織的結(jié)構(gòu)，而紅外傳感器能夠捕獲目標(biāo)的熱輻射。為了有效整合不同傳感器所成像中的有用信息進而將圖像應(yīng)用到更廣泛的領(lǐng)域，圖像融合作為信息融合的一個分支開始蓬勃發(fā)展。

研究發(fā)現(xiàn)，不同傳感器對于同一場景或者同一傳感器在不同時間采集到的不同圖像（這些圖像稱為多源圖像）的信息具有冗余性和互補性。如圖1.1所示（這里以兩幅源圖像為例），圖像融合從多個圖像中收集重要信息，并將它們整合在較少數(shù)量的圖像中，一般是單幅圖像，該融合圖像比任何單一源圖像都包含有更豐富、更準(zhǔn)確的必要信息。圖像融合不僅可以消除多源圖像之間的冗余信息從而減少數(shù)據(jù)量，而且能夠構(gòu)建更適合人類和機器感知的圖像，實現(xiàn)對該場景更準(zhǔn)確的理解和描述，有助于后續(xù)計算機對圖像的解譯任務(wù)。圖像融合克服了單一傳感器技術(shù)限制帶來的成像信息不足的問題，致力于探索信息更高效的表達(dá)形式，覆蓋更廣泛的空間和時間范圍，提高系統(tǒng)的魯棒性（健壯性）以及可靠性，因此在醫(yī)學(xué)、軍事、農(nóng)業(yè)、航空航天、遙感、工業(yè)等領(lǐng)域發(fā)揮了重要的作用。

圖1.1 圖像融合圖解