Les images satellite multispectrales ont des informations spectrales capables de refléter une richesse de caractéristiques géologiques, mais elles ont une faible résolution spatiale et un manque relatif d'informations de texture. Au contraire, les images satellite panchromatiques ont une résolution spatiale élevée et une riche information de texture, mais elles manquent d'informations spectrales riches en caractéristiques géologiques. La technique de fusion d'images peut les intégrer afin de tirer parti de leurs avantages respectifs, et ainsi permettre à l'image fusionnée de mieux répondre aux besoins des tâches ultérieures. Dans cet article, une méthode de fusion d'images satellite multispectrales et panchromatiques basée sur un réseau génératif à double voie et un transformateur est proposée. Plus précisément, la méthode utilise d'abord un lissage guidé pour décomposer les images sources (multispectrales et panchromatiques) en constituants de base présentant des informations principales sur l'image et des composants détaillés reflétant des informations de texture et de détail; puis les composants de base des images multispectrales et panchromatiques décomposées sont concaténés, les composants standard obtenus de la décomposition sont également concaténés; ensuite, les composants de base concaténés à partir des composants de base des images et des composants standard sont introduits dans la branche de base du générateur, et les composants standard obtenus de la décomposition sont également introduits dans la branche détaillée; ensuite, en tenant compte des différentes caractéristiques des composants de base et des composants standard, les informations de caractéristiques sont extraites à l'aide d'un réseau transformateur et d'un réseau de neurones convolutionnels, respectivement, pour extraire des informations spectrales globales et des informations de texture locales à partir de l'embranchement de base et de l'embranchement détaillé; enfin, grâce à un entraînement antagoniste continu entre le générateur et les double discriminateurs (base et détail), une image fusionnée avec des informations spectrale
关键词
Fusion d'images satellite; Lissage guidé; Réseaux de neurones convolutionnels; Générateur antagoniste; Réseaux transformateurs; Composants de base; Composants détaillés; Panchromatiques; Multispectrales