L’obstruction par les nuages est un défi de longue date dans le traitement des images optiques de télédétection, les méthodes traditionnelles de suppression des nuages ayant souvent du mal à restaurer complètement les détails des zones occultées, ce qui affecte la qualité de l’image. Pour répondre à ce problème, cet article propose une méthode de suppression des nuages basée sur la fusion cohérente des caractéristiques multimodales (Cloud-Harmonizer), tirant pleinement parti de la complémentarité et de la cohérence des caractéristiques des images SAR et optiques dans la représentation des objets géographiques, afin de réparer efficacement les informations des zones nuageuses. La méthode est composée de trois modules clés : le module de cohérence des caractéristiques multimodales MFCM (Multi-modal Feature Consistency Module) pour aligner les caractéristiques optiques et SAR et capturer et générer une attention différentielle dans la zone des nuages ; le module de compensation contraint par cohérence CCCM (Consistency-Constrained Compensation Module), qui guide les données SAR pour compenser les caractéristiques manquantes dans les images optiques sur la base de l’attention différentielle ; et le module de fusion adaptative collaborative multimodale MCAF (Multi-modal Collaborative Adaptive Fusion Module), qui intègre plus avant les caractéristiques des deux modalités grâce à une stratégie de fusion adaptative, améliorant l’effet global de réparation. Les résultats expérimentaux sur le jeu de données SEN12MS-CR montrent des performances excellentes aux indices PSNR, SSIM et SAM, respectivement de 30.0408, 0.9004 et 7.6068, surpassant les méthodes modernes. Les résultats indiquent que la méthode proposée montre un fort potentiel pour la suppression des nuages et la restauration des caractéristiques, fournissant une référence utile pour le développement des applications de fusion des données multimodales de télédétection et des technologies de suppression des nuages.
关键词
Suppression des nuages dans les images de télédétection; fusion de données multimodales; cohérence des caractéristiques multimodales