Suppression des nuages dans les images de télédétection basée sur la cohérence multimodale

ZHU Shudan ,  

LEI Fan ,  

ZHANG Lijun ,  

YANG Min ,  

YANG Kaijun ,  

WEI Jide ,  

FENG Ruyi ,  

摘要

La couverture nuageuse constitue un défi de longue date dans le traitement des images optiques de télédétection, les méthodes traditionnelles de suppression des nuages ayant souvent du mal à restaurer entièrement les détails des zones occultées, ce qui affecte la qualité des images. Pour répondre à ce problème, cet article propose une méthode de suppression des nuages basée sur la fusion cohérente des caractéristiques multimodales (Cloud-Harmonizer), exploitant pleinement la complémentarité et la cohérence entre les caractéristiques des images SAR et optiques pour une restauration efficace des informations dans les zones nuageuses. Cette méthode se compose de trois modules centraux : le module de cohérence des caractéristiques multimodales (Multi-modal Feature Consistency Module, MFCM) pour aligner les caractéristiques optiques et SAR, capturer et générer une attention différenciée sur les zones nuageuses ; le module de compensation avec contrainte de cohérence (Consistency-Constrained Compensation Module, CCCM) qui guide la compensation des caractéristiques manquantes des images optiques par les données SAR selon l’attention différenciée ; le module de fusion adaptative collaborative multimodale (Multi-modal Collaborative Adaptive Fusion Module, MCAF) qui intègre davantage les caractéristiques des deux modalités grâce à une stratégie de fusion adaptative, améliorant ainsi l’effet global de restauration. Les résultats expérimentaux sur le jeu de données SEN12MS-CR montrent que cette méthode atteint d'excellentes performances avec des indicateurs PSNR de 30,0408, SSIM de 0,9004 et SAM de 7,6068, surpassant les méthodes avancées actuelles. Les résultats démontrent que cette méthode présente un potentiel important pour la suppression des nuages et la restauration des caractéristiques, offrant une référence utile pour le développement des applications de fusion de données multimodales en télédétection et des techniques de suppression des nuages.

关键词

Suppression des nuages dans les images de télédétection ; fusion de données multimodales ; cohérence des caractéristiques multimodales

阅读全文