DiffusionMVS: алгоритм стереовосстановления дистанционных изображений на основе диффузионных ограничений

LIAN Yuanfeng ,  

WANG Sen ,  

摘要

В данной статье предложена многовидовая стереосистема DiffusionMVS (Diffusion Multi-View Stereo) на основе диффузионных ограничений для решения проблем низкой точности сопоставления признаков, наличия шумов на предсказанных картах глубины и неполного восстановления краев в задачах многовидового стерео для дистанционного зондирования. Во-первых, на базе сети признаков пирамида была разработана модуль многоуровневого выделения признаков с усилением признаков MFE-FPN (Multi-scale Feature Enhancement Feature Pyramid Network) для улучшения способности сети изучать признаки многовидовых дистанционных изображений; во-вторых, предложен модуль адаптивной агрегации признаков AFA (Adaptive Feature Aggregation) для динамической интеграции признаков разных уровней с целью захвата деталей глубины на границах объектов; наконец, спроектирована оптимизационная модель объемных затрат на основе диффузионных ограничений DCM (Diffusion Constrained Module), которая устраняет шумы в предсказанных картах глубины через оптимизацию распределения глубинных значений с шумовыми точками, а также используется трансформер с направлением на края для улучшения восстановления границ карты глубины. Экспериментальные результаты на наборах данных WHU-TLC и LuoJia-MVS показали, что по сравнению с базовой моделью, средняя абсолютная ошибка (MAE) сети DiffusionMVS снизилась на 28,11% и 3,37% соответственно, демонстрируя хорошие показатели восстановления и способность к обобщению.

关键词

дистанционное зондирование;многовидовое стерео;многоуровневое выделение признаков;адаптивная агрегация признаков;диффузионная модель;преобразователь с направлением на края

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website