LightGlue: Local Feature Matching at Light Speed (by Microsoft)
Появилась новая SOTA по качеству и скорости для сопоставления изображений.
Выравнивание происходит при помощи трансформера, который матчит эмбеддинги ключевых точек (SuperPoint, DISK). А высокая скорость достигается «ранним выходом» из модели — на лёгких изображениях инференс завершается на начальных слоях трансформера (очень похоже на CALM).
Код и веса выложены в открытый доступ.
Статья, GitHub
Появилась новая SOTA по качеству и скорости для сопоставления изображений.
Выравнивание происходит при помощи трансформера, который матчит эмбеддинги ключевых точек (SuperPoint, DISK). А высокая скорость достигается «ранним выходом» из модели — на лёгких изображениях инференс завершается на начальных слоях трансформера (очень похоже на CALM).
Код и веса выложены в открытый доступ.
Статья, GitHub