​​Интерактивное выделение объектов на видео с помощью попиксельного поиска



Исследователи из Цюриха предложили новый метод сегментации объектов с помощью попиксельного (pixel-wise) поиска в пространстве эмбеддинга. Модель построена с помощью обучения полной свёрточной сети и использует модифицированный triplet loss, специально предназначенный для выделения объектов на видео. Вручную размеченные пиксели являются эталонными образцами, а остальные пиксели классифицируются с помощью метода поиска ближайшего соседа.



Скорость вычислений превосходит существующие методы и делает модель наиболее подходящей для интерактивной сегментации объектов.