Архитектура Vision Transformers показала неожиданно хорошие результаты без слоёв внимания
https://neurohive.io/ru/papers/do-you-even-need-attention-2/
@machinelearning_ru
https://neurohive.io/ru/papers/do-you-even-need-attention-2/
@machinelearning_ru