Интересная статься, где сравнивают между собой длинные трансформеры (если коротко: используйте Big Bird если не важна скорость и Performer если важна, не используйте Reformer вообще).
https://bit.ly/3nGiBRG
https://bit.ly/3nGiBRG