Если вдруг как-нибудь доберетесь до файн-тюнинга этих огромных GPT под свои задачи, пригодится обзор Влада Лялина. В нем рассматриваются методы parameter-efficient fine-tuning больших языковых моделей. Некоторые эти методы реализованы в либе PEFT от 🤗