Подбор гиперпараметров KTO даёт результаты. Сейчас ещё запустил обучение поверх новых существующих английских тюнов.