Beyond the Imitation Game: Quantifying and extrapolating the capabilities of language models
Бывает, несколько недель живешь спокойно, а потом все случается сразу: вышел Big Bench! 🪑
Самый большой коллаборативный NLP-бенчмарк, охватывающие максимальное число интеллектуальных задач, выраженных текстом. 200+ задач на разных языках мира
Статья вышла сегодня и включает 442 авторов: кажется, в NLP это новый рекорд после статьи по универсальным моделям.
https://arxiv.org/abs/2206.04615
Бывает, несколько недель живешь спокойно, а потом все случается сразу: вышел Big Bench! 🪑
Самый большой коллаборативный NLP-бенчмарк, охватывающие максимальное число интеллектуальных задач, выраженных текстом. 200+ задач на разных языках мира
Статья вышла сегодня и включает 442 авторов: кажется, в NLP это новый рекорд после статьи по универсальным моделям.
https://arxiv.org/abs/2206.04615