#новости_науки #reviewer2
Небольшая новость про того, чем я занимаюсь — бенчмарками.
Бенчмарки в NLP — системы, оценивающие ИИ-системы по их способностям решать нужные и интересные задачи.
С точки зрения бизнеса, бенчмарки помогают не сжечь бабки впустую при обучении. Это важно!
Как сделать бенчмарки более эффективными? Многие из них откровенно превратились в Kaggle для трансформеров.
Чтобы ответить на этот вопрос, мы с прекрасными коллегами в этом году организовали тематический воркшоп на ACL 2022.
Все рецензирование и верстка сборника позади, и теперь самое приятное: общение, приглашенные доклады, постеры, круглый стол!
NLP Power! The First Workshop on Efficient Benchmarking in NLP.
Если вы будете на ACL, приглашаем вас зайти к нам в гости: NLP Power workshop состоится 26 мая, в четверг с 11:00 по 20:00 по Москве
В конце воркшопа - круглый стол, посвящённый проблемам бенчмарков. У нас в гостях:
- Anna Rumshisky (UMASS, Amazon)
- He He (CILVR / ML2)
- Ulises A. Mejias (SUNY Oswego)
- Sebastian Ruder (Google)
Страничка воркшопа ACL: ссылка
Сайт: ссылка
Twitter: ссылка
Приходите!
Небольшая новость про того, чем я занимаюсь — бенчмарками.
Бенчмарки в NLP — системы, оценивающие ИИ-системы по их способностям решать нужные и интересные задачи.
С точки зрения бизнеса, бенчмарки помогают не сжечь бабки впустую при обучении. Это важно!
Как сделать бенчмарки более эффективными? Многие из них откровенно превратились в Kaggle для трансформеров.
Чтобы ответить на этот вопрос, мы с прекрасными коллегами в этом году организовали тематический воркшоп на ACL 2022.
Все рецензирование и верстка сборника позади, и теперь самое приятное: общение, приглашенные доклады, постеры, круглый стол!
NLP Power! The First Workshop on Efficient Benchmarking in NLP.
Если вы будете на ACL, приглашаем вас зайти к нам в гости: NLP Power workshop состоится 26 мая, в четверг с 11:00 по 20:00 по Москве
В конце воркшопа - круглый стол, посвящённый проблемам бенчмарков. У нас в гостях:
- Anna Rumshisky (UMASS, Amazon)
- He He (CILVR / ML2)
- Ulises A. Mejias (SUNY Oswego)
- Sebastian Ruder (Google)
Страничка воркшопа ACL: ссылка
Сайт: ссылка
Twitter: ссылка
Приходите!