🚀 @SBERLOGACOMPETE webinar on data science:
👨🔬 Aлександр Рыжков, Ольга Цымбой "Почти золото “Kaggle - LLM Science Exam”: retrieval is almost all you need"
⌚️ Четверг 7 Декабря 19.00 (по Москве)
Add to Google Calendar
В этом докладе мы представим разбор нашего итогового решения, занявшего 21е место с 0.916 MAP@3 на приватном лидерборде соревнования “Kaggle - LLM Science Exam”. В ходе рассказа затронем основные моменты в данных или зачем мы использовали дополнительные данные, стратегии поиска контекстов для задачи multiple choice QA, а также как подбирали параметры итогового ансамбля. В конце нашего доклада рассмотрим и сравним другие решения из топа лидерборда.
Описание решения на Каггл: https://www.kaggle.com/competitions/kaggle-llm-science-exam/discussion/447589
О докладчиках: Александр Рыжков - тройной Каггл грандмастер, тим-лид авто-мл "LAMA" (LightAutoML) в Сбер АИ Лаб,
Ольга Цымбой - исследователь в центре инструментов машинного обучения, Cбер АИ Лаб
Zoom link will be in @sberlogabig just before start. Video records: https://www.youtube.com/c/SciBerloga - subscribe out youtube channel !
📖 Presentation: https://t.me/sberlogacompete/10196
📹 Video: https://youtu.be/RWV2cYHRUqU?si=dolyowmtfQLaMeDp
👨🔬 Aлександр Рыжков, Ольга Цымбой "Почти золото “Kaggle - LLM Science Exam”: retrieval is almost all you need"
⌚️ Четверг 7 Декабря 19.00 (по Москве)
Add to Google Calendar
В этом докладе мы представим разбор нашего итогового решения, занявшего 21е место с 0.916 MAP@3 на приватном лидерборде соревнования “Kaggle - LLM Science Exam”. В ходе рассказа затронем основные моменты в данных или зачем мы использовали дополнительные данные, стратегии поиска контекстов для задачи multiple choice QA, а также как подбирали параметры итогового ансамбля. В конце нашего доклада рассмотрим и сравним другие решения из топа лидерборда.
Описание решения на Каггл: https://www.kaggle.com/competitions/kaggle-llm-science-exam/discussion/447589
О докладчиках: Александр Рыжков - тройной Каггл грандмастер, тим-лид авто-мл "LAMA" (LightAutoML) в Сбер АИ Лаб,
Ольга Цымбой - исследователь в центре инструментов машинного обучения, Cбер АИ Лаб
Zoom link will be in @sberlogabig just before start. Video records: https://www.youtube.com/c/SciBerloga - subscribe out youtube channel !
📖 Presentation: https://t.me/sberlogacompete/10196
📹 Video: https://youtu.be/RWV2cYHRUqU?si=dolyowmtfQLaMeDp