Старший Авгур

Новые данные (gpt4_conversations_multilingual) и щепотка дедупликации сделали только чуть-чуть хуже....

Новые данные (gpt4_conversations_multilingual) и щепотка дедупликации сделали только чуть-чуть хуже....

Новые данные (gpt4_conversations_multilingual) и щепотка дедупликации сделали только чуть-чуть хуже....

Новые данные (gpt4_conversations_multilingual) и щепотка дедупликации сделали только чуть-чуть хуже....

С сожалением вынужден признать, что формат важен даже при обучении lm_head. Хотя лосс на валидационн...

Прекрасное из датасетов (ответы gpt-4)Оценка от Опуса: 5/10

Полпути до Suzume пройдено, 61% сырого винрейта. Это всё ещё с ChatML форматом промпта. Модель залью...

lm_head по метрикам не взлетел, но субъективно стало гораздо лучше: переключения на английский пофик...

Короче, ситуация такая. В том случае, когда мы не учим lm_head и embed_tokens, шаблон важен. Особенн...

72% сырого винрейта, правильно наванговал. Многоязычная синтетика (и оригинальный формат?) творят чу...