Старший Авгур

Я собрал тест-сет из 230 примеров запросов из бота, попробовал разные варианты LLM-as-a-Judge, всё д...

Ещё один вопрос, на который отвечают только топовые проприетарные модели.

Закончил размечать новые данные, в итоге вышло 1600 примеров, отправил их в стандартный пайплайн (оц...

Вопрос, достойный задавания языковым моделям (отвечает Sonnet 3.5)

😁

Сделал маленькую консольную программку на Textual для ручной фильтрации датасета. Напрямую читать JS...

CoT вариант 3.5 Sonnet'а (смотрю https://www.youtube.com/watch?v=yBL7J0kgldU, там как раз про похоже...

Для полноты — gpt-4o просто выдумал цитату, что по-моему гораздо хуже.

Интересный пример ответа 3.5 Sonnet'а. Во-первых, он дословно помнит отрывок из Мастера и Маргариты....

Интересный пример ответа 3.5 Sonnet'а. Во-первых, он дословно помнит отрывок из Мастера и Маргариты....