Реееееееебята, я вам сейчас такое расскажу!



Сейчас вы узнаете, почему GPT-4 умнее, чем вы думаете. (Это сообщение – сжатый конспект этого видео).



Суть видео заключается в следующем: вместо того, чтобы просто кормить GPT-4 задачами, автор сделал интересную механику. Он брал задачу и просил её решить с помощью метода "думай шаг за шагом" (на умном CoT) три раза с использованием разных нейросетей, которые ничего не знали друг о друге. Затем результат предоставлялся сети, которая выступала в роли саморефлексирующего критика, формируя итоговый ответ. Так вот, это позволило достичь результатов GPT-4 на тесте, где сдаются все экзамены людей по разным предметам, с помощью GPT-3.5, а на GPT-4 показать результат 84% (человеческий уровень 89.8%, а до этого было 68%).



Чему это нас учит? ваше умение писать промпты - это 90% шанса получить крутой результат от модели (где этому учиться вы и так знаете). Ну и тому, что мы все еще не понимаем реальный уровень возможностей, даже текущих моделей.



Какие мысли и ощущения появляются после прочтения этого?



P.S. Автор – машина: не имея доступа к API у GPT-4, она провел множество экспериментов просто в окнах чата. Для меня это звучит нереально!



@aihappens