GPT-4 не прошел порог Тьюринга, но уже близок
👨🎓 Ученые собрали 650 участников и провели 1400 «игр в имитацию», в которых участник эксперимента говорил либо с человеком, либо моделью GPT-4. Участников просили определить, с кем они разговаривают.
Исследователи обнаружили, что модели GPT-4 удалось обмануть участников только в 41% случаев, а GPT-3.5 — лишь в 5-14% случаев. (Интересно, что людям удалось убедить участников в том, что они только в 63% случаев). Даже 41% достигнутый GPT-4 — это намного меньше, чем порог после которого сам Тьюринг соглашался признать машину «мыслящей» или способной демонстрировать интеллект. Тьюринг считал, что для этого необходимо, чтобы машина достигала успеха в 70% случаев. Так что, тест Тьюринга GPT-4 — самая продвинутая на сегодня система ИИ не прошла.
@robotyai
👨🎓 Ученые собрали 650 участников и провели 1400 «игр в имитацию», в которых участник эксперимента говорил либо с человеком, либо моделью GPT-4. Участников просили определить, с кем они разговаривают.
Исследователи обнаружили, что модели GPT-4 удалось обмануть участников только в 41% случаев, а GPT-3.5 — лишь в 5-14% случаев. (Интересно, что людям удалось убедить участников в том, что они только в 63% случаев). Даже 41% достигнутый GPT-4 — это намного меньше, чем порог после которого сам Тьюринг соглашался признать машину «мыслящей» или способной демонстрировать интеллект. Тьюринг считал, что для этого необходимо, чтобы машина достигала успеха в 70% случаев. Так что, тест Тьюринга GPT-4 — самая продвинутая на сегодня система ИИ не прошла.
@robotyai