GPT-4 не смог сдать экзамен на адвоката
По заявлению OpenAI в прошлом году, GPT-4 превзошел 90% стажеров-юристов на экзамене, однако новое исследование показало, что это было преувеличено.
Исследование, опубликованное в журнале "Искусственный интеллект и право", показало, что GPT-4 не достигал топ-10% по результатам экзамена. Модель показала хорошие результаты только среди тех, кто сдавал экзамен еще раз, что обычно является менее успешной группой.
Особенно отстал GPT-4 в разделе экзамена, где нужно было писать эссе, оказавшись лишь на 15-м месте среди первокурсников.
Исследование подчеркнуло, что необходимо быть осторожным с использованием искусственного интеллекта в юридической сфере, учитывая его склонность к созданию "галлюцинаций" - вымышленных фактов или связей.
@sip_ai | @sip_ai_bot
По заявлению OpenAI в прошлом году, GPT-4 превзошел 90% стажеров-юристов на экзамене, однако новое исследование показало, что это было преувеличено.
Исследование, опубликованное в журнале "Искусственный интеллект и право", показало, что GPT-4 не достигал топ-10% по результатам экзамена. Модель показала хорошие результаты только среди тех, кто сдавал экзамен еще раз, что обычно является менее успешной группой.
Особенно отстал GPT-4 в разделе экзамена, где нужно было писать эссе, оказавшись лишь на 15-м месте среди первокурсников.
Исследование подчеркнуло, что необходимо быть осторожным с использованием искусственного интеллекта в юридической сфере, учитывая его склонность к созданию "галлюцинаций" - вымышленных фактов или связей.
@sip_ai | @sip_ai_bot