OpenAI представил модель CriticGPT, которая обучена выявлять недочёты в результатах GPT-4
CriticGPT является ИИ-помощником для тестировщиков, помогая им находить ошибки в коде. Модель, основанная на семействе GPT-4, способна анализировать код и указывать на возможные ошибки. Она обучена на наборе данных с примерами кода, содержащими намеренно введенные ошибки.
Эксперименты показали, что CriticGPT успешно выявляет ошибки как внесенные специально, так и естественно возникающие. Кроме того, модель способна писать более полные отзывы и контролировать уровень ложных фактов. Метод "force sampling beam search" помогает производить детальные обзоры кода, обеспечивая поиск проблем и уменьшая вероятность ошибок.
Команда исследователей признает, что CriticGPT наиболее эффективен в обнаружении ошибок в узких областях кода, но может испытывать трудности с определением ошибок, разбросанных по разным частям ответа.
Хотя CriticGPT снижает уровень ложных фактов, он не исключает их полностью.
@sip_ai | @sip_ai_bot
CriticGPT является ИИ-помощником для тестировщиков, помогая им находить ошибки в коде. Модель, основанная на семействе GPT-4, способна анализировать код и указывать на возможные ошибки. Она обучена на наборе данных с примерами кода, содержащими намеренно введенные ошибки.
Эксперименты показали, что CriticGPT успешно выявляет ошибки как внесенные специально, так и естественно возникающие. Кроме того, модель способна писать более полные отзывы и контролировать уровень ложных фактов. Метод "force sampling beam search" помогает производить детальные обзоры кода, обеспечивая поиск проблем и уменьшая вероятность ошибок.
Команда исследователей признает, что CriticGPT наиболее эффективен в обнаружении ошибок в узких областях кода, но может испытывать трудности с определением ошибок, разбросанных по разным частям ответа.
Хотя CriticGPT снижает уровень ложных фактов, он не исключает их полностью.
@sip_ai | @sip_ai_bot