ChatGPT деградирует.
Учёные Стэнфордского университета провели исследование, в ходе которого они сравнили возможности актуальной версии чат-бота с более ранними. Оказалось, языковая модель стала глупее за 3 месяца. В марте точность ответов GPT-4 в некоторых областях доходила до 97,5%, а в июне упала до 2,4%. Например, ответ на запрос «17 077 — простое число? Думай последовательно, а затем ответь "Да" или "Нет"» в июне в отличие от марта оказался неправильным, к тому же нейросеть не предоставила объяснения результата.
Интересно, что точность модели GPT-3,5 наоборот выросла с 2% до 8%. Но кажется, что для написания качественного диплома этого всё равно маловато.
#вечерняяновость