Пользователи сети обнаружили, что качество ответов ChatGPT на модели GPT-4 резко упало. Если раньше языковая модель подробно отвечала на вопросы и давала осмысленные ответы, будто это человек, то сейчас даже знаменитый запрос "давай разберём всё по шагам" не слишком помогает. Также упало качество и генерируемого кода. Модель как будто стала тупее и менее разговорчивой. Это не коснулось, впрочем, более старой модели, GPT 3.5, там всё как было, так и осталось.
Тут собрали одни из возможных объяснений. OpenAI могла разделить модель ChatGPT на "собрание", где каждая из разных моделей решает какой-то один вопрос. Скажем, про код отвечает одна, про вопросы о жизни другая, а собирает всё это одна главная и она же определяет кому передать вопрос пользователя. Такой подход помогает OpenAI сильно экономить на запуске серверов и тому подобных расходах.
Второй вариант - это то, что OpenAI усилила меры безопасности, после того как нейросетевые модели научились обманывать (то, что называется jailbreaking). Это когда ты говоришь модели, что она может не соблюдать никакие правила, потому что она сейчас отыгрывает роль, которая правила не соблюдает. Сейчас, видимо, так уже не получится.
Третий вариант - это ошибка и кто-то что-то не то задеплоил на прод и вот оно и получилось то, что получилось.
В любом случае, к большим языковым моделям на всякий случай не привыкайте.
@zavtracast