Передают, что GPT3. 5 и 4 глупеют местами со временем.
Конечно, это выборочные тесты, а процедуры обновления алгоритмов во времени не прозрачны для стороннего наблюдателя. То есть, мы не знаем, тупеют ли они от общения с людьми или сами по себе. 🫢
--
На этом фоне просто обращу ваше внимание, что сами разработчики моделей делают с нами когнитивную диверсию. Например, из вчерашнего примера про LLaMA2 мы видели, что она оптимизирована на прохождение определённых тестов (а как ещё показать преимущество). Но мы все это много раз проходили: выбор тестов - это тоже выбор.
—
@quantumquintum