Насколько умен ChatGPT?
Он стал настолько компетентным, что теперь студенты используют его для подготовки д/з и экзаменационных работ. Отсюда, например, блокировки ChatGPT в некоторых учебных заведениях США.
На инфографике — результаты профессиональных и академических экзаменов, сданных ChatGPT. Успеваемость измерялась в процентилях — это способ ранжирования результатов в сравнении с результатами других. Например, если процентиль по тесту 60-й, значит балл выше, чем у 60% тестируемых.
Так, в Codeforces ChatGPT ниже 5 процентиля, а в одном из других тестов — 1300.
В Verbal (GRE — тест, который сдают для поступления в учебные заведения США) у ChatGPT 99 процентилей.
Текущая версия GPT-4 может обрабатывать большие объемы текста — в одном варианте на 6000 слов, в другом — на 24 000 слов.