Конкурент OpenAI, запущенный его бывшими топами – компания Anthropic – представила новую модель ИИ-чата, Claude 2 (доступен в бета-тестировании из US и UK).
У меня есть свой контрольный вопрос, основанный на сценке из фильма «О чем говорят мужчины» про художника Тищенко. Хотя эта фамилия довольно распространена, хорошо известных художников Тищенко нет (а вот футболистов, например, аж три).
В ответе на этот вопрос галлюцинировать Claude 2 начал с первых же аккордов, причем уверенно настаивал, что его глюки – правда. Кстати, по-русски и по-английски его ложные ответы различались. А вот на другой контрольный вопрос, об авторах нашего канала, он честно ответил, что не знает.
В целом, от Claude 2 противоречивые ощущения. В каких-то вопросах он адекватен и почти не глючит (например, в базовой математике или истории Ирландии и ). В каких-то нестабилен: в разговоре о российских деловых СМИ он сначала был адекватен, но выдал устаревшую информацию, что Ведомости принадлежат FT, а Форбс – международный. На мое замечание поправился, но тут же сообщил, что в 2005 году Коммерсант был куплен Мёрдоком.
В других вопросах густые глюки появляются сразу. Например, из пяти перечисленных им главных гор для чая пуэр, одна была придумана, две оказались просто известными туристическими горами Китая, и только одна, Наньнуо, в самом деле - чайная гора. Кроме того он выдал за имя горы название чайного региона Бан Чжан. Ответ на этот же вопрос на китайском, впрочем, не содержал ни одного правильного ответа. Глюки возникли сразу же в вопросе о разнице терминов у москвичей и петербуржцев: оказывается в Питере трамваи называются трамваями, а в Москве — троллейбусами.
Но больше всего я смеялся, когда предложил чатботу написать посты на основе статей. Из новости о стеклянном доме Маска он вытащил ключевые слова (Tesla, совте директоров, Илон Маск), но придумал совершенно другую историю. А вместо статьи РБК про отказ ФРИИ от иска к основателю сервиса Румбери, он придумал пост о новых процессорах Intel.
