Обложка канала

IsChemist

2435 @ischemist

Персональный канал Антона Моргунова - химика, который поступил в Гарвард, MIT, Стэнфорд, Калтех и Коламбию.

IsChemist

3 года назад
Открыть в
Galactica Есть такая глупая шутка, мол, почему люди умиляются белкам, но терпеть не могут крыс, хотя вторые от первых отличаются не сильно? У белок пиар другой. Это я к чему. Оказывается, 15 ноября 2022 года, буквально за две недели до релиза chatGPT, Meta выпустила свою language learning model (LLM) — Galactica. Они обучили ее на тысячах научных статей и позиционировали как помощника ученого: Galactica can summarize academic papers, solve math problems, generate Wiki articles, write scientific code, annotate molecules and proteins, and more Ученые, в свойственной им манере, тут же взяли галактику на тест-драйв и обнаружили, что она периодически выдает полнейшую чушь, но делает это уверенно, кто-то даже бы сказал авторитарно, и грамматически верно. Как говорят эксперты — LLM по своей природе не способны отличать факты от вымысла, а хорошая модель просто понимает какие слова должны стоять рядом друг с другом. В общем, ученые сказали: игрушка забавная, но в силу своей самоуверенности — опасная. И буквально через 3 дня Мета закрыла доступ к галактике и больше мы о ней не слышали. Вот обзор ситуации: www.technologyreview.com/2022/11…-science И вот, спустя две недели, 30 ноября 2022 года, OpenAI выпускает точно такую же LLM, обладающую точно теми же достоинствами, и, что самое главное, теми же самыми недостатками (в интернете полно примеров, да и самому можно убедиться если задать правильные вопросы). Но что? Планетарное восхищение и уже практически осталось 5 минут до того, как инстакоучи начнут записывать вебинары по «выходу на новый уровень заработка с chatGPT» (несмотря на то, что это, по-прежнему, preview for research purposes). Для такой разницы можно найти два объяснения. 1. Никто не любит Мету. Мета — практически синонимична с корпорацией зла. За кадром, правда, остается вопрос инвестиций мелкомягких в openAI, но кого это волнует? 2. Вот вам и разница между обычными людьми и учеными. То, что для вторые назвали dangerous bullshit, первые радостно и добровольно сха-ва-ли.
Why Meta’s latest large language model survived only three days online

Galactica was supposed to help scientists. Instead, it mindlessly spat out biased and incorrect nonsense.

MIT Technology Review