Обложка канала

Малоизвестное интересное

Рассказы, анализ и аннотации происходящего на стыке науки, технологий, бизнеса и общества. Поскольку переделать мир мы не можем, то давайте попробуем его понять.

Малоизвестное интересное

3 года назад
Открыть в
«Конец человеческого вида ничем не будет отличается от конца тех девяти кузенов, что были у нас в вельде прежде, чем мы их уничтожили – истребили путем комбинации убийства и превосходящей конкуренции» – сказал на днях Расс Робертс в дискуссии с Эриком Хоэлом об угрозе человечеству со стороны ИИ. Соглашаясь с этим, Хоэл заметил: Я считаю предельно наивным предположение, что мы сможем контролировать эти инопланетные нечеловеческие интеллекты. Споры на эту тему техно-оптимистов и техно-пессимистов обычно не продуктивны. У обеих сторон нет неопровержимых доказательств своих позиций. Есть лишь экспертные мнения сторон, которые нужно еще проверять. Это похоже на ситуацию с экспертами по взрывам, вызванными МЧС в Шереметьево, где был обнаружен подозрительно тикающий запаянный металлический контейнер. 100%-но определить, может ли эта штука взорваться, эксперты не могут, разделившись на оптимистов и пессимистов. • Оптимисты полагают, что это муляж, и потому невелик риск проверить это, незамедлительно вскрыв контейнер прямо на месте. • Пессимисты же настаивают, что необходимо со всеми предосторожностями вывозить контейнер на полигон и вскрывать лишь там. Такая метафора кому-то покажется притянутой. Я так не думаю. И считаю использование метафор наиболее продуктивным способом донесения до оппонентов и общественности видимых мною рисков в ситуации радикальной неопределенности, в которой оказалось человечество в 2023 году. Вот почему моё интервью RTVI в основном состоит из метафор. Может, хоть так удастся достучаться. Резюме сказанного в интервью Полный текст интервью #Вызовы21века #РискиИИ
RTVI

ChatGPT может уничтожить людей. Так считает аналитик, исследователь искусственного интеллекта Сергей Карелов, автор телеграм-канала @theworldisnoteasy. В своей колонке для RTVI он рассказывает, как работают языковые модели на основе нейросетей, и о том, как и зачем им может понадобиться избавиться от человечества. 🔹 Мы не понимаем, как работают современные языковые модели, подобные ChatGPT, обрабатывают информацию, потому что для выполнения одного запроса они совершают сотни миллиардов операций. 🔹 Увеличение их масштаба, количества данных и параметров, которые они обрабатывают, их производительности неожиданно приводит к тому, что они резко умнеют. 🔹 Считая, что нейросеть должна иметь модель мира, подобную нашей, мы совершаем совершенно критическую ошибку. У нее нет человеческого понимания действительности, но определенно есть что-то другое, что позволяет ей таким образом функционировать. 🔹Это интеллектуальный агент инопланетного разума. 🔹 Мы можем с уверенностью говорить о наличии у нейросетевой языковой модели мотивации. 🔹По мере возрастания уровня интеллекта агента ИИ, он начнет все более окрысиваться на людей и пытаться от них избавиться. 🔹 Если он будет обладать сильным интеллектом, то как это сделать, он уж придумает. 🔹 Эволюция продолжается, и это следующий ее этап. А мы должны гордиться, что были ступенью к более совершенному разуму. Больше о том, как и почему искусственный интеллект может попытаться избавиться от человечества, читайте в колонке Сергея Карелова на сайте RTVI #rtvi_колумнисты ⭕️ Подпишись на RTVI

Telegram