Обложка канала

Блуждающий нерв

3230 @dtulinov

Исследования мозга, нейротехнологии, генная инженерия и др. смежные темы -- что происходит в этой области. Ссылки на научные источники.

Блуждающий нерв

4 года назад
Открыть в
Простите, отмечу еще одну работу в области ИИ. Разрабы из DeepMind и Google Brain взялись изучить свою же систему AlphaZero — как она «думает», играя в шахматы. Статья вышла две недели назад в PNAS, среди авторов Демис Хассабис и Владимир Крамник, 14-й чемпион мира по шахматам. Вопрос у них был простой: научилась ли AlphaZero чему-то похожему на человеческое понимание шахмат, несмотря на то, что никогда не видела, как играют люди? Ответ вышел такой: да, судя по всему, играя лишь сама с собой, она сформировала игровые концепции, аналогичные тем, что используют люди-шахматисты; найдено много явных соответствий. А вывод авторы делают такой: сам факт, что ИИ вырабатывает «человеческие» понятия с нуля, не имея априорных знаний и примеров игры шахматистов, позволяет рассчитывать, что и другие ИИ системы могут содержать представления, близкие человеку. ⚖️ Это еще одна попытка атаковать проблему интерпретируемости нейросетей. Мы толком не знаем подлинных возможностей обученных систем — и похоже, они гораздо более способны, чем о них привыкли думать. На это намекает такое явление как Emergent Abilities, когда некоторые свойства отсутствуют в малых ИИ моделях, но внезапно возникают в больших. Эти «скрытые» возможности для нас не предсказуемы. Видимо, что-то важное в работе нейросетей мы пока не понимаем. Вот почему все чаще появляются работы, где ИИ является не инструментом исследования, а объектом — как AlphaZero. 📌 Отличная подборка 137 эмерджентных способностей больших языковых моделей, которые уже обнаружены. Это позволяет ставить новые вопросы (там же).
Acquisition of chess knowledge in AlphaZero | Proceedings of the National Academy of Sciences

We analyze the knowledge acquired by AlphaZero, a neural network engine that learns chess solely by playing against itself yet becomes capable of o...

PNAS