SberDevices представила многоязычную версию нейросети GPT-3: модель под названием mGPT может генерировать тексты на 61 языке мира, включая языки народов России и стран СНГ. mGPT — это первая в мире генеративная модель, которая поддерживает такое большое число языков. Она доступна в двух версиях: базовая версия с 1,3 млрд параметров — опубликована в открытом доступе в облачном хранилище СберДиск; расширенная версия с 13 млрд параметров — скоро станет доступна на платформе машинного обучения ML Space от SberCloud. Модель mGPT может как генерировать текст, так и решать различные задачи в области обработки естественного языка путём дообучения или в составе ансамблей моделей. Модель показывает выдающиеся результаты на многих задачах few-shot и zero-shot learning: в этой области машинного обучения не требуется отдельно доучивать модель, достаточно сформулировать задачу текстом и привести несколько примеров, после чего mGPT научится выполнять новую задачу. Так автоматизированную систему можно научить отвечать на вопросы, определять эмоциональную окраску текста, извлекать из текста имена, фамилии, названия компаний. Модель может также использоваться как компонент различных речевых технологий, например для улучшения качества распознавания речи, генерации сценариев диалоговых систем. PS аккуратно, вес модели 2,8Гб https://files.sberdisk.ru/s/NzeBqYE84TAQDiS