Hey Machine Learning – это новости и события из отрасли искусственного интеллекта и машинного обучения. Мы описываем свои (и не только) кейсы, и делимся качественным контентом с вами!
Подразделение Google AI опубликовало работу о новом чат-боте Meena, который основывается на контексте разговора и поэтому способен общаться на любые темы. Проект основан на алгоритме seq2seq, натренированном на 4 млрд отрывков реальных переписок пользователей в социальных сетях.
Для оценки работы Meena авторы создали специальную метрику, основанную на измерении конкретики разговора и наличии в нем смысла – SSA. Чтобы рассчитать SSA для Meena, разработчики испытали других известных ботов: Mitsuku, Cleverbot, XiaoIce и DialoGPT. По результатам тестирования, новый чат-бот набрал 79%, что на 23% выше, чем аналоги, и на 7% ниже, чем люди.
Будущее развитие или интегрирование Meena пока неизвестно, однако на данном этапе компания не намерена создавать для бота публичный интерфейс. Также авторы отметили, что для еще более качественной работы текущий алгоритм требует доработок.