Microsoft запустили мобильное приложение Seeing AI, позволяющее описывать и проговаривать происходящее на фотографии. Ранее писал о Blippar, сервисе, который как раз определял объекты по фото и строил семантическую сеть вокруг них. Blippar закрылся спустя три года, несмотря на огромные инвестиции, т.к. практического применения ему не нашлось.

Seeing AI же позиционируется как помощник слепым и слабовидящим людям. Сервис не только описывает объекты, находящиеся на изображении, но и поясняет отношения между ними. В приведенном примере приложение произносит "собака, сидящая за рулем автомобиля". Встроенная система распознавания лиц позволяет уточнить, что делают конкретные люди (по интеграции с адресной книгой). Например, "Дима вместе с Олей сидят на диване и смотрят телевизор. На коленях у них лежит собака".

Для Microsoft это прежде всего маркетинговый ход, но, возможно, из этого функционала все-таки получится вырастить практический инструмент.

https://itunes.apple.com/us/app/seeing-ai-talking-camera-for-the-blind/id999062298