Исследователи из Сеульского университета опубликовали работу, в которой рассказали о простом методе прогнозирования планируемых движений исключительно по изображению с камеры, направленной на руки пользователя и захватываемые объекты
http://edurobots.ru/2019/01/roboperchatka/