Так выглядит патент Snapchat на персонализированную анимацию 3D-аватаров
Технология работает с помощью отслеживания скелета во время движения тела в 2D-видео, создания вектора движения, а затем применения этого вектора движения к скелету 3D-аватара. Затем Snap дополняет исходное видео анимированным 3D-аватаром.
Почему это интересно? Отслеживание движения скелета человека в 2D-видео впечатляет. Конечно, многие из этих компаний (Snap, TikTok и др.) действительно преуспели в AR-фильтрах, Snap однозначно опережает почти все социальные платформы. Кроме того, эта технология может применяться, например, в вирусных фильтрах, которые могут отсканировать ваше тело и заставить ваш аватар танцевать как Майкл Джексон.