Впервые о проекте «Codec Avatars» от Facebook мы услышали в 2019 году. Разработчики компании смогли создать очень натуральные аватары, которые очень похожи на живых людей. Эффект достигался с помощью 132 камер, которые полностью сканировали человека, а управлять им можно было с помощью очков ВР, которые имели 3 камеры – 2 на точке глаз, и одну в области рта.
Аватары данного вида были невероятно реслистичными, но все же не идеальными, так как имели один существенный изъян – эффект «безумных» глаз. Это когда глаза сильно расширены за счет особенностей трекинга лица. Разработчики Facebook смогли решить эту проблему за счет замены источника поступления данных о направлении взгляда, теперь оно отслеживается непосредственно системой слежения за глазами, а не за счет оценки алгоритма машинного зрения.
В итоге взгляд виртуального аватара человека выглядит гораздо спокойнее и в нем больше нет былой «безуминки».
Технология «Codec Avatars» может обеспечивать совершенно иной взгляд на свой образ в виртуальности, ведь теперь он станет более реальным и получит реалистичную мимику и эмоции. Правда, в Facebook сообщили, что увидеть обновленный функционал воочию пользователи пока не смогут, на массовых устройствах он появится позже.