Главная » Hi-News » Нейросеть Facebook позволила управлять движениями людей, снятых на видео

Нейросеть Facebook позволила управлять движениями людей, снятых на видео

Технология продолжает развиваться, причем крайне стремительно — это казалось невозможным, но отныне снятыми на видео людьми можно управлять при помощи клавиатуры компьютера. Нейронные сети уже умеют создавать лица несуществующих людей и даже улучшать качество видео. Это надо видеть — благо, разработчики поделились подробным видеороликом. Это стало возможным благодаря труду команды разработчиков Facebook AI Research, которые обучили нейронную сеть распознавать движущегося человека на видео, менять фоновое изображение и контролировать его движения.

Нейросеть Facebook

Также они задействовали алгоритм DensePose, который превращает двумерное изображение снятого на видео человека в трехмерную модель. На основе технологии, придуманной разработчиками из Facebook, лежат два нейросетевых алгоритма — Pose2Pose и Pose2Frame для переноса объектов из одного видео в другое.

Далее алгоритм Pose2Pose превращает запись с анимацией движущегося человека в видеоролик с черным фоном. Итак, чтобы превратить обычное видео в компьютерную игру, алгоритм DensePose создает 3D-модель определенного человека. Наконец, алгоритм Pose2Frame создает конечное изображение с движущимся человеком и соответствующей анимацией. Уже на этом этапе нейронная сеть способна воспринимать нажатия на клавиатуру и двигать «игрового персонажа» в нужную сторону.

Конечно, на них можно заметить множество артефактов изображения, но сам факт возможности управлять человеком из видео очень впечатляет. На видео также видны другие примеры работы нейронной сети. Вероятно, что этой технологии найдется применение в игровой индустрии — о том, насколько полезны нейронные сети в сфере игр и кино, читайте в нашем специальном материале.

Своим мнением смело делитесь в комментариях, или же в нашем Telegram-чате. Впечатлила ли вас новая нейронная сеть от Facebook?





Оставить комментарий

Ваш email нигде не будет показанОбязательные для заполнения поля помечены *

*

x

Это интересно

Почему нельзя повторно жарить на растительном масле

Наверняка все слышали о том, что растительное масло нельзя повторно использовать для жарки продуктов, так как при температуре в 200 градусов и выше в нем образуются канцерогены. Если говорить точнее, в результате термического воздействия, из моно- и диглицеридов образуются глицидиловые ...

Как стрижи летают по 10 месяцев без приземления и не умирают

На сегодняшний день ученым известно о существовании 11 тысяч видов птиц. Многие из них проводят огромное количество времени в воздухе, потому что это для них жизненно необходимо. В первую очередь, во время полета птицы ищут себе еду — с большой ...