Нейросеть Facebook дозволила заведовать движениями граждан, снятых на видео

    Нейронные паутине уже могут производить личика несуществующих граждан и даже облагораживать качество видео. Разработка продолжает развиваться, при этом позарез быстро — это же казалось неосуществимым, однако с этого момента снятыми на видео людьми можно заведовать с помощью клавиатуры компа. Это же предстало вероятным благодаря труду команды разрабов Facebook AI Research, кои научили нейронную паутину распознавать передвигающегося человека на видео, поменять фоновое изображение и держать под контролем его движения. Это же нужно созидать — благо, создатели поделились подробным видеоклипом.

    Нейросеть Facebook дозволила заведовать движениями граждан, снятых на видео

    На базе технологии, изобретенной разрабами из Facebook, лежат два нейросетевых метода — Pose2Pose и Pose2Frame для переноса объектов из единого видео в альтернативное. А также они использовали метод DensePose, который превращает двумерное изображение снятого на видео человека в трехмерную фотомодель.

    Итак, дабы перевоплотить обыкновенное видео в компьютерную игру, метод DensePose образовывает 3D-модель конкретного человека. Дальше метод Pose2Pose превращает запись с анимацией передвигающегося человека в видеоклип с черным фоном. Уже на этом шаге нейронная паутину способна принимать нажатия на клавиатуру и двигать «игрового персонажа» в подходящую сторону. В конце концов, метод Pose2Frame образовывает конечное изображение с передвигающимся человеком и надлежащей анимацией.

    На видео а также видны альтернативные примеры работы нейронной паутине. Конечно же, на их можно заприметить огромное количество реликвий изображения, однако сам факт способности заведовать человеком из видео максимально впечатляет. Возможно, что данной технологии найдется применение в игровой промышленности — об фолиант, как полезны нейронные паутине в сфере игр и кино, читайте в нашем особом материале.

    Впечатлила ли вас новенькая нейронная паутину от Facebook? Собственным воззрением неустрашимо разделяйтесь в комментах, либо же в нашем Telegram-чате.