Вы и не поверите собственным очам: эта нейросеть станцует за вас

    Искусственный ум проявил себя максимально могущим инвентарем, ежели твердить об манипулировании видео с людьми. Эдак именуемые «дипфейки» с подменой лиц стали самым колоритным примером, но новейшие приложения рождаются каждый денек. Самое крайнее образовывает дипфейки для танцев — искусственный ум считывает хореографические движения иного человека и накладывает его на целевое тело.

    Научной стороной сего случая занимались четверо научные исследования из Калифорнийского вуза в Беркли. Как только они обрисовывают в работе, размещенной в arXiv, них система состоит из пары дискретных этапов. Во-первых, записывается видео с целью и подпрограмма превращает ее движения в фигуру из палочек. (Для неплохого свойства будет нужно порядка 20 минут съемки на 120 fps). Потом присутствует родник с видео и фигурка с палочками утоляет с него движения. Потом происходит обмен и нейросеть синтезирует видео с мотивированным индивидумом, основываясь на движения фигурки из палочек.

    Смотрится это же превосходно. Следите сами:

    Нейросеть, которая образовывает ваш танец

    Звучит все, конечно же, ординарно, однако на деле все намного труднее. Например, существуют подпрограмма, которая выравнивает движение фигур, эдак что танцоры и не очень дергаются, и совсем отдельная нейросеть, созданная для повторного отслеживания личика цели для обеспечения реализма.

    У програмки существуют и свои ограничения. Паутину и не может определенно моделировать вакантные ткани, потому мотивированному человеку надо надевать облегающую одежку. Встречаются и аномалии. В любом случае, работа внушительная.

    Для вас уже и не терпится станцевать балет? Поведайте в нашем чате в Телеграме.