Группа разработчиков Facebook создала искусственный интеллект, который превращает реальных людей в игровых персонажей на основе видео.
Новинка получила название Vid2Play. Авторы проекта поделились секретом, как им удалось создать такую систему.
Сперва видео подается в Pose2Pose, которая определяет вид действий, например, танцы, игра в теннис или бокс. После этого система отделяет фигуру человека вместе с его тенью и предметами в руках от заднего плана и помещает их на чёрный фон. Воссозданным объектом можно управлять с помощью джойстика или клавиатуры.
Разработанная система настолько умна, что для ее обучения потребовалось всего лишь несколько коротких видео.
Искусственный интеллект способен исключать других людей и компенсировать различные углы камеры. Разработка напоминает функцию в Adobe After Effects для удаления лишних элементов из видео, таких как туристы или мусорные баки.
Конечно, системе еще необходима доработка. Однако, даже уже имеющийся результат впечатляет.
Завершенную разработку с нетерпением ждут создатели игр. Она позволит им создавать своих героев на основе личных видео или добавить любимую личность из YouTube.
Фото: Pixabay
