Facebook stworzył sztuczną inteligencję, która zamienia prawdziwych ludzi w łatwe do zarządzania postacie

Grupa badawcza na Facebooku stworzyła sztuczną inteligencję o Vid2Play, która może zrobić postaci do gry na podstawie filmu z prawdziwymi ludźmi.

Jak oni to zrobili

Zespół użył dwóch sieci neuronowych: Pose2Pose i Pose2Frame. Po pierwsze, wideo jest podawane w Pose2Pose, przeznaczone do identyfikacji różnych rodzajów aktywności, takich jak taniec, gra w tenisa lub szermierka. Następnie system oddziela figurę osoby wraz z cieniem i przedmiotami w dłoniach od tła i wstawia je na czarne tło. Następnie możesz sterować ruchem obiektu za pomocą joysticka lub klawiatury.

Do szkolenia system wykorzystał tylko kilka krótkich filmów. Sztuczna inteligencja była w stanie usunąć innych ludzi i skompensować różne kąty kamery. Badanie przypomina funkcję w Adobe After Effects  ,

aby usunąć dodatkowe elementy z filmów, takich jak turyści lub kosze na śmieci.

Jak dotąd animacja nie jest idealna - postać wygląda jak przesuwana, a zakres ruchu jest nieco ograniczony. Jest to jednak duży postęp w porównaniu z poprzednimi próbami wyodrębnienia postaci z filmu.

Ta innowacja pozwoli twórcom gier tworzyć swoich bohaterów na podstawie osobistych filmów lub dodać swoją ulubioną osobowość z YouTube. Ruchy będą bardziej realistyczne niż podczas ręcznego tworzenia animacji.

Źródło: Engadget