Штучний інтелект Samsung AI пожвавлює портрети

Використовуючи новітню тенденцію в галузі штучного інтелекту - змагальне навчання - центр штучного інтелекту Samsung у Москві продемонстрував, що він може зробити одне зображення людини і перетворити її на балакучу голову. І спостереження за тим, як Мона Ліза оживає, дуже цікаво.

Система бере кілька зображень людини - і це число може бути тільки одне або кілька для кращих результатів - і запускає його через готовий «трекер орієнтира обличчя», щоб визначити, де знаходяться очі, брови, ніс губи і щелепа. Те ж саме відноситься і до іншого «рухомого» вихідного відео, проходячи кадр за кадром, щоб відстежувати рух цих орієнтирів обличчя.

Існує окрема стадія метанавчання, на якій різні мережі штучного інтелекту навчаються виконувати різні завдання з використанням величезного набору відеоданих балакучих голів. Мережа Embedder використовує вихідні кадри та дані відстеження їх орієнтирів для створення векторів, тоді як мережа Generator вчиться брати вектори та зображення і генерувати короткі відеоролики, в яких нерухомі особи анімовані для переміщення відповідно до векторного руху.

Технологія може взяти відео розмови однієї людини і відобразити на відео іншу людину.

Третя мережа «Discriminator» встановлює змагальні відносини - вона приєднується дивитися відео з рухомими особами і говорити, які з них є справжніми, а які були сфальсифіковані мережею Generator. Отже, у вас є дві мережі, що працюють один проти одного - одна намагається обдурити іншу, третя намагається виявити підробки.

Ці мережі починають дуже погано виконувати свою роботу, але, виконуючи цю роботу мільйони разів, вони починають поліпшуватися, і конкуренція між двома мережами є рушійною силою обох.

Це ще один прорив дуже захоплюючого потенціалу Генеративних Змагальних Мереж, які з'являються у всьому світі ШІ. Але щоб по-справжньому оцінити це, вам потрібно подивитися відео нижче. Перейдіть до часу 4:16, якщо ви хочете відразу побачити, як модель демонструє одиночні кадри з Мерилін Монро, Сальвадором Далі і Ейнштейном.

Дослідницька робота команди Samsung AI доступна на сайті Arxiv.