Комп'ютерна анімація змогла «натягнути» обличчя одного актора на іншого

Дослідники з Вашингтонського університету розробили комп'ютерну систему, яка дозволяє створювати тривимірні анімовані моделі осіб будь-яких нині живих або вже померлих знаменитостей на основі загальнодоступних архівів їхніх фотографій і відеозаписів. Будь-яка така тривимірна анімована «маска» може бути накладена на відео з іншою знаменитістю. У цьому випадку «маска» буде повністю повторювати поведінку і міміку персонажа, який «одягнув» її, однак зберігати всі характерні риси того, з кого вона була «знята». Детальніше про роботу можна прочитати в препринті на сайті Корнельського університету.

Раніше, для того щоб створити анімовану модель рухів і міміки особи того чи іншого живого актора, необхідно було застосувати технологію захоплення руху (motion capture), що вимагає розміщення безлічі датчиків-маркерів на ключових точках: носу, губам, скулам і бровам. Дослідникам з Вашингтона вдалося це зробити за відсутності самих акторів, застосувавши до безлічі їхніх фотографій і відеозаписів методи трекінгу обличчя, його тривимірної реконструкції і мультитекстурного моделювання.

Зрештою, вчені отримували як би записану послідовність варіюються в часі і залежать від виразу обличчя комбінацій безлічі текстур. Умовно вони назвали її «лялькою». Далі вони брали довільний відеозапис іншої знаменитості, яка ставала «ляльководом» - послідовність її мімічних дій повинна була керувати зміною набору текстур «ляльки» так, щоб вона в точності повторювала міміку «ляльковода».

Щоб домогтися цього дослідники створювали усереднену 3D-модель обличчя «ляльки», а потім динамічно деформували її, співвідносячи з поточним виразом обличчя «ляльковода». Паралельно деформації моделі йшов синтез текстур, в якому підбиралися відповідні, консистентні «несучої» моделі і її виразу обличчя комбінації, що давали характерну експресію - посмішку, нахмуреність тощо.

Фінальний результат експериментальних прогонів системи можна побачити на відео - анімовані «ляльки» або «маски» акторів Кевіна Спейсі і Деніела Крейга управляються як ними самими, так і «ляльководом» Джорджем Бушем молодшим.

Дослідники вважають, що їхня система знайде застосування у створенні відеоігор і фільмів, в які можна буде інкорпорувати анімовані моделі відомих акторів (у тому числі померлих, наприклад, Брюса Лі) або політиків, без їхньої прямої участі в зйомках. Також можливе створення такого комерційного продукту як чат-аватари, створені за образом і подобою культових особистостей минулого.