Состаривание лица, как технология — вещь не новая. Несколько лет назад Интернет охватило новое безумие — все хвастались тем,как они будут выглядеть в старости. Умные алгоритмы мобильного приложения умело накладывали складки и морщины. А пользователи радовались. И где же тут новость? А новость в том, что в Disney это сделали мощным инструментом, позволяющим на основе искусственного интеллекта состаривать актеров за доли секунды. И при этом не тратить драгоценные время и мощности на обработку изоражений. К слову, технология работает в обе стороны: актёра можно сделать как сарше, так и омолодить. Как вам?
Еще раз продемонстрировав силу искусственного интеллекта, когда дело доходит до фотореалистичного изменения отснятого материала, исследователи из Disney представили новый инструмент старения/омоложения, который может убедительно заставить актера выглядеть старше или моложе без необходимости сложных и дорогостоящих визуальных эффектов в течение нескольких недель.
При просмотре такого блокбастера, как «Человек-муравей и Оса» 2018 года, большинство зрителей могут легко заметить работу многих студий визуальных эффектов, которые участвуют в создании этих фильмов, а также яркие моменты, когда Человек-муравей уменьшается или вырастает до гигантских размеров. Но иногда труднее всего добиться фотореалистичных результатов с более тонкой работой с визуальными эффектами, например, в кадрах с участием младших версий актеров Мишель Пфайффер и Майкла Дугласа. Чтобы добиться таких же результатов, как в фильме, талантливым художникам нужно либо потратить недели, стирая морщины и другие характерные признаки возраста с лица актера, либо полностью заменить его компьютерным двойником.
Визуальные эффекты — мощный инструмент кинопроизводства, но есть много причин, чтобы найти способы упростить их создание; от облегчения нагрузки на уже перегруженных и недоплачиваемых артистов до предоставления инструментов кинематографистам, не работающим с огромными голливудскими бюджетами. Конечно, даже для крупных студий также есть мотив для получения прибыли в возможности автоматизировать такую работу.
Состаривание лица: искуссственный интеллект на службе у кинематографа
Вот почему такие компании, как Disney, инвестируют в исследования, чтобы способствовать развитию искусства визуальных эффектов, но в последние годы эти исследователи также изучают, как искусственный интеллект может упростить работу с визуальными эффектами. Два года назад Disney Research Studios разработала инструменты на основе искусственного интеллекта, которые могли создавать видео со сменой лиц с достаточным качеством и разрешением, чтобы их можно было использовать в профессиональном кинопроизводстве (вместо сомнительного низкого разрешения GIF, распространяемого по Интернету). В этом году исследователи демонстрируют новый инструмент, который использует приемы искусственного интеллекта, чтобы актеры выглядели старше или моложе, за вычетом недель работы, которые обычно требуются для совершенствования таких кадров.
Состаривание лица: готовое производство Face Re Aging для визуальных эффектов
Использование нейронных сетей и машинного обучения для старения или омоложения человека уже было опробовано, и хотя результаты достаточно убедительны применительно к неподвижным изображениям, они не давали фотореалистичных результатов на движущемся видео с временными артефактами, которые появляются и исчезают. от кадра к кадру, и внешний вид человека иногда становится неузнаваемым во время воспроизведения измененного видео.
Чтобы создать изменяющий возраст инструмент искусственного интеллекта, который был бы готов к требованиям Голливуда и достаточно гибок, чтобы работать с движущимися кадрами или кадрами, где актер не всегда смотрит прямо в камеру, исследователи Disney, как подробно описано в недавно опубликованной статье, впервые создал базу данных из тысяч случайно сгенерированных синтетических лиц. Существующие инструменты старения машинного обучения затем использовались для старения и омоложения этих тысяч несуществующих испытуемых, а затем эти результаты использовались для обучения новой нейронной сети под названием FRAN (сеть повторного старения лица).
Когда FRAN получает входной снимок головы, вместо того, чтобы генерировать измененный снимок головы, он предсказывает, какие части лица будут изменены с возрастом, например, добавление или удаление морщин, и эти результаты затем накладываются на исходное лицо в качестве дополнительного. канал дополнительной визуальной информации. Такой подход точно сохраняет внешний вид и личность исполнителя, даже когда его голова двигается, когда его лицо смотрит по сторонам или когда условия освещения в кадре меняются со временем. Это также позволяет художнику корректировать и настраивать сгенерированные ИИ изменения, что является важной частью работы с визуальными эффектами: изменения идеально сливаются с кадром, чтобы изменения были невидимы для зрителей.
Увлекательно наблюдать, как компании разрабатывают новаторские методы для создания реалистичных эффектов старения на экране! 🌟