Что такое deepfake и как он повлияет на будущее кинематографа?

Технология подмены лиц может кардинально изменить кинематограф будущего.
17 июля
Александра Рачкова
deepfake
Кадр из deepfake-видео
Кадр из deepfake-видео

В 2019 году интернет наводнили видео со зловещим названием deepfake, где лица одних актёров, заменялись на лица других (по какой-то причине особенно досталось Николасу Кейджу). Как сообщает исследовательский центр Arts Management & Technology Laboratory, на сентябрь 2019 года в интернете было около 14 тысячи deepfake видеороликов, что на 100% больше, чем год назад. Однако deepfake — это не придумка прошлого года.

Что такое deepfake?

Во-первых, само название состоит из синтеза двух понятий — deep learning (глубинное изучение) и fake (подделка). Что, в целом, достаточно детально объясняет технологию создания подобных видеороликов. По своей сути, deepfake — это методика синтеза видео- и аудио-контента, основанная на искусственном интеллекте. Аудио-deepfake — это история довольно новая, а вот видео появилось ещё в 2017 году.

Выражаясь примитивным языком, чтобы создать deepfake-видео, необходимо загрузить в искусственный интеллект видео и изображения человека, чьё лицо вы хотите «приклеить». Чем больше изображений — тем лучше, ведь именно так GAN или генеративно-состязательные нейросети, которые чаще всего используют в этом случае, могут «изучить» мимику человека и создать детальный и достоверный «fake». Затем программа накладывает сгенерированное лицо на выбранное тело, как например лицо Сильвестра Сталлоне на маленького Маколея Калкина или лицо Стива Бушеми на Дженнифер Лоуренс.

Именно таким образом пользователь под ником deepfakes (давший название этой технологии) в 2017 году взорвал платформу Reddit поддельными порно-роликами с участием кинозвёзд. Он использовал открытую программную библиотеку от Google под названием TensorFlow, которая создавалась для решения задач построения и тренировки нейронной сети. Очень скоро этот способ стали использовать и другие интернет-пользователи, а также создавать на его основе бесплатные программы вроде Fakeapp, которые позволяли абсолютно любому, даже совершенно не разбирающемуся в технологиях человеку, создать свои deepfake-ролики.

Критика deepfake технологии

Но первое же использование этой технологии на практике вызвало общественное возмущение. И понятно почему. Платформы Reddit и Twitter запретили пользователям публиковать deepfake-видео, а актриса Скарлетт Йоханссон, ставшая жертвой одного из порно-роликов, рассказала Washington Post, как опасна такая технология для ранимых людей:

<…> ничто не может остановить кого-то от того, чтобы вырезать и вставить моё изображение или изображение любого другого человека поверх чьего-то тела, сделав финальное изображение максимально правдоподобным. В интернете по сути нет никаких правил, это виртуально беззаконная бездна <…>
Скарлетт Йоханссон

По мнению актрисы, такое может произойти с кем угодно и не только с публичными личностями. И она оказалась права, потому что вскоре после этого была создана программа DeepNude, позволяющая при помощи искусственного интеллекта «раздевать» любую женщину. Правда создатель приложения удалил его через день после запуска, но этот кейс доступно показывает, на что способны deepfake-технологии.

Помимо этической стороны вопроса, deepfake-технологии могут активно использоваться в целях пропаганды, что уже происходит в развивающихся странах. Например, в Индии в феврале, во время выборов в Законодательное собрание, один из кандидатов использовал deepfake, чтобы обратиться к аудитории, говорящей на другом диалекте. Президент Партии Бхаратия Джаната Манодж Тивари записал ролик с обращением к электорату на английском языке, а при помощи deepfake «заговорил» на диалекте хариани, как сообщает Habr.

Как deepfake изменит киноиндустрию?

Конечно же, deepfake-энтузиасты не останавливаются на порно-роликах. Особенно популярны сейчас видео, где актёрам заменяют лица в отрывках фильмов или общественных выступлений. Более того, в этом году вышел первый полнометражный фильм с использованием deepfake технологии — документальное кино «Добро пожаловать в Чечню».

Кадр из фильма «Добро пожаловать в Чечню»
Кадр из фильма «Добро пожаловать в Чечню»

В картине рассказывается история гомосексуалов, бежавших из Чечни. Так как герои фильма находились в опасности, их лица было необходимо скрыть. Но вместо того, чтобы использовать черный квадрат или размытое изображение, авторы картины пришли к гениальному решению. Продюсер и оператор ленты Аскольд Куров рассказал в интервью порталу Московский Комсомолец, что для создания deepfake-защиты для героев фильма — были наняты специальные «дублёры»:

Больше 20 человек в Нью-Йорке, в основном, активисты, согласились предоставить свои лица в качестве щитов для героев. Их сняли в студии с разных ракурсов, оцифровали особым образом, а потом с помощью искусственного интеллекта наложили на лица наших героев так, что лица дублеров полностью повторяли их мимику и движение глаз. Таким образом, сохранялась человечность, которой не удалось бы достичь с помощью анимации. Для зрителей это подмена не имеет особого значения, поскольку они не знают, как выглядят настоящие герои. Они видят все эмоции, которые эти люди проживают
Аскольд Куров

Несмотря на то, что в фильме «Добро пожаловать в Чечню» видно, что deepfake технология ещё не достаточно совершенна для использования в полнометражных художественных фильмах, её перспективы уже впечатляют. 

Буквально недавно, в июне, Disney презентовали свои достижения в работе с deepfake, их новая программа может создавать ролики в разрешение 1024 x 1024 мега пикселей. Для сравнения, популярная платформа для создания подобных видео может создавать изображения с максимальным разрешением 256 x 256, что будет нормально смотреться на экране смартфона, но не в кинотеатре.

Сравнение результата новой технологии Disney (3 столбец слева) и предыдущих, где первый столбец это накладываемое лицо, а второй — лицо, на которое накладывают изображение.
Сравнение результата новой технологии Disney (3 столбец слева) и предыдущих, где первый столбец это накладываемое лицо, а второй — лицо, на которое накладывают изображение.

Кинематографические возможности этой технологии одновременно пугают и завораживают.

Плюсы развития Deepfake в кино

·       Кинематографисты получат возможность омолаживать своих героев без использования дорогой CGI графики, а выглядеть результат будет даже лучше. Создателям подобных картин получится избежать критики, обрушившейся на фильм «Ирландец» с омоложенным Робертом Де Ниро и «Гимини» за жутковатого молодого Уилла Смита.

Кадр из фильма «Гимини»
Кадр из фильма «Гимини»

·       Решится проблема с актёрами, которые по какой-то причине не могут присутствовать на площадке, будь то проблема с графиком, болезнь или внезапная смерть. Так, например, в фильме «Воображариум доктора Парнаса» гибель актёра Хита Леджера посреди съёмочного процесса заставила создателей внедрить достаточно интересный, но вынужденный ход с постоянно меняющимся лицом главного героя, которого в итоге сыграли также Джонни Депп, Колин Фаррел и Джуд Лоу. С технологией deepfake авторы картины могли бы сильно сэкономить на актёрском составе и просто взять дублёра, чтобы заменить его лицо на лицо Хита Леджера.

Хит Леджер, Колин Фаррел, Джонни Депп, Джуд Лоу в роли Тони из фильма&nbsp;«Воображариум доктора Парнаса»
Хит Леджер, Колин Фаррел, Джонни Депп, Джуд Лоу в роли Тони из фильма «Воображариум доктора Парнаса»

·       В новых фильмах можно будет снимать актёров из прошлого, таких как: Мэрилин Монро, Одри Хепбёрн или Кэри Грант. Для этого понадобиться всего лишь дублёр, который сможет изучить повадки и жестикуляции актёра, но не будет показывать своё лицо. Похожий фильм уже находится в производстве. Создатели военной картины «В поисках Джека» собираются «воскресить» актёра Джеймса Дина в качестве исполнителя одной из ролей. Правда делать это собираются при помощи компьютерной графики, что гораздо дороже deepfake и, как показывает опыт, выглядит жутковато.

·       Больше не будет надобности в дублёрах и контрактах для сцен оголения. Нейросеть сможет «рисовать» голое тело без посредников.

·       Зрители смогут стать героями любимых фильмов. При помощи deepfake можно будет не только поместить лицо человека на тело персонажа фильма, но и предоставить всему зрительному залу возможность «поучаствовать» в картине.

Минусы развития deepfake в кино

·       Ещё большая конкуренция для молодых актёров. Если сейчас начинающим актёрам приходится пробиваться, конкурируя с живыми звёздами, то в будущем на одну и ту же роль могут претендовать как известные артисты, вроде Брэда Питта или Анджелины Джоли, так и умершие, вроде Алана Рикмана или Бриттани Мерфи (а стоить они будут дешевле).

·       Моральный вопрос — не все согласны с использованием своего изображения после смерти. Так например, актёр Робин Ульямс запретил использовать своё изображение в каком-либо виде вплоть до 2039 года. А вот звёзды, умершие до такого резкого технологического прогресса, не могли оставить подобных запретов, а соответственно — непонятно, хотели бы они играть в том или ином фильме.  

Так или иначе, совершенно точно можно сказать, что технология deepfake навсегда изменит кинематограф, а как конкретно — мы узнаем в ближайшем будущем.

Читайте также
7 лучших малоизвестных европейских триллеров
7 лучших малоизвестных европейских триллеров
Топ захватывающих европейских триллеров, которые стоит посмотреть.
8 хороших русских фильмов последнего десятилетия
8 хороших русских фильмов последнего десятилетия
Подборка лучших драматических российских фильмов.
Почему фильмы ужасов помогают пережить эпидемию
Почему фильмы ужасов помогают пережить эпидемию
Ученые: поклонники фильмов про конец света психологически более устойчивы в условиях пандемии.
Расизм в кино. «Унесённые ветром» и «Рождение нации»
Расизм в кино. «Унесённые ветром» и «Рождение нации»
Проблема расизма в классических фильмах Голливуда.