ИИ Benjamin создал фильм с участием актера из «Кремниевой долины»

Томас Миддлдитч, исполнитель роли Ричарда Хендрикса в сериале «Кремниевая долина», объединился с режиссером Оскаром Шарпом и исследователем данных Россом Гудвином для создания фильма Zone Out. Этот фильм срежиссировала и поставила нейронная сеть по имени Benjamin.

Дебют ли это?

Это не первый проект команды Шарпа с привлечением Benjamin. Авторы разработали нейросеть в 2016 году для участия в 48-часовом состязании на фестивале научно-фантастического кино в Лондоне. Тогда она написала и создала короткометражный фильм Sunspring, также с участием Томаса Миддлдитча, а в 2017 — киноленту It’s No Game с Дэвидом Хассельхоффом в главной роли.

Как проходили съемки?

В 2018 году Оскар Шарп снова пригласил Томаса Миддлдитча для участия в лондонском фестивале. На этот раз созданием фильма целиком занялся ИИ — сценарий, монтаж и озвучка были отданы Benjamin. Нейросеть использовала голосовые технологии, замену лиц и имитацию мимики. Съемки заняли двое суток.

На чем основана нейросеть?

Нейронная сеть базируется на Amazon Web Services. Для замены лиц использовалось 11 различных генеративных состязательных сетей (GAN). Она основана на открытой библиотеке машинного обучения от Google — TensorFlow.

Авторы проекта не успели закончить монтаж вовремя, поэтому фильм не участвовал в состязании на фестивале. Некоторые голоса остались роботизированными, на замененных лицах заметны артефакты. Весь фильм доступен на YouTube.

Нейросети уже хорошо подделывают видео и генерируют контент из текстового описания. В феврале 2018 года ученые показали технологию, позволяющую создавать видеоролики по одному предложению, а в апреле уже другая команда разработала нейросеть, которая генерирует мультфильмы из текста.