Нейросети NVIDIA научились создавать замедленные видео
Новости
В качестве графических ускорителей система использует NVIDIA Tesla V100. Для увеличения плавности нейросети создают промежуточные кадры.
2К открытий2К показов
Исследователи из NVIDIA совместно с учеными из Калифорнийского и Массачусетского университетов представили искусственный интеллект для замедления видео. По словам разработчиков, нейросети способны увеличить количество кадров в 15 и более раз. В итоге из обычного видео со смартфона получается плавный slow-motion ролик.
Нейросети и видео
Плавность достигается за счет создания промежуточных кадров. Для этого используется сверточная нейронная сеть, отслеживающая перемещение пикселей. Вторая нейросеть находит промежуточные значения и удаляет артефакты вокруг движущихся объектов. Новые кадры создаются на основе полученных данных.
Для обучения использовались видеоролики от авторов YouTube-канала The Slow Mo Guys и библиотека PyTorch. Для обработки данных потребовались графические ускорители NVIDIA Tesla V100.
Важной особенностью искусственного интеллекта является возможность параллельного создания промежуточных кадров в нужном количестве. Есть и слабая сторона — быстро движущиеся объекты имеют зубчатые края.
Руководитель проекта Ян Каутц (Jan Kautz) сомневается в скором коммерческом релизе технологии. Если она и будет запущена, то вычисления будут проводиться в облаке.
NVIDIA постоянно экспериментирует с нейронными сетями. В апреле 2018 года она научила их превращать котов в собак и наоборот.
2К открытий2К показов
И почему эта история вызвала споры.
Составили подборку из 10 бесплатных нейросетей, которые генерируют текст, изображения и видео, и рассказали о каждой из них.
Искусственный интеллект оказывает влияние на всех участников телекоммуникационной отрасли, однако крупные и малые компании выбирают разные подходы к его внедрению. Рассмотрим ключевые области применения генеративных нейросетей в телекоме и изменения, которые происходят в отрасли.
Узнали, сможет ли Sora от OpenAI уничтожить хотя бы одну профессию. Это нейросеть, которая генерирует видеоролики по текстовому описанию.