Нейросеть научилась менять фон на любых изображениях

Редактирование изображений

Исследователи из Массачусетского технологического института (MIT) представили алгоритм на сверточной нейросети, который автоматически переносит объекты с одного изображения на другое. При этом пользователю не нужно выделять части изображения или определять их границы.

Принцип работы

Редактор, получивший название Semantic Soft Segmentation (SSS), разделяет объекты и фон на разные сегменты. Система анализирует цвет, прозрачность и текстуру краев объектов. Она учитывает семантическую близость пикселей: они могут принадлежать одновременно двум объектам. В итоге на новом фоне объекты выглядят четкими и без рваных краев. Алгоритм обрабатывает одно изображение в среднем за 4 минуты.

В августе 2018 года автор блога AI Weirdness Джанель Шейн (Janelle Shane) рассказала о генеративно-состязательной нейросети AttnGAN, которая рисует изображения по текстовому описанию. Проблема алгоритма заключается в том, что он требует слишком точно заданных параметров картинки и порой не может определить границы объектов.

Источник: TNW

Ещё интересное для вас:
— Биты, байты, Ада Лавлейс — тест на знание околоIT.
— Level Up — события и курсы, на которых можно поднять свой уровень.
— Работа мечты — лучшие IT-вакансии для вас.