Исследователи из Массачусетского технологического института (MIT) представили алгоритм на сверточной нейросети, который автоматически переносит объекты с одного изображения на другое. При этом пользователю не нужно выделять части изображения или определять их границы.
Принцип работы
Редактор, получивший название Semantic Soft Segmentation (SSS), разделяет объекты и фон на разные сегменты. Система анализирует цвет, прозрачность и текстуру краев объектов. Она учитывает семантическую близость пикселей: они могут принадлежать одновременно двум объектам. В итоге на новом фоне объекты выглядят четкими и без рваных краев. Алгоритм обрабатывает одно изображение в среднем за 4 минуты.
В августе 2018 года автор блога AI Weirdness Джанель Шейн (Janelle Shane) рассказала о генеративно-состязательной нейросети AttnGAN, которая рисует изображения по текстовому описанию. Проблема алгоритма заключается в том, что он требует слишком точно заданных параметров картинки и порой не может определить границы объектов.
Источник: TNW
