Имеющийся в Photoshop инструмент «Исцеляющая кисть» может использовать соседние пиксели для восстановления изображения или удаления объекта. Но что делать, если окружающих пикселей недостаточно для заполнения пробелов?
Исследователи из NVIDIA недавно использовали ИИ, чтобы заполнить эти пробелы с помощью инструмента, который способен разумно исправить недостающие части на изображении. Методика под названием «подрисовка изображения» для зон неправильной формы использует частичные свертки.
NVIDIA не впервые пытается изобрести исцеляющую кисть с помощью ИИ, но, как говорят исследователи, прежние попытки оставляли артефакты и размытия. Вместо того, чтобы использовать полные сверточные характеристики фильтра для этих участков, NVIDIA создала метод частичной свертки. Другими словами, программа создает слой, который восстанавливает пиксели для создания более реально выглядящих изображений, без артефактов. Новая программа также использует автоматически сгенерированные маски слоев.
«Наша модель может надежно обрабатывать пробелы любой формы, размера и места расположения или расстояния от границ изображения, - сообщают исследователи. - Кроме того, производительность не ухудшается катастрофически, когда пробелы увеличиваются в размерах».
Исследование может обеспечить ряд значительных новшеств в процессе редактирования фотографий, если этот инструмент будет реализован в графическом редакторе. Программа NVIDIA, например, может заменить глаз на старом, поврежденном портрете, даже не имея копии в виде другого глаза. Полученный в результате глаз, конечно, не будет копией оригинала — замененный глаз может иметь совершенно другой цвет.
Новый инструмент потенциально способен с большей точностью, чем обычно используемые инструменты, удалять на фотографиях различные фоновые объекты и знаки.
Комментарии
(0) Добавить комментарий