Старый трюк в любом детективном телешоу: инспектор смотрит на экран и говорит «Сделайте четче!». Внезапно, размытое изображение подозреваемого становится более четким, что облегчает его идентификацию и позволяет сюжету развиваться дальше. Известно, что так это не работает, по крайней мере до сих пор не работало.
Исследователи из Университета Дьюка разработали ИИ, который может из размытых фотографий генерировать новые четкие изображения несуществующих людей.
Что же в этом хорошего? Важно понимать, что этот новый метод визуализации, PULSE, скорее всего, не будет использоваться для создания фальшивых лиц. Лица - это всего лишь демонстрация проверки работоспособности метода, показывающая, что PULSE может создавать четкие, реалистичные картинки на основе снимков низкого разрешения практических любых объектов.
Алгоритм PULSE (Photo Upsampling through Latent Space Exploration) подробно описывается в статье, которую команда разместила на arXiv. Там рассказывается как изображение лица 16х16 пикселов после обработки превращается в изображение с разрешением 1024х1024. Это похоже на то, как если бы игра с Nintendo SNES внезапно превратилась бы в супер-реалистичную игру на Playstation 4, не считая только того, что все лица изменились.
По словам исследователей, большинство алгоритмов ИИ пытается улучшить фотографии лиц, пытаясь «угадать» их элементы, например, волосы или зубы, на конкретных участках изображения. Поэтому обычная замена этих участков может привести к тому, что фото будет выглядеть неестественно, с текстурированными волосами или кожей.
Чтобы избежать этих проблем команда университета решила использовать так называемую генеративно-состязательную сеть. Этот алгоритм использует комбинацию из двух нейронных сетей, одна из которых на основании нечетких фотографий создает новые изображения, а другая их отбраковывает, если они не являются достаточно натуральными. По мере того, как генеративная сеть пытается обмануть дискриминативную в процессе их конкуренции происходит создание все более реалистичных образов.
Комментарии
(0) Добавить комментарий