Смайлики на экране автоматически имитируют выражение лица пользователя

Новое приложение призвано упростить использование размещенных в интернете фотографий и видео, которые теперь обрабатываются с помощью ИИ для автоматического создания смайликов на основе выражений лица пользователя.

Приложение Polygram на данный момент работает только с iPhone и позволяет делиться фотографиями, видео и сообщениями. Хотя в отличие от Facebook, где у вас есть небольшой диапазон заранее заданных реакций, чтобы выбрать их нажатием на иконку, Polygram использует нейронную сеть, которая локально работает на смартфоне, чтобы выяснить, улыбаетесь ли вы, нахмурились, скучаете, смущены, удивлены и прочее.

Polygram получает изображение лица с фронтальной камеры смартфона и максимально быстро анализирует последовательность изображений вместо того, чтобы просто рассмотреть определенные точки на лице. Это делается непосредственно на смартфоне, используя графический процессор iPhone.

Когда вы смотрите на сообщения в приложении, вы видите маленький желтый смайлик в нижней части дисплея, его выражение меняется вместе с выражением вашего лица. Небольшая задержка в 20 миллисекунд между выражением лица и его отображением в приложении едва заметна. Приложение записывает вашу реакцию (или реакции, если выражение лица меняется несколько раз) в небольшом журнале смайликов на боковой стороне экрана.

Приложение явно рассчитано на тех, кто озабочен своим имиджем в социальных сетях. Пользователи могут по смайликами увидеть реакцию на каждую размещенную в сети фотографию или видео, которые они публикуют через приложение, а также информацию о количестве просмотров и сведения о том, кто обратил внимание на их пост, а также данные о географическом местонахождении посетителей. Это приложение может быть полезно для некоторых завсегдатаев сети, но неприемлемо для тех, кто настороженно относится к отслеживанию их действий, даже в анонимном режиме.

Создатели Polygram говорят, что сейчас они фокусируют свои усилия на использовании технологии в собственном приложении, но считают, что она также может быть полезной и в других приложениях. В телемедицине она могла бы использоваться, например, для оценки реакции пациента на медперсонал. В конце концов, они могут выпускать программные инструменты, позволяющие другим разработчикам создавать собственные приложения для этой технологии.