Жесты помогают общаться даже с роботами

При общении среди роботов, по-видимому, действия говорят больше, чем слова. Ученые из Великобритании обнаружили, что, общаясь с роботами с помощью жестов руками, мы понимаем их также, как людей. В этом исследовании решается задача совершенствования взаимодействия с роботом NAO. Распознавание роботом вашего сообщения становится все более важной задачей.

Ученые Пол Бремнер и Уте Леонард взялись за ее решение в своем исследовании. Они построили его на основании гипотезы, что если роботы будут сопровождать речь жестами, мы будем их лучше понимать. Знаковые жесты могут иметь такие значения, как открытие двери или книги. Использование жестов вместе с речью называют «мультимодальной коммуникацией». Ученые пытались выяснить, могут ли люди при мультимодальной коммуникации с роботами понимать их так же, как других людей. Исследователи также выясняли, может ли мультимодальная коммуникация стать более понятной, чем просто речь.

Чтобы проверить свою теорию, ученые снимали человека, читающего серию фраз, сопровождаемых определенными знаковыми жестами. Затем они снимали робота, использующего эти записанные фразы, сопровождаемые жестами. Затем эти видеозаписи показали участникам эксперимента, которые должны были определить, как человек и робот пытались общаться. Исследование оказалось успешным: ученым удалось доказать, что мультимодальная коммуникация с роботом действительно более понятная, чем простая речь. «При использовании мультимодального общения, мы понимаем их также как людей».

Общаясь с людьми с помощью жестов, роботы делают вызов самим себе. В процессе экспериментов использовались самые современные технологии. Движения человека отслеживались с помощью датчика Microsoft Kinect, так что жесты руки могли быть записаны в виде данных. Робот использовал эти данные, чтобы имитировать жесты человека. Однако, были и некоторые ограничения. Рука робота не имеет подобной формы и степени свободы движения, какие доступны для человека. Что станет темой для будущей работы ученых.

Несмотря на ограничения, исследования показали, что этот метод перевода человеческих жестов роботу оказался успешным. Что еще более важно, ученые уверены, что жесты робота при использовании речи так же легко понять, как и от человека. Будущая работа будет включать распознавание большего количества жестов в различных ситуациях, а также выяснение эффективного способа перевода жестов человека роботу.