ПОДХОДЫ К КЛАССИФИКАЦИИ КОММУНИКАТИВНЫХ ЖЕСТОВ: ТЕОРИЯ И ПРИЛОЖЕНИЕ К РОБОТАМ-КОМПАНЬОНАМ

В работе представлен подход к классификации коммуникативных жестов — описаны жесты, у которых означаемое может быть выражено с помощью различных означающих. К классификации жестов мы подходим через выделение коммуникативных функций (означаемого) и инварианта выполнения жеста (означающего). Определенная коммуникативная функция может быть выражена жестами с различным набором исполнительных органов: с помощью мимики, движений головы, рук и тела. Путем выделения коммуникативных функций решается задача моделирования сложного коммуникативного поведения роботом-компаньоном. В работе обосновывается необходимость выделения коммуникативных функций при анализе реального поведения человека в эмоциональных ситуациях (на основе мультимодального корпуса REC), а также описываются контексты и инварианты коммуникативных функций. На примере коммуникативной функции ожидание обратной связи описывается инвариант «акцентирование внимания к ответной реакции собеседника» и различные варианты соответствующих жестов: (1) акцентирование взгляда на адресате, (2) демонстрация собственного бездействия при ожидании адресата, (3) демонстрация готовности перейти к последующим действиям, (4) кивки в подтверждение собственного тезиса или вопросительные движения с запросом реакции собеседника. Также описывается управляющая архитектура робота, с помощью которой моделируются основные особенности естественной коммуникации: коммуникативные функции и жесты. Описание инварианта и жестов для определенной коммуникативной функции позволяет более тонко настраивать коммуникативные реакции робота на входящее высказывание.