М
ГТУ им.
Н.Э. Баумана
в течение
ряда лет прово-
дит исследования,
направленные на
определение невер-
бального поведения
человека по видеои-
зображению. В ходе
проведения работ
были разработаны
алгоритмы и про-
граммные решения,
позволяющие по
видеоизображению
оценивать следу-
ющие параметры
невербального поведения человека:
•
положение головы: координаты X, Y, Z в систе-
ме координат видеокамеры;
•
углы поворота головы вокруг осей X, Y, Z;
•
направление взгляда для левого и правого
глаза;
•
оценка мимики с использованием двигатель-
ных единиц по Экману. В режиме классифика-
ции детектируются следующие двигательные
единицы (ДЕ): ДЕ1, ДЕ2, ДЕ4, ДЕ5, ДЕ6, ДЕ7,
ДЕ9, ДЕ10, ДЕ12, ДЕ14, ДЕ15, ДЕ17, ДЕ20,
ДЕ23, ДЕ25, ДЕ26, ДЕ28, ДЕ45 (всего 18 ДЕ).
В режиме регрессии оцениваются следующие
двигательные единицы: ДЕ1, ДЕ2, ДЕ4, ДЕ5,
ДЕ6, ДЕ7, ДЕ9, ДЕ10, ДЕ12, ДЕ14, ДЕ15, ДЕ17,
ДЕ20, ДЕ23, ДЕ25, ДЕ26, ДЕ45 (всего 17 ДЕ);
•
оценка мимики на основе детектирования
и расчета расстояний и углов, характеризую-
щих изменение геометрии лица человека.
Разработанные программные средства позволяют
проводить уверенную оценку указанных признаков
невербального поведения не только при близкой
к фронтальной ориентации головы человека, но
и при отклонении головы от фронтального положе-
ния на углы до ±20° по осям X,Y,Z и в движении.
В дополнение к указанным признакам невер-
бального поведения в МГТУ им. Н.Э. Баумана
разработаны программные средства оценки
частоты сердечных сокращений по видеозаписи
с точностью +/ — 5 ударов в минуту.
На основе разработанных алгоритмов и про-
граммных средств разработан комплекс оценки
состояния человека по невербальному поведе-
нию. Комплекс обеспечивает решение следую-
щих задач:
•
захват видеоизображения. В качестве устрой-
ства захвата может использоваться web-
камера. Рекомендуется разрешение не менее
720 строк;
•
оценку в режиме времени, близком к реаль-
ному, указанных параметров невербального
поведения;
•
предъявление объекту визуальных и вер-
бальных стимулов: нейтральных, позитивных,
негативных;
•
оценку невербального поведения человека
при предъявлении различных стимулов на
основе статистического анализа изменений
признаков невербального поведения.
Состав и количество стимулов могут изменять-
ся путем изменения входных данных комплекса
средствами Microsoft Office или аналогов.
Комплекс может быть развернут на платформе
с характеристиками не хуже, чем Intel I5-2400,
4 Гб ОЗУ, 500 Гб HDD. В качестве устройства
видеозахвата может использоваться web-камера
с разрешением не хуже 720p.
КАРАНКЕВИЧ
Александр Иванович,
зам. директора Научно-
исследовательского и ис-
пытательного центра био-
метрической техники МГТУ
им. Н.Э. Баумана, к.т.н.
ОЦЕНКА НЕВЕРБАЛЬНОГО
ПОВЕДЕНИЯ ПО ВИДЕОИЗОБРАЖЕНИЮ
63
