- 17 апреля, 2014
Определение эмоций при помощи вебкамеры
Михаил БаевСистемы автоматического определения эмоций всегда вызывают вопросы, если на выходе идут названия эмоций, процентные сочетания, а не отдельные AU системы кодирования выражений лица. Почему это так важно — при кодировании эмоций всегда есть зависимость от контекста и многих других факторов, надо, например, отделять разговорные сигналы, такие как подъем бровей вверх и движение бровей вниз, от эмоций. Но очень советую обратить внимание на новую экспериментальную систему clmtrackr. Работает в обычном броузере, нужно только дать разрешение на доступ к вебкамере.
Сlmtrackr это javascript библиотека, которая отслеживает лицо и выдает его позицию в виде координатной модели вот такого вида:
Дальше осуществляется анализ выражения лица с выделением одной из четырех эмоций — злости, печали, удивления, радости или их сочетания. Не нужно очень придирчиво относится к ограниченному набору эмоций — в качестве прототипа clmtrackr очень интересна и перспективна, особенно учитывая открытый исходный код.
Прямая ссылка на clmtrackr: http://auduno.github.io/clmtrackr/examples/clm_emotiondetection.html
Подробнее о координатной модели лица почитать можно здесь: http://dl.acm.org/citation.cfm?id=1938021