Определение эмоций при помощи вебкамеры

Системы автоматического определения эмоций всегда вызывают вопросы, если на выходе идут названия эмоций, процентные сочетания, а не отдельные AU системы кодирования выражений лица. Почему это так важно — при кодировании эмоций всегда есть зависимость от контекста и многих других факторов, надо, например, отделять разговорные сигналы, такие как подъем бровей вверх и движение бровей вниз, от эмоций. Но очень советую обратить внимание на новую экспериментальную систему clmtrackr. Работает в обычном броузере, нужно только дать разрешение на доступ к вебкамере.

Сlmtrackr это javascript библиотека, которая отслеживает лицо и выдает его позицию в виде координатной модели вот такого вида:

Дальше осуществляется анализ выражения лица с выделением одной из четырех эмоций — злости, печали, удивления, радости или их сочетания. Не нужно очень придирчиво относится к ограниченному набору эмоций — в качестве прототипа clmtrackr очень интересна и перспективна, особенно учитывая открытый исходный код.

Прямая ссылка на clmtrackr: http://auduno.github.io/clmtrackr/examples/clm_emotiondetection.html

Подробнее о координатной модели лица почитать можно здесь: http://dl.acm.org/citation.cfm?id=1938021