Facial emotion recognition in video stream

Abstract

В данной работе исследуется задача распознавания эмоций по выражению лица человека и её практическое применение в виде разработки веб-приложения для вычисления эмоционального состояния человека. Для решения поставленной задачи рассматриваются алгоритмы для обнаружения лиц на изображении и методы распознавания эмоций. После проведения анализа выбираются алгоритм Виолы-Джонса, основанный на признаках, схожих с признаками Хаара, а также метод распознавания эмоций на основе нахождения ключевых точек лица как наиболее удовлетворяющие поставленным требованиям. Серверная часть приложения написана на языке C# с использованием библиотеки компьютерного зрения OpenCV и её обёртки для .NET совместимых языков программирования Emgu CV. Реализованное приложение тестируется на различных входных данных, исследуется процент корректного распознавания и предлагаются варианты улучшения результатов.

This paper is devoted to the facial emotion recognition problem and its practical solution in the form of a web application for computing emotional state of a man. In the process of solving the problem, we consider algorithms for face detection and methods for emotion recognition. Viola-Jones algorithm for face detection and method based on feature points are chosen for development as the most satisfying set requirements. Server part of the application developed using C#, computer vision library OpenCV and its wrapper for .NET competitive languages Emgu CV. Developed application has been tested for various input data. Analysis of percent of positive recognition is held and improvements for better quality are presented.