Emotion recognition based on facial expressions of gamers

• Autorzy: Pilecki M. , Suchacz M. , Draszawka K.

Warianty tytułu

PL

Rozpoznawanie emocji na podstawie wyrazu twarzy graczy

• Języki publikacji: EN

Abstrakty

EN

This article presents an approach to emotion recognition based on facial expressions of gamers. With application of certain methods crucial features of an analyzed face like eyebrows’ shape, eyes and mouth width, height were extracted. Afterward a group of artificial intelligence methods was applied to classify a given feature set as one of the following emotions: happiness, sadness, anger and fear. The approach presented in this paper was verified using specialized databases and real-life situations. The obtained results are vastly promising, thus further work on the subject should be continued.

PL

Artykuł prezentuje sposób rozpoznawania emocji na podstawie wyrazu twarzy graczy. Przy zastosowaniu określonych metod wybierano niezbędne cechy analizowanej twarzy: kształt brwi, szerokość i wysokość ust oraz oczu. Następnie zastosowano zestaw narzędzi sztucznej inteligencji do rozpoznania odpowiednich emocji (szczęście, smutek, złość i strach) na podstawie uzyskanych zbiorów cech. Rozwiązanie przedstawione w niniejszej publikacji zostało zweryfikowane za pomocą obrazów zawartych w specjalistycznych bazach danych oraz przedstawiających sytuacje z życia codziennego. Otrzymane wyniki są bardzo obiecujące i zachęcają do kontynuacji prac nad tym zagadnieniem.

Słowa kluczowe

EN

artifical intelligence; emotion recognition

PL

rozpoznawanie emocji; sztuczna inteligencja

• Wydawca: Wydział Elektroniki, Telekomunikacji i Informatyki Politechniki Gdańskiej
• Czasopismo: Zeszyty Naukowe Wydziału ETI Politechniki Gdańskiej. Technologie Informacyjne
• Rocznik: 2014
• Tom: T. 22
• Strony: 7--16
• Opis fizyczny: Bibliogr. 14 poz., fot., tab.

Twórcy

autor

Pilecki M.

• Gdańsk University of Technology, Department of Computer Architecture

autor

Suchacz M.

• Gdańsk University of Technology, Department of Computer Architecture

autor

Draszawka K.

• Gdańsk University of Technology, Department of Computer Architecture

Bibliografia

• [1] Rani, P., Sarkar, N., Liu, C.: Maintaining optimal challenge in computer games through real-time physiological feedback. In: Proceedings of the 11th International Conference on Human Computer Interaction. (2005) 184-192
• [2] Chanel, G., Rebetez, C., Betrancourt, M., Pun, T.: Boredom, engagement and anxiety as indicators for adaptation to difficulty in games. In: Proceedings of the 12th international conference on Entertainment and media in the ubiquitous era, ACM (2008) 13-17
• [3] Yannakakis, G., Hallam, J.: Real-time game adaptation for optimizing player satisfaction. Computational Intelligence and AI in Games, IEEE Transactions on 1(2) (June 2009) 121-133
• [4] Zhou, X., Huang, X., Xu, B., Wang, Y.: Real-time facial expression recognition based on boosted embedded hidden markov model. In: Image and Graphics, 2004. Proceedings. Third International Conference on. (dec. 2004) 290-293
• [5] Zhou, X., Huang, X., Wang, Y.: Real-time facial expression recognition in the interactive game based on embedded hidden markov model. In: Computer Graphics, Imaging and Visualization, 2004. CGIV 2004. Proceedings. International Conference on. (July 2004) 144 - 148
• [6] Cohen, I., Sebe, N., Garg, A., Chen, L.S., Huang, T.S.: Facial expression recognition from video sequences: temporal and static modeling. Computer Vision and Image Understanding 91(1-2) (2003) 160-187 Special Issue on Face Recognition.
• [7] Bartlett, M., Littlewort, G., Lainscsek, C., Fasel, I., Movellan, J.: Machine learning methods for fully automatic recognition of facial expressions and facial actions. In: Systems, Man and Cybernetics, 2004 IEEE International Conference on. Volume 1. (October 2004) 592 - 597 vol.1 [8] Ekman, P., Friesen, W.: Facial action coding system. (1977)
• [9] Friesen, W., Ekman, P.: Emfacs-7: Emotional facial action coding system. Unpublished manuscript, University of California at San Francisco (1983)
• [10] Lienhart, R., Maydt, J.: An extended set of haar-like features for rapid object detection. In: Image Processing. 2002. Proceedings. 2002 International Conference on. Volume 1. (2002) I-900 - I-903 vol.1
• [11] Bradski, G.: The OpenCV Library. Dr. Dobb's Journal of Software Tools (2000)
• [12]Lucey, P., Cohn, J., Kanade, T., Saragih, J., Ambadar, Z., Matthews, I.: The extended cohnkanade dataset (ck+): A complete dataset for action unit and emotion specified expression. In: Computer Vision and Pattern Recognition Workshops (CVPRW), 2010 IEEE Computer Society Conference on, IEEE (2010) 94-101
• [13] Lyons, M., Akamatsu, S., Kamachi, M., Gyoba, J.: Coding facial expressions with gabor wavelets. In: Automatic Face and Gesture Recognition, 1998. Proceedings. Third IEEE International Conference on, IEEE (1998) 200-205
• [14] Nissen, S.: Neural Networks Made Simple. (Feb. 2005) http://fann.sourceforge.net/fann_en.pdf