VIRTUAL TOUCHPAD - video-based multimodal interface

• Autorzy: Kupryjanow A. , Kunka B. , Czyżewski A.

Warianty tytułu

PL

WIRTUALNY TOUCHPAD - interfejs multimodalny oparty na przetwarzaniu obrazu

• Języki publikacji: EN

Abstrakty

EN

A new computer interface named Virtual-Touchpad (VTP) is presented. The Virtual-Touchpad provides a multimodal interface which enables controlling computer applications by hand gestures captured with a typical webcam. The video stream is processed in the software layer of the interface. Hitherto existing video-based interfaces analyzing frames of hand gestures are presented. Then, the hardware configuration and software features of the Virtual-Touchpad are described.

PL

W referacie przedstawiono interfejs multimodalny o nazwie Wirtualny Touchpad. Umożliwia on sterowanie aplikacjami komputerowymi za pomocą gestów dłoni, wyekstrahowanych z obrazów przechwytywanych w czasie rzeczywistym z kamery wizyjnej. Opisano konfigurację sprzętową oraz warstwę oprogramowania interfejsu. Warstwa oprogramowania przetwarza strumień wizyjny, dokonuje detekcji i klasyfikacji określonych gestów oraz interpretuje je w celu wykonania odpowiednich akcji.

Słowa kluczowe

EN

VIRTUAL TOUCHPAD; multimodal interface

PL

WIRTUALNY TOUCHPAD; interfejs multimodalny

• Wydawca: Wydział Elektroniki, Telekomunikacji i Informatyki Politechniki Gdańskiej
• Czasopismo: Zeszyty Naukowe Wydziału ETI Politechniki Gdańskiej. Technologie Informacyjne
• Rocznik: 2010
• Tom: T. 19
• Strony: 219--224
• Opis fizyczny: Bibliogr. 8 poz., rys.

Twórcy

autor

Kupryjanow A.

autor

Kunka B.

autor

Czyżewski A.

• Gdansk University of Technology Department of Multimedia System

Bibliografia

• [1] History of HCI: http://www.cs.cmu.edu/~amulet/papers/uihistory.tr.html
• [2] Sears A., Jacko J.A. (Eds.): Handbook for Human Computer Interaction (2nd Edition). CRC Press, 2007.
• [3] Dalka P., Czyżewski A.: Lip movement and gesture recognition for a multimodal human-computer interface, International Multiconference on Computer Science and Information Technology”, 2nd International Symposium on Multimedia – Applications and Processing, pp. 365–369, 12.10.2009  14.10.2009, Mrągowo, Polska
• [4] Czyżewski A., Kunka B., Kurkowski M., Branchat R.: Comparison of developed gaze point estimation methods, Signal Processing: Algorithms, Architectures, Arrangements, and Applications, SPA IEEE 2008: New Trends in Audio and Video, p. 133136, Poznań, 2527.09.2008.
• [5] Kunka B., Kostek B., Kulesza M., Szczuko P., Czyżewski A.: Gaze-Tracking-Based Audio-Visual Correlation Analysis Employing Quality of Experience Methodology, Intelligent Decision Technologies, IOS Press (now in print).
• [6] Lech M., Kostek B., Czyżewski A., Odya P.: Gesture Recognition Framework for Multimedia Content Viewer Controlling, p. 100104, SPA 2009, Poznań, 2425.09.2009.
• [7] Prati A., Mikić I., Trivedi M. M., Cucchiara R., Detecting moving shadows: formulation, algorithm and evaluation, http://www.ivanamikic.com/TPAMIshadow.pdf
• [8] Chih-Chung Chang and Chih-Jen Lin, LIBSVM: a library for support vector machines, 2001. Software available at http://www.csie.ntu.edu.tw/~cjlin/libsvm