Gesture-based Computer Control System applied the Interactive WHITEboard

• Autorzy: Lech, M. , Kostek, B.

Warianty tytułu

PL

System sterowania komputerem za pomocą gestów w zastosowaniu do interaktywnej tablicy

• Języki publikacji: PL

Abstrakty

EN

In the paper the gesture-based computer control system coupled with the dedicated touchless interactive whiteboard is presented. The system engineered enables a user to control any top-most computer application by using one or both hands gestures. First, a review of gesture recognition applications with a focus on methods and algorithms applied is given. Hardware and software solution of the system consisting of a PC, camera, multimedia projector and screen for projected images is presented. Image processing methods used and the fuzzy rule-based gesture recognition concept are described. The application called Interactive Whiteboard, enabling to draw shapes on a virtual whiteboard developed for use with the system is then presented. The functionality of the Interactive Whiteboard and the way of managing the contents with hand gestures is shown. Results of testing the system are also contained.

PL

W pracy przedstawiono system sterowania komputerem za pomocą gestów w powiązaniu z dedykowaną aplikacją Interaktywnej Tablicy. Opracowany system umożliwia kontrolowanie aktywnej w danym momencie aplikacji komputerowej za pomocą gestów jednej bądź obu rąk. W pierwszej części pracy przedstawiono wybrane systemy rozpoznawania gestów wraz ze stosowanymi metodami. Następnie zaprezentowano rozwiązanie sprzętowo-programowe systemu, składające się z komputera klasy PC, kamery, projektora multimedialnego i ekranu dla wyświetlanego obrazu. Opracowany system współpracuje z przygotowaną aplikacją tzw. interaktywną tablicą, umożliwiającą pisanie i rysowanie na tablicy. Przedstawiono zastosowane metody przetwarzania obrazu i metodę rozpoznawania gestów opartą na logice rozmytej. Opisano również funkcje udostępniane przez interfejs interaktywnej tablicy i sposób zarządzania zawartością za pomocą gestów rąk. Następnie zawarto wyniki testów systemu, zaś we wnioskach podano propozycje rozwoju opracowanego systemu.

Słowa kluczowe

PL

system sterowania komputerem; gesty; interaktywna tablicy

EN

gesture-based computer control system; interactive WHITEboard

• Czasopismo: Zeszyty Naukowe Wydziału ETI Politechniki Gdańskiej. Technologie Informacyjne
• Rocznik: 2010
• Tom: T. 18
• Strony: 121-126
• Opis fizyczny: Bibliogr. 4 poz., rys.

Twórcy

autor

Lech, M.

autor

Kostek, B.

• Gdansk University of Technology Multimedia Systems Department

Bibliografia

• [1] Dalka P., Czyzewski A.: Human-Computer Interface Based on Visual Lip Movement and Gesture Recognition, International Journal of Computer Science and Applications, Technomathematics Research Foundation.
• [2] Mitra S., Acharya T.: Gesture Recognition: A Survey, Systems, Man, and Cybernetics, Part C: Applications and Reviews, IEEE Transactions on, 2007, vol. 37, no. 3, pp. 311–324.
• [3] Jung-Bae Kim, Kwang-Hyun Park, Won-Chul Bang & Zenn Bien Z.: Continuous Gesture Recognition System for Korean Sign Language based on Fuzzy Logic and Hidden Markov Model, IEEE, 0-7803-7280-8/02, 2002, pp. 1574–1579.
• [4] Callejas Bedregal B. R., Dimuro G. P., Rocha Costa A. C.: Interval Fuzzy Rule-Based Hand Gesture Recognition, Scientific Computing, Computer Arithmetic and Validated Numerics, 2006. SCAN 2006. 12th GAMM - IMACS International Symposium on, pp. 12–12.