System sterowania gestem z wykorzystaniem czujnika wizyjnego Microsoft Kinect

• Autorzy: Parzych M. , Cetnarowicz D. , Dąbrowski A.

Identyfikatory

DOI

10.15199/ELE-2014-010

Warianty tytułu

EN

Gesture-based control system using Microsoft Kinect vision sensor

• Konferencja: IEEE SPA’ 2013 Signal Processing : Algorithms, Architectures, Arrangements, and Applications (17 ; 26-28.10. 2013 ; Poznań, Poland)
• Języki publikacji: PL

Abstrakty

PL

W artykule przedstawiono system sterowania gestem opartego na czujniku Microsoft Kinect. Omówiono najpopularniejsze środowiska umożliwiające realizację systemu zintegrowanego, wykorzystującego różnorodny sprzęt i oprogramowanie. Przygotowano algorytm bezdotykowego sterowania manipulatorem. Przedstawiono wyniki eksperymentów, przeprowadzonych w celu określenia dokładności i dobrania optymalnej metody sterowania.

EN

The article presents a gesture control system based on the Microsoft Kinect sensor. The most popular environments for implementation of the system realization using a variety of equipment and software are discussed. The prepared algorithm for non-contact control of the manipulator is presented. The paper discusses the results of experiments conducted to determine the accuracy of the control and the optimal control method.

Słowa kluczowe

PL

systemy sterowania gestem; śledzenie położenia dłoni na obrazie; system sterowania komputerem; Microsoft Kinect; sensor Kinect; systemy zintegrowane; sterowanie gestami; śledzenie dłoni

EN

gesture-based computer control system; hand tracking; Microsoft Kinect; Kinect sensor; integrated systems; hand pose detection

• Wydawca: Wydawnictwo SIGMA-NOT
• Czasopismo: Elektronika : konstrukcje, technologie, zastosowania
• Rocznik: 2014
• Tom: Vol. 55, nr 4
• Strony: 42--46
• Opis fizyczny: Bibliogr. 18 poz., il., wykr.

Twórcy

autor

Parzych M.

• Politechnika Poznańska, Katedra Sterowania i Inżynierii Systemów

autor

Cetnarowicz D.

• Politechnika Poznańska, Katedra Sterowania i Inżynierii Systemów

autor

Dąbrowski A.

• Politechnika Poznańska, Katedra Sterowania i Inżynierii Systemów

Bibliografia

• [1] S. Kumar, J. Segen, „Gesture based 3D Man-Machine Interaction using a Single Camera“, IC MCS‘1999, vol. 1., no., pp. 630, 635.
• [2] A. Prieto, F. Bellas, R.J. Duro, F. Lopez-Pena, “An Adaptive Visual Gesture Based Interface for Human Machine Interaction in Inteligent Workspaces”, VECI MS’2006, vol., no., pp. 43, 48.
• [3] Y. V. Parkale, “Gesture Based Operating System Control”, ACCT ’2012, vol., no., pp. 318, 323.
• [4] D. Ionescu, B. Ionescu, C. Gadea, S. Islam, “An intelligent gesture interface for controlling TV sets and set-top boxes”, SACI ’2011, vol., no., pp. 159, 164.
• [5] M. Lech, B. Kostek, “Gesture-based computer control system applied to the interactive whiteboard”, ICIT ’2012, vol., no., pp. 75,78.
• [6] M. Nishino, Y. Nakanishi, M. Sugi, Y. Soo, J. Ota, T. Arai, „Design of gesture interface for deskwork support system”, ICC AS-SICE ’2009, vol., no., pp. 2260, 2267.
• [7] B. Mrazovac, M. Z. Bjelica, D. Simic, S. Tikvic, I. Papp, “Gesture based hardware interface for RF lightning control”, SISY’2011, vol., no., pp. 309, 314.
• [8] M. Manigandan, I. M. Jackin, “Wireless Vision Based Mobile Robot Control Using Hand Gesture Recognition Through Perceptual Color Space”, ACE ‘2010, vol., no., pp. 95, 99.
• [9] A. Wakabayashi, S. Motomura, S. Kato, “Communicative humanoid robot control system reflecting human body movement”, MHS’2011, vol., no., pp. 122,127.
• [10] Weibo Song, Xianjiu Guo, Fengjiao Jiang, Song Jang, Guoxing Jiang, Yunfeng Shi, “Teleoperation Humanoid Robot Control System Based on Kinect Sensor”, IHMSC’2012, vol. 2, no., pp. 264, 267.
• [11] „Kinect for Windows Sensor Components and Specifications”, Kinect Sensor, Programing Guide, MSDN Library, Microsoft Corporation. http://msdn.microsoft.com/en-us/library/jj131033.aspx [dostęp: 27.02.2014].
• [12] Tomasz Kowalczyk, „Kinect SDK – wprowadzenie”, Baza wiedzy MSDN, Microsoft Corporation http://msdn.microsoft.com/pl-pl/library/kinect-sdk-wprowadzenie.aspx [dostęp: 27.02.2014].
• [13] „Kinect for Windows SDK”, Development Tools and Languages, MSDN Library, Microsoft Corporation http://msdn.microsoft.com/en-us/library/hh855347.aspx [dostęp: 27.02.2014].
• [14] „OpenNI , The standard framework for 3D sensing.” http://www.openni.org/ [dostęp: 10.03.2014].
• [15] M. Heichel, P. Misterska, M. Pozaroszczyk, „Sterowanie ramieniem robota za pomocą sensora Kinect”, Praca dyplomowa inżynierska, Politechnika Poznańska, 2014.
• [16] „Educational robot: Robot Arm Pro. Mounting instructions: Model RA1-PRO ”, Arexx Engineering http://www.erax.com/robot_arm/html/en/index.htm [dostęp: 29.09.2013].
• [17] M. Parzych, A. Dąbrowski, D. Cetnarowicz, M. Wróblewski, H. Szwed, M. Staszewski, „Investigation of gesture scenarios for servomotor control using Microsoft Kinect sensor”, SPA’2013, vol. 1, pp. 112–117.
• [18] „NUI_SKELETON_DATA Structure”, Development Tools and Languages, MSDN Library, Microsoft Corporation http://msdn.microsoft.com/en-us/library/nuisensor.nui_skeleton_data.aspx [dostęp: 9.03.2014].