Three-dimensional reconstruction of hand using stereoscopic images

• Autorzy: Golański Piotr , Szczekala Marek

Identyfikatory

DOI

10.2478/jok-2019-0011

Warianty tytułu

PL

Trójwymiarowa rekonstrukcja dłoni z wykorzystaniem obrazów stereoskopowych

• Języki publikacji: EN PL

Abstrakty

EN

This article is devoted to works on using natural user interfaces (NUI) in computer support systems of aircraft service. The concept of such interfaces involves the usage in human-machine communication the same measures as in the communication between people, that is sound or gesture. In the case of gesture communication, it is indispensable to adopt methods related to computer vision algorithms. One of them is a three-dimensional reconstruction of objects based on processing techniques of a pair of two-dimensional images. The above method and the results of its application were presented to obtain a three-dimensional cloud of points describing the hand shape. The obtained software will constitute an element of gesture classifier based on the analysis of the spatial location of the acquired points of the cloud.

PL

Artykuł dotyczy prac nad wykorzystaniem naturalnych interfejsów użytkownika w komputerowych systemach wspomagania obsługi statków powietrznych. Koncepcja tego typu interfejsów zakłada wykorzystanie w komunikacji człowiek-komputer takich samych środków jak w komunikacji między ludźmi, a więc głosu lub gestu. W przypadku komunikacji za pomocą gestów konieczne jest zastosowanie metod związanych z algorytmami komputerowego widzenia. Jedną z nich jest trójwymiarowa rekonstrukcja obiektów oparta na technikach przetwarzania pary dwuwymiarowych obrazów. Przedstawiono tę metodę oraz wyniki jej zastosowania w celu uzyskania trójwymiarowej chmury punktów opisujących kształt dłoni. Uzyskane oprogramowanie będzie stanowić element klasyfikatora gestów opartego na analizie lokalizacji przestrzennej otrzymanych punktów chmury.

Słowa kluczowe

EN

aircraft service; interfaces; NUI; computer vision; stereoscopy; image detection; OpenCV library

PL

obsługa statku powietrznego; interfejsy; NUI; widzenie komputerowe; stereoskopia; rozpoznawanie obrazu; biblioteka OpenCV

• Wydawca: Wydawnictwo Instytutu Technicznego Wojsk Lotniczych
• Czasopismo: Journal of KONBiN
• Rocznik: 2019
• Tom: Vol. 49, iss. 1
• Strony: 209--228
• Opis fizyczny: Bibliogr. 12 poz., rys.

Twórcy

autor

Golański Piotr

• Air Force Institute of Technology (Instytut Techniczny Wojsk Lotniczych)

autor

Szczekala Marek

• Air Force Institute of Technology (Instytut Techniczny Wojsk Lotniczych)

Bibliografia

• 1. Birchfield S., Tomasi C.: Depth discontinuities by pixel-to-pixel stereo. Internatinal Journal of Computer Vision, Vol. 35, Iss. 3, 1999.
• 2. Bradski G., Kaehle A., Camera Models and Calibration & Projection and 3D Vision. Learnig OpenCV, 2008.
• 3. Brown D.C., Close-range camera calibration. Photogrammetric Engineering, 37, 1971.
• 4. Brown D.C., Decentric distortion of Lenses. Photogrammetric Engineering, 32, 1966.
• 5. Golański P., Szczekala M.: The voice interface implementation in the prototype of amobile computer-aided aircraft technical support system. Zeszyty Naukowe AkademiiMarynarki Wojennej-Scientific Journal of Polish Naval Academy, nr 2 (209)/2017.
• 6. Golański P., Szczekala M.: The analysis of the possibility of using Viola-Jonesalgorithm to recognize hand gesture in human-machine interaction. Aviation Advances& Maintenance, Vol. 40, Iss. 1, 2017.
• 7. Golański P., Szczekala M.: The structure of classifiers of hand gestures with the use ofthe active contour model and Fouriers descriptors. Aviation Advances & Maintenance,Vol. 41, Iss. 1, 2018.
• 8. Hartley R., Zisserman A.: Multiple View Geometry in Computer Vision. CambridgeUniversity Press, 2006.
• 9. Hirschmuller H.: Stereo Processing by Semiglobal Matching and Mutual Information.Pattern Analysis and Machine Intelligence PAMI, 30, 2008.
• 10. Konolige K.: Small vision system: Hardware and implementation. Proceedings of theInternational Symposium on Robotics Research, Hayama 1997.
• 11. Zhang Z.: A fexible new technique for camera calibration. IEEE Transactions onPattern Analysis and Machine Intelligence, 22, 2000.
• 12. http://www.vision.caltech.edu/bouguetj/ Complete Camera Calibration Toolbox forMatlab.

Uwagi

Opracowanie rekordu w ramach umowy 509/P-DUN/2018 ze środków MNiSW przeznaczonych na działalność upowszechniającą naukę (2019).