Real-time engine sound generator based on analysis of video and recorded samples

• Autorzy: Skoczylas M.

Warianty tytułu

PL

Generator dźwięku silnika w czasie rzeczywistym na podstawie analizy wideo i zarejestrowanych próbek

• Języki publikacji: EN

Abstrakty

EN

Generating engine sound samples is a broad topic known for decades, mostly because of high usage of such algorithms in driving car simulations, especially in games. These algorithms differ from very simple looped short sound players that change the frequency of prerecorded samples to sophisticated algorithms that model the engine sound based on some defined characteristics. The latter are computationally extensive and can’t be used in mobile environment (such as smartphones). In this paper author presents own approach to use visual analysis techniques to prepare a database of multiple recorded sound samples and a mixer that can replay these sounds in proper order to mimic an engine sound in real-time.

PL

Generowanie dźwięku silnika jest szerokim tematem znanym od dziesięcioleci, głównie z powodu zastosowania takich algorytmów we wszelakiego rodzaju symulacjach jazdy samochodem, a w szczególności grach komputerowych. Algorytmy te stosują różne podejścia, m.in. od bardzo prostych odtwarzaczy zapętlonych dźwięków, które zmieniają częstotliwość nagranych uprzednio próbek do zaawansowanych algorytmów modelowania dźwięku silnika na podstawie określonych cech charakterystyki silnika. Algorytmy te są obliczeniowo skomplikowane i nie mogą być stosowane w urządzeniach przenośnych (takich jak np. smartfony) w czasie rzeczywistym. W tym artykule autor przedstawia własne podejście do korzystania z technik analizy wizualnej aby automatycznie przygotować bazę wielu nagranych krótkich próbek dźwiękowych oraz miksera, który odtwarza uporządkowane dźwięki w odpowiedniej kolejności, tak aby naśladować sterowalny dźwięk silnika w czasie rzeczywistym.

Słowa kluczowe

PL

generator dźwięku silnika; mikser; analiza wizualna; Hough Transform

• Wydawca: Oficyna Wydawnicza Politechniki Białostockiej
• Czasopismo: Advances in Computer Science Research
• Rocznik: 2014
• Tom: Nr 11
• Strony: 125--136
• Opis fizyczny: Bibliogr. 15 poz., rys., tab.

Twórcy

autor

Skoczylas M.

• Faculty of Computer Science, Bialystok University of Technology, Białystok, Poland

Bibliografia

• [1] http://www.sonory.org/engine-sound-processor.html.
• [2] http://www.olympusmicro.com.
• [3] http://music.columbia.edu/pipermail/music-dsp/2006-April/ 065216.html.
• [4] S.A. Amman and M. Das. An efficient technique for modeling and synthesis of automotive engine sounds. Industrial Electronics, IEEE Transactions on, 48(1):225–234, Feb 2001.
• [5] H. Bay, A. Ess, T. Tuytelaars, and L. Van Gool. Speeded-Up Robust Features (SURF). Comput. Vis. Image Underst., 110(3):346–359, June 2008.
• [6] J. S. Beis and D. G. Lowe. Shape indexing using approximate nearest-neighbour search in high-dimensional spaces. In Conference on Computer Vision and Pattern Recognition, Puerto Rico, pages 1000 – 1006, 1997.
• [7] G. Bradski. The OpenCV Library. Dr. Dobb’s Journal of Software Tools, 2000.
• [8] M. Fischler and C. Bolles. Random sample consensus: a paradigm for model fitting with applications to image analysis and automated cartography. Commun. ACM, 24(6):381–395, June 1981.
• [9] J. Jaglaa and J. Maillard. Sample-based engine noise synthesis using an enhanced pitch-synchronous overlap-and-add method. J Acoust Soc Am., 132(5):3098–108, Nov 2012.
• [10] Y. Karunakar, A. Kuwadekar, and K. Al Begain. A mobile based application for detecting fault by sound analysis in car engines using triangular window and wavelet transform. In Computational Intelligence and Communication Networks (CICN), 2010 International Conference on, pages 523–528, Nov 2010.
• [11] S. Leutenegger, M. Chli, and R. Siegwart. BRISK: Binary Robust invariant scalable keypoints. Computer Vision, IEEE International Conference on, 0:2548– 2555, 2011.
• [12] D. Lowe. Distinctive Image Features from Scale-Invariant Keypoints. Int. J. Comput. Vision, 60(2):91–110, November 2004.
• [13] E. Mullan. Driving sound synthesis from a physics engine. In Games Innovations Conference, 2009. ICE-GIC 2009. International IEEE Consumer Electronics Society’s, pages 1–9, Aug 2009.
• [14] Tao Ni, Dingxuan Zhao, and Hongyan Zhang. Realistic vehicle driving simulator with dynamic terrain deformation. In Mechatronics and Automation, 2009. ICMA 2009. International Conference on, pages 4795–4800, Aug 2009.
• [15] Ting Wei and Hao Zheng. Sound effect of physical engine in game design. In Information Technology, Computer Engineering and Management Sciences (ICM), 2011 International Conference on, volume 3, pages 148–151, Sept 2011.