МЕТОД РОЗПІЗНАВАННЯ ЖЕСТІВ ДЛЯ ІНТЕРАКТИВНОГО КЕРУВАННЯ КОМП’ЮТЕРОМ З УРАХУВАННЯМ КОНТЕКСТНОЇ АДАПТАЦІЇ
DOI:
https://doi.org/10.26906/SUNZ.2025.2.083Ключові слова:
розпізнавання жестів, веб-камера, фільтрація відео, багатопоточність, контекстна адаптація, реальний час, MediaPipe, автокорекція яскравостіАнотація
Актуальність. Через постійне розширення сфер, де потрібна швидка та зручна взаємодія з комп’ютером (від мультимедійних застосунків до промислових систем), зростає потреба у безконтактних методах керування. Розпізнавання жестів стає одним із ключових рішень, адже воно здатне підвищити швидкодію, мінімізувати використання традиційних пристроїв введення і надати природній, інтуїтивний спосіб взаємодії. Метою даної роботи є розробка методу розпізнавання жестів, що працює в реальному часі, зі збалансованою продуктивністю, стійкістю до зміни освітлення та здатністю адаптувати реакції системи залежно від контексту активної програми. Об’єктом дослідження виступає процес обробки кадрів із веб-камери та визначення жестів рук у режимі реального часу. Предметом дослідження є алгоритми та методи (особливо, фільтрація двигунного шаблону, різноманітність процесів, контекстуальна модифікація) для підвищення ефективності та залежності системи розпізнавання гестів. Результати. Проект розглядає різні додатки, використовуючи автоадаптацію світлодіодності/контрасту для підвищення консистенції розпізнавання рук під час флуктуаційного освітлення, крім подвійного підходу, що дозволяє оточення блокад. Висновок. Запропонований метод розпізнавання жестів через веб-камеру довів свою ефективність у реальних сценаріях. Поєднання фільтрації кадрів, багатопоточності та контекстної адаптації дозволяє системі працювати стабільно, швидко й бути легко масштабованою під конкретні задачі різних застосунків.Завантаження
Посилання
1. Hinckley K. Synchronous gestures for multiple users and computers // ACM UIST. 2003. P. 149–158.
2. Mankoff J., Hudson S., Abowd G. Interaction techniques for ambiguity resolution in recognition based interfaces // ACM UIST. 2000. P. 11–20.
3. Wilson A., Bobick A. Realtime online adaptive gesture recognition // ICPR'00 International Conference on Pattern Recognition. 2000. P. 1270–1275.
4. Wu M., Balakrishnan R. Multi-finger and whole hand gestural interaction techniques for multi-user tabletop displays // ACM UIST. 2003. P. 193–202.
5. Pavlovic V., Sharma R., Huang T. S. Visual Interpretation of Hand Gestures for Human-Computer Interaction: A Review // IEEE Transactions on Pattern Analysis and Machine Intelligence. 1997. Vol. 19, No. 7. P. 677–695.
6. Viola P., Jones M. Rapid Object Detection Using a Boosted Cascade of Simple Features // Proceedings of the IEEE Computer Society Conference on Computer Vision and Pattern Recognition (CVPR). 2001. P. 511–518.
7. Ionescu B., Coquin D., Lambert P., Buzuloiu V. Dynamic Hand Gesture Recognition Using the Skeleton of the Hand // EURASIP Journal on Applied Signal Processing. 2005. Vol. 13. P. 2101–2109.
8. Freeman W. T., Anderson D. B., Beardsley P. A. et al. Computer Vision for Interactive Computer Graphics // IEEE Computer Graphics and Applications. 1998. Vol. 18, No. 3. P. 42–53.
9. Conic N., Cerseato P., De Natale F. G. B. Natural Human–Machine Interface Using an Interactive Virtual Blackboard // Proceedings of the IEEE International Conference on Image Processing (ICIP). 2007. P. 181–184.
10. Szeliski R. Computer Vision: Algorithms and Applications. London: Springer, 2011. 812 p.
11. Dix A., Finlay J., Abowd G. D., Beale R. Human–Computer Interaction. 3rd ed. Harlow: Prentice Hall, 2003. 832 p.
12. Forsyth D. A., Ponce J. Computer Vision: A Modern Approach. Upper Saddle River: Prentice Hall, 2012. 792 p.
13. Rautaray S. S., Agrawal A. Advances in Vision-Based Human-Computer Interaction: Hand Gesture Recognition System // Chapter in collective monograph. Hershey: IGI Global, 2015.
14. Bradski G., Kaehler A. Learning OpenCV: Computer Vision with the OpenCV Library. Sebastopol: O’Reilly Media, 2008. 555 p
Downloads
Опубліковано
Номер
Розділ
Ліцензія
Авторське право (c) 2025 Natalia Bolohova, Ihor Bilousov

Ця робота ліцензується відповідно до Creative Commons Attribution-NonCommercial 4.0 International License.