Дослідження характеристик та методології системи розпізнавання жестів для безконтактної взаємодії з комп’ютером з використанням технологій Computer Vision

Анотація

В роботі досліджено методи розпізнавання жестів для безконтактної взаємодії з комп’ютером, що використовують технології комп’ютерного зору та машинного навчання. Наведено приклади застосування в різних сферах діяльності людини, де вони забезпечують більшу безпеку, ефективність та зручність у використанні. Запропоновано методологію розпізнавання жестів рук у реальному часі. Система базується на алгоритмах, що використовують сегментацію зображень, виявлення контурів та класифікацію рухів рук. Основний акцент зроблено на застосуванні бібліотек OpenCV для обробки відеопотоків та MediaPipe для точного відстеження позицій пальців і рук. Мовою програмування для розробки системи є Python, який використовує дані та додаткові бібліотеки, що дозволяють інтегрувати різні функції. Розроблено діаграму прецедентів системи, визначено взаємодії компонентів, візуалізації сценаріїв використання та запропоновано шляхи застосування даної діаграми. Результатом дослідження є програмний продукт, який дозволяє керувати курсором миші за допомогою жестів рук. Система підтримує такі функції, як переміщення курсора, лівий та правий кліки, подвійний лівий клік, перетягування елементів, прокручування та регулювання гучності