Публікація:
Дослідження алгоритмів комп'ютерного зору для розпізнавання жестів

Завантаження...
Зображення мініатюри

Дата

2025

Назва журналу

ISSN журналу

Назва тома

Видавництво

Дослідницькі проекти

Організаційні підрозділи

Видання журналу

Анотація

Об’єктом дослідження є процес розпізнавання жестів на основі алгоритмів комп’ютерного зору. Цей процес охоплює послідовні етапи: захоплення відеопотоку, попередню обробку зображень, виявлення ключових точок тіла або рук, а також класифікацію динамічних і статичних жестів. Метою роботи є проведення комплексного дослідження ефективності алгоритмів комп’ютерного зору для розпізнавання жестів із акцентом на аналіз їхньої точності, адаптивності до змін освітлення, фону та індивідуальних особливостей виконання жестів, а також визначення оптимальної моделі для подальшої реалізації в системах взаємодії «людина комп’ютер». Методи розробки та проєктування базуються на комплексному підході, що включає традиційну обробку зображень, виявлення ключових точок з використанням бібліотеки MediaPipe, а також застосування глибокого навчання зокрема, згорткових нейронних мереж (CNN) для виділення просторових ознак і рекурентних мереж з довготривалою пам’яттю (LSTM) для аналізу часових послідовностей. Розробка програмної системи здійснювалась мовою Python з використанням бібліотек OpenCV, PyTorch Lightning, MediaPipe, matplotlib і NumPy. Під час реалізації також використовувались методи нормалізації зображень, фільтрації шумів, анотації даних та валідації точності за метриками accuracy, precision, recall і F1 score.

Опис

Ключові слова

розпізнавання жестів, взаємодія «людина комп’ютер», OpenCV, PyTorch Lightning, MediaPipe

Бібліографічний опис

Гайдук Д. А. Дослідження алгоритмів комп'ютерного зору для розпізнавання жестів : пояснювальна записка до кваліфікаційної роботи здобувача вищої освіти на другому (магістерському) рівні, спеціальність 121 – Інженерія програмного забезпечення / Д. А. Гайдук ; М-во освіти і науки України, Харків. нац. ун-т радіоелектроніки. – Харків, 2024. – 108 с.

DOI