Программа определяет положение руки пользователя в пространстве с помощью камеры и управляет промышленным робота Kawasaki так, чтобы тот повторял движения руки. Для определения положения руки используется нейросеть mediapipe.
Программа включает два интерфейса:
- Управляющий:
- Игровой:
Скачайте репозиторий:
git clone https://github.com/KirillHit/HandTracker.git
cd HandTracker
Создайте виртуальное окружение с помощью conda:
conda env create -f environment.yml
conda activate handtraker
Запустите решение:
python3 main.py
Также необходимо загрузить в робота скрипт из этого файла.