Hand Up Sound - Instrument de musique

Instrument de musique par détection de mouvements de mains sur Raspberry Pi

Hand Up Sound - Instrument de musique

Description

Ce projet, intitulé 'Hand Up Sound', vise à concevoir un instrument de musique numérique (type synthétiseur) implémenté sur un Raspberry Pi 3. L'instrument permet de jouer les notes d'une octave en détectant en temps réel la position des mains de l'utilisateur via une caméra. Le système s'appuie sur des scripts Python combinant la gestion sonore avec Sonic Pi et la vision par ordinateur avec OpenCV

Points clés

- Contrôles : La main gauche joue do-ré-mi-fa, la main droite joue sol-la-si-do

- Technologie : Détection d'image en temps réel avec OpenCV via un classifieur en cascade de Haar

- Entraînement : Modèle entraîné sur Cascade Trainer GUI avec 1 790 images positives et 2 314 images négatives

- Axes d'amélioration : Améliorer la détection sur arrière-plan complexe et passer de la bibliothèque pynput à pygame pour mieux gérer la durée des notes.

Technologies utilisées

Raspberry PiPythonSonic PiOpenCV