Commander les fonctions d’un drone avec des gestes ? Ce n’est pas une nouveauté, DJI avait proposé un système de gestes pour déclencher les prises du vues du Spark – c’était en 2017. Mais l’ingénieur et développeur Nikita Kiselov, en collaboration avec Neuron Labs, propose de prendre le contrôle complet d’un Tello de Ryze / DJI avec des codes gestuels.
Les essais semblent concluants
Ils sont basés sur la solution de reconnaissance de la position de la main et des doigts Hands de MediaPipe. La caméra du Tello semble de qualité suffisante pour que la reconnaissance fonctionne bien. Les travaux de Nikita Kiselov constituent une preuve de concept, qui repose sur l’étude du flux vidéo du Tello reçu par un ordinateur via wifi. C’est lui s’occupe des calculs, puisque le processeur à bord de ce drone n’est pas suffisamment puissant. Le projet est à suivre sur sa page Github.
