L'objectif est de réaliser un tracking sur des objets donnés (personnes, voitures...), mobiles dans une séquence vidéo et de les détourer, le tout dans des conditions extrèmes telles que la neige ou la faible luminosité.

Deux réseaux de neurones ont été développés afin d'atteindre cet objectif. Un premier ayant pour but de détourer les objets dans une image fixe (basé sur un Mask-RCNN) et un second ayant pour but d'extraire les objets mobiles dans une séquence vidéo. Une fois ces deux réseaux mis en série, un tracking de tous les objets visés mobiles de l'image est possible.

L'objectif est de concevoir deux robots afin de participer à une compétition. Chacun de ces robots se bat contre un adversaire qu'il doit ejecter d'un ring, appellé dohyo, de manière totalement autonome. Cette conception demande donc des compétences dans de nombreux domaines : la mécanique pour construire un châssis solide, l'électronique (conception d'une carte d'alimentation et d'un driver moteur), l'asservissement (contrôle de vitesse et de trajectoire du robot via un controlleur PID) et la programmation (choix des stratégies).