Hugging Face lance Grabette, outil open source pour capturer des données robotiques sans robot

Hugging Face publie Grabette, un système open source conçu pour enregistrer des démonstrations de manipulation robotique à partir d’une simple main humaine et d’un gripper, sans nécessiter de robot physique.

Le projet s’appuie sur l’Universal Manipulation Interface (UMI) développé par Stanford, qui utilise un gripper portable équipé d’une caméra fisheye pour capturer des trajectoires en 6 degrés de liberté. Grabette en reprend le principe en le rendant accessible : il suffit d’un gripper, d’une caméra et d’un moyen de récupérer la trajectoire 6-DoF du mouvement de la main pour générer un jeu de données exploitable par un robot. L’objectif est de lever la barrière technique et financière liée à la collecte de données robotiques, souvent coûteuse et complexe avec des robots dédiés.

Grabette s’intègre à l’écosystème open de Hugging Face : les données enregistrées sont compatibles avec LeRobot pour leur traitement, et peuvent être partagées via le Hugging Face Hub. L’outil propose une interface de traitement directement dans le navigateur, sans installation logicielle. Les démonstrations capturées peuvent ensuite servir à entraîner des politiques visuomotrices, comme celles basées sur des architectures de type transformers ou modèles de diffusion.

Le système vise à faciliter la contribution de données par le grand public, en rendant la capture de démonstrations aussi simple que l’enregistrement d’une vidéo. Hugging Face espère ainsi constituer un jeu de données collaboratif et ouvert, inaccessible à une seule équipe de recherche.