Chacun peut désormais aider à former des robots à saisir des objets

Points clés

• Grabette, lancée par Pollen Robotics en 2025, est une pince de préhension portable qui enregistre des données de manipulation robotique sans nécessiter un véritable robot.
• Le dispositif coûte environ 490 euros à construire à partir de pièces standard disponibles dans le commerce.
• Les démonstrations enregistrées se téléchargent automatiquement sur le Hugging Face Hub, une plateforme publique pour partager des outils d'IA et des ensembles de données.
• Une pince de robot compagnon appelée Gripette, coûtant environ 120 euros à construire, s'attache à un bras robotique et reproduit ce que Grabette a enregistré.
• Tous les modèles matériels, les logiciels et les données sont entièrement open source.

Le plus grand obstacle à l'apprentissage des robots pour manipuler des objets n'est pas l'IA elle-même. C'est le manque criant de données d'apprentissage : des exemples concrets de mains qui saisissent des objets, ouvrent des tiroirs, posent des tasses.

Collecter ces données signifie normalement posséder un robot, exploiter des systèmes de télé-opération coûteux (systèmes où un humain contrôle à distance les mouvements d'un robot), et consacrer des heures de travail laborieux en laboratoire. La plupart des équipes de recherche ne peuvent pas se le permettre à grande échelle.

Pollen Robotics, une entreprise française de robotique, pense que la solution est de supprimer complètement le robot.

Leur nouveau dispositif, Grabette, est une pince de préhension portable que vous tenez dans votre main. Vous la saisissez, effectuez une tâche et appuyez sur un bouton. Deux caméras enregistrent ce que vous avez fait. Une caméra fisheye grand angle capture la scène autour de la main. Une caméra de profondeur suit la position précise et la rotation de la pince dans l'espace, une mesure appelée 6-DoF (six degrés de liberté, ce qui signifie chaque direction et angle de mouvement). Un petit ordinateur appelé Raspberry Pi stocke tout localement.

Ensuite, vous ouvrez un tableau de bord dans votre navigateur Web, sélectionnez les enregistrements que vous souhaitez et cliquez une fois. Le système télécharge les données, vérifie que le suivi du mouvement n'a pas dysfonctionné, convertit tout en un format standard appelé ensemble de données LeRobot, et le pousse vers le Hugging Face Hub, initialement signalé comme plateforme de distribution par Hugging Face. Aucun logiciel à installer. Aucune ligne de commande.

Grabette s'inspire directement de l'Universal Manipulation Interface de Stanford, un projet de recherche qui a prouvé que les dispositifs de démonstration portables pouvaient former de véritables politiques robotiques. L'objectif de Pollen était d'éliminer chaque obstacle restant.

Les données enregistrées ne restent pas inactives. Pollen a démontré la chaîne complète en utilisant 200 démonstrations pour entraîner une politique de diffusion, un type de modèle d'IA qui apprend à copier les modèles de mouvement, s'exécutant sur une seule carte graphique grand public. Ce modèle entraîné a ensuite piloté un véritable bras robotique équipé de Gripette, une pince motorisée jumelle qui coûte environ 120 euros à construire et partage le même ADN de conception que Grabette.

Rien dans le système ne vous verrouille à une seule marque de robot ou à une seule méthode d'IA. Le format des données est standard, donc les mêmes enregistrements peuvent entraîner différents robots.

Ce que cela signifie pour les personnes en dehors des laboratoires de robotique

Cela signifie que la construction d'ensembles de données d'apprentissage robotique partagés ne nécessite plus un budget universitaire ou un entrepôt rempli de matériel. Un professeur qui souhaite démontrer comment trier les recyclables, un kinésithérapeute qui souhaite enregistrer un exercice de réadaptation, un petit fabricant qui a besoin qu'un robot manipule une pièce spécifique : chacun d'eux pourrait enregistrer des démonstrations sur un établi et contribuer à un ensemble de données public en croissance.

Pollen demande ouvertement à la communauté de faire exactement cela. Chaque nouvel enregistrement rend l'ensemble de données partagé plus large et moins biaisé vers les tâches que seuls les laboratoires bien financés pensent à inclure.

Un dispositif de caméra montée sur la tête appelé Casquette, conçu pour capturer un point de vue à la première personne, est déjà en développement comme outil compagnon.

Tous les modèles matériels, le code et les ensembles de données sont disponibles publiquement sur GitHub et le Hugging Face Hub.