ROBOCYCLE : manipulation et coordination…

1arXiv cs.RO

FLARE : un cadre conscient des échecs pour la correction et la récupération autonomes en manipulation robotique vision-langage

Des chercheurs proposent FLARE (Failure-Aware framework for Autonomous Correction and Recovery), publié sur arXiv sous la référence 2608.26645v1, une méthode destinée aux modèles vision-langage-action (VLA) utilisés pour la manipulation robotique. Le système repose sur deux mécanismes complémentaires baptisés « Retry » et « Reset ». Le mécanisme Retry injecte des perturbations et des segments de transition dans les démonstrations d'entraînement, en dissociant la pose du robot de l'état de l'environnement, afin que la politique apprenne à gérer seule les écarts d'exécution mineurs comme une prise ratée ou un objet qui glisse. Le pipeline Reset s'attaque aux échecs plus graves, dits hors distribution (OOD), qui rompent l'état de la tâche : un grand modèle multimodal (MLLM) analyse hors ligne des vidéos d'exécution pour repérer automatiquement ces états OOD, ce qui permet de constituer une petite bibliothèque ciblée de compétences de récupération centrées sur les objets. En inférence, un moniteur MLLM en ligne arbitre en temps réel entre poursuite de la tâche et déclenchement d'une compétence Reset. Les auteurs annoncent des gains de taux de réussite et de robustesse sur des tâches de manipulation complexes et riches en contacts, sans toutefois détailler dans le résumé les chiffres précis ni la plateforme robotique testée. L'enjeu touche un point faible connu des VLA : entraînés sur des démonstrations « parfaites », sans échec, ils peinent souvent à se rattraper en conditions réelles, un écart classique entre démonstration et déploiement. Pour les intégrateurs et les équipes robotique industrielles, la capacité à détecter et corriger automatiquement une erreur d'exécution, sans intervention humaine ni réinitialisation manuelle du poste de travail, conditionne directement la viabilité de cellules de manipulation autonomes en production. FLARE s'inscrit dans une tendance de recherche qui cherche à combler l'écart entre les démonstrations vidéo souvent présentées par les laboratoires et la réalité d'une ligne de production où objets glissent, collisions surviennent et préhenseurs ratent leur prise. Le travail s'inscrit dans la lignée des modèles VLA génériques récemment mis en avant dans le secteur, comme Pi-0, GR00T N2 ou Helix, qui visent à généraliser la manipulation à partir d'un apprentissage à grande échelle mais partagent la même limite de données d'entraînement sans échec. FLARE reste à ce stade une contribution de recherche publiée sur arXiv, sans annonce de déploiement industriel ni de partenariat commercial associé ; sa validation repose sur des expériences en laboratoire, et son adoption dépendra de tests indépendants et d'une éventuelle intégration dans des piles logicielles de manipulation existantes.

RechercheActu

1 source

2arXiv cs.RO

Recova : récupération sur échec guidée par des agents pour la manipulation robotique autonome

Des chercheurs présentent sur arXiv Recova, un cadre logiciel piloté par un agent qui traite les échecs de manipulation robotique, ces situations où la scène se retrouve dans un état dont la politique de tâche ne peut plus sortir. Le système développe conjointement l'exécution de la tâche et la récupération dans un jumeau numérique reconstruit de la scène. L'agent y diagnostique les pannes, teste des programmes correctifs et collecte des trajectoires réussies, pour la tâche comme pour la récupération, destinées à entraîner deux politiques distinctes. En déploiement, il surveille la progression, déclenche une récupération apprise ou programmée, vérifie que la scène est restaurée, puis reprend la tâche. Si aucune récupération adaptée n'existe, une démonstration humaine règle le cas et alimente la boucle d'apprentissage. Les essais réels et les démonstrations sont routés vers la politique concernée pour un entraînement DAgger. Sur six configurations LIBERO-Pro et quatre catégories MolmoSpaces, Recova atteint 78,8 % et 64,9 % de succès moyen, contre 71,7 % et 38,0 % pour les meilleures méthodes de référence. Sur quatre postes robotisés réels collectant en parallèle, le fine-tuning DAgger fait passer le succès moyen de 23,8 % à 77,5 %, et les compétences de récupération le portent à 87,5 %. Sur une tâche donnée, l'intervention humaine observée tombe de 87,5 % à 0 % en quatre cycles de collecte. L'enjeu dépasse la robustesse brute. La plupart des politiques VLA et des pipelines d'imitation sont évalués sur des trajectoires nominales, alors que le coût opérationnel d'un robot en production tient largement à ce qui se passe après l'échec : objet tombé, scène désordonnée, nécessité d'un opérateur. Recova propose de transformer chaque panne en capacité réutilisable et de réduire progressivement la supervision humaine, ce qui répond directement à la question du coût de téléopération et d'assistance à distance pour les intégrateurs et les exploitants. Le résultat le plus parlant est l'écart sur MolmoSpaces (64,9 % contre 38,0 %), plus marqué que sur LIBERO-Pro. Des réserves s'imposent toutefois : l'évaluation réelle repose sur peu de postes et de tâches, la baisse de l'intervention à 0 % ne concerne qu'une seule tâche, et rien n'est dit sur les temps de cycle, les coûts de reconstruction du jumeau numérique ou la généralisation à des scènes très différentes. Il s'agit d'un travail de recherche, sans produit livré ni déploiement industriel. Le travail s'inscrit dans la convergence entre agents LLM de planification, jumeaux numériques pour la génération de données et apprentissage par correction de type DAgger, une voie explorée pour limiter la dépendance à la collecte massive de démonstrations. Il se positionne face aux approches de fine-tuning de VLA et de simulation à grande échelle que poursuivent des acteurs comme Physical Intelligence (Pi-0), NVIDIA (GR00T) ou Figure (Helix), qui misent surtout sur davantage de données plutôt que sur une récupération explicite des échecs. LIBERO-Pro et MolmoSpaces servent ici de bancs d'essai standardisés. La suite logique serait de valider l'approche sur davantage de tâches, de postes et de durées d'exploitation, et de mesurer ses gains en conditions de production, ce que la page projet de l'équipe, liuisabella.com/Recova, ne détaille pas à ce stade.

RecherchePaper

1 source

3arXiv cs.RO

RoboSpan : apprentissage de politiques de coordination modulaires pour la manipulation mobile du corps entier à nombreux DOF par téléopération

RoboSpan, présenté dans l'article arXiv 2610.19594 (version 1), est à la fois une plateforme de téléopération et de collecte de démonstrations pour la manipulation mobile du corps entier, et un cadre d'apprentissage baptisé Hierarchical Modular Framework (HMF). Le robot physique utilisé compte 29 degrés de liberté (DOF). HMF découpe cet espace d'action en trois branches fonctionnelles : manipulation fine de la main, ajustement de la pose du bras et configuration spatiale de la base mobile. Une architecture de type transformeur, le Coordinated Modular Embodied Transformer (COMET), les relie par attention croisée intermodulaire afin que les modules échangent de l'information et coordonnent leurs actions. Un modèle vision-langage (VLM) décompose hiérarchiquement les tâches longues. Une représentation tactile 2D couvrant toute la paume encode les contacts distribués. Les auteurs annoncent, sur robot réel, un taux de réussite supérieur de plus de 20 % à celui de « références courantes » sur plusieurs tâches longues impliquant le corps entier. Ces travaux visent deux verrous que les intégrateurs connaissent bien. Le premier est l'hétérogénéité des mouvements : la locomotion, le bras et la main n'ont ni les mêmes dynamiques ni les mêmes fréquences, et une politique monolithique de type VLA (vision-langage-action) les gère mal à 29 DOF. Le second est l'accumulation d'erreurs sur les séquences multi-étapes, que la décomposition par VLM cherche à contenir. L'intérêt industriel tient à la combinaison de la modularité et du tactile intégré à la téléopération, rarement présent sur les plateformes de collecte de données, alors que les tâches riches en contacts restent le point faible des démonstrations actuelles. Il faut toutefois relativiser. Il s'agit d'un préprint sans relecture par les pairs. Le résumé ne précise ni les baselines, ni le nombre d'essais, ni les tâches, ni les temps de cycle, ni la charge utile. Le « plus de 20 % » ne dit pas si l'écart est relatif ou en points de pourcentage. Aucun déploiement industriel n'est mentionné. Le travail relève de la recherche en laboratoire, loin d'un produit livré. Cette publication s'inscrit dans la course à l'apprentissage par imitation pour humanoïdes et manipulateurs mobiles. Les modèles généralistes comme Pi-0, GR00T ou Helix poursuivent une approche plus monolithique ou en deux systèmes, tandis que RoboSpan défend une coordination explicitement modulaire. La suite logique serait la publication du code et des jeux de données, des comparaisons directes avec ces modèles sur des benchmarks communs, et des essais hors laboratoire. Rien de tel n'est annoncé à ce stade, et aucun acteur français ou européen n'est cité.

RecherchePaper

1 source

4arXiv cs.RO

Autonomie de population par recensement pour la coordination de robots distribués

Des chercheurs proposent, dans un article déposé sur arXiv (2511.02147, version 2), un modèle en couches de l'autonomie multi-robots qui sépare la décision collective de la décision individuelle. La couche collective repose sur le principe de recensement (« census »), c'est-à-dire un comptage pondéré des signaux reçus des voisins, formalisé par un modèle de dynamique d'opinions non linéaire et utilisé pour décider de la constitution des équipes. La couche individuelle choisit les actions de chaque robot par optimisation comportementale multi-objectifs, résolue par programmation par intervalles. Les auteurs en tirent une nouvelle méthode d'allocation de sous-groupes distribuée. Chaque robot descend le gradient des parties du coût qu'il connaît localement, tandis que les états d'opinion de ses voisins compensent les coûts qu'il n'observe pas. Le groupe exploite ainsi collectivement l'information de la matrice hessienne du coût global. Le modèle est testé sur des flottes de véhicules de surface autonomes, dans trois scénarios : échantillonnage adaptatif, protection d'une unité de haute valeur et partie compétitive de capture du drapeau. L'intérêt tient à la tension entre théorie et exécution réelle. Beaucoup d'algorithmes distribués ne fonctionnent qu'en simulation ou sous hypothèses fortes. Ici, les auteurs affirment que leur modèle se réduit à des algorithmes fondamentaux d'optimisation et de contrôle distribués, tout en autorisant des comportements collectifs inédits. Pour un intégrateur de flottes maritimes, la promesse est une coordination sans nœud central, plus robuste à la perte de communication ou de robots. Les trois scénarios, aux objectifs très différents, suggèrent une certaine généralité. Il faut toutefois rester prudent : le résumé ne donne ni taille de flotte, ni taux de succès, ni comparaison chiffrée avec des méthodes existantes, et il s'agit d'une validation académique, pas d'un produit ni d'un déploiement opérationnel. Ce travail s'inscrit dans la lignée des méthodes de consensus, d'allocation par enchères et d'optimisation distribuée, qui dominent la coordination multi-robots, et dans celle des dynamiques d'opinions non linéaires, récemment importées de la théorie des systèmes dynamiques vers la robotique. La programmation par intervalles est, à notre connaissance, associée à l'écosystème d'autonomie marine open source MOOS-IvP, ce qui explique le choix de véhicules de surface comme banc d'essai. Le résumé ne cite aucun acteur industriel ni calendrier de pilote. La suite logique serait une validation sur des flottes plus grandes, en conditions dégradées de communication, avec des métriques comparatives publiées. Cela permettrait de juger si l'approche tient face aux méthodes concurrentes hors du cadre contrôlé du laboratoire.

UEPas d\'impact direct sur la France/UE

RecherchePaper

1 source

ROBOCYCLE : manipulation et coordination robotiques autonomes à deux bras pour le recyclage

À lire aussi

FLARE : un cadre conscient des échecs pour la correction et la récupération autonomes en manipulation robotique vision-langage

Recova : récupération sur échec guidée par des agents pour la manipulation robotique autonome

RoboSpan : apprentissage de politiques de coordination modulaires pour la manipulation mobile du corps entier à nombreux DOF par téléopération

Autonomie de population par recensement pour la coordination de robots distribués