Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
RopeFormer : adaptation inter-essais à partir de l'historique d'interaction pour la manipulation dynamique de corde
RecherchearXiv cs.RO 

RopeFormer : adaptation inter-essais à partir de l'historique d'interaction pour la manipulation dynamique de corde

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs présentent RopeFormer, un système de contrôle robotique conditionné par l'historique d'interaction pour la manipulation dynamique de cordes, un problème classique de robotique où le même mouvement produit des réponses très différentes selon les propriétés physiques de l'objet manipulé, difficiles à identifier explicitement. La politique conserve en mémoire l'historique des couples action-réponse d'un essai à l'autre sans modifier ses poids ni estimer en ligne les paramètres de la corde. En simulation, sur des scénarios de rotation mono-bras soutenue, de rotation bimanuelle et de fouettement transitoire, conserver ce contexte améliore le contrôle par rapport à une remise à zéro du même point de contrôle, avec un bénéfice qui varie selon la dynamique de la corde et les conditions d'observation. Les chercheurs ont ensuite déployé ces politiques figées sur un robot humanoïde Unitree H1-2 confronté à des cordes physiques inédites. Entre le premier et le troisième essai, le temps d'acquisition de cible chute de 30,9% pour l'exercice "Rope Swing" et de 33,9% pour "Rope Twirl", tandis que le nombre moyen de cibles touchées lors du "Rope Whip" passe de 0,2 à 2,3 sur trois. Code, données et vidéos sont publiés sur ropeformer.github.io.

Ce résultat intéresse la manipulation d'objets déformables en général, câbles, tissus, cordages, un domaine où l'identification explicite des paramètres physiques reste un goulot d'étranglement pour l'industrie. En s'appuyant sur un mécanisme d'adaptation en contexte, à la manière d'un grand modèle de langage qui ajuste son comportement sans réentraînement, plutôt que sur une estimation de paramètres physiques ou un réentraînement en ligne, l'approche suggère qu'une politique unique et figée peut s'ajuster à des objets jamais vus simplement en accumulant de l'expérience au sein d'une session. Pour les intégrateurs travaillant sur la manipulation fine ou les tâches impliquant des matériaux souples, cela ouvre une piste pour réduire la recalibration par objet, un coût récurrent en déploiement industriel.

Le travail s'inscrit dans la lignée des recherches sur l'adaptation rapide par contexte plutôt que par identification de système explicite, un axe qui gagne en traction face aux limites des méthodes classiques de modélisation physique des objets déformables. Les auteurs restent prudents: les gains varient selon la dynamique de la corde et les conditions d'observation, et le déploiement réel reste limité à un seul robot humanoïde et des essais contrôlés. La publication complète du code et des données ouvre la voie à des réplications et extensions par d'autres équipes de recherche en manipulation robotique.

Impact France/UE

Aucun acteur français ou européen implique dans ces travaux, mais le code et les données publies en open source pourraient intéresser les équipes de recherche européennes travaillant sur la manipulation d'objets déformables.

Dans nos dossiers

UnitreeManipulation robotique

À lire aussi

ForceTwin : jumeaux numériques physiques pour la manipulation robotique à partir d'interactions humaines instrumentées
1arXiv cs.RO 

ForceTwin : jumeaux numériques physiques pour la manipulation robotique à partir d'interactions humaines instrumentées

Des chercheurs ont publié le 21 septembre 2026 sur arXiv (référence 2609.21751) un système baptisé ForceTwin, conçu pour créer des jumeaux numériques d'objets articulés, portes, tiroirs, mécanismes à ressort, intégrant leurs propriétés physiques réelles plutôt que de simples données visuelles. La méthode repose sur une pince instrumentée à capteur de force, manipulée par un humain, qui enregistre simultanément positions et forces d'interaction. Ces données permettent d'estimer l'articulation de l'objet et ses paramètres dynamiques : inertie, friction de Coulomb, amortissement visqueux, plus un résidu neuronal structuré capturant les forces de mécanisme dépendantes de l'état, comme un ressort ou un ferme-porte. ForceTwin réduit de près de moitié l'erreur d'estimation des paramètres inertiels par rapport à une méthode s'appuyant sur un modèle vision-langage (VLM) comme a priori. Intégré comme modèle dynamique feedforward dans un contrôle en impédance, le système a été testé sur un robot quadrupède Spot (Boston Dynamics) et un bras Franka FR3 (Franka Robotics, Allemagne), atteignant 87% de réussite sur neuf paires objet-robot, contre 60% pour l'approche VLM et 57% pour un jumeau purement cinématique. Les jumeaux identifiés ont ensuite servi à entraîner des politiques de franchissement de porte en corps entier, déployées en conditions réelles. Cette approche cible un angle mort des pipelines actuels de jumeaux numériques, qui se contentent souvent d'inférer la géométrie et d'assigner des paramètres physiques statiques à partir d'a priori visuels ou textuels, une méthode pouvant produire des estimations physiquement incohérentes : deux portes visuellement identiques peuvent demander un effort de manipulation très différent, une nuance invisible pour un modèle vision-langage mais critique pour un robot devant réellement pousser, tirer ou tourner un mécanisme. Pour les intégrateurs et les équipes R&D en manipulation robotique, l'écart de performance observé, particulièrement marqué sur les objets à mécanisme fort où les deux méthodes de référence calent, indique que la modélisation physique fine reste un verrou plus contraignant que la perception ou la planification pour la manipulation d'objets articulés en environnement réel. Cela nuance l'idée selon laquelle les modèles vision-langage-action suffiraient à généraliser la manipulation sans modèle physique explicite du mécanisme manipulé. ForceTwin s'inscrit dans la lignée des travaux sur les jumeaux numériques articulés en robotique, où la difficulté centrale est de capturer la dynamique sans instrumenter lourdement chaque objet du monde réel. Le système se positionne explicitement contre deux références répandues dans la littérature et les pipelines industriels de simulation : l'estimation par a priori vision-langage et les jumeaux purement cinématiques. La validation a été menée sur du matériel commercial existant, Spot et Franka FR3, plutôt que sur des plateformes propriétaires fermées, ce qui facilite une reproductibilité potentielle par d'autres laboratoires. La suite annoncée porte sur le déploiement de politiques de franchissement de porte en corps entier, une tâche souvent citée comme test de référence pour la mobilité et la manipulation combinées chez les robots humanoïdes et quadrupèdes équipés de bras.

UELe bras robotique Franka FR3 utilisé pour valider le système est produit par l'entreprise allemande Franka Robotics, seul lien concret de cette recherche avec l'écosystème européen.

RecherchePaper
1 source
Imagine2Act : exploiter la cohérence objet-action à partir de buts imaginés pour la manipulation robotique
2arXiv cs.RO 

Imagine2Act : exploiter la cohérence objet-action à partir de buts imaginés pour la manipulation robotique

Une équipe de recherche présente Imagine2Act, un framework d'apprentissage par imitation en 3D conçu pour les tâches de réarrangement relationnel d'objets, comme insérer une fleur dans un vase, où la précision sémantique et géométrique est critique. Publié sur arXiv sous la référence 2509.17125 (version mise à jour), le système génère d'abord des images de but imaginées à partir d'instructions en langage naturel, puis reconstruit les nuages de points 3D correspondants pour fournir des a priori sémantiques et géométriques robustes. Ces nuages de points imaginés sont injectés comme entrées supplémentaires dans le modèle de politique, tandis qu'une stratégie de cohérence objet-action, avec une supervision de pose souple, aligne explicitement le mouvement prédit de l'effecteur terminal avec la transformation d'objet générée. Les auteurs rapportent des expériences menées à la fois en simulation et sur robot réel montrant que Imagine2Act surpasse les politiques de référence précédentes considérées comme état de l'art. L'intérêt de cette approche tient à la faiblesse qu'elle cible directement : les méthodes existantes s'appuient soit sur des démonstrations pré-collectées, qui peinent à capturer des contraintes géométriques complexes, soit sur la génération d'images d'état-but, qui capture bien la sémantique et la géométrie mais ne relie pas explicitement la transformation d'objet à la prédiction d'action, ce qui introduit des erreurs liées au bruit génératif. En couplant explicitement ces deux étapes via la cohérence objet-action, Imagine2Act tente de refermer l'écart entre génération de but visuel et exécution motrice précise, un problème central pour les intégrateurs qui cherchent des politiques de manipulation fiables sur des tâches fines (insertion, assemblage, positionnement relatif) plutôt que du simple pick-and-place. Ce travail s'inscrit dans la tendance des modèles vision-langage-action, où la promesse dépasse souvent la robustesse démontrée hors laboratoire ; les auteurs limitent ici l'écart démo/réalité en testant à la fois en simulation et sur robot physique, même si les résultats avancés restent ceux d'une publication académique et non d'un déploiement industriel. Imagine2Act se positionne face à deux familles de méthodes concurrentes dans la recherche en manipulation robotique : l'imitation pure à partir de démonstrations humaines, et les approches récentes de génération d'images de but conditionnées par le langage, qui se sont multipliées avec les progrès des modèles de diffusion texte-image. Le papier, disponible en version mise à jour sous la référence 2509.17125v3, ne mentionne aucune plateforme robotique commerciale ni partenariat industriel ; il s'agit d'une contribution de recherche, accompagnée d'un site dédié (sites.google.com/view/imagine2act) proposant des visualisations supplémentaires des expériences en simulation et en conditions réelles. Aucune date de déploiement, aucun volume de production ni tarif n'est associé à ces travaux, qui restent au stade de la preuve de concept scientifique plutôt que du produit prêt à être intégré en ligne de production.

RechercheActu
1 source
Génération et adaptation dynamique pour manipulation robotique par imitation d'exemples inédits
3arXiv cs.RO 

Génération et adaptation dynamique pour manipulation robotique par imitation d'exemples inédits

Cette annonce technique concerne DAMI (Dynamics-Aware Meta-Imitation), un nouveau framework de recherche pour l'apprentissage par imitation en robotique, publié le 20 juillet 2026 sur arXiv (référence 2607.15880v1). L'apprentissage par imitation permet aux robots d'acquérir des compétences à partir de démonstrations, mais souffre traditionnellement d'un manque de données et de difficultés à généraliser à de nouvelles tâches non vues à l'entraînement. Pour résoudre ce problème, les chercheurs combinent le meta-learning avec plusieurs modules techniques : un module Visual-Motor Trajectory (VMT) qui capture les dynamiques spatio-temporelles complexes dans l'espace latent de la tâche, un bloc Unpaired Unified Task (U2T) qui fusionne des observations multimodales non structurées, et un mécanisme de Task-Conditioned Feature Modulation (TCFM) qui module les caractéristiques 3D de bas niveau. Le système apprend la logique sous-jacente d'une tâche à partir d'une seule démonstration de référence complète, plutôt que de mémoriser des indices statiques figés. Des expériences en simulation et en conditions réelles montrent que DAMI surpasse les approches de référence existantes, aussi bien en inférence directe sur des tâches connues qu'en adaptation à des tâches inédites via du few-shot fine-tuning. L'enjeu ici dépasse la simple performance sur benchmark : c'est le fossé entre démonstration et généralisation réelle qui reste le principal obstacle à la commercialisation des robots manipulateurs et humanoïdes. La plupart des systèmes actuels performent bien sur les tâches pour lesquelles ils ont été entraînés, mais s'effondrent dès qu'un intégrateur change légèrement l'environnement, l'objet ou la disposition de la cellule de production. Si les résultats de généralisation few-shot se confirment au-delà du papier, cela réduirait le coût de redéploiement d'un robot manipulateur sur une nouvelle tâche industrielle, un frein économique majeur actuellement pour les intégrateurs et les décideurs B2B qui hésitent à investir dans des cellules robotisées rigides. Ce travail s'inscrit dans la lignée des architectures VLA (Vision-Language-Action) et des approches de meta-learning déjà explorées par des acteurs comme Physical Intelligence (Pi-0) ou NVIDIA (GR00T N2), qui cherchent tous à résoudre le même problème de transfert sim-to-real et de généralisation inter-tâches. Contrairement à ces produits commerciaux, DAMI reste à ce stade une contribution académique publiée sur arXiv, sans indication de partenaire industriel ni de déploiement prévu. Les prochaines étapes attendues seraient une validation sur des plateformes robotiques tierces et une comparaison directe avec les frameworks VLA propriétaires pour juger de sa maturité réelle.

RecherchePaper
1 source
EIDA : adaptation de la dynamique d'exécution et d'interface pour la navigation de robots, du réel à la simulation puis au réel
4arXiv cs.RO 

EIDA : adaptation de la dynamique d'exécution et d'interface pour la navigation de robots, du réel à la simulation puis au réel

Des chercheurs publient sur arXiv (2610.01219) EIDA, pour « Execution-Interface Dynamics Adaptation », une méthode qui vise à réduire l'écart entre simulation et robot réel en navigation. Le problème ciblé est précis. Une politique apprise en simulation échoue souvent parce que les commandes de vitesse produisent, sur la plateforme réelle, un mouvement et un retour de vitesse différents de ceux modélisés à l'entraînement. EIDA ajuste ces réponses à partir de données d'exécution recueillies sur la plateforme cible, sans reconstruire la dynamique des actionneurs. Un premier modèle, qui prédit les incréments de pose dans le repère du corps, met à jour la géométrie du simulateur. Un second modèle prédit le retour de vitesse que perçoit la politique, et un court historique de ce retour est ajouté à son entrée. Le tout tourne dans un simulateur léger parallélisé sur GPU. Sur les jeux de validation complets du Jackal (robot à roues) et du Unitree Go2 (quadrupède), les modèles ajustés réduisent les erreurs de position et de lacet par rapport au modèle de mouvement prédéfini du simulateur. Sur 100 environnements de navigation évalués dans un autre simulateur physique, EIDA obtient le meilleur taux de réussite et le meilleur score de navigation parmi les politiques apprises comparées, avec ou sans guidage global. Sur un Go2 réel, il atteint le but sans collision dans 20 essais sur 20 en scène statique, contre 4 sur 20 pour la base de référence. L'intérêt tient à l'approche. Beaucoup d'équipes cherchent à résoudre le « sim-to-real » en modélisant finement les moteurs, les couples et les frottements, ce qui est coûteux et propre à chaque machine. EIDA place l'adaptation à l'interface d'exécution, c'est-à-dire entre la commande de vitesse et le mouvement observé, et s'appuie sur des données collectées à l'exécution. Pour un intégrateur qui déploie des politiques de navigation sur plusieurs plateformes, un recalage à partir d'un jeu de données de conduite est plus réaliste qu'une identification complète de la dynamique. Le résultat sur les ablations est aussi instructif : l'écart ne vient pas seulement du mouvement réel, mais de la manière dont la politique estime sa propre vitesse, ce qui oblige à aligner ces estimations. Il faut toutefois relativiser. Il s'agit d'un préprint non évalué par des pairs. Le test physique porte sur un seul robot, en scène statique, avec 20 essais, et rien n'indique encore une tenue en environnement dynamique ou sur d'autres morphologies. Ce travail s'inscrit dans la lignée des méthodes « real-to-sim-to-real », qui vont des approches de randomisation de domaine à l'identification de systèmes et aux modèles de dynamique appris. La navigation par apprentissage par renforcement entraîné en simulation parallèle sur GPU est devenue courante pour les quadrupèdes comme le Go2, et la question du transfert reste son principal frein. Le choix du Jackal et du Go2 montre la volonté de couvrir un robot à roues et un robot à pattes, mais la validation en conditions réelles ne concerne que ce dernier. Les auteurs ne mentionnent ni pilote industriel ni calendrier. La suite logique serait des essais en scènes dynamiques, sur davantage de plateformes, et une comparaison avec des méthodes d'adaptation en ligne.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source