Actualités robotique — page 15

7 308 articles au fil, du plus récent au plus ancien.

39

701arXiv cs.RO 

IronMind : passage à l'échelle de la manipulation dextérique humanoïde par pré-entraînement égocentrique dans l'espace caméra

IronMind, un modèle vision-langage-action (VLA) décrit dans un preprint arXiv (v1, non évalué par les pairs), vise à entraîner des humanoïdes à la manipulation dextre à partir de vidéos égocentriques humaines, c'est-à-dire filmées depuis le point de vue de l'opérateur, combinées à des données robotiques hétérogènes. Les auteurs contournent le retargeting corporel explicite en adoptant une représentation d'action dans l'espace caméra, référentiel natif de ces vidéos, et en alignant sémantiquement les dimensions d'action humaines et robotiques. Sur des budgets de pré-entraînement de 250 à 10 000 heures, la perte de validation décroît approximativement de façon log-linéaire avec le volume de données. Après post-entraînement, sur six tâches difficiles impliquant objets, affordances et consignes de raisonnement inédits, le modèle à 10 000 heures atteint 55,0 % de réussite. Les budgets inférieurs ou égaux à 5 000 heures plafonnent à 11,7 % au mieux, et l'absence de pré-entraînement donne 5,0 %. À budget égal, la représentation en espace caméra surpasse aussi la référence en repère du torse. L'intérêt tient à deux points. D'abord, la manipulation dextre humanoïde commence à montrer une loi d'échelle comparable à celle observée en langage : la perte baisse régulièrement avec les données, et la généralisation en conditions réelles progresse. Ensuite, la source de données change d'économie. Les vidéos égocentriques bon marché, sans cinématique du torse, deviennent exploitables, alors que la téléopération robotique reste lente et coûteuse à collecter. Pour un intégrateur, cela suggère que le goulot d'étranglement se déplace vers la curation et l'alignement de données humaines plutôt que vers le parc de robots. Quelques réserves s'imposent : le saut brutal entre 5 000 et 10 000 heures (de 11,7 % à 55,0 %) repose sur six tâches seulement, sans indication du nombre d'essais ni de l'intervalle de confiance. Le robot utilisé, les temps de cycle et les conditions de test ne sont pas précisés dans le résumé. Il s'agit de résultats de laboratoire, sans déploiement industriel. Ce travail s'inscrit dans la course aux VLA généralistes, où Pi-0 de Physical Intelligence, GR00T de NVIDIA et Helix de Figure exploitent surtout des données téléopérées ou synthétiques. L'usage de vidéo humaine égocentrique à grande échelle est une piste concurrente, déjà explorée par plusieurs laboratoires, que IronMind cherche à rendre praticable en supprimant l'étape de retargeting. Les prochaines étapes à surveiller sont la publication du code et des poids, la réplication sur d'autres plateformes humanoïdes, et la mesure du point de saturation au-delà de 10 000 heures. Aucun acteur français ou européen n'est mentionné dans le résumé.

IA physique❖Paper

1 source

39

702arXiv cs.RO 

OGPO : optimisation de politique générative en une étape pour le contrôle de robots en temps réel

Des chercheurs publient OGPO (One-Step Generative Policy Optimization), un cadre d'apprentissage pour le contrôle robotique en temps réel, dont la version 2 vient d'être diffusée sur arXiv (2601.20701). Il vise un problème précis : les politiques de contrôle fondées sur la diffusion ou le flow matching génèrent les actions en plusieurs étapes d'échantillonnage, ce qui limite leur usage dès que la latence compte. Réduire ce nombre d'étapes à un seul dégrade d'ordinaire la qualité de représentation et la performance sur la tâche. Les auteurs décrivent un compromis à trois pôles entre vitesse, fidélité et performance. OGPO associe une architecture légère au principe d'« interval velocity » pour une inférence en une étape sans distillation, tandis qu'une technique de « représentation spreading » évite la dégradation des représentations. Une phase d'apprentissage par renforcement (RL) on-policy affine ensuite cette politique rapide et stable. Sur les benchmarks RoboMimic et OpenAI Gym, la méthode égale ou dépasse des références multi-étapes, avec une inférence 5 à 20 fois plus rapide et une fréquence de contrôle supérieure à 120 Hz. Un déploiement physique sur un bras Franka Emika Panda est présenté comme validation. L'intérêt tient à la place des politiques génératives dans la robotique actuelle. Diffusion et flow matching sont devenus des choix courants pour représenter des comportements multimodaux, y compris dans plusieurs architectures VLA (vision-langage-action). Leur coût d'inférence impose pourtant des compromis : fréquences de contrôle basses, découpage des actions en blocs (chunking), ou matériel de calcul embarqué plus lourd. Une politique à plus de 120 Hz sans distillation, si les résultats tiennent, rapprocherait ces méthodes des boucles de contrôle réactives, utiles pour la manipulation fine ou le contact. L'ajout du RL on-policy répond à une limite connue de l'apprentissage par imitation, dont la performance reste bornée par la qualité des démonstrations. Les réserves sont claires : RoboMimic et Gym sont des benchmarks académiques, la validation réelle se limite à un seul bras et le résumé ne détaille ni les tâches physiques, ni le taux de réussite, ni le matériel de calcul. Le gain de 5 à 20 fois dépend des références choisies. Ce travail s'inscrit dans une course à l'accélération des politiques génératives. Diffusion Policy a imposé le paradigme, les approches de flow matching comme Pi-0 l'ont repris à plus grande échelle, et plusieurs équipes explorent la distillation en peu d'étapes ou le fine-tuning par RL de ces politiques. OGPO prend une voie sans distillation, en combinant vitesse et amélioration par renforcement. Il s'agit ici d'une publication de recherche, sans produit ni déploiement industriel annoncé. La suite dépendra des preuves sur des tâches plus variées, sur des robots différents et, surtout, de son intégration dans de grands modèles VLA. Une page de projet accompagne l'article.

Recherche❖Paper

1 source

39

703arXiv cs.RO 

BIND : lier les actions 3D du robot aux caractéristiques d'images 2D

Des chercheurs publient sur arXiv (2609.38443) BIND, une nouvelle représentation d'action pour les politiques visuomotrices de robots. Elle associe les actions 3D du robot aux caractéristiques d'image 2D correspondantes. La méthode discrétise un volume de positions candidates de l'effecteur terminal. Chaque candidat est rattaché aux features d'un encodeur visuel pré-entraîné, à l'endroit où il se projette dans chaque vue caméra. Les actions sont ensuite choisies en évaluant chaque combinaison position + feature liée à l'image. Les tests ont été menés sur un robot réel, sur quatre axes : efficacité en données, robustesse à des positions d'objets jamais vues, robustesse à des changements de point de vue caméra, et exécution de tâches longues nécessitant de la dextérité. Selon les auteurs, BIND atteint un succès quasi parfait avec seulement 5 démonstrations. Il se dégrade progressivement face à de forts décalages de caméra et à des positions d'objets exclues de l'entraînement, là où les baselines par régression de coordonnées échouent complètement. Le résumé ne précise ni le robot, ni les tâches, ni le nombre d'essais. Le résultat touche un point sensible du déploiement industriel des politiques apprises : la fragilité. Aujourd'hui, la plupart des têtes d'action régressent les actions via un MLP à partir d'un unique vecteur de features global. La politique doit alors redécouvrir, à partir des seules démonstrations, le lien entre l'action cible et la zone de l'image où elle se projette. Cela explique en partie pourquoi des encodeurs riches sémantiquement restent fragiles quand une caméra bouge de quelques centimètres ou qu'un objet change de place. Pour un intégrateur, ces deux écarts sont fréquents : une caméra se décale à la maintenance, une pièce n'arrive jamais exactement au même endroit. Injecter la géométrie de caméra plutôt que l'apprendre réduit le coût de collecte de données, et 5 démonstrations changent l'économie d'un déploiement. Ces chiffres viennent toutefois d'un seul article, sans validation indépendante, et il reste à voir s'ils tiennent sur des tâches variées, en dehors de l'environnement des auteurs. Ce travail s'inscrit dans la course aux politiques visuomotrices et aux modèles vision-langage-action (VLA), qui misent surtout sur l'échelle des données et le pré-entraînement pour la généralisation. BIND suit une logique inverse : un biais inductif géométrique explicite, proche des approches qui exploitent la projection multivue ou les représentations spatialement ancrées. Il faut des caméras calibrées, ce qui est courant en cellule industrielle mais plus contraignant pour des robots mobiles ou des données hétérogènes. Reste à savoir si BIND se combine avec les grands VLA ou s'il reste cantonné aux politiques spécialisées. Autres suites à surveiller : les versions avec code ouvert, les comparaisons avec les VLA généralistes et les tests sur plusieurs plateformes.

Recherche❖Paper

1 source

39

704arXiv cs.RO 

Modélisation du monde conditionnée par le langage pour la navigation visuelle

Une équipe de chercheurs publie sur arXiv (2603.26741, version 2) un travail sur la navigation visuelle conditionnée par le langage, baptisée LCVN. Dans cette tâche, un agent incarné doit suivre une instruction en langage naturel en ne disposant que d'une observation égocentrique initiale, sans image du but. La perception et le contrôle continu doivent donc être guidés uniquement par le texte. Les auteurs introduisent le jeu de données LCVN, qui regroupe 39 016 trajectoires et 117 048 instructions vérifiées par des humains, couvrant des environnements et des styles de consigne variés. Ils comparent deux approches. La première, l'imagination latente, associe un modèle du monde à base de diffusion (LCVN-WM), qui imagine les observations futures, à un agent acteur-critique (LCVN-AC) dont la politique est apprise entièrement dans cet espace latent imaginé. La seconde, la prédiction autorégressive unifiée (LCVN-Uni), utilise un seul backbone multimodal qui prédit actions et observations en une passe sur une séquence de tokens partagée. Les résultats montrent que les deux approches sont complémentaires. L'imagination latente produit des déroulés plus cohérents dans le temps, tandis que la prédiction unifiée généralise mieux à des environnements jamais vus. Pour un ingénieur robotique ou un intégrateur, l'enseignement porte sur l'arbitrage d'architecture entre un modèle du monde explicite, utile pour la planification, et un modèle unique de type VLA (vision-langage-action), plus robuste hors distribution. Des ablations isolent l'effet du guidage linguistique, des signaux de conditionnement et du style d'instruction. Elles permettent de savoir si le goulot d'étranglement vient de l'ancrage du langage ou de la modélisation de la dynamique. Cette distinction est précieuse pour orienter les investissements, entre meilleures données langagières et meilleurs modèles dynamiques. Il faut cependant rester prudent : il s'agit d'un travail académique évalué sur un benchmark, sans déploiement sur robot physique annoncé. Il ne dit rien du transfert sim-to-real ni des temps de latence en conditions industrielles. Ce travail s'inscrit dans la longue tradition de la navigation visuelle conditionnée par un but image, qui sert de banc d'essai à l'IA incarnée depuis des années. Il rejoint la tendance actuelle qui combine modèles du monde génératifs et politiques linguistiques, portée par des modèles du monde comme ceux de la famille Genie ou Cosmos et par les VLA généralistes (Pi-0, GR00T, Helix), qui visent surtout la manipulation. La navigation par instruction reste moins couverte par ces modèles. Le jeu de données, relativement volumineux pour la tâche, peut servir de référence commune. Aucune suite commerciale ni calendrier de pilote n'est annoncé. La prochaine étape logique serait de tester ces approches hybrides sur du matériel réel, ou d'unifier imagination latente et prédiction autorégressive dans une même architecture.

Recherche❖Paper

1 source

39

705arXiv cs.RO 

Analyse d'observabilité et calibration en ligne de l'odométrie visuelle-inertielle-roues pour robots mobiles 4WIS4WID

Une nouvelle prépublication arXiv (v1, non évaluée par les pairs) décrit un cadre d'odométrie visuelle-inertielle-roues (VIWO) avec calibration en ligne, conçu pour les robots mobiles à quatre roues indépendamment directrices et motrices (4WIS4WID). Les auteurs dérivent un modèle d'odométrie 2D directement à partir des quatre vitesses d'entraînement et des quatre angles de braquage, en combinant les contraintes de roulement longitudinal et de non-glissement latéral de chaque roue. Ils développent aussi un modèle de préintégration et des jacobiens analytiques, afin de rendre le filtrage et la calibration efficaces. La validation repose sur des simulations et sur des essais réels avec un robot 4WIS4WID. L'abstract ne fournit ni erreur de positionnement, ni durée d'essai, ni nom de plateforme, ni comparaison chiffrée avec d'autres méthodes. L'apport principal est théorique, mais il touche un point sensible de la mobilité industrielle. Les bases 4WIS4WID, très manœuvrantes et capables de déplacements latéraux ou diagonaux, équipent de nombreux AMR et manipulateurs mobiles. Leurs décalages de braquage, rarement connus avec précision, dégradent l'odométrie. L'analyse d'observabilité montre qu'un modèle utilisant seulement les vitesses d'entraînement rend tous les décalages de braquage inobservables. Le modèle redondant proposé, qui exploite aussi le non-glissement latéral, les rend observables. Les auteurs identifient quatre directions inobservables classiques des systèmes visuels-inertiels et trois directions supplémentaires liées au placement arbitraire du repère d'odométrie. Il reste treize paramètres intrinsèques de roues à calibrer. Ils précisent aussi les mouvements dégénérés (vitesse de lacet nulle, braquage constant, roue qui ne roule pas) et les conditions d'excitation correspondantes. Pour un intégrateur, cela définit des trajectoires de calibration à exécuter en production et des situations où l'estimation devient peu fiable. Faute de métriques publiées dans le résumé, le gain réel en précision reste à confirmer à la lecture de l'article complet. Ce travail s'inscrit dans la lignée de la fusion visuelle-inertielle (VINS) étendue aux capteurs de roues, déjà étudiée pour les bases différentielles ou de type voiture, bien plus que pour les architectures à braquage indépendant. Il comble un vide à mesure que ces plateformes se généralisent dans les entrepôts et les usines. Aucun acteur commercial, aucun calendrier de déploiement ni aucune publication de code ne sont mentionnés dans l'abstract. Les prochaines étapes probables sont des évaluations sur davantage de plateformes, des comparaisons avec des méthodes de référence et une éventuelle intégration dans les piles de navigation open source.

Recherche❖Paper

1 source

39

706arXiv cs.RO 

Politique texte-vers-3D : alignement fin langage-comportement pour généraliser à des spécifications inédites

Des chercheurs ont publié sur arXiv T3DP (Text-to-3D Policy), un cadre d'apprentissage qui aide une politique de manipulation robotique à suivre des consignes en langage naturel portant sur des variations de comportement absentes des démonstrations d'entraînement. Les auteurs parlent de généralisation à des spécifications non vues : la consigne fixe une position cible, un déplacement ou un état articulé (porte entrouverte, tiroir à moitié tiré) jamais rencontré à l'apprentissage. T3DP ne compresse plus chaque instruction et chaque démonstration en un seul vecteur global. Il conserve leur structure locale et établit une correspondance bidirectionnelle, au niveau des tokens, entre les éléments linguistiques et les segments de comportement. La représentation obtenue conditionne une politique de diffusion 3D sur nuage de points, dont l'architecture reste inchangée. Sur Meta-World, ManiSkill et RoboTwin, le taux de réussite moyen sur spécifications hors distribution progresse de 11,0 à 14,2 points face à un alignement global langage-comportement, avec un gain sur les 15 familles de tâches. Sur robot réel, il passe de 47,5 % à 65,0 % (+17,5 points). Il s'agit de résultats de recherche, sans produit ni déploiement industriel. Le texte ne précise ni le nombre d'essais réels, ni le robot, ni les tâches. L'enjeu touche un point faible des politiques actuelles, qui exécutent bien les variantes vues en démonstration et se dégradent quand la consigne demande une variation fine. Les auteurs montrent que les représentations de langage pré-entraînées et l'alignement global saturent à la sémantique grossière de la tâche et confondent des consignes voisines qui exigent des gestes différents. Pour un intégrateur, c'est la différence entre « range la pièce » et « place-la à 2 cm à gauche du repère » sans nouvelle collecte de données. Le gain est obtenu sans toucher à l'architecture de la politique, ce qui facilite son intégration dans des piles existantes. Les analyses de représentation et de sondage d'actions indiquent que l'alignement fin préserve mieux la géométrie des spécifications. Les résultats restent à nuancer : les benchmarks sont simulés, le test réel semble de petite taille, et un taux de 65 % reste loin des exigences industrielles, où l'on attend plus de 95 % de fiabilité. Ce travail s'inscrit dans la montée des politiques visuomotrices 3D, comme la 3D Diffusion Policy, qui offrent une précision spatiale supérieure aux approches purement 2D. Il complète les modèles vision-langage-action (VLA) généralistes, qui misent sur l'échelle des données et des modèles pour couvrir la diversité des consignes. T3DP suit une autre voie : améliorer l'alignement du langage sur le comportement plutôt qu'ajouter des démonstrations. Le papier est une préversion arXiv (v1), sans relecture par les pairs à ce stade, et ne mentionne pas de code ni de calendrier de transfert. La suite logique serait des validations sur davantage de robots, des tâches longues et une comparaison directe avec des VLA de grande taille.

Recherche❖Paper

1 source

39

707arXiv cs.RO 

Repenser la lisibilité de l'intention des robots sociaux dans les couloirs : effets de sa représentation et de la distraction humaine

Une équipe de recherche du Fluent Robotics Lab publie sur arXiv (2609.40158) une étude sur la « lisibilité » du mouvement des robots mobiles dans les couloirs. Le travail compare plusieurs façons de représenter l'intention du robot, toutes implémentées dans un même cadre de commande prédictive (MPC, en pratique une variante MPPI), afin d'isoler l'effet de la représentation elle-même. Deux expériences contrôlées, chacune avec 45 participants, ont été menées. La première compare une lisibilité fondée sur le côté de passage, soit fixe, soit mise à jour de façon adaptative, à une lisibilité fondée sur la destination et à une base de référence non lisible. La seconde fait varier le niveau d'attention du piéton, dont la distraction. Les résultats indiquent que la lisibilité par côté de passage, surtout lorsqu'elle est actualisée en continu, produit des trajectoires humaines plus fluides. Elle est aussi jugée plus compétente et moins exigeante mentalement et physiquement. En cas de distraction, la fluidité du mouvement humain se maintient, mais les évaluations subjectives ne suivent pas toujours. Le code est publié en open source sur GitHub (Legible_MPPI). L'intérêt dépasse la recherche académique. Les AMR, robots de livraison et futurs humanoïdes qui évoluent dans des espaces partagés (hôpitaux, entrepôts, bureaux) rencontrent le même problème dans les couloirs étroits : deux agents doivent se croiser sans se bloquer ni se heurter. L'étude suggère qu'indiquer à l'humain de quel côté le robot va passer coordonne mieux l'interaction que lui signaler la destination finale, information peu exploitable à quelques mètres. Elle montre aussi que la lisibilité conserve une partie de son effet quand le piéton regarde son téléphone, ce qui compte pour la sécurité en conditions réelles. Le décalage entre mesures objectives et ressenti rappelle toutefois que la perception de confiance et la performance de coordination ne se confondent pas. Pour un intégrateur, cela plaide pour évaluer la navigation sociale sur des mesures de mouvement et pas seulement sur des questionnaires. Il faut relativiser la portée des résultats. Il s'agit d'une étude préliminaire sur arXiv, avec un échantillon modeste et un scénario unique, le couloir. Aucun produit commercial, déploiement ni chiffre de performance industrielle n'est annoncé. Les travaux sur la lisibilité remontent aux cadres posés pour des observateurs statiques, notamment en manipulation. Leur transposition à la navigation dynamique restait peu explorée. Cette étude s'inscrit dans un courant plus large de navigation sociale où se croisent apprentissage par renforcement, modèles VLA et commande prédictive. La suite logique serait d'étendre les tests à des environnements plus denses, à des groupes de piétons et à des robots non holonomes ou à pattes, puis de les valider sur des sites réels comme des hôpitaux ou des entrepôts.

Recherche❖Paper

1 source

39

708arXiv cs.RO 

PhasePlan : planification ordonnée des phases futures pour les modèles de cerveau de robot

Une équipe de chercheurs propose PhasePlan, une méthode de planification ordonnée des phases futures pour les « robot brain models », ces modèles qui fusionnent vision, langage et état du robot pour générer des actions de manipulation. Le constat de départ est que la plupart de ces modèles prédisent des « action chunks » de longueur fixe, qui peuvent chevaucher plusieurs phases d'une tâche. À partir des observations multimodales courantes, PhasePlan prédit la phase de tâche associée à chaque position d'action future. Les représentations de planification obtenues conditionnent ensuite les actions correspondantes. L'entraînement se fait en deux temps : le planificateur est d'abord appris, puis gelé pendant l'adaptation du modèle d'action, afin de garder des représentations de phase stables. La méthode est instanciée sur le modèle π0.5 pré-entraîné et sur AcrossWAM1.0. L'évaluation quantitative détaillée porte uniquement sur π0.5. Sur une tâche de manipulation sur tapis roulant, l'erreur d'action articulaire hors ligne baisse d'environ 22,5 % par rapport au π0.5 d'origine. Les auteurs rapportent aussi une meilleure modélisation des transitions de phase et de la prédiction d'actions à cheval sur plusieurs phases. L'intérêt tient au défaut visé. Un chunk de longueur fixe mélange des phases hétérogènes (approche, saisie, transport, dépose), ce qui brouille les transitions et pousse le modèle vers les schémas d'action les plus fréquents. En environnement dynamique comme un convoyeur, où le timing du geste compte autant que sa trajectoire, ce biais dégrade la qualité d'exécution. Pour les intégrateurs, la piste est intéressante : elle améliore un VLA existant sans changer d'architecture, par un module de planification gelé. Les résultats appellent toutefois de la prudence. La métrique est une erreur hors ligne sur trajectoires articulaires, pas un taux de réussite en boucle fermée sur robot réel. Une seule tâche est chiffrée, et la seconde instanciation n'est pas quantifiée en détail. Le gain de 22,5 % ne dit donc pas encore s'il se traduit en cadence ou en fiabilité de production. Ce travail s'inscrit dans la lignée des modèles π0 et π0.5 de Physical Intelligence, devenus une base courante pour l'adaptation de politiques VLA, et dans les recherches sur la structure temporelle de la génération d'actions : chunking, hiérarchie de sous-tâches, raisonnement intermédiaire. Il rejoint des approches comme Helix de Figure ou GR00T de NVIDIA, qui séparent planification de haut niveau et contrôle bas niveau, avec ici une planification alignée position par position sur l'horizon d'action. Il s'agit d'un preprint arXiv (2609.39970v1), sans relecture par les pairs, sans déploiement industriel annoncé ni code ou calendrier mentionné dans le résumé. La suite logique serait une validation en boucle fermée sur robot réel, des comparaisons avec d'autres méthodes de chunking adaptatif, et une évaluation chiffrée sur AcrossWAM1.0 et sur des tâches plus variées.

Recherche❖Paper

1 source

38

709arXiv cs.RO 

FORTE : prévision de l'occupation pour une planification spatio-temporelle sensible au risque en environnements dynamiques

FORTE est un cadre de navigation pour robots mobiles en environnement dynamique, décrit dans un preprint arXiv (2609.39305v1). Il repose sur la prédiction de grilles d'occupation (OGM), qui estiment où des obstacles se trouveront dans les secondes à venir. Au lieu de détecter et de suivre chaque objet, FORTE exploite directement l'évolution spatio-temporelle de l'occupation prédite, selon deux critères : le recouvrement spatio-temporel de l'occupation avec la trajectoire envisagée, et sa directivité, c'est-à-dire le sens dans lequel l'occupation se déplace. Le système compare plusieurs chemins de topologies différentes et retient le plus adapté. Le prédicteur est un modèle de diffusion latente qui génère tout l'horizon de prévision d'un seul passage (non autorégressif), avec des modules de décalage temporel (temporal shift) pour garder la cohérence entre les images. Les auteurs annoncent jusqu'à 215,3 % d'IoU en plus, une inférence 5,24 fois plus rapide, et un taux de réussite en navigation jusqu'à 3,5 fois supérieur à l'état de l'art. L'intérêt tient à deux verrous classiques. Les pipelines « détection, suivi, prédiction » cumulent les erreurs (identités perdues, objets manqués), et les prédicteurs génératifs sont souvent trop lents pour le replanning en ligne. Produire l'horizon complet en un coup répond au second problème et limite la dérive propre aux modèles autorégressifs. Une approche indépendante du suivi d'objets serait utile aux AMR d'entrepôt et aux robots mobiles ou humanoïdes évoluant parmi des piétons. Les chiffres demandent toutefois de la prudence : ce sont des maxima (« jusqu'à »), les baselines ne sont pas nommées dans le résumé, et celui-ci ne précise ni la part de simulation et de matériel réel, ni la latence absolue, ni la plateforme de calcul. Le travail s'inscrit dans la lignée des méthodes de navigation fondées sur les OGM, qui traitent souvent les cartes prédites comme des instantanés et n'exploitent donc pas leur dimension temporelle au moment de planifier. Il s'agit d'une publication académique, sans produit, sans pilote ni partenaire industriel annoncés, et aucun acteur français ou européen n'y apparaît dans le résumé. La suite logique serait une validation sur robot réel, l'évaluation de la consommation sur calcul embarqué et la comparaison avec les approches VLA de bout en bout, qui visent le même problème par une autre voie.

Recherche❖Paper

1 source

38

710arXiv cs.RO 

SimEX : l'AutoResearch en robotique intégrant la simulation

SimEX, un framework d'« autoresearch » décrit dans l'article arXiv 2609.38982v1, propose de confier à un agent de code basé sur un LLM le développement de compétences robotiques, en s'appuyant sur la simulation plutôt que sur des essais physiques répétés. Le système fonctionne en deux étapes. Dans un premier temps, l'agent mène en simulation des itérations ouvertes de sondage et d'optimisation, et construit une « boîte à outils » robotique robuste et généralisable. Dans un second temps, il adapte conjointement cette boîte à outils et le simulateur en quelques essais réels seulement : chaque essai corrige le simulateur, qui sert ensuite à diagnostiquer les échecs et à présélectionner les réparations candidates. Les auteurs évaluent le dispositif en sim-to-sim puis sur robots physiques, sur des tâches de manipulation réelles : pliage de serviette, scan de code-barres et manipulation d'assiettes. Ils annoncent que l'agent acquiert ces compétences sans aucune démonstration et avec seulement 10 minutes d'interaction réelle. L'article ne précise ni la plateforme robotique, ni les taux de réussite dans l'extrait disponible. L'intérêt tient au positionnement de la simulation. Elle n'est plus seulement une source de données d'entraînement devant répliquer au plus près le réel, ce qui est la logique dominante du sim-to-real, mais un laboratoire « à peu près correct » où l'agent élabore connaissances et procédures, puis les recale sur le robot. Pour un intégrateur, la promesse est une mise en service de tâches de manipulation sans collecte de téléopération et avec peu de temps machine, ce qui réduit coûts et risques de casse. Cette approche contourne deux écueils identifiés par les auteurs : la génération directe de code de type Code as Policies, limitée par la compréhension insuffisante des robots et de leur environnement par les LLM, et le réglage par essais-erreurs physiques, coûteux et risqué. Reste à vérifier la portée réelle : le choix des tâches, le nombre d'essais et la robustesse hors des scénarios testés ne sont pas détaillés ici, et des vidéos de démonstration sélectionnées ne remplacent pas une évaluation statistique. Ce travail s'inscrit dans la montée des agents de code appliqués au monde physique, après les succès de ces agents dans les environnements numériques. Il se place en alternative aux politiques apprises de type VLA (vision-langage-action), qui exigent des volumes importants de démonstrations, et aux approches de génération de code robotique pilotées par LLM. Il s'agit d'une publication de recherche, sans produit ni déploiement industriel annoncé. Les prochaines étapes à surveiller sont l'extension à des tâches plus longues et à des robots variés, ainsi que la reproductibilité par d'autres laboratoires, les vidéos et détails étant publiés sur le site du projet.

Recherche❖Paper

1 source

38

711arXiv cs.RO 

LocoWM : locomotion de haute précision grâce à une adaptation résiduelle guidée par un modèle du monde

LocoWM est un cadre de contrôle publié sur arXiv (version 1, identifiant 2609.39179) qui vise la locomotion de haute précision, c'est-à-dire le suivi de commandes de mouvement associé à une régulation fine d'états physiques utiles à la tâche. L'architecture combine trois briques. Une politique de base assure la locomotion qui suit les commandes. Un modèle du monde conditionné par l'action prédit une séquence d'états physiques futurs à partir de l'historique proprioceptif et de l'action proposée par la politique de base. Un adaptateur résiduel, alimenté par cette séquence prédite, produit des corrections additives censées compenser les écarts anticipés. L'entraînement se fait en deux étapes : la locomotion et la dynamique conditionnée par l'action sont d'abord apprises, puis les deux modules sont gelés pendant l'entraînement de l'adaptateur. Les auteurs testent trois scénarios, le nivellement de terrain, la compensation d'accélération et la récupération après poussée. Ils annoncent une meilleure précision de contrôle et une meilleure robustesse aux perturbations que des références de bout en bout et des références résiduelles réactives. Démonstrations et code sont publiés en ligne. Le résumé ne donne aucun chiffre, aucun robot ni aucune plateforme matérielle. L'intérêt tient à un problème connu de l'apprentissage par renforcement pour la marche. Une optimisation conjointe de bout en bout sacrifie souvent les objectifs de précision au profit du suivi de vitesse et de la stabilité, car ces derniers dominent la récompense. Les correcteurs résiduels réactifs, eux, n'agissent qu'une fois l'écart observable, donc trop tard pour des tâches où la tolérance est serrée, par exemple porter une charge, niveler un sol ou tenir une posture en mouvement. Le caractère « préactif » de LocoWM, qui corrige avant que l'erreur ne se manifeste, répond à ce défaut. La séparation entre l'acquisition de la locomotion et l'adaptation de précision est aussi un choix d'ingénierie utile : la politique de base reste intacte et la couche de précision se greffe par-dessus. Reste à vérifier que cela tient au-delà de la simulation. Le résumé ne précise ni le transfert sim-to-real, ni le coût de calcul du modèle du monde à l'inférence, ni l'ampleur des gains. Il s'agit d'un travail de recherche et non d'un produit, sans déploiement industriel. Ce travail s'inscrit dans le courant qui rapproche modèles du monde et contrôle bas niveau pour les robots à pattes et humanoïdes. Il existe déjà des politiques de locomotion apprises en simulation, des architectures à correction résiduelle et des modèles dynamiques appris pour la planification. Les acteurs industriels de l'humanoïde, comme Figure, Tesla ou Agility, dépendent de telles couches de contrôle bas niveau, sans qu'un lien avec LocoWM soit établi ici. Aucun calendrier de suite n'est annoncé. Les prochaines étapes à surveiller sont la validation sur robot réel, la comparaison chiffrée avec les méthodes existantes et la réutilisation du code publié par d'autres laboratoires.

Recherche❖Paper

1 source

38

712arXiv cs.RO 

Stratégie d'évolution en ligne pour les politiques VLA à flow matching, par optimisation auto-supervisée de la distribution des trajectoires

Des chercheurs proposent Online-ES, un cadre d'adaptation en ligne pour les politiques VLA (Vision-Language-Action) fondées sur le Flow Matching, publié sur arXiv (2609.38855, première version). Le point de départ est une observation : contrairement à une politique déterministe, un VLA génératif apprend une distribution conditionnelle de trajectoires d'actions, où différents vecteurs de bruit latent produisent des actions distinctes pour une même tâche. Les auteurs constatent que cette distribution est souvent mal formée : trajectoires réussies et échouées coexistent, et une part notable de la masse de probabilité reste dans des zones défavorables. Plutôt que d'élaguer l'espace du bruit latent, Online-ES applique une stratégie d'évolution (ES) directement dans l'espace des trajectoires. Les trajectoires échantillonnées sont perturbées puis exécutées, et leurs résultats alimentent un objectif d'erreur quadratique (MSE) auto-supervisé, qui transfère la direction d'évolution vers l'espace des paramètres du modèle. Les auteurs affirment prouver mathématiquement que cet objectif est un estimateur non biaisé de la direction d'évolution optimale. Les échecs servent aussi de retour négatif pour éloigner la politique des régions déjà explorées sans succès. Les tests couvrent la simulation et des environnements réels. Le résumé ne donne ni chiffres de taux de succès, ni noms de robots ou de modèles de base, ni nombre d'essais. L'intérêt pratique tient à la méthode. Les approches de réglage fin par apprentissage par renforcement (RL) exigent en général un modèle de valeur et un calcul d'avantages, ce qui alourdit l'infrastructure et la stabilité d'entraînement. Online-ES revendique une amélioration comparable à ce réglage fin RL sans ces deux composants. Si cela se confirme hors des benchmarks, un intégrateur pourrait corriger une politique VLA sur site à partir des seuls retours d'exécution, sans pipeline RL complet. Le travail rappelle aussi qu'un VLA génératif qui réussit en démonstration peut avoir une distribution d'actions dégradée en réalité, ce qui nourrit l'écart entre démos et fiabilité industrielle. Une réserve s'impose : il s'agit d'un préprint non évalué par des pairs, et « comparable » dépend des tâches, des baselines et du nombre d'interactions réelles nécessaires, que le résumé ne précise pas. Le contexte est celui de la généralisation des VLA à base de Flow Matching, popularisé par des modèles comme Pi-0 de Physical Intelligence, et de la recherche de méthodes d'adaptation après déploiement. Deux voies dominent : le réglage fin par RL, coûteux en données et en ingénierie, et le filtrage du bruit latent à l'inférence. Online-ES propose une troisième voie, évolutionniste. La suite dépendra de la publication du code, des benchmarks détaillés et de validations sur des robots variés. Le coût en essais physiques et la robustesse face au bruit de mesure resteront les points décisifs pour toute adoption industrielle.

Recherche❖Paper

1 source

38

713arXiv cs.RO 

Magic-W0 : un modèle fondation monde-action structuré pour l'intelligence physique

Magic-W0, un modèle de fondation « monde-action » (WAM, world-action model), est présenté dans un preprint arXiv (2609.39870v1) dont les auteurs ne sont pas précisés dans le résumé. Le modèle code chaque interaction comme une « Structured World Transition » en trois blocs. L'état courant associe le contexte vision-langage à une géométrie 3D de la scène. La transition est décrite par un mouvement 3D qui capture les changements tridimensionnels induits par l'action. L'état futur est exprimé sous forme de sémantique décrivant le résultat attendu de la tâche. L'architecture aligne couche par couche la prédiction du monde et la génération d'actions continues : les hypothèses d'action en cours conditionnent la prédiction de transition, et les représentations prédites alimentent en retour la génération d'actions. Le pré-entraînement combine manipulation humaine égocentrique, données UMI (interface de collecte par préhenseur portable), données de robots réels et simulation. La supervision porte sur des représentations latentes (géométrie, mouvement 3D, sémantique future) issues de modèles visuels préentraînés. Sur le benchmark RoboDojo-Sim, Magic-W0 obtient un score moyen de 27,10, le plus élevé parmi les WAM comparés. Les auteurs annoncent aussi de bonnes performances sur plusieurs tâches sur robot réel après un fine-tuning avec peu de données. L'intérêt tient à la critique que formule le papier : la plupart des WAM prédisent des images futures ou des latents génériques, peu exploitables pour le contrôle, et pas forcément liés à l'action. Magic-W0 propose une représentation explicitement géométrique et orientée contrôle. Des tests d'intervention à l'inférence montrent que ces représentations réagissent de façon systématique aux changements d'action candidate, et que l'information d'action circule via les représentations 3D jusqu'aux prédictions sémantiques. C'est un argument de causalité plus solide que la simple qualité visuelle. Pour un intégrateur, la promesse est une adaptation rapide à de nouvelles tâches avec peu de données, point critique du coût de déploiement. Il faut toutefois relativiser. Le score de 27,10 n'a de sens que par rapport aux WAM comparés, sans valeur absolue ni écart précisé dans le résumé. Les tâches réelles ne sont pas détaillées : ni taux de réussite, ni volume de données de fine-tuning, ni plateforme robotique. On reste donc au stade du résultat de recherche, sans produit livré ni déploiement. Ce travail s'inscrit dans la montée des modèles VLA (vision-langage-action) et de leurs extensions « monde », qui cherchent à doter les politiques d'une dynamique de l'environnement conditionnée par l'action, au-delà de la simple imitation. Le recours massif aux vidéos humaines égocentriques et aux données UMI reflète la tendance à contourner le coût de la téléopération robot. Magic-W0 se positionne face aux autres WAM et aux politiques fondées sur la reconstruction vidéo, dont le résumé ne cite pas les noms. Les prochaines étapes à surveiller sont la publication du code et des poids, une évaluation indépendante de RoboDojo-Sim, et surtout des résultats détaillés sur robot réel, seuls capables de dire si la structure 3D apporte un gain tangible face aux approches VLA génériques.

Recherche❖Paper

1 source

38

714arXiv cs.RO 

La fonction avant la forme : correspondance fonctionnelle pour la génération de prises dextériques inter-morphologies

Des chercheurs proposent FunCo-Grasp, un cadre de génération de préhensions dextres « cross-embodiment », c'est-à-dire transférable d'une main robotique à l'autre. Il est décrit dans un préprint arXiv (v1, non évalué par les pairs). Le principe est d'établir des « correspondances fonctionnelles » entre des mains aux géométries, topologies et cinématiques très différentes. Deux alignements y contribuent. Le Functional Part Alignment associe chaque lien physique de la main à une partie fonctionnelle commune, selon son rôle dans la saisie. Le Canonical Frame Alignment exprime ensuite ces parties dans des repères locaux canoniques. Un modèle de diffusion, conditionné par cette représentation et par la géométrie de l'objet, génère l'agencement spatial cible des parties fonctionnelles. Cet agencement est ensuite converti en configuration articulaire exécutable. Pour une main inédite, il suffit de fournir ses modèles géométrique et cinématique, plus une annotation fonctionnelle légère faite une seule fois. Aucune donnée de préhension sur la main cible, aucun fine-tuning et aucun retargeting appris ne sont nécessaires. En simulation, sur des objets exclus de l'entraînement dans le CMapDataset filtré, le taux de succès moyen atteint 92,40 % sur trois mains vues à l'entraînement et 74,02 % sur quatre mains inédites. En conditions réelles, le même modèle réussit 76,00 % des essais sur deux mains inédites, sans entraînement supplémentaire. L'intérêt tient à l'obstacle que ces travaux visent. Aujourd'hui, chaque nouvelle main dextre oblige souvent à recollecter des données ou à réentraîner, ce qui freine les intégrateurs qui comparent ou changent d'effecteur. Ici, le coût d'adaptation se réduit à une annotation unique. Cela rend plausible un modèle de préhension réutilisable d'une main à l'autre. L'écart de 18 points entre mains vues et inédites en simulation montre cependant que le transfert est loin d'être résolu. Le chiffre réel de 76 % repose sur seulement deux mains, et l'article ne donne ici ni le nombre d'objets, ni le nombre d'essais, ni les conditions de test. Il décrit de plus des préhensions statiques, pas de la manipulation en main, ce qui reste loin des exigences d'une ligne de production. Le résultat va néanmoins dans le sens d'une hypothèse du secteur : une représentation structurée par la fonction généralise mieux que l'apprentissage de motifs propres à chaque main. Le travail s'inscrit dans une série de méthodes cross-embodiment pour la dextérité. Les approches précédentes s'appuient souvent sur des représentations spécifiques à chaque main ou sur du retargeting appris, ce qui limite la généralisation. Les mains multi-doigts se multiplient pourtant, des modèles à quatre doigts jusqu'aux mains humanoïdes à plus de vingt degrés de liberté. Le préprint n'annonce ni code, ni pilote industriel, ni calendrier. Les prochaines étapes logiques seraient un test sur un éventail plus large de mains, la prise en compte de la manipulation dynamique et une évaluation sur des objets non rigides ou en environnement encombré.

Recherche❖Paper

1 source

38

715arXiv cs.RO 

SplineWAM : des horizons d'action adaptatifs pour les modèles du monde et d'action grâce aux B-splines

Des chercheurs publient SplineWAM (arXiv 2609.39873), une méthode qui change la façon dont les « world action models » (WAM) découpent leurs actions dans le temps. Un WAM est une grande politique robotique qui prédit conjointement la vidéo future et les actions à exécuter, et renvoie à chaque appel d'inférence un segment d'actions de longueur fixe (action chunk). SplineWAM compresse au contraire la trajectoire dans une fenêtre de taille fixe de paramètres de B-splines cubiques, dont les instants de nœuds s'ajustent aux caractéristiques du mouvement. Un même budget de paramètres peut ainsi se décoder en segments de résolution et de durée variables, et la durée exécutée comme l'intervalle avant le prochain appel découlent de la prédiction elle-même. La supervision vidéo est alignée sur les nœuds ajustés de la démonstration plutôt que sur une grille uniforme, ce qui concentre les images supervisées là où la trajectoire est complexe. Pour l'exécution asynchrone, les auteurs introduisent JP-RTC (Jacobian-Pullback Real-Time Chunking), qui impose la continuité sur les actions brutes exécutées par le robot, et non sur les paramètres de la spline. Les paramètres sont corrigés via le décodeur pour que le début du segment coïncide avec les actions déjà engagées. Sur LIBERO-Plus et RoboCasa, le taux de réussite gagne 8,2 et 4,4 points face à un WAM à action chunking classique, avec 22 % et 26 % d'appels de politique en moins par épisode. Sur trois tâches bimanuelles réelles en mode asynchrone, SplineWAM fait mieux ou égale la référence tout en décodant 1,2 à 1,6 fois plus de mouvement exécuté par appel. L'enjeu est surtout économique et opérationnel. Un WAM uniforme dépense autant de calcul sur un déplacement en espace libre que sur une insertion riche en contacts, ce qui plafonne le débit lorsque la politique tourne dans le cloud, où chaque appel coûte de la latence et du GPU. Moins d'appels pour un succès égal ou supérieur laisse envisager de servir davantage de robots par accélérateur, ou de tolérer des liaisons plus lentes. Le résultat nuance aussi l'idée qu'un horizon d'action fixe est un détail d'implémentation neutre : le choisir de façon adaptative semble améliorer à la fois la qualité et l'efficacité. Des réserves s'imposent toutefois. Les gains en simulation sont modestes, et les résultats réels, limités à trois tâches, indiquent « mène ou égale » la référence, ce qui n'est pas une victoire nette. Le papier ne donne pas, dans son résumé, de mesure de latence de bout en bout ni de coût par tâche. Le contexte est celui de la montée des WAM, qui prolongent les VLA (vision-langage-action) en ajoutant la prédiction vidéo pour mieux ancrer la physique des tâches. Le problème de la continuité entre segments successifs a été traité jusqu'ici par le real-time chunking, que JP-RTC reprend en l'adaptant à une représentation paramétrique. Les B-splines, courantes en planification de trajectoire, entrent ainsi dans la conception des politiques apprises. Les benchmarks utilisés, LIBERO-Plus et RoboCasa, sont des environnements de simulation de référence, mais leur transfert à des cellules industrielles reste à démontrer. Aucun partenaire industriel ni calendrier de déploiement n'est annoncé : il s'agit d'une préversion de recherche, dont la validité dépendra d'une réplication sur d'autres plateformes et d'une mesure du gain réel en coût de service cloud.

Recherche❖Paper

1 source

38

716arXiv cs.RO 

AIfred : apprentissage augmenté par une incarnation robotique fonctionnelle au bureau

Des chercheurs ont présenté AIfred, un bras robotique de bureau portant un projecteur fixé à l'effecteur terminal, qui affiche des consignes générées par IA directement à côté du travail manuscrit de l'utilisateur. Le système, décrit dans une prépublication arXiv, combine trois briques : une perception de l'espace de travail, une génération de contenu sensible au contexte et une projection pilotée par le robot. Il a été testé sur trois usages : des exercices de mathématiques, la génération d'images et le dessin. L'étude porte sur 36 participants, qui ont comparé AIfred à ChatGPT (GPT-5.6 Luna) tournant sur un ordinateur portable. Tant que l'aide restait disponible pendant l'exercice de maths, les deux outils se sont équivalus (6,7 contre 7,3 sur 10, p = 0,41). Une fois l'assistance retirée, le groupe AIfred a obtenu 7,0 sur 10 contre 4,4 pour l'autre, soit un transfert d'apprentissage à court terme supérieur de 60 % (p = 0,003). Des professeurs d'art et de design indépendants ont par ailleurs classé les dessins réalisés avec AIfred comme meilleurs dans 33 cas sur 36. L'intérêt tient moins au matériel qu'à l'hypothèse testée. Les assistants génératifs actuels répondent sur un écran distinct, ce qui oblige l'utilisateur à passer sans cesse de sa feuille à la fenêtre de dialogue. Les résultats suggèrent que la colocalisation spatiale de l'aide ne change pas la performance immédiate, mais modifie ce qui reste appris, et que l'effet dépend de la tâche : il joue quand le guidage partage le même repère spatial que le travail, comme une correction sur une équation ou un tracé. Pour les concepteurs de robots d'assistance, d'outils éducatifs ou de postes de travail augmentés, cela déplace la question de la capacité du modèle vers la manière de l'incarner. Le robot sert ici d'interface plutôt que de manipulateur. Les limites sont nettes : un échantillon de 36 personnes, un apprentissage mesuré à court terme seulement, et une comparaison avec une interface de chat sur laptop qui n'isole pas la contribution propre du bras mobile par rapport à un simple projecteur fixe. Ces travaux s'inscrivent dans la lignée de la réalité augmentée spatiale et des bureaux interactifs, qui projettent depuis longtemps de l'information sur des surfaces de travail. Ils profitent aujourd'hui de modèles multimodaux assez rapides pour lire une feuille manuscrite et produire un guidage contextualisé. Cette prépublication relève de la recherche académique : aucun produit commercial, prix ou calendrier de déploiement n'est annoncé. Les suites naturelles seraient des études plus longues sur la rétention, des comparaisons avec des projecteurs fixes et l'extension à d'autres disciplines. Le résultat reste à confirmer par réplication avant de pouvoir être considéré comme un effet établi.

Recherche❖Paper

1 source

38

717arXiv cs.RO 

DODGER : apprentissage par renforcement guidé par la sécurité pour la navigation de robots parmi des obstacles dynamiques

Des chercheurs publient sur arXiv (2609.38873) DODGER, un cadre d'apprentissage par renforcement (RL) « guidé par la sécurité » pour la navigation de robots au milieu d'obstacles dynamiques, comme des piétons. La méthode s'appuie sur les fonctions barrières de contrôle (CBF), un outil mathématique qui définit un ensemble d'états sûrs et sert à corriger une commande dangereuse avant son exécution. Elle a été évaluée de trois façons : une analyse de sécurité sur une voiture de Dubins (modèle cinématique simplifié), une simulation d'humanoïde en modèle complet (full-order), puis des essais réels sur un humanoïde équipé d'une perception par LiDAR. Le robot atteint des cibles en évitant plusieurs obstacles mobiles, sans filtre de sécurité à l'exécution. Le résumé ne donne ni taux de collision, ni vitesse d'obstacle, ni nombre d'essais, ni modèle d'humanoïde. Il s'agit d'un travail de recherche, sans produit ni déploiement. L'intérêt tient à une limite des approches CBF-RL actuelles. Elles n'exécutent en entraînement que des actions déjà filtrées. L'agent explore donc moins, ce qui pèse surtout en environnement dynamique, où la sécurité dépend du mouvement relatif entre robot et obstacle. DODGER inverse la logique : les actions produites par la politique pilotent directement les rollouts d'entraînement. Les références filtrées par CBF et les violations de contraintes ne servent qu'à orienter l'apprentissage vers l'évitement. Si cela tient à plus grande échelle, la politique embarquée n'aurait plus besoin d'un solveur de sécurité en ligne. Cela réduirait la charge de calcul et les risques de conflit entre filtre et politique. Pour un intégrateur, la question est de savoir si l'on peut se passer d'un filtre redondant dans des sites partagés avec des opérateurs humains. Les garanties restent empiriques : une politique sans filtre en ligne ne offre plus de certificat formel à l'exécution. Aucune comparaison chiffrée avec les méthodes concurrentes n'apparaît dans le résumé. Le travail prolonge les méthodes qui intègrent les CBF dans le RL, déjà utilisées pour la locomotion et la navigation de robots à pattes, et rejoint l'effort actuel pour transférer des politiques apprises en simulation vers des humanoïdes réels. Il reste au stade de préprint (v1), sans relecture par les pairs. Les prochaines étapes à surveiller sont la publication des taux de succès et de collision face aux baselines à filtre, les tests avec des obstacles plus nombreux et plus rapides, des piétons réels en environnement non contrôlé, et d'autres plateformes humanoïdes. Aucune annonce de pilote industriel ni d'échéance n'accompagne ce préprint.

Recherche❖Paper

1 source

38

718arXiv cs.RO 

Social-WM : des modèles du monde latents sensibles à la sécurité pour la navigation sociale des robots

Des chercheurs publient Social-WM, un cadre de planification par modèle de monde latent destiné à la navigation sociale des robots, c'est-à-dire le déplacement parmi des piétons et des obstacles. Le système est entraîné uniquement à partir de séquences vidéo RGB égocentriques. Il prédit, en fonction de l'action commandée, l'observation future réellement obtenue après chaque commande. Il apprend ainsi les conséquences pertinentes pour la sécurité. Un second objectif, dit de dynamique inverse « réalisable », associe chaque transition latente observée à l'action effectivement réalisée, et non à l'action nominale demandée. Au déploiement, le robot imagine plusieurs actions candidates dans le modèle de monde. Le modèle inverse estime ensuite leur réalisabilité, et l'écart entre action nominale et action réalisable sert de signal de sécurité avant exécution. Sur le benchmark Social-HM3D, Social-WM atteint 63,77 % de réussite avec 21,67 % de collisions avec des humains. Les résultats restent solides en transfert zéro-shot sur Social-MP3D. L'approche n'utilise ni suivi explicite des piétons, ni état humain privilégié, ni apprentissage par renforcement en ligne. L'intérêt tient à la manière de traiter le problème. Une action « avancer » peut s'exécuter entièrement en espace libre, mais doit être freinée ou modifiée face à un piéton ou un obstacle. Les données de navigation sociale contiennent donc un décalage systématique entre commande et mouvement réel. En apprenant ce décalage plutôt qu'en le supposant nul, le robot dispose d'un indicateur de risque sans module de perception dédié aux humains. Pour un intégrateur, cela réduit la dépendance à des piles de suivi et de prédiction de trajectoires, coûteuses à calibrer. Le fait que la dynamique et la réalisabilité soient indépendantes du but permet de réutiliser le même modèle pour la navigation par position et par image-cible. Il faut toutefois relativiser : un taux de collision de 21,67 % reste très éloigné d'un niveau acceptable en environnement réel, et les résultats proviennent de simulation. Aucun test sur robot physique ni comparaison de coûts de calcul n'est mentionné dans le résumé. Ce travail s'inscrit dans la montée des modèles de monde latents, qui planifient dans un espace de représentation compact plutôt qu'en reconstruisant des pixels, et dans l'effort pour combler l'écart entre simulation et réel en navigation sociale. Les benchmarks utilisés, construits sur les scènes HM3D et Matterport3D, relèvent de la simulation d'intérieur et couvrent mal la variété des lieux publics. Les approches concurrentes reposent généralement soit sur l'apprentissage par renforcement en ligne, soit sur des modules explicites de suivi des piétons. La suite logique est une validation sur plateforme mobile réelle, dans des espaces partagés comme les hôpitaux ou la logistique, où des robots mobiles autonomes (AMR) croisent déjà des opérateurs. Il s'agit pour l'instant d'une préimpression arXiv (v1), non évaluée par les pairs, sans produit ni déploiement annoncé.

Recherche❖Paper

1 source

38

719arXiv cs.RO 

OccluDex : apprentissage hiérarchique de représentations visuo-tactiles 3D pour la manipulation dextérique égocentrique sous auto-occlusion

Des chercheurs publient sur arXiv OccluDex, un cadre d'apprentissage de représentations visuo-tactiles 3D destiné à la manipulation dextre en vision égocentrique, c'est-à-dire avec une caméra placée du point de vue du robot. Le problème visé est que la main occulte elle-même les surfaces de l'objet et les zones de contact, ce qui prive l'estimation d'état d'une partie de l'information visuelle. L'encodeur repose sur un autoencodeur masqué multi-échelle qui encode progressivement la géométrie 3D partielle. Des jetons tactiles de contact sont ensuite fusionnés avec les caractéristiques géométriques de haut niveau par attention croisée. Il est préentraîné sur des démonstrations humaines visuo-tactiles synchronisées, puis transféré gelé comme backbone perceptif pour de l'apprentissage par renforcement. Deux tâches servent à l'évaluation : la rotation d'un robinet (un tour complet de poignée dans le sens horaire) et la réorientation d'un objet posé sur une table de 180 degrés, sans le renverser. En simulation, les auteurs annoncent une précision supérieure de 12,6 % sur objets inconnus et de 8,3 % sur objets déjà vus, par rapport au meilleur modèle de référence. Des essais physiques avec une main Shadow Hand montrent un transfert sim-to-real zero-shot sur des objets inconnus. Pour les équipes qui développent des mains dextres, l'intérêt tient à l'angle choisi. La plupart des travaux traitent l'occultation comme un bruit à tolérer, alors qu'elle est ici le cœur du problème, et c'est elle qui domine dès que la main se referme sur un objet. Le tactile compense la vision justement là où elle manque. Le préentraînement sur démonstrations humaines et le backbone gelé réduisent aussi le coût de l'apprentissage par renforcement, car l'encodeur n'a pas à être réappris pour chaque tâche. À nuancer toutefois : les gains en simulation sont modestes, et les auteurs ne précisent pas le nombre d'essais réels, le taux de réussite physique ni la variété des objets. Le test se limite à deux tâches et à une seule main, très coûteuse. Le passage vers des mains d'humanoïdes de série reste donc une extrapolation, et l'affirmation sur la manipulation humanoïde est une projection, pas un résultat démontré. Ces travaux s'inscrivent dans la ligne des représentations 3D visuo-tactiles et des autoencodeurs masqués, appliqués à la manipulation dextre, souvent évaluée en simulation puis sur Shadow Hand. Ils se positionnent face à des approches qui combinent nuages de points et tactile sans hiérarchie entre structure globale et contact local. Les modèles VLA généralistes, qui exploitent surtout des images RGB, traitent peu le tactile et l'occultation. Aucun pilote industriel ni calendrier n'est annoncé, et il s'agit d'une publication de recherche préliminaire (v1), non évaluée par les pairs. La suite logique serait une validation sur davantage de tâches, de mains et de capteurs tactiles, avec des statistiques de réussite en conditions réelles.

Recherche❖Paper

1 source

38

720arXiv cs.RO 

Rapport technique UniWAM : manipulation mobile unifiée par modélisation monde-action à flux mixtes et supervision par pose d'ancrage de manipulation

UniWAM, un rapport technique publié sur arXiv, propose un modèle monde-action unifié (« world-action model ») qui traite à la fois la navigation et la manipulation d'un robot mobile. Son architecture à flux mixtes dispose d'encodeurs d'actions et de têtes de sortie distincts pour chaque tâche, mais d'un backbone partagé. Cela permet d'entraîner conjointement le modèle sur des données de navigation et de manipulation échantillonnées indépendamment. Chaque flux peut être inféré seul, ou les deux en parallèle par batch. Les auteurs introduisent aussi la supervision MAP (Manipulation Anchor Pose), qui indique où s'arrêter et comment s'orienter avant de saisir un objet. Un pipeline automatisé génère le jeu MAP-Data à partir de scènes 3D à grande échelle : plus de 1,5 million d'épisodes, soit 7 500 heures. Il fournit, image par image, les boîtes englobantes de l'objet cible et les coordonnées MAP dans le plan image. Sur le banc d'essai MAP-Bench des auteurs, UniWAM réduit l'erreur de position de 30,1 % et l'erreur de cap de 44,0 % par rapport aux meilleures références externes. Sur 24 tâches réelles, il obtient les meilleurs résultats en navigation MAP et en manipulation mobile, avec une manipulation pure seulement « compétitive ». Code, données et benchmark sont publiés. Le point important pour les intégrateurs est que le goulot d'étranglement de la manipulation mobile se situe souvent à la jonction entre les deux phases. Un bras habile ne sert à rien si la base s'arrête mal positionnée ou mal orientée. En formulant explicitement cette pose d'arrêt comme cible apprenable, UniWAM s'attaque à un mode de défaillance fréquent des politiques VLA (vision-langage-action) de bout en bout. Le recours à des scènes 3D synthétiques pour produire une supervision que la collecte réelle ne fournit pas à coût raisonnable illustre aussi un déplacement du problème, de la téléopération vers la génération de données. Les réserves sont claires. Les gains chiffrés portent sur un benchmark conçu par les mêmes auteurs. Les 24 tâches réelles ne sont décrites ni par leur nombre d'essais ni par la plateforme robotique dans le résumé. Enfin, le fait que la manipulation seule ne soit que « compétitive » montre que l'unification n'est pas gratuite. Rien n'indique de déploiement industriel : il s'agit d'un résultat de recherche. Ce travail s'inscrit dans la tendance des modèles fondation robotiques, où des systèmes comme Pi-0, GR00T ou Helix traitent surtout la manipulation, tandis que la navigation reste un module séparé. Les approches monde-action, qui prédisent l'évolution de la scène en plus des actions, gagnent du terrain pour exploiter des données non robotiques. Les prochaines étapes à surveiller sont la validation par des tiers sur MAP-Bench, des tests sur d'autres morphologies, et l'intégration de MAP-Data dans les pipelines d'entraînement ouverts, puisque le jeu est public.

Recherche❖Paper

1 source

38

721arXiv cs.RO 

La curiosité tactile stimule l'interaction des robots avec leur environnement

Des chercheurs publient sur arXiv (2609.40134) TacEx, un cadre d'apprentissage par renforcement (RL) qui utilise le toucher comme moteur de curiosité pour l'exploration robotique. Le principe : décomposer l'incertitude épistémique d'un modèle du monde par modalité sensorielle, puis orienter la récompense intrinsèque vers le canal tactile. Le robot est ainsi incité à chercher les transitions de contact plutôt que les mouvements dans le vide. Selon les auteurs, l'agent apprend à saisir et manipuler des objets sans récompense de tâche ni démonstration experte pendant l'exploration. Le jeu de données ainsi collecté, dense en interactions, sert ensuite à entraîner hors ligne des politiques de pick-and-place, sans nouvelle interaction avec l'environnement. L'équipe applique aussi la méthode au post-entraînement de modèles vision-langage-action (VLA) pré-entraînés sans retour tactile. Elle annonce une amélioration substantielle des performances, avec une grande efficacité en échantillons. Le résumé ne fournit ni taux de réussite, ni nombre d'étapes d'entraînement, ni modèles VLA précis, ni capteurs tactiles utilisés. On ignore aussi si les résultats viennent de la simulation ou de robots physiques. Le problème visé est un goulot d'étranglement connu : la plupart des algorithmes de RL explorent par échantillonnage aléatoire d'actions et dépensent l'essentiel de leur budget en mouvements dans l'espace libre, loin des contacts d'où naissent les compétences de manipulation. Les méthodes de motivation intrinsèque fondées sur le désaccord entre modèles ou l'incertitude épistémique font mieux que le bruit isotrope, mais elles peuvent récompenser des transitions sans intérêt fonctionnel, comme des gestes erratiques. Pour un intégrateur, l'enjeu est la réduction du coût de collecte de données et de mise au point d'une cellule de manipulation. L'intérêt pratique est aussi de pouvoir enrichir des VLA existants avec le toucher sans repartir d'un pré-entraînement complet. Cela irait dans le sens d'un constat croissant : la vision seule plafonne sur les tâches riches en contacts. Les gains restent toutefois à vérifier sur du matériel réel, face à des bases de référence solides. Le travail s'inscrit dans la montée des modèles VLA (Pi-0, GR00T, Helix) qui dominent la manipulation généraliste, mais restent peu sensibles au toucher. Il s'inscrit aussi dans un courant de recherche sur l'exploration par curiosité et les modèles du monde. À ce stade, il s'agit d'un préprint non évalué par des pairs (v1), sans produit ni déploiement associé. La suite logique est une validation sur robots physiques, sur davantage de tâches, et une comparaison avec les autres approches de post-entraînement de VLA, notamment par RL.

Recherche❖Paper

1 source

38

722arXiv cs.RO 

DynaHarness : un cadre physique dynamique pour des agents robotiques auto-évolutifs

DynaHarness, un travail publié sur arXiv (2609.40306), propose une couche de supervision dite « harnais physique dynamique » qui encadre l'exécution de politiques robotiques pré-entraînées sur des tâches de manipulation longues. L'architecture sépare un « cerveau lent », chargé du raisonnement sémantique (il propose des capacités et leurs arguments symboliques), et un « cerveau rapide », qui ancre les commandes dans le monde physique, les surveille, refuse les actions non résolues, substitue une capacité à une autre et demande un nouveau plan si nécessaire. Un contrat d'exécution partagé borne chaque commande acceptée et consigne les traces d'exécution à travers trois familles de composants : des compétences analytiques, des compétences de récupération et un VLA (modèle vision-langage-action) gelé. Sur le benchmark LIBERO-Pro, le système atteint 75,2 % de réussite sur 800 états initiaux nouvellement tirés, contre 17,5 % pour la politique gelée seule. À bibliothèque de capacités identique, l'exécution dynamique complète obtient 74,0 %, contre 63,9 % pour un replanning nominal en une étape. Pour les intégrateurs et les équipes R&D, l'intérêt est moins le score que le déplacement du problème. Les auteurs soutiennent qu'une politique VLA, même performante, ne suffit pas sur les tâches longues : la valeur se joue dans la manière dont les capacités existantes sont ancrées, surveillées et coordonnées à l'exécution, sans réentraîner le modèle de base. L'écart entre 17,5 % et 75,2 % illustre la fragilité d'un VLA gelé face à des conditions initiales perturbées, ce qui rejoint le constat de nombreux déploiements : la robustesse vient de l'orchestration autour du modèle. Le gain plus modeste de 10 points face au replanning simple indique toutefois que l'essentiel de l'amélioration provient de la bibliothèque de capacités elle-même, et que la gouvernance dynamique apporte un complément mesurable mais pas décisif. Il faut aussi noter que les résultats sont obtenus uniquement en simulation, sans validation sur robot physique mentionnée dans le résumé. Ce travail s'inscrit dans la tendance des architectures à double système, où un module lent planifie et un module rapide exécute, popularisée côté industrie par des approches comme Helix de Figure ou GR00T de NVIDIA, et dans la montée des agents capables de se réviser eux-mêmes. La particularité de DynaHarness est sa boucle d'auto-évolution : l'attribution des échecs localise la faute dans les traces, déclenche une révision ciblée d'une capacité ou d'un mécanisme d'exécution, puis des tests de régression appariés décident de l'admission ou du rejet de la modification. LIBERO-Pro, variante plus exigeante du benchmark LIBERO conçue pour mettre à nu la sur-adaptation des politiques, reste un banc d'essai simulé. Une page projet est disponible, mais aucune date de transfert vers du matériel réel n'est annoncée.

Recherche❖Paper

1 source

37

723arXiv cs.RO 

EWAM : spécialisation émergente par profondeur dans un modèle incarné unifié, de la compréhension sémantique à l'action via la prévision visuelle

Des chercheurs ont publié sur arXiv (identifiant 2609.39973, première version) EWAM, un modèle embodied unifié « centré sur l'action ». Il combine deux familles de politiques robotiques. Les VLA (vision-language-action) privilégient la compréhension sémantique. Les WAM (world-action models) apprennent des représentations prédictives de la dynamique de l'environnement. Selon les auteurs, les systèmes qui exposent une politique à ces deux sources concentrent souvent le calcul d'action sur un seul expert. EWAM s'appuie sur une attention conjointe asymétrique. À chaque couche, les tokens d'action lisent l'information sémantique, la vision courante, les images futures prédites et les autres tokens d'action, tandis que les experts perceptifs gardent leurs rôles distincts. Le modèle est pré-entraîné dans deux régimes séparés : des trajectoires robotiques multi-embodiments, et de la vidéo égocentrique humaine. Il dépasse, en simulation et sur robot réel, les baselines VLA, WAM et hybrides. L'abstract ne donne ni chiffres de performance, ni nom des baselines, ni robots utilisés, ni volume de données. Le résultat le plus marquant est une spécialisation émergente par profondeur, apparue sans supervision par couche. Les requêtes d'action regardent surtout les features vision-langage dans les couches superficielles, les images futures prédites dans les couches intermédiaires, puis leurs propres tokens dans les couches profondes. Ce schéma se reproduit d'une tâche à l'autre et reste stable au fil des étapes de débruitage. Le suivi de checkpoints et des interventions causales indiquent qu'il est appris et que la génération d'action en dépend. Pour les intégrateurs et les équipes R&D, l'enjeu est de savoir si la prédiction visuelle est réellement utilisée par la politique ou ne sert que d'objectif auxiliaire : ici, elle l'est apparemment. Les données humaines égocentriques améliorent le transfert entre embodiments et la robustesse sur robot réel, et la supervision par phases de sous-tâches améliore l'achèvement des tâches longues. Ces points restent des affirmations de preprint, non évaluées par des pairs et sans chiffres publics dans le résumé. Aucune preuve de déploiement industriel n'est avancée. Le travail s'inscrit dans la convergence entre VLA (de type Pi-0, GR00T) et modèles du monde générant de la vidéo prédictive, avec en toile de fond l'usage croissant de la vidéo humaine pour contourner le coût de la téléopération. Ce que les auteurs appellent une progression ordonnée « de la compréhension sémantique à la prévision visuelle puis à l'action » est une interprétation fondée sur l'analyse de l'attention, pas une garantie de performance en production. Les suites logiques sont la publication des chiffres complets, du code et des poids, puis une réplication sur d'autres architectures et des tâches plus longues. C'est à ce stade que l'on pourra juger si l'avantage tient hors du banc d'essai des auteurs.

Recherche❖Paper

1 source

37

724arXiv cs.RO 

Cue the Flow : guider les politiques de flow matching pour la manipulation robotique en livraison en milieu ouvert

Des chercheurs proposent une méthode, baptisée « Cue the Flow », pour piloter une politique de manipulation sans la réentraîner. Elle vise la livraison d'objets en environnement ouvert, où un manipulateur mobile doit suivre des instructions libres de l'utilisateur et saisir des objets potentiellement inconnus. Le travail, publié sur arXiv (2609.38989), part d'un modèle vision-langage-action (VLA) préentraîné à flow matching, utilisé comme interface de contrôle bas niveau. Un modèle de grounding de haut niveau convertit la consigne en indice spatial, et celui-ci sert à orienter la politique. Les auteurs ajoutent un adaptateur léger conditionné par cet indice. Il est d'abord entraîné par objectifs contrastifs, afin de produire des représentations saillantes et spatialement discriminantes. Il est ensuite supervisé pour prédire une transformation affine diagonale appliquée au bloc d'actions généré (action chunk), ce qui aligne l'action sur la cible désignée. Les tests couvrent des configurations sur table et sur base mobile, avec des objets vus ou non à l'entraînement. Les auteurs annoncent jusqu'à près de 2 fois le taux de réussite moyen des tâches, pour un surcoût d'inférence négligeable. Il s'agit d'un résultat de laboratoire, sans produit ni déploiement associé, et l'extrait disponible ne donne ni nom de modèle de base, ni plateforme, ni nombre d'essais. L'enjeu est de savoir où placer la frontière entre planification et contrôle. Les architectures à double système, avec un modèle de grounding en amont et un contrôleur en aval, restent fragiles face au bruit de perception, aux scènes dynamiques et aux contacts riches. Ici, les auteurs conservent la réactivité d'un VLA à flow matching et ne lui injectent que l'information manquante : quelle est la cible. Cela suggère que le préentraînement fournit déjà l'essentiel du savoir-faire de manipulation, et que le goulot se situe dans l'association entre langage et objet nouveau. Pour un intégrateur, l'intérêt pratique est qu'un adaptateur léger, sans surcoût de calcul notable, peut s'ajouter à une politique existante sans réentraînement complet. La formulation « jusqu'à près de 2× » désigne toutefois le meilleur cas. Elle ne dit rien de la robustesse sur des déploiements longs, et les performances moyennes restent à vérifier dans l'article complet. Ce travail s'inscrit dans la course aux VLA généralistes, avec des modèles à flow matching comme Pi-0 de Physical Intelligence, et dans l'essor des architectures à double système comme Helix de Figure ou GR00T de NVIDIA. La livraison en milieu ouvert est un cas d'usage logique pour les manipulateurs mobiles, mais l'écart entre démonstration et fiabilité réelle y reste important. L'approche par adaptateur laisse entrevoir une adaptation rapide à de nouveaux objets, sans collecte massive de données. Les prochaines étapes à surveiller sont la validation sur d'autres VLA de base, des tests en conditions non contrôlées et une éventuelle publication du code, qui n'est pas mentionnée dans le résumé.

Recherche❖Paper

1 source

37

725arXiv cs.RO 

Évaluation et amélioration de la mémoire au niveau des compétences pour la manipulation robotique en observabilité partielle

Des chercheurs publient sur arXiv (2609.38886) HIDE, un benchmark dédié à la mémoire en manipulation robotique sous observabilité partielle, ainsi que SEEK, un cadre logiciel pour y répondre. HIDE regroupe 15 tâches réparties en trois familles : comptage de répétitions, rappel d'états passés et suivi de l'avancement d'une exécution. Les configurations initiales sont randomisées. Chaque tâche comporte des points de décision où deux observations quasi identiques exigent des actions différentes, selon ce qui s'est produit auparavant. SEEK combine trois mécanismes de mémoire complémentaires, qui conservent des indices historiques et suivent l'état d'exécution. L'évaluation couvre la simulation et des expériences sur robot réel. Le résumé ne donne ni nom de robot, ni modèle de base, ni taux de succès chiffrés, ni liste des politiques testées. Il indique que les politiques existantes montrent des limites substantielles sur HIDE et que l'ajout de mémoire améliore le taux de succès dans les deux contextes. Le résultat le plus utile est aussi le moins spectaculaire. Aucun des trois mécanismes ne vaut pour toutes les tâches : chacun aide sur certaines et dégrade les performances sur d'autres. Seule leur combinaison obtient le meilleur taux de succès moyen, parmi les configurations évaluées. Pour un intégrateur, cela signifie qu'une mémoire générique ajoutée à une politique VLA (vision-langage-action) ne suffit pas. Il faut choisir l'architecture selon la nature de l'information à retenir : un compteur, un événement passé ou une étape en cours. Le benchmark met aussi un nom sur une faiblesse peu mesurée. Beaucoup de politiques actuelles réagissent à l'observation courante, alors que des tâches réelles (compter des pièces posées, savoir si une étape a déjà été faite, reprendre après une interruption) dépendent d'un état caché. Les démonstrations sélectionnées en vidéo masquent ce défaut, qu'un benchmark standardisé peut enfin quantifier. Les chiffres détaillés manquent toutefois dans le résumé : l'ampleur réelle des gains reste à vérifier dans l'article complet. Ce travail s'inscrit dans la montée en puissance des politiques généralistes de type Pi-0, GR00T ou Helix. Elles généralisent sur des tâches et des environnements variés, mais traitent le plus souvent un historique court, voire une seule image. Les benchmarks de manipulation existants testent surtout la diversité des tâches et la généralisation, rarement la dépendance à l'historique, ce que HIDE cherche à combler. Il s'agit d'une publication de recherche (v1, préprint) : ni produit, ni déploiement industriel, ni pilote annoncé. Les suites plausibles sont l'adoption de HIDE par d'autres laboratoires comme référence commune et l'intégration de mémoire au niveau des compétences dans les grands modèles de fondation robotiques. Cela dépendra de la disponibilité publique du benchmark et du code, que le résumé ne précise pas.

Recherche❖Paper

1 source

37

726arXiv cs.RO 

H-WM : planification de tâches et de mouvements robotiques guidée par un modèle du monde hiérarchique

Des chercheurs proposent H-WM (Hierarchical World Model), un cadre qui prédit conjointement les transitions d'états logiques et visuelles pour guider les modèles Vision-Language-Action (VLA) sur des tâches longues. L'architecture associe deux niveaux. Un modèle de monde logique de haut niveau prédit des actions symboliques et des états fondés sur des prédicats, à la manière de la planification de tâches et de mouvements (TAMP) classique. Un modèle de monde visuel de bas niveau prédit les transitions d'états visuels latents. Ces deux sorties sont injectées dans le VLA comme guidage d'état intermédiaire pendant l'exécution. Les auteurs annoncent des gains constants sur trois benchmarks à horizon long ainsi que sur des robots réels, grâce à une exécution plus stable et à une moindre accumulation d'erreurs. Ils publient aussi LIBERO-Logic, un jeu de données aligné image par image qui associe observations visuelles et états robotiques continus à des actions logiques et à des états logiques à base de prédicats. Il s'agit d'un travail de recherche (arXiv 2602.11291, version 3), sans produit ni déploiement industriel. L'enjeu touche l'un des principaux points faibles des VLA : la dérive sur les longues séquences. Les modèles de monde fondés sur la prédiction visuelle, latente ou linguistique sont difficiles à relier à des actions exécutables, et leurs erreurs s'accumulent à mesure que l'horizon s'allonge. H-WM suggère qu'une couche symbolique compacte peut servir d'ancrage sans abandonner la perception, une piste hybride entre l'IA symbolique et l'apprentissage de bout en bout. Pour un intégrateur, la leçon est que les séquences d'assemblage ou de logistique en plusieurs étapes pourraient gagner en fiabilité sans réentraîner un VLA complet. La prudence reste de mise. L'extrait ne chiffre ni les gains, ni les VLA de référence, ni la nature des tâches sur robots réels. Les benchmarks de type LIBERO restent des environnements de simulation, et le passage à des cadences industrielles n'est pas démontré. Ce travail s'inscrit dans la montée des modèles de monde comme brique centrale du contrôle robotique, face aux VLA généralistes de type Pi-0 ou GR00T, qui peinent sur les tâches longues. Il rejoint aussi la renaissance de la planification symbolique couplée aux modèles de fondation. Le jeu de données LIBERO-Logic, étendu à partir du benchmark LIBERO, constitue sans doute la contribution la plus réutilisable, car il offre à d'autres équipes des annotations logiques alignées. La suite dépendra de la généralisation à des scènes ouvertes, de la qualité des prédicats produits automatiquement et du coût d'annotation. Aucun calendrier de pilote n'est annoncé.

Recherche❖Paper

1 source

37

727arXiv cs.RO 

HiWE : modèle hiérarchique de connaissances du monde avec amélioration par points clés visuels pour la planification de trajectoire 3D en zéro-shot

HiWE, publié sur arXiv (2609.39323v1), est un cadre de génération de démonstrations robotiques qui relie trois décisions habituellement traitées séparément : où l'interaction doit avoir lieu, quel mouvement planifier, et comment exécuter le contact. Le lien est assuré par une interface fondée sur des points. PointVLM, un modèle vision-langage ajusté par instructions, associe les objets pertinents pour la tâche à des coordonnées d'image. Son entraînement mélange annotations de points, échantillons dérivés de segmentation, observations de robots et données de questions-réponses visuelles. Les mesures de profondeur projettent ensuite ces prédictions dans une représentation 3D sémantique. Un planificateur linguistique, 3DLLM, s'appuie sur cette représentation pour produire les waypoints de l'effecteur et les commandes de pince, tandis qu'un module de préhension hybride détermine les poses de saisie locales. L'évaluation porte sur 14 tâches de manipulation simulées et quatre tâches sur robot physique, avec des ablations sur les données visuelles d'entraînement, les entrées spatiales et la sélection de saisie. Aucun chiffre de taux de réussite n'figure dans le résumé. L'intérêt tient à la décomposition. Plutôt qu'une politique VLA de bout en bout qui régresse directement des actions, HiWE isole la perception, la planification et la saisie en modules inspectables, reliés par des points 3D lisibles. Pour un intégrateur, c'est plus facile à déboguer et à adapter qu'un modèle monolithique. La notion de « zéro-shot » demande toutefois de la prudence : elle signifie ici l'absence d'entraînement par démonstrations propres à chaque tâche, mais le modèle visuel est affiné sur des données robotiques existantes. Le volume restreint de tâches réelles, quatre seulement, laisse entière la question du passage de la simulation au monde physique et de la robustesse en environnement industriel non contrôlé. Il s'agit d'un résultat de recherche, sans produit livré ni déploiement. Le travail s'inscrit dans la tendance à combiner grands modèles de langage et ancrage visuel pour la manipulation, en concurrence avec les VLA de bout en bout comme Pi-0, GR00T N2 ou Helix de Figure, qui misent sur l'apprentissage direct des actions à grande échelle. Les auteurs précisent que cet article décrit la formulation initiale, fondée sur les points, et que son lien avec l'extension ultérieure GeneralVLA est détaillé dans l'introduction. La suite logique sera de mesurer cette approche modulaire sur davantage de tâches réelles, avec des temps de cycle et des taux de réussite publiés, avant de pouvoir la comparer honnêtement aux VLA entraînés sur de grands volumes de téléopération.

Recherche❖Paper

1 source

37

728arXiv cs.RO 

Regarder en arrière pour avancer : vérification temporelle des politiques génératives de robots

Des chercheurs proposent Temporal Verification (TeV), un cadre de vérification d'actions pour les VLA (vision-language-action) à flow-matching, détaillé dans un preprint arXiv. Il s'agit d'un travail académique, sans produit commercial, sans partenaire industriel et sans volume de déploiement annoncé. Le principe tient en trois étapes. Un « token temporel » résume l'historique récent d'observations et d'actions du robot. À partir de lui, TeV construit des paires positives et négatives sans démonstration d'expert supplémentaire ni annotation de préférence, puis entraîne par contraste un vérificateur à base d'énergie. Ce vérificateur attribue une énergie plus basse aux séquences d'actions (action chunks) de meilleure qualité et cohérentes avec la trajectoire en cours. Le paysage d'énergie appris sert aussi à guider les échantillons intermédiaires du flux vers les zones de basse énergie, avant la sélection finale parmi plusieurs candidats. Les auteurs revendiquent un classement fiable des candidats, de meilleurs taux de réussite et des trajectoires plus lisses, en simulation et en conditions réelles. Le résumé ne donne ni chiffres, ni noms de robots, ni noms de benchmarks, ni nombre de tâches testées. Le problème visé est connu. Les politiques génératives sont entraînées sur des démonstrations hétérogènes, ce qui produit des séquences d'actions sous-optimales. Leurs erreurs s'accumulent jusqu'à pousser le robot hors distribution, dans des états dont il sort difficilement. La vérification à l'inférence (test-time scaling) échantillonne plusieurs actions et laisse un vérificateur choisir. Les approches existantes sont décrites comme « myopes » : elles jugent chaque candidat sur l'observation courante seule, sans tenir compte de la continuité de la trajectoire. Elles exigent souvent de gros vérificateurs et des démonstrations expertes en plus. Si TeV tient ses promesses hors laboratoire, il abaisserait le coût d'amélioration de VLA déjà déployés, sans réentraîner la politique de base. Il intéresserait donc les intégrateurs qui cherchent plus de robustesse sans collecter de nouvelles données. Deux réserves s'imposent. Les gains réels ne sont pas chiffrés dans le résumé. Et échantillonner plusieurs candidats puis les évaluer ajoute de la latence, un coût à mesurer sur du matériel embarqué à cadence de contrôle élevée. Ce travail s'inscrit dans la montée du calcul à l'inférence pour la robotique, après ses succès sur les modèles de langage. Les VLA à flow-matching de type Pi-0 en sont la cible naturelle, et d'autres équipes explorent la vérification ou le reranking d'actions. TeV se distingue par la mémoire temporelle et l'absence de données supplémentaires. Il faudra attendre la lecture complète de l'article pour juger des benchmarks, des robots utilisés, du surcoût de calcul et de la comparaison avec les vérificateurs concurrents. Le code et les évaluations indépendantes diront si l'approche dépasse le stade du preprint.

Recherche❖Paper

1 source

36

729arXiv cs.RO 

Des comportements VLA locaux du corps entier à la manipulation aérienne à l'échelle de la scène

Des chercheurs proposent un cadre unifié pour faire exécuter à des manipulateurs aériens articulés (UAM, pour uncrewed aerial manipulators) des missions de manipulation à l'échelle d'une scène entière, en s'appuyant sur des modèles vision-langage-action (VLA). La méthode repose sur trois briques. D'abord, un pipeline reconfigurable génère de manière synthétique des trajectoires cinématiquement et dynamiquement réalisables, avec des observations multivues synchronisées, ce qui évite toute démonstration physique sur la plateforme. Ensuite, un algorithme baptisé MPAR (measured-progress-aligned realization) recale les séquences d'actions renvoyées de façon asynchrone par le modèle sur la progression réellement mesurée de l'exécution, puis les convertit en trajectoires continues. Enfin, un graphe de scène relationnel associe les consignes en langage naturel à des instances d'objets et à des zones d'interaction praticables, tandis qu'un transfert guidé par la topologie relie les comportements locaux entre différents sites. En simulation, les compétences VLA locales réussissent 39 essais sur 60 (65,0 %), mais dans des conditions favorables : cible fournie par un oracle et transmission du contrôle jugée réalisable. Avec 500 ms de latence ajoutée, avec ou sans blocage transitoire des mises à jour de commande, MPAR réduit de 0,212 s l'erreur de phase médiane à la reprise de contrôle, par rapport à un alignement sur le temps nominal. Le système complet mène à bien 21 missions multisites simulées sur 50 (42,0 %) et a aussi été validé sur un UAM articulé réel, sans que le résumé ne détaille l'ampleur de cet essai. L'intérêt tient à ce que le travail s'attaque à trois freins concrets du VLA appliqué à la robotique aérienne : le coût des démonstrations en corps entier, le décalage entre action et état causé par la latence, et la difficulté d'enchaîner des comportements d'un site à l'autre. Produire les données d'entraînement par synthèse, sans plateforme physique, réduit un goulot d'étranglement majeur, même si l'écart entre simulation et réalité reste à mesurer sur le matériel. Les chiffres appellent toutefois à la prudence : 42 % de réussite sur missions complètes simulées reste loin d'un niveau exploitable en inspection ou en maintenance, et le 65 % local est obtenu avec des aides oracle. Le message pour les intégrateurs est donc nuancé : la composition de compétences sur de longues missions fonctionne en principe, mais l'érosion du taux de succès d'une étape à l'autre demeure le verrou principal. Ce travail s'inscrit dans la montée des modèles VLA, déjà largement testés sur bras fixes et humanoïdes, et dont l'extension aux drones manipulateurs articulés reste rare, car ces plateformes combinent dynamique de vol, bras mobile et latence de communication. Le résumé ne cite ni concurrents ni acteurs industriels, et aucun calendrier de déploiement n'est annoncé. Il s'agit d'une préimpression arXiv, non évaluée par les pairs. Les suites logiques seraient des essais physiques plus nombreux, la levée des hypothèses d'oracle et une comparaison avec d'autres approches de manipulation aérienne.

Recherche❖Paper

1 source

36

730arXiv cs.RO 

Optimiser, apprendre, affiner : préhension du corps entier et lancer avec un robot souple en spirale

Des chercheurs ont mis au point un cadre d'optimisation qui permet à un robot continu souple en spirale de saisir et de lancer des objets avec tout son corps, à partir d'un état initial où rien n'est encore saisi. La méthode, décrite dans un preprint arXiv (v1, non évalué par les pairs), repose sur une optimisation dans l'espace d'actionnement guidée uniquement par le résultat. La saisie est mesurée par le balayage angulaire de la pointe et par l'enveloppement de l'objet par le corps du robot. Le lancer ajoute l'alignement de la direction de relâchement et une vitesse minimale à la libération. Aucune force de contact, position de contact ou configuration du corps n'est prescrite : saisie, accélération et relâchement émergent de l'interaction compliante. En simulation, le système réussit 492 saisies sur 500 (98,4 %) et affiche 98 %, 97 % et 94 % de réussite sur trois directions de lancer. Sur le matériel, les auteurs rapportent 100 % de réussite sur 50 saisies et sur 30 lancers (10 par direction). L'intérêt tient à la difficulté de fond : la manipulation corps entier par des robots souples, où les contacts changent en permanence, échappe aux méthodes de planification classiques. La relation entre commande et résultat est non lisse, d'où le recours à CMA-ES, un algorithme d'optimisation sans dérivées. Le cadre « optimiser, apprendre, affiner » fonctionne en trois temps : CMA-ES produit des solutions pour des conditions échantillonnées, un prédicteur conditionné par la tâche apprend des points de départ, puis CMA-ES les raffine pour des conditions inédites. Le gain est mesurable : le taux de saisie passe de 78,6 % à 98,4 % et le nombre médian de simulations par optimisation chute de 1184 à 816. Il faut toutefois relativiser. Les scores de 100 % reposent sur de petits échantillons (30 à 50 essais), le résumé ne précise ni les objets, ni leur masse, ni leur diversité, et l'écart entre simulation et matériel n'est pas chiffré. Il s'agit d'un résultat de laboratoire, sans produit ni déploiement associé. Ce travail s'inscrit dans l'essor des robots continus et souples, qui visent des tâches où la compliance répartie est un avantage : objets fragiles, environnements encombrés, contacts incertains. Il se distingue de la ligne dominante des humanoïdes et des modèles vision-langage-action (VLA), qui apprennent des politiques par imitation ou par apprentissage par renforcement sur des préhenseurs rigides. Ici, l'apprentissage reste léger : il sert uniquement à initialiser une optimisation. Le résumé ne mentionne ni acteur industriel ni calendrier de transfert. Les suites probables sont des tests avec des objets plus variés, des charges plus lourdes et une validation en boucle fermée avec retour perceptif, étapes nécessaires avant toute application logistique ou industrielle.

Recherche❖Paper

1 source

36

731arXiv cs.RO 

Ondes de manipulation : un réseau delta couplé par membrane pour déplacer des objets plus petits que l'espacement des actionneurs

Des chercheurs ont mis au point une surface manipulatrice qui couple les effecteurs d'un réseau de 8 x 8 robots delta à trois degrés de liberté (64 actionneurs au total) avec un tissu extensible. L'écart entre centres d'actionneurs est de 43,3 mm. Dans un système de manipulation distribuée classique, un objet doit reposer sur plusieurs actionneurs simultanément, ce qui fixe une taille minimale d'objet manipulable. Le tissu transforme ces 64 contacts discrets en surface continue, et la plateforme déplace des objets de 15 à 90 mm sur une même surface, soit un rapport de six, de part et d'autre de l'espacement des actionneurs. Les auteurs traitent le réseau comme un champ de déplacement et en tirent deux primitives de manipulation : des champs quasi-statiques locaux et des champs cycliques (ondulations). Elles peuvent s'appliquer à tout le réseau ou se limiter au voisinage de chaque objet suivi, ce qui permet d'en déplacer plusieurs en parallèle et de façon indépendante. Une politique apprise agit sur les coefficients basse fréquence d'une transformée en cosinus discrète. À dimension d'action égale, piloter un voisinage de dix-neuf robots delta réduit de moitié l'erreur de placement par rapport au pilotage de l'ensemble du réseau. Cette politique est transférée sur le matériel sans adaptation, avec 76 % de réussite. L'intérêt tient à ce que le pas des actionneurs cesse d'être la limite de la miniaturisation des surfaces actives. Jusqu'ici, manipuler de petits objets demandait de densifier le réseau, donc de multiplier les actionneurs, le câblage et les coûts. Une couche mécanique passive, ici un simple tissu, contourne ce compromis. Le résultat sur le transfert simulation-réel est aussi notable : une politique entraînée en simulation fonctionne sur le matériel sans réglage supplémentaire. Le taux de 76 % reste toutefois une mesure de laboratoire, obtenue sur une seule plateforme. Le résumé ne précise ni la nature des objets, ni la vitesse, ni la répétabilité, ni la charge admissible. Pour des intégrateurs, les applications évidentes seraient le tri, l'alignement ou le positionnement de petites pièces ou de composants fragiles (électronique, pharmacie, agroalimentaire) sans préhenseur dédié. Ce travail n'est pour l'instant qu'une preuve de concept académique et ne constitue ni un produit ni un déploiement industriel. Ces travaux prolongent les recherches sur les systèmes de manipulation distribuée, qui reposent sur des réseaux d'actionneurs (convoyeurs à cellules, tables à jets d'air ou à roues omnidirectionnelles, grilles de robots delta) et butent depuis longtemps sur ce plancher de taille. Des acteurs européens comme Exotec ou Pollen Robotics travaillent sur d'autres approches de la manutention, mais ne sont pas cités ici. Les prochaines étapes probables sont des tests sur des objets de formes et de matériaux variés, un passage à des réseaux plus grands et une évaluation sur de vraies tâches de tri ou d'assemblage. Aucun calendrier, partenaire industriel ni prix n'a été annoncé dans le résumé de l'étude.

Recherche❖Paper

1 source

36

732arXiv cs.RO 

Vision embarquée et navigation MPC pour robots sous-marins : une plateforme BlueROV2 ouverte pour les expériences multi-robots et l'amarrage

Des chercheurs publient sur arXiv une plateforme open source basée sur le BlueROV2, le petit robot sous-marin télépiloté largement répandu en recherche, qui associe vision embarquée et commande prédictive non linéaire (NMPC) pour la navigation autonome et l'amarrage en milieu confiné. Le véhicule embarque un NVIDIA Jetson Orin NX et une caméra stéréo Intel RealSense D435i, logés dans un boîtier de pression modulaire. La caméra, calibrée pour l'usage sous l'eau, fournit une profondeur stéréo et une détection d'objets en temps réel qui donnent la position relative de BlueROV2 voisins, dans le repère caméra comme dans celui du corps du robot. Un estimateur à base de quaternions fusionne ces poses externes avec les mesures inertielles. Le contrôleur NMPC s'appuie sur un modèle non linéaire à six degrés de liberté pour suivre des trajectoires planifiées de navigation et d'amarrage. Les auteurs fournissent aussi des environnements de simulation PX4 SITL et Gazebo fondés sur la physique, des outils de simulation multi-robots et une station d'amarrage physique à bas coût. Les expériences portent sur la perception sous-marine, les performances de calcul embarquées, l'estimation d'état, le suivi de trajectoire et l'amarrage autonome. Le résumé ne chiffre aucun résultat : précision, taux de réussite d'amarrage et charge du Jetson restent à vérifier dans le texte complet. L'intérêt tient moins à un algorithme inédit qu'à la mise à disposition d'une chaîne complète et reproductible, du simulateur au bassin. En robotique sous-marine, les résultats d'amarrage ou de coordination multi-véhicules reposent souvent sur du matériel propriétaire ou sur des systèmes de positionnement acoustique coûteux, ce qui rend les comparaisons difficiles. Un socle ouvert, bâti sur une plateforme que de nombreux laboratoires possèdent déjà, abaisse le coût d'entrée pour les équipes et les intégrateurs qui veulent tester des essaims ou de l'inspection autonome en espace restreint (cuves, ports, structures offshore). L'usage d'une vision purement embarquée pour localiser un congénère ou une station est pertinent là où le GPS est absent et où les balises acoustiques perdent en précision à courte distance. Le recours à un module Jetson montre aussi que le calcul embarqué de perception et de MPC devient accessible sur de petits véhicules. Reste que la vision sous-marine dépend fortement de la turbidité et de l'éclairage : la robustesse hors bassin contrôlé est la vraie question. Ce travail s'inscrit dans l'écosystème du BlueROV2, produit par Blue Robotics, devenu la référence de facto des laboratoires grâce à son autopilote ArduSub/PX4 et à son architecture ouverte. Il prolonge une longue série de travaux sur l'amarrage autonome, souvent fondés sur des balises acoustiques ou lumineuses, et sur la commande prédictive appliquée aux véhicules sous-marins. Les prochaines étapes naturelles sont des essais en eau libre, l'extension à des flottes plus nombreuses et l'intégration de capteurs complémentaires. Il s'agit d'un article de recherche, pas d'un produit commercial : aucun déploiement industriel n'est annoncé.

Recherche❖Paper

1 source

36

733arXiv cs.RO 

Mémoire intégrée et compétences réutilisables : un cadre centré sur la mémoire pour les modèles vision-langage-action (VLA)

Des chercheurs proposent Optimus-R, un cadre de type VLA (Vision-Language-Action) centré sur la mémoire, qui traite l'adaptation d'un robot à une nouvelle tâche comme un réglage explicite d'une mémoire requête-compétence, plutôt que comme un réentraînement des paramètres du modèle. Le dispositif repose sur trois briques. Une interface de mémoire « en ligne » insère des tokens de mémoire apprenables dans le flux de préfixe du VLA, ce qui permet au backbone d'extraire des représentations de requête et de compétence liées au contrôle, dans son circuit natif de conditionnement de l'action. Une banque de mémoire requête-compétence externalise ensuite ces compétences : des prototypes de requêtes décident quoi récupérer, des valeurs de compétence précisent comment agir. Enfin, un mécanisme léger « Bridge-and-Adapt » aligne les requêtes et compétences du domaine cible sur l'espace mémoire existant, via un adaptateur et des mises à jour résiduelles. Les auteurs rapportent des expériences en adaptation intra-domaine, inter-domaines et en apprentissage continu. Leur conclusion est un apprentissage de compétences économe en données, avec un oubli catastrophique atténué. Le résumé ne fournit ni taux de réussite, ni nom de robot, ni taille de modèle, ni benchmark. Il s'agit d'un travail de recherche publié sur arXiv, sans produit ni déploiement associé. L'enjeu est très concret pour qui veut déployer des VLA en production. Aujourd'hui, adapter un modèle généraliste à un nouveau poste, une nouvelle pièce ou un nouvel effecteur passe le plus souvent par du fine-tuning. Celui-ci coûte du calcul et des démonstrations, et il peut dégrader les tâches déjà maîtrisées. Pour un intégrateur qui maintient plusieurs cellules, ce risque de régression oblige à revalider l'existant à chaque mise à jour. Déplacer l'apprentissage vers une mémoire externe, extensible avec peu de paramètres modifiés, irait vers une logique plus modulaire, où l'on ajoute une compétence sans toucher au reste. L'approche reste cependant à démontrer. Faute de chiffres dans le résumé, on ignore l'ampleur du gain, la nature des domaines testés (simulation ou matériel réel) et la façon dont la banque se comporte quand le nombre de compétences croît. L'écart entre résultats de laboratoire et exploitation industrielle reste donc entier. Ce travail s'inscrit dans un courant de recherche sur l'apprentissage continu pour les politiques robotiques et l'adaptation efficiente en paramètres, déjà exploré par des méthodes de type adaptateurs ou LoRA appliquées aux VLA. Il rejoint aussi l'intérêt croissant pour les mémoires externes et la récupération de compétences dans les modèles de fondation. Les acteurs industriels comme Physical Intelligence (Pi-0), NVIDIA (GR00T) ou Figure (Helix) travaillent sur des modèles généralistes, mais leurs méthodes d'adaptation propres ne sont pas détaillées publiquement dans ce cadre. La suite logique est la publication du code et des détails expérimentaux, puis une comparaison avec ces approches sur des benchmarks communs et sur robot réel. Tant que ces éléments manquent, Optimus-R relève d'une piste de recherche prometteuse et non d'une solution éprouvée.

Recherche❖Paper

1 source

35

734arXiv cs.RO 

PneuTac : manipulation tactile avec des robots pneumatiques souples grâce à une simulation unifiée MPM et Gaussian Splatting

PneuTac est un cadre logiciel de recherche, présenté sur arXiv (v1, 2609.38418), qui vise l'apprentissage de la manipulation tactile avec des robots souples pneumatiques. Les auteurs modélisent la dynamique du robot souple et de la membrane déformable du capteur tactile avec la méthode des points matériels (MPM), puis rendent la scène en 3D Gaussian splatting (3DGS). Le calage réel-vers-simulation repose sur une méthode visuelle simple. Des réseaux d'action et de perception, entraînés comme modèles de substitution, accélèrent ensuite la simulation. Ce pipeline sert à collecter des démonstrations guidées par le toucher directement en simulation. Les tests portent sur un doigt souple pneumatique conçu sur mesure, équipé d'un embout tactile à base de vision, avec des évaluations complémentaires sur d'autres dispositifs. Selon les auteurs, les politiques entraînées avec des démonstrations augmentées par la simulation surpassent des références entraînées sur les mêmes données réelles, sur trois tâches de manipulation compliante riches en contacts. Le résumé ne donne ni chiffres de performance ni taux de réussite. L'enjeu est de lever un goulot d'étranglement connu. Les robots souples offrent un contact sûr grâce à leur compliance, et les capteurs tactiles optiques fournissent une perception fine du toucher. Mais les simulateurs existants les traitent séparément et laissent des écarts de calibration importants et coûteux à corriger. Unifier dans un même moteur MPM la déformation du corps pneumatique et celle de la membrane tactile, avec un rendu 3DGS pour l'image, permet de générer des données synthétiques exploitables pour des politiques d'imitation. Pour les intégrateurs, l'intérêt est indirect mais réel : la manipulation d'objets fragiles (alimentaire, logistique, soin) dépend de mains compliantes, et leur programmation par démonstrations réelles reste lente. Il faut toutefois rester prudent. Il s'agit d'un preprint non évalué par les pairs, validé sur un seul doigt et trois tâches, sans chiffres publics dans le résumé, ce qui ne permet pas de conclure à un « sim-to-real résolu » à l'échelle d'une main complète. Ce travail s'inscrit dans la convergence entre simulation différentiable de matériaux mous, capteurs de type GelSight et rendu neuronal. Il se place à côté des grandes lignes de recherche sur les modèles vision-langage-action (VLA), qui restent surtout alimentés par la vision et très peu par le tactile. Les prochaines étapes naturelles sont l'extension à des effecteurs multi-doigts, la publication du code et des jeux de données, et des comparaisons chiffrées avec les simulateurs rigides ou à éléments finis. Aucun partenaire industriel, pilote ni calendrier de déploiement n'est annoncé.

Recherche❖Paper

1 source

35

735arXiv cs.RO 

Drone football : apprendre à manipuler des objets grâce au flux descendant des multicoptères

Des chercheurs publient sur arXiv (identifiant 2609.38588, première version) une étude qui retourne un problème classique de la manipulation aérienne : au lieu de subir le « downwash », le flux d'air descendant généré par les hélices d'un multicoptère, ils l'emploient comme outil. La tâche choisie est du football pour drone : un quadricoptère doit dribbler une balle sans la saisir. L'équipe développe un modèle simplifié de la dynamique du downwash, puis l'utilise pour entraîner par apprentissage par renforcement (RL) une politique de dribble. Selon le résumé, cette politique se transfère au monde réel (sim-to-real). Le texte disponible ne donne ni taux de réussite, ni durée de dribble, ni nombre d'essais, ni type de drone ou de balle. L'enjeu est conceptuel avant d'être commercial. Les manipulateurs aériens (UAM) actuels embarquent surtout un bras ou une pince, ce qui ajoute de la masse, de la complexité mécanique et des perturbations pour le vol. Ils traitent le downwash comme un bruit à rejeter, ou l'ignorent. Si l'on peut pousser un objet sans contact grâce à l'air, on ouvre une manipulation sans effecteur, plus légère et moins exposée aux collisions. La démonstration conforte aussi l'idée qu'un modèle physique volontairement simplifié, associé au RL, suffit pour franchir l'écart sim-to-real sur une interaction fluide réputée difficile à simuler. Il faut toutefois rester prudent : une balle de football sur sol plat est une tâche de laboratoire. Rien n'indique pour l'instant que la méthode s'applique à des objets de formes variées, à des charges utiles réalistes ou à des environnements industriels. Les performances n'étant pas chiffrées dans le résumé, la robustesse reste à établir. Il s'agit d'un travail de recherche, sans produit ni déploiement. Ce travail s'inscrit dans la lignée des recherches sur les UAM, qui ont longtemps cherché à compenser les effets aérodynamiques sur les bras ou les charges, et dans celle des politiques de vol apprises par RL, déjà éprouvées en course de drones. Il rejoint aussi l'intérêt croissant pour la manipulation non préhensile (pousser, faire rouler, dribbler) plutôt que la saisie. Les suites naturelles seraient l'extension à d'autres objets, la manipulation en interaction avec des surfaces ou plusieurs drones, et la comparaison quantitative avec des UAM à pince. Le résumé ne mentionne aucun partenaire industriel ni calendrier de transfert.

Recherche❖Paper

1 source

34

736arXiv cs.RO 

Local-Minimum Escaper : génération programmatique de sous-objectifs pour une navigation robuste en environnement inconnu

Des chercheurs proposent LME (Local-Minimum Escaper), un cadre hiérarchique programmatique qui aide un robot mobile à sortir des minima locaux lors d'une navigation sans carte (mapless) en environnement inconnu et partiellement observable. Le système n'utilise que les observations locales. Il génère des sous-objectifs candidats et les sélectionne selon des critères heuristiques interprétables, qui combinent la géométrie des obstacles environnants et la sûreté de chaque emplacement. Un planificateur local produit ensuite les commandes de bas niveau vers le sous-objectif retenu. LME ne demande aucun entraînement supplémentaire et reste indépendant du planificateur sous-jacent. Les auteurs l'ont testé en simulation et en conditions réelles, sur un robot à entraînement différentiel et sur un robot quadrupède. Le résumé de l'article ne donne aucun chiffre, ni taux de succès, ni temps de parcours, ni nom de planificateur comparé, ni taille de l'échantillon d'essais. Le point notable est la méthode. La plupart des approches par apprentissage profond par renforcement (DRL) font apprendre les comportements de récupération de façon implicite, via la conception de la récompense et l'optimisation de la politique. LME les traite comme un module explicite, lisible et sans entraînement. Pour un intégrateur, cela veut dire un comportement plus facile à auditer et à déboguer, et un module qui se branche sur un planificateur local déjà en place. Les auteurs affirment que les sous-objectifs générés améliorent nettement la capacité d'autres planificateurs locaux à s'échapper des minima. Cette affirmation reste à vérifier sur les données complètes. Le déploiement sur deux morphologies très différentes suggère une certaine généralité. Il s'agit toutefois de travaux de laboratoire, pas d'un produit livré ni d'un déploiement industriel, et l'expression « scénarios inédits difficiles » ne dit rien de la difficulté réelle des environnements testés. Les minima locaux sont un défaut ancien des méthodes réactives et des champs de potentiel. Les cas typiques sont les impasses, les murs concaves et les couloirs en U. Les solutions classiques passent par des cartes globales, de l'exploration à base de frontières ou des politiques DRL entraînées de bout en bout. LME choisit une voie intermédiaire et symbolique, sans carte. Le papier, publié sur arXiv (2609.38928v1) en première version, n'annonce ni code ni pilote commercial dans son résumé. Les suites logiques seraient une comparaison chiffrée avec des bases DRL récentes et des essais sur des sites réels plus vastes, avec des humains, des sols glissants ou des obstacles dynamiques.

Recherche❖Paper

1 source

32

737arXiv cs.RO 

Persistance comportementale et transfert fonctionnel incomplet de la communication co-évoluée en robotique évolutionniste

Des chercheurs ont testé le transfert direct d'un protocole de communication co-évolué, passant d'une simulation 2D à un environnement physique 3D, sans réentraîner les poids du réseau. Deux robots de type e-puck, pilotés par un réseau GRU (réseau récurrent à portes) avec connexion résiduelle, effectuaient une tâche de recherche de nourriture avec signalisation sociale. La couche de traduction sensorielle et motrice a exigé trois corrections pour fonctionner de façon stable en conditions physiques, dont l'étalonnage d'un terme de « faim » fondé sur une asymétrie mesurable dans les poids résiduels entraînés. Le résultat reste très partiel et asymétrique : sur 30 graines (seeds) testées, un seul agent a atteint la source de nourriture, une seule fois, tandis que l'autre n'y est jamais parvenu. Le succès était défini par l'arrivée des deux agents dans la zone de nourriture, un critère que l'étude ne satisfait donc pas de manière convaincante. Une expérience complémentaire, ajoutant une information directionnelle explicite dans le canal social, a modifié la trajectoire de l'agent récepteur et amélioré quelques cas précis, sans permettre au second agent d'atteindre la cible. Pour l'industrie, ce travail documente un écart sim-to-real rarement chiffré dans le champ de la communication multi-agents émergente. Le protocole fonctionne en simulation, mais il ne survit pas au passage au monde physique, même après des corrections manuelles de l'interface. Les auteurs suggèrent que la limite ne tient pas seulement à la traduction du signal : la capacité de navigation sous les nouvelles contraintes physiques semble aussi en cause. Pour les intégrateurs et les équipes qui envisagent des flottes de robots coordonnés par des langages appris, le message est prudent : un protocole co-évolué n'est pas portable en l'état, et la conservation des conditions écologiques et navigationnelles dans lesquelles il a évolué paraît aussi importante que celle du mécanisme de signalisation. Il faut aussi relativiser la portée : le dispositif est minimal (deux robots, une tâche simple) et l'échantillon est limité, ce qui rend toute généralisation hasardeuse. Ce résultat s'inscrit dans la robotique évolutionniste, où les contrôleurs sont optimisés par évolution plutôt que programmés, et où l'écart entre simulation et réalité reste un problème ouvert depuis des décennies. Il contraste avec les approches actuelles de type VLA (vision-langage-action) à grande échelle, entraînées sur des volumes massifs de données, qui revendiquent un meilleur transfert. Aucune entreprise ni aucun pilote industriel n'est associé à cette étude, publiée en préprint sur arXiv (v1) et donc non évaluée par des pairs. Les suites logiques, que l'article n'annonce pas explicitement, consisteraient à faire évoluer le protocole avec des contraintes physiques plus proches du réel, ou à réentraîner partiellement le réseau, afin de vérifier si l'échec vient de la navigation ou de la communication.

Recherche❖Paper

1 source

32

738arXiv cs.RO 

Une mémoire récurrente linéaire suffit pour distiller une politique de modèle du monde pour le robot d'air hockey

Une étude publiée sur arXiv (v1, identifiant 2609.39151) examine si le contrôle dépendant d'une mémoire exige des dynamiques récurrentes non linéaires. Le cadre est une tâche simulée de défense au air hockey, où le suivi du palet est temporairement perdu. Les auteurs utilisent comme enseignant un agent DreamerV3 (modèle du monde). Celui-ci surpasse une politique sans mémoire lorsque le suivi est coupé. Réinitialiser son état récurrent dégrade fortement ses performances, ce qui montre que la tâche requiert bien de la mémoire. Cet enseignant est distillé en politiques récurrentes compactes, avec un état de 64 dimensions. Elles combinent une récurrence linéaire diagonale et une « innovation » non linéaire de rang k optionnelle, tout en conservant des encodeurs d'observation et des têtes d'action non linéaires. Sur cinq graines appariées, le modèle purement linéaire (k=0) égale à la fois la base GRU et l'enseignant sur toute la plage de pertes de suivi testée. Augmenter le rang de l'innovation non linéaire n'apporte aucun gain mesurable. Les résultats viennent d'un jeu de test neuf, ouvert seulement après le gel des modèles et des analyses. L'intérêt tient à l'économie de calcul. Le modèle linéaire exige moins de paramètres récurrents et moins de calcul qu'un GRU pour des performances comparables. Pour la robotique embarquée, où la latence et le budget énergétique contraignent les politiques temps réel, cela suggère qu'une partie de l'apprentissage de représentation non linéaire, placée autour d'un mémoire linéaire simple, peut suffire pour des tâches à occlusion ou perte de capteur. C'est cohérent avec l'intérêt récent pour les modèles à espace d'états linéaires. Le protocole, avec un jeu de test verrouillé et des graines appariées, est plus rigoureux que la moyenne du domaine. La portée reste étroite : une seule tâche simulée, un seul enseignant, un état de dimension 64, un horizon de coupure limité, cinq graines, et aucune validation sur robot réel, donc rien sur l'écart sim-to-real. Les auteurs précisent eux-mêmes que la conclusion ne vaut que pour des politiques dont l'encodeur et la tête d'action restent non linéaires. Ce n'est donc pas une preuve que la mémoire linéaire suffit en général. Le travail s'inscrit dans deux courants. Le premier est celui des modèles du monde de type Dreamer, qui servent ici d'enseignants performants mais coûteux. Le second est celui de la distillation vers des politiques légères et des architectures récurrentes linéaires, présentées comme alternatives aux GRU et aux LSTM. Le air hockey robotique est un banc d'essai classique pour le contrôle dynamique rapide sous contraintes de perception. Les suites naturelles sont des tests sur des tâches plus longues ou plus riches en mémoire, d'autres enseignants, des états plus grands, et surtout un transfert sur matériel réel. Il s'agit d'un préprint non évalué par des pairs, sans produit ni déploiement associé.

Recherche❖Paper

1 source

31

739arXiv cs.RO 

TO-mdiSPAs : optimisation topologique d'actionneurs pneumatiques souples multidirectionnels

Des chercheurs publient sur arXiv (identifiant 2609.39618, première version) une méthodologie d'optimisation topologique (TO) baptisée TO-mdiSPAs, consacrée à la conception d'actionneurs pneumatiques souples (SPA) multidirectionnels. Un tel actionneur fléchit sous l'effet d'une pression d'air et, dans sa version multi ou omnidirectionnelle, peut se courber dans n'importe quelle direction de l'espace 3D grâce à plusieurs degrés de liberté. La méthode repose sur une formulation TO à trois champs (design nominal, dilaté et érodé), destinée à garantir la robustesse vis-à-vis des tolérances de fabrication. La pression pneumatique, qui dépend de la géométrie elle-même, est modélisée par la loi de Darcy avec un terme de drainage. Le problème est posé en min-max sur des déformations cibles de l'unité d'actionnement, puis résolu par la méthode des asymptotes mobiles (MMA). Le résultat est une géométrie non conventionnelle, validée uniquement par simulation numérique, qui reproduit des mouvements multidirectionnels. Le résumé ne fournit ni valeur de force, ni angle de flexion, ni pression de service, ni prototype physique. L'intérêt est surtout méthodologique. Aujourd'hui, la plupart des actionneurs souples sont conçus de façon empirique, en s'inspirant de chambres en soufflet ou de géométries de type fibre renforcée, puis ajustés par essais successifs. Une conception pilotée par l'optimisation, qui intègre dès le départ la contrainte de fabricabilité par la formulation à trois champs, vise à réduire cet écart entre conception numérique et pièce réellement produite. Pour un intégrateur ou un fabricant de préhenseurs souples, la promesse est de pouvoir générer des doigts ou des modules de bras adaptés à une tâche précise plutôt que de copier des morphologies standard. Il faut toutefois rester prudent : sans validation expérimentale, on ne sait pas si la géométrie optimisée tient en pression cyclique, résiste à la fatigue du matériau ou reste usinable ou moulable à coût raisonnable. Le travail ne traite pas non plus de la commande de ces actionneurs, point dur de la robotique molle. L'optimisation topologique appliquée à la robotique souple s'appuie sur une littérature déjà établie, qui a traité la modélisation des charges dépendantes du design, notamment par la loi de Darcy, et les actionneurs pneumatiques mono-directionnels. Cette contribution étend l'approche au cas multidirectionnel, plus exigeant car il demande de satisfaire simultanément plusieurs déformations cibles. Elle s'inscrit en parallèle des approches concurrentes de conception d'actionneurs souples, qu'il s'agisse de l'impression 3D multimatériaux ou de l'apprentissage automatique appliqué à la conception. Les suites logiques seront la fabrication d'un prototype, par exemple en silicone moulé ou en impression 3D élastomère, et la comparaison des performances mesurées avec les prédictions numériques. Aucun calendrier ni partenaire industriel n'est annoncé, et aucun acteur français ou européen n'est cité dans le résumé.

Recherche❖Paper

1 source

31

740arXiv cs.RO 

Estimation de pose 3D in situ par capteurs magnétiques et fusion IMU pour un robot continu modulaire souple à câbles

Une équipe de chercheurs propose, dans un preprint arXiv (2609.39950v1), une méthode de capteurs embarqués pour estimer la configuration 3D d'un robot continu souple à câbles (tendon-driven) et modulaire, sans caméra externe. Le système associe des centrales inertielles (IMU) et des champs magnétiques actifs. Les mesures angulaires des IMU sont fusionnées avec les références magnétiques afin d'affiner l'orientation locale de chaque segment et de limiter la dérive qui s'accumule en cours d'usage. L'estimation tourne à 16,7 Hz, une cadence suffisante pour un retour en temps réel. La validation repose sur une boucle fermée : la configuration estimée sert à maintenir l'effecteur à une position cible pendant qu'il interagit avec un objet. Le résumé ne donne ni précision de position, ni erreur angulaire, ni nombre de segments, ni comparaison chiffrée avec un système de capture de mouvement. Il s'agit d'un résultat de laboratoire, pas d'un produit ni d'un déploiement. L'enjeu est un verrou connu des robots continus : leur déformation continue rend la configuration difficile à reconstruire, et l'on compte d'ordinaire sur la vision externe, qui devient inutilisable dès que la scène est occultée. C'est le cas en chirurgie mini-invasive, en inspection de cavités ou en manipulation dans des espaces encombrés. Une proprioception intégrée au corps du robot, sans infrastructure de suivi, rapprocherait ces systèmes d'un usage hors laboratoire. La modularité compte aussi, car des capteurs répartis peuvent suivre l'ajout ou le retrait de segments. Deux réserves s'imposent. 16,7 Hz reste modeste pour des mouvements rapides ou des contacts dynamiques. Et les champs magnétiques actifs sont sensibles aux perturbations de leur environnement, notamment les pièces ferromagnétiques et les moteurs : c'est un point à vérifier hors d'un banc d'essai contrôlé, par exemple en atelier industriel ou en bloc opératoire. Ce travail s'inscrit dans une littérature déjà large sur l'estimation de forme des robots souples, qui s'appuie sur des fibres optiques à réseaux de Bragg (FBG), des capteurs résistifs ou capacitifs souples, des aimants avec magnétomètres, ou de la vision. Chaque approche a ses limites : coût et fragilité pour les fibres, dérive et hystérésis pour les capteurs souples, occultation pour la caméra. L'IMU seule dérive, notamment en lacet, et la référence magnétique sert précisément à corriger ce défaut. Les prochaines étapes à surveiller sont une validation chiffrée contre une référence externe, des essais sur des trajectoires plus rapides et sous perturbation magnétique, puis une intégration dans des applications médicales ou d'inspection. Aucun calendrier de pilote ni partenaire industriel n'est annoncé.

Recherche❖Paper

1 source

31

741arXiv cs.RO 

Contrôle passif de la raideur en manipulation aérienne suspendue par câbles grâce à des ancrages souples mobiles

Des chercheurs proposent une théorie quasi statique, prenant en compte la gravité, pour prédire et ajuster la raideur passive cartésienne d'une charge suspendue par des câbles à plusieurs drones. L'étude, publiée sur arXiv (2609.40102v1), considère chaque véhicule aérien comme un « ancrage compliant mobile ». Le modèle vaut pour un nombre quelconque de drones reliés à une charge ponctuelle par des câbles tendus, rectilignes et inextensibles. Autour d'un équilibre chargé par la gravité, la compliance de l'ancrage aérien et la compliance géométrique transversale du câble se combinent en série dans chaque branche. Les raideurs des branches s'additionnent ensuite en parallèle au niveau de la charge. Les auteurs ne donnent ni charge utile, ni nombre de drones testés, ni résultat expérimental chiffré dans ce résumé. Pour un comportement isotrope de l'ancrage aérien, chaque branche équivaut exactement à un câble élastique virtuel unilatéral. Cela fait apparaître une décomposition axiale/transversale de la raideur, gouvernée par la tension d'équilibre. L'ensemble définit une application non linéaire entre la configuration des ancrages commandés et la raideur passive de la charge. Sa différentielle permet de modifier localement cette raideur en repositionnant les drones, tout en préservant les contraintes. Pour les intégrateurs, l'intérêt est de traiter la raideur comme une variable de conception et de commande. Elle n'est plus un effet secondaire subi. La manipulation aérienne par câbles est légère et adaptée au transport coopératif et à l'interaction physique, par exemple le contact avec une structure ou la dépose précise d'une charge. Son comportement mécanique passif restait pourtant mal compris et peu exploité. Une formulation analytique ouvre la voie à une régulation de la compliance sans capteur d'effort supplémentaire. Ce point reste à démontrer, car il s'agit ici d'un travail théorique et de simulation, sans démonstrateur matériel annoncé. Les auteurs ont conscience des limites de leurs hypothèses (câbles inextensibles, régime quasi statique). Ils définissent donc un cadre de validation dynamique à corps rigides. Ce cadre inclut une commande non linéaire des véhicules, des tendons élastiques amortis et un contact avec l'environnement. Il sert à mesurer dans quelle mesure la raideur théorique reste prédictive hors du domaine du modèle. Cette étape décidera de la portée pratique des résultats. Les écarts dus à la dynamique des rotors, au mou des câbles ou aux perturbations aérodynamiques restent à quantifier. Le papier est une préimpression (v1), non relue par des pairs. Aucun calendrier d'essais en vol ni partenaire industriel n'est mentionné.

Recherche❖Paper

1 source

31

742arXiv cs.RO 

Apprendre à construire : assemblage robotique autonome de structures stables sans plans prédéfinis

Des chercheurs proposent un cadre d'assemblage robotique autonome capable de construire des structures stables sans plan architectural prédéfini. Au lieu de suivre un plan figé, la tâche de construction est décrite par des cibles à atteindre et des obstacles à éviter. Le système décide donc lui-même de l'ordre et du placement des éléments. Le module de décision est une politique d'apprentissage par renforcement (RL), entraînée par deep Q-learning avec « successor features », une représentation qui découple la dynamique de l'environnement de la fonction de récompense. Cette approche vise à faciliter le transfert d'une tâche à l'autre. L'évaluation, présentée comme une preuve de concept, porte sur un banc d'essai de 15 tâches d'assemblage 2D en blocs discrets. Des expériences ont aussi été menées sur un montage robotique réel en boucle fermée. Elles indiquent que la méthode fonctionne et tolère le bruit de construction, c'est-à-dire les imprécisions de pose et d'exécution lors de la pose des blocs. Le résumé ne donne ni taux de réussite, ni temps de cycle, ni nombre d'essais réels, ni identification du robot utilisé. L'intérêt tient au déplacement du problème. L'assemblage robotique industriel repose presque toujours sur une séquence connue à l'avance, ce qui limite sa robustesse dès que le terrain ou les pièces s'écartent du modèle. Une politique qui raisonne à partir d'objectifs et de contraintes, et qui corrige en boucle fermée, répond à l'incertitude propre au chantier, à la construction modulaire ou à la préfabrication in situ. Les limites sont toutefois nettes. Les tâches sont en 2D, avec des blocs discrets, loin des charges, des tolérances et des matériaux d'un site réel. Aucune comparaison avec des planificateurs classiques n'est annoncée. Le résultat reste un signal de recherche, sans lien avec un produit, un déploiement ou une démonstration à l'échelle. Ces travaux s'inscrivent dans un mouvement plus large qui remplace les pipelines de planification symbolique par des politiques apprises, qu'il s'agisse de RL ou de modèles vision-langage-action (VLA) pour la manipulation. L'assemblage de structures y reste un terrain moins exploré que la saisie ou le tri. La suite logique est le passage à la 3D, à des éléments hétérogènes et à des géométries plus riches, avec une validation sur des tâches physiques plus nombreuses. Il s'agit de la version 2 d'un preprint arXiv (2602.23934), qui n'a pas encore été publié après relecture par les pairs. Aucun partenaire industriel ni calendrier de pilote n'est mentionné.

Recherche❖Paper

1 source

31

743arXiv cs.RO 

BatSLAM 2.0 : reconnaissance de lieux par sonar vérifiée par séquences dans un graphe de poses robuste

Des chercheurs publient sur arXiv (v1, septembre 2026) BatSLAM 2.0, un système de SLAM (localisation et cartographie simultanées) qui n'utilise que du sonar. Il reprend le principe de BatSLAM, apparu il y a plus de dix ans. Un robot équipé d'un sonar binaural biomimétique, inspiré de l'écholocation des chauves-souris, y construisait une carte topologique en reconnaissant des lieux à partir des signaux acoustiques reçus. La nouvelle version repose sur trois blocs: un front-end acoustique mis à jour, un vérificateur de séquences qui suit et valide les candidats de fermeture de boucle, et un graphe de poses bâti sur un framework de graphes de facteurs haute performance. Le système est évalué en simulation et sur des enregistrements réels. Le résumé ne donne aucun chiffre (taux de précision, erreur de trajectoire, taille de carte, matériel, environnements précis), et il s'agit d'un préprint non évalué par les pairs, pas d'un produit. Le problème visé est connu: la reconnaissance de lieux par sonar est ambiguë par nature. Deux couloirs produisent des trains d'échos presque identiques, et une seule fermeture de boucle erronée peut faire s'effondrer la carte topologique. Plutôt que d'améliorer seulement la description acoustique, les auteurs déplacent la robustesse vers la vérification: une boucle n'est acceptée qu'après confirmation sur une séquence d'observations, puis intégrée dans un graphe robuste. Pour un intégrateur, l'intérêt est la navigation sans caméra ni LiDAR, utile dans le noir, la fumée ou la poussière. La portée reste à démontrer, faute de métriques publiées et de comparaison annoncée avec le SLAM visuel ou LiDAR. Les auteurs affirment une création de carte robuste, la résistance à l'effondrement et une bonne tenue à l'échelle, sans en quantifier la mesure. Cette approche s'inscrit dans la lignée des travaux bio-inspirés sur le sonar. Elle se place face au SLAM visuel et LiDAR, dominant en robotique mobile, et au sonar utilisé en milieu sous-marin. Le choix d'un graphe de facteurs suit la pratique courante de l'optimisation de poses, qui rend les fermetures de boucle plus faciles à vérifier ou à rejeter. Le résumé n'annonce ni code, ni jeu de données, ni pilote industriel. Les prochaines étapes à surveiller sont la publication des résultats chiffrés, une évaluation en environnements variés et d'éventuelles comparaisons avec des capteurs concurrents.

Recherche❖Paper

1 source

31

744Hackaday Robots Hacks 

Le robot sauteur Pogo-Bot passe en tout-terrain grâce à un pied souple

Des étudiants en ingénierie de l'Université de Toronto ont présenté un robot sauteur monopode qui combine la propulsion d'un quadricoptère et la mécanique d'un bâton sauteur (pogo stick). Quatre hélices fournissent l'énergie qui met l'engin en mouvement, mais le rebond lui-même repose uniquement sur une jambe unique à ressort, qui joue le rôle de train d'atterrissage. Le pied, doté de picots et monté sur pivot, est maintenu par ce qui ressemble à des bandes élastiques. Les premières versions se contentaient d'une pointe en bout de jambe, avec des échecs plutôt cocasses visibles dans la vidéo associée au projet. Le nouveau pied, plus large et plus adhérent, s'oriente selon le terrain. Le robot a été testé sur des surfaces allant du sable meuble à la glace dure, et il saute par-dessus des clôtures. Aucune donnée chiffrée n'a été publiée : ni masse, ni hauteur de saut, ni autonomie, ni taux de réussite. Il s'agit d'une démonstration de laboratoire étudiante, et non d'un produit ni d'un déploiement. L'intérêt tient à la question du contact avec le sol, souvent négligée dans la robotique aérienne hybride. Un drone qui se déplace uniquement en vol consomme beaucoup d'énergie pour de faibles distances. Un robot à pattes classique, lui, peine sur les surfaces glissantes ou déformables. Le saut propulsé tente de combiner les deux : les hélices apportent l'énergie et le contrôle d'attitude, et le ressort stocke et restitue l'énergie à chaque rebond. Ce travail montre surtout qu'un pied passif et adaptatif, sans capteurs ni actionneurs supplémentaires, peut résoudre une grande partie du problème de l'adhérence. C'est une piste à bas coût pour l'inspection ou l'exploration de terrains variés. Il faut toutefois rester prudent : sans mesures comparatives, avec des vidéos probablement sélectionnées, on ignore la robustesse réelle du système, et aucun intégrateur ne pourrait encore en tirer un cahier des charges. Le monopode n'est pas une nouveauté. On a déjà vu des robots à une jambe qui utilisent leur patte seule, ainsi que des versions ailées. Cette configuration quadricoptère à jambe unique serait, selon la source, la première observée à affronter un hiver canadien. Le modèle de référence reste celui des sauteurs à ressort développés dans les laboratoires universitaires depuis les années 1980, auxquels s'ajoutent des hybrides vol-marche plus récents. Aucune suite n'est annoncée. Les prochaines étapes logiques seraient la publication de mesures de performance, une étude de la consommation énergétique par rapport à un drone ou à un robot à roues, et un test sur terrain réellement accidenté.

Recherche❖Paper

1 source

36

745Interesting Engineering 

Une flotte de robots humanoïdes mise hors service : un saut spectaculaire dans l'acier en fusion, façon Terminator

Figure a détruit une grande partie de sa flotte de robots humanoïdes F.02 en les envoyant sauter, de façon autonome, dans un four à arc électrique de 75 tonnes dans une fonderie d'Imatra, en Finlande. Les images ont été relayées le 30 septembre 2026 par le PDG Brett Adcock, qui précise que la scène n'est pas générée numériquement : les robots ont bien été expédiés sur place et ont effectué eux-mêmes le saut. L'opération s'est déroulée sur une fenêtre de 24 heures, avec seulement six cycles de fusion, chacun offrant environ 20 minutes avant que l'acier ne forme une croûte solide. Caméras et électronique ont lâché sous la chaleur et les champs électromagnétiques, mais Figure affirme que les robots ont poursuivi l'exécution de leurs politiques de mouvement entraînées. Les barres de métal récupérées ont été renvoyées aux États-Unis pour être usinées en une série limitée d'objets commémoratifs. Quelques F.02 restent stockés au siège de San Jose. Pour un lecteur du secteur, l'intérêt tient moins au spectacle qu'à ce qu'il révèle. Figure présente l'épisode comme une démonstration de contrôle autonome en conditions extrêmes : une politique apprise en simulation, entraînée sur des sauts depuis un premier étage avec des airbags et des cascadeurs comme références de mouvement, qui doit amener le robot dans une zone d'atterrissage précise sur un site jamais testé avant l'expédition. C'est un cas de transfert sim-to-real plutôt convaincant, mais il faut le lire avec prudence : il s'agit d'un mouvement balistique unique et répété, sans manipulation, et Figure ne publie ni taux de réussite ni nombre d'essais. L'épisode illustre aussi un point rarement évoqué, celui de la fin de vie des flottes humanoïdes. Les batteries lithium-ion ont fait refuser le projet par des installations américaines et mexicaines, et le démontage de chaque unité aurait mobilisé des heures d'ingénierie nécessaires au futur F.04, tout en posant un risque pour la propriété intellectuelle des composants sur mesure. C'est aussi, à l'évidence, une opération de communication, que le soutien d'Arnold Schwarzenegger et l'aide d'anciens de MythBusters rendent très assumée. Côté contexte, Figure a présenté le F.03 en octobre 2025 comme plateforme de nouvelle génération, avec un système sensoriel et des mains repensés pour Helix, son modèle vision-langage-action propriétaire. Cette version ajoute des matériaux extérieurs plus souples, la recharge sans fil, un meilleur système audio et des améliorations de sécurité des batteries, des choix orientés vers l'usage domestique et le travail à proximité de personnes. Le F.02 est désormais remplacé par le F.03, et le F.04 est déjà en préparation, ce qui confirme le rythme de renouvellement rapide de la société. Face à elle, Tesla avec Optimus et d'autres acteurs américains et chinois poursuivent des cadences comparables, tandis que les acteurs européens, comme Wandercraft ou Enchanted Tools, avancent sur des trajectoires plus mesurées. Figure n'a pas indiqué combien d'unités F.02 ont été détruites, ni combien de robots ont été déployés chez des clients au cours de leur vie opérationnelle.

Humanoïdes⚡Actu

1 source

40

746Robotics & Automation News 

Comau développe un système robotisé de préparation de commandes pour l'e-commerce de Decathlon

Comau, groupe italien d'automatisation industrielle, a conçu et validé un système de préparation de commandes testé dans les opérations logistiques e-commerce de Decathlon. Les essais s'inscrivent dans MASTERLY, une initiative européenne qui vise à faire passer l'industrie de la production de masse classique à des systèmes flexibles et personnalisés. La solution repose sur le cobot MyCo de Comau, piloté par une architecture logicielle ROS2, et associe des capteurs intelligents à une couche de perception. Le communiqué disponible ne donne ni cadence, ni taux de prise réussie, ni nombre de références manipulées, ni durée ou site précis du test. Il s'agit donc d'un pilote validé en conditions d'essai, pas d'un déploiement commercial annoncé. L'intérêt est moins technologique que démonstratif. La préparation de commandes e-commerce, avec ses milliers de références hétérogènes et ses pics saisonniers, reste l'un des derniers maillons peu automatisés de l'entrepôt. Un cobot standard sur une pile logicielle ouverte ROS2 laisse espérer un coût d'intégration plus faible que des cellules propriétaires, un point à surveiller pour les intégrateurs. Sans métriques publiées, la question de l'écart entre démonstration et exploitation reste entière. Côté contexte, Comau s'appuie sur sa gamme de cobots et sur des programmes européens pour valider des cas d'usage hors de l'automobile. Decathlon, enseigne française, fournit un terrain logistique réel. Le segment du picking robotisé est déjà occupé par des acteurs comme Exotec (France, systèmes goods-to-person), RightHand Robotics ou Dexterity. La suite dépendra d'éventuels résultats chiffrés et d'un passage à l'échelle sur plusieurs sites, aucun n'étant annoncé à ce stade.

Industriel⚡Actu

1 source

36

747Interesting Engineering 

Un robot aérien bio-inspiré amerrit en douceur et se transforme en voilier autonome

Des chercheurs de la Singapore University of Technology and Design (SUTD) et du MIT ont présenté ALBATROSS (Airborne Lander with Buoyant AuToROtating Sailing Sensor), un robot hybride d'environ 1 kg qui descend du ciel en autorotation, se pose sur l'eau puis fonctionne comme un voilier autonome. Pendant la chute, deux ailes-voiles rigides tournent passivement, à la manière d'une samare d'érable, et ramènent la vitesse de descente à environ 7 m/s, soit une énergie d'impact divisée par 18. À l'amerrissage, le robot se redresse passivement et réutilise ces mêmes ailes comme voiles, sans mécanisme de morphing actif. Un gouvernail caudal inspiré de la nageoire de poisson prend le relais : il oscille pour propulser l'engin jusqu'à 0,4 m/s quand le vent tombe, et sert à remonter au vent dans le cas contraire. L'ensemble se limite à trois actionneurs et trois capteurs principaux, pour un taux d'utilisation effective de la masse de 91 % entre air et eau. Les essais de terrain ont eu lieu sur deux réservoirs de Singapour, avec des largages depuis 150 mètres d'altitude, suivis d'une navigation autonome pilotée par un contrôleur à règles (Rule-Based). Des simulations indiquent qu'un contrôleur par apprentissage par renforcement pourrait réaliser des missions à waypoints complexes, mais ce résultat n'a pas été démontré en conditions réelles. L'intérêt tient à l'économie de moyens. Les drones amphibies ou aéro-aquatiques classiques cumulent en général moteurs de sustentation et propulsion immergée, donc masse, complexité et coût. Ici, chaque organe remplit deux fonctions, ce qui ouvre la voie à des capteurs déployables à bas coût pour la surveillance climatique, la qualité de l'eau ou la réponse aux catastrophes, où l'on cherche à poser rapidement des points de mesure sur une zone étendue. Il faut néanmoins relativiser : il s'agit d'un prototype académique, sans chiffre de charge utile, d'autonomie, de tenue à la mer ni de coût unitaire. Les essais se sont déroulés sur des réservoirs abrités, bien loin des vagues et des vents du large, et la vitesse de 0,4 m/s montre que la propulsion de secours ne sert qu'à corriger, pas à tenir un cap contre un courant sérieux. La démonstration de l'apprentissage par renforcement reste purement simulée, ce qui laisse entière la question du transfert sim-to-real. Le résultat prouve la viabilité du concept, pas encore celle d'un produit. Ce travail s'inscrit dans la robotique multimodale, qui cherche à combiner plusieurs modes de locomotion dans une seule plateforme. Les auteurs, dans un commentaire d'accompagnement, défendent l'idée que la nature est une bibliothèque de mécanismes à recombiner plutôt qu'un plan à copier : ici la samare pour l'air, la nageoire pour l'eau, deux solutions que l'évolution n'a jamais réunies. Le positionnement concurrentiel est celui de la recherche, sans acteur industriel identifié, et aucun acteur français ou européen n'est cité. Les suites logiques seraient des essais en mer ouverte, un largage depuis un drone ou un ballon plutôt qu'une hauteur fixe, l'ajout de charges utiles de mesure et la validation en conditions réelles d'un pilotage appris. Aucun calendrier de pilote ni de commercialisation n'a été annoncé.

Recherche❖Paper

1 source

39

748Interesting Engineering 

Vidéo : un nouveau robot humanoïde vide le linge et plie des serviettes sans aide humaine

Dyna Robotics, start-up californienne, a présenté le 29 septembre 2026 Dyna-2.1, qu'elle qualifie d'« agent physique » capable d'enchaîner de très longs flux de travail avec l'ensemble du corps, sans intervention humaine. La démonstration, en vidéo non coupée selon l'entreprise, se déroule dans une laverie commerciale. Le robot charge et démarre lui-même lave-linge et sèche-linge, se penche pour extraire les serviettes du fond d'un sèche-linge et les transfère dans un panier. Il les secoue pour les mettre à plat, les plie, les trie par taille en piles, puis les range sur des étagères en s'accroupissant pour les niveaux bas ou en tendant les bras vers les niveaux hauts. Il récupère une serviette tombée au sol et, après une prise ratée, abandonne la tentative pour en refaire une. Côté matériel, la machine est un « semi-humanoïde » : un torse et deux bras montés sur une base à quatre roues directrices, avec pinces parallèles ou mains dextres au choix. Un orchestrateur vision-langage planifie le flux, un contrôleur du corps entier coordonne déplacement et mouvements des bras, et le tout repose sur Dyna-2, un « world action model » propriétaire entraîné, selon l'entreprise, sur un million d'heures de données humaines et robotiques. Dyna affirme déployer le robot dans des hôtels, des laveries et des restaurants, sans chiffrer le nombre d'unités, les sites ni le prix. L'intérêt tient moins à la dextérité, déjà montrée par d'autres, qu'au choix de mesure. Dyna met en avant le MTBI (Mean Time Between Interventions), c'est-à-dire la durée de fonctionnement avant qu'un humain doive intervenir, plutôt que le taux de réussite d'une tâche isolée. C'est l'indicateur qui compte pour un exploitant : un poste complet sans « baby-sitter », comme le dit le CEO Lindon Gao. Il déplace la discussion de la démo vers la fiabilité opérationnelle, là où se joue l'écart entre vidéo et réalité. Le choix d'une base à roues, qui évite le problème d'équilibre de la marche bipède, illustre aussi un pari pragmatique : pour la logistique, l'hôtellerie ou la blanchisserie, la forme humanoïde complète n'est pas nécessairement utile. Il faut toutefois rester prudent : Dyna ne publie aucune valeur de MTBI, ni durée de la séquence, ni taux d'interventions. Une vidéo unique en environnement contrôlé ne prouve pas la fiabilité sur un poste de huit heures, et les déploiements évoqués restent non documentés. Dyna Robotics s'inscrit dans la vague des modèles fondation pour la manipulation, aux côtés de Physical Intelligence (Pi-0), de Figure (Helix) ou de NVIDIA (GR00T), avec un positionnement plus commercial que la plupart : des tâches de service à valeur immédiate plutôt qu'un humanoïde généraliste. Sa stratégie rejoint celle des bases mobiles à deux bras, concurrentes directes des humanoïdes marchants pour les usages en intérieur. L'entreprise décrit une boucle d'amélioration continue : les traces de décision de l'orchestrateur et les charges articulaires du contrôleur sont réinjectées pour allonger le temps entre interventions. La suite se jugera sur des chiffres de MTBI vérifiables, des clients nommés et des volumes de déploiement, aucun de ces éléments n'étant encore public.

IA physique❧Opinion

1 source

33

749Robotics Business Review 

Innodata ouvre un laboratoire de capture de mouvement pour rendre les robots humanoïdes plus proches des gestes humains

Innodata, société new-yorkaise de data engineering fondée en 1988 et basée à Ridgefield Park (New Jersey), a annoncé l'ouverture d'un laboratoire de capture de mouvement destiné à produire des données d'entraînement pour l'IA physique. L'installation doit aussi valider de façon indépendante les données de performance que les robots génèrent en interne. Elle couvre des humanoïdes, du matériel téléopéré, des systèmes portables, des rigs de capteurs, des pinces UMI (Universal Manipulator Interface) et d'autres dispositifs de capture multimodaux. Selon Franklin Tanner, vice-président robotique et IA physique, Innodata capte le mouvement 3D directement sur les corps, humains ou mécaniques, plutôt que de l'inférer à partir de vidéos 2D comme le font d'autres fournisseurs. Les capteurs enregistrent chaque articulation, ce qui compte pour des humanoïdes pesant près de 90,7 kg (200 lb). Les données réelles servent ensuite d'amorce à des jumeaux numériques et à des simulations qui génèrent des cas limites. Le PDG Rahul Singhal parle d'une offre « de bout en bout », de la collecte à l'évaluation des modèles. Aucun volume de données, nombre de capteurs, tarif ni client n'a été communiqué. Le message adressé aux équipes robotiques est que la donnée est devenue le goulot d'étranglement, davantage que le matériel. Contrairement aux LLM, qui ont profité de l'immense corpus du web, l'IA physique manque de données d'interaction. Tanner résume : elle doit « gagner ses tokens une interaction à la fois ». L'exemple de la tasse le montre : saisir une tasse par l'anse ou par la base n'a pas la même conséquence si elle contient un liquide brûlant, et ce contexte est rarement encodé dans les jeux de données existants. L'offre de validation indépendante vise un autre point sensible du secteur, la difficulté de vérifier les métriques que les constructeurs publient eux-mêmes. Pour un intégrateur ou un décideur industriel, un tiers capable de mesurer la précision cinématique serait utile, à condition que la méthodologie soit publiée. Il faut par ailleurs relativiser : l'argument selon lequel la capture 3D directe surpasse l'inférence vidéo vient du prestataire lui-même, sans comparatif chiffré. Tanner reconnaît d'ailleurs que la collecte « en conditions réelles » reste très coûteuse et qu'il faut s'appuyer sur la simulation pour couvrir la variabilité. Ce lancement s'inscrit dans la montée d'un marché de la donnée robotique, où se positionnent aussi des spécialistes du téléopéré et de la capture égocentrique, tandis que les grands acteurs (Tesla avec Optimus, Figure, Nvidia avec GR00T, Physical Intelligence avec Pi-0) constituent leurs propres corpus en interne. Innodata, historiquement acteur de la donnée pour l'IA générative, cherche ici à transposer son savoir-faire d'annotation et d'évaluation vers la robotique. Il s'agit pour l'instant d'une ouverture de site : aucun client ni pilote n'est nommé, et la valeur réelle dépendra des contrats signés et de la qualité des jeux de données livrés. Le sujet de l'IA physique et des humanoïdes sera au programme de RoboBusiness, les 20 et 21 octobre 2026 à Santa Clara, en Californie.

Infrastructure⚡Actu

1 source

47

750Pandaily 

AgiBot livre son 20 000e robot, dont plus de 300 unités sont déployées au parc Chimelong Spaceship

AgiBot a livré le 24 septembre son 20 000e robot humanoïde polyvalent, un Expedition A3 Ultra remis à Chimelong Group lors de la réouverture du Chimelong Spaceship Park, à Hengqin (Zhuhai). Le même jour, plus de 300 robots du constructeur ont pris leur service régulier dans ce parc intérieur. Selon AgiBot, la cadence a nettement accéléré : six prototypes en 2023, production en volume lancée en août 2024, 1 000 unités en janvier 2025, 5 000 fin 2025, 10 000 en mars 2026 et 15 000 en juin (cette unité étant partie sur une ligne de production de Longcheer). Passer de 10 000 à 20 000 a pris environ six mois. L'A3 Ultra mesure 174 cm, avec un châssis en alliage de magnésium et nylon renforcé fibre de carbone, une perception à 360 degrés, un positionnement fusionnant UWB et RTK, une plateforme de calcul de 700 TOPS et des mains dextres à retour tactile omnidirectionnel de 20 degrés de liberté. Il cible la livraison, le portage, le tri et le réapprovisionnement. Dans le parc, les robots couvrent sept scénarios (spectacles, médiation scientifique, guidage, vente, compagnie, service hôtelier, sport) sur plus de 100 points d'interaction, en plusieurs langues et dialectes. Le modèle WITA relie langage, vision, parole et mouvement pour détecter les visiteurs qui approchent, tandis que la plateforme LinkSoul personnalise voix, expressions, personnalité, gestes et costume selon les personnages de Chimelong. China Mobile a fourni un réseau 5G-Advanced avec découpage en tranches (network slicing), équipements d'edge sur site et isolation de sécurité pour séparer le trafic des robots de celui des visiteurs. L'intérêt de l'annonce tient moins à la démonstration qu'au volume et à la nature du déploiement. Plus de 300 unités opérant ensemble dans un lieu recevant du public relèvent de la gestion de flotte, de la connectivité à faible latence et de la personnalisation à grande échelle, bien au-delà du pilote de quelques machines. Le chiffre de 20 000 livraisons place AgiBot parmi les rares acteurs à afficher des volumes à cinq chiffres, là où la plupart des concurrents occidentaux en sont à des séries pilotes. Il faut toutefois lire ces données avec prudence : ce sont des chiffres communiqués par l'entreprise, sans détail sur la part de robots effectivement en production continue, ni sur le taux de disponibilité, l'autonomie réelle ou le niveau de téléopération. Un parc d'attractions est aussi un environnement contrôlé, où l'interaction et le spectacle priment sur la manipulation exigeante. Les deux unités jalons, l'une en usine chez Longcheer, l'autre en divertissement, illustrent néanmoins une double thèse : le marché chinois absorbe des humanoïdes à la fois comme main-d'œuvre industrielle et comme vecteur d'expérience client. Ce résultat s'inscrit dans une montée en cadence rapide du secteur chinois, où AgiBot rivalise avec Unitree, UBTech et d'autres sur les volumes, quand Figure, Tesla (Optimus) et Agility misent sur des déploiements industriels plus ciblés et moins nombreux. Le partenariat avec Chimelong, signé en août, a donné lieu à un mois de livraisons concentrées, et les deux groupes créent un institut de recherche conjoint sur l'IA incarnée appliquée au tourisme, couvrant adaptation aux scénarios, algorithmes, création de contenu et validation commerciale. Le PDG Deng Taihua parle d'un simple point de départ pour dix ans de collaboration. Reste à voir si ce modèle, à base d'intégration réseau et de personnalisation des personnages, se réplique hors du tourisme et hors de Chine, notamment auprès d'opérateurs européens de loisirs et de sites industriels.

Chine/Asie⚡Actu

1 source