Aller au contenu principal

Actualités robotique — page 68

7 309 articles au fil, du plus récent au plus ancien.

Vers une cognition incarnée chez les robots grâce à des mondes synthétiques ancrés dans l'espace
3351arXiv cs.RO 

Vers une cognition incarnée chez les robots grâce à des mondes synthétiques ancrés dans l'espace

Résumé traduit en français, à publier : Une équipe de recherche présente un cadre conceptuel destiné à entraîner des modèles vision-langage (VLM) à réaliser de la prise de perspective visuelle, une capacité jugée essentielle à la cognition incarnée dans l'interaction homme-robot. Pour amorcer ce travail, les auteurs publient un jeu de données synthétique généré dans NVIDIA Omniverse, conçu pour l'apprentissage supervisé de tâches de raisonnement spatial. Chaque exemple associe une image RGB, une description en langage naturel et une matrice de transformation 4x4 servant de vérité terrain pour la pose d'un objet. La première étape se limite à l'inférence de la distance sur l'axe Z ; les auteurs annoncent vouloir étendre l'approche à un raisonnement complet sur les 6 degrés de liberté (DOF) dans de futurs travaux. Le jeu de données est mis à disposition publiquement pour la communauté de recherche. La prise de perspective visuelle est une brique jugée fondamentale pour qu'un robot comprenne non pas seulement ce que voit sa propre caméra, mais ce qu'un humain perçoit depuis son propre point de vue, une condition posée comme nécessaire à une interaction homme-robot naturelle. Le choix de générer les données dans un simulateur plutôt que de les collecter en conditions réelles répond à un problème classique du secteur : produire des annotations 3D précises (pose exacte d'un objet) est coûteux et peu fiable dans le monde réel, alors qu'un environnement synthétique comme Omniverse fournit une vérité terrain exacte par construction. Ce travail illustre aussi une limite persistante des VLM génériques actuels, plutôt performants en reconnaissance sémantique 2D mais fragiles dès qu'il s'agit de raisonnement spatial 3D précis, une distinction que les auteurs eux-mêmes reconnaissent en limitant leur preuve de concept au seul axe Z plutôt qu'aux 6 DOF complets. Il s'agit donc d'un jalon de recherche exploratoire, pas d'un système prêt à être intégré par des équipes robotique en production. Ce travail s'inscrit dans une tendance de fond où les plateformes de simulation comme NVIDIA Omniverse et Isaac Sim deviennent des outils centraux de génération de données pour la robotique incarnée, dans un paysage où d'autres laboratoires (Physical Intelligence avec Pi-0, NVIDIA avec GR00T, Figure avec Helix) développent en parallèle des modèles vision-langage-action visant à doter les robots humanoïdes d'un raisonnement spatial et manipulatoire directement exploitable. La suite annoncée par les auteurs consiste à faire passer leur approche de l'estimation d'une simple distance à un raisonnement complet sur les 6 degrés de liberté d'une pose d'objet, une extension nécessaire avant d'envisager une application concrète en interaction homme-robot.

RecherchePaper
1 source
DC-WAM : supervision et raisonnement visuels centrés sur la dynamique pour les modèles monde-action
3352arXiv cs.RO 

DC-WAM : supervision et raisonnement visuels centrés sur la dynamique pour les modèles monde-action

Une nouvelle publication arXiv (2607.25918v1) présente DC-WAM (Dynamic-Centric World-Action Model), un framework qui repense la manière dont les modèles monde-action (WAM) utilisés pour piloter des robots doivent exploiter la vidéo prédictive. Les WAM couplent une politique de contrôle à une prédiction du futur visuel de la scène, mais jusqu'ici la question de ce que cette modalité vidéo doit réellement apprendre restait ouverte : une prédiction photoréaliste dense coûte cher en calcul et gaspille de la capacité sur la texture, l'éclairage ou l'arrière-plan, des éléments peu liés à la décision d'action. DC-WAM redistribue la supervision et le calcul de la branche vidéo RGB sans ajouter d'entrée ou de prédiction supplémentaire au déploiement. Concrètement, la méthode combine un appariement de flux par différence temporelle avec une pondération guidée par la trajectoire, pour concentrer l'apprentissage sur les changements denses et les zones où la pince, les objets manipulés et les points de contact bougent. Un second mécanisme, DynaRoute, prédit une pertinence dynamique token par token et la convertit en biais d'attention pour orienter le modèle vers les tokens futurs réellement utiles au contrôle. L'intérêt principal tient à la validation expérimentale : en simulation comme sur des tâches réelles de manipulation, DC-WAM améliore systématiquement la performance des politiques, avec un gain particulièrement marqué sous perturbations hors distribution (changements d'éclairage, d'apparence des objets, de texture de fond). Cela conforte une intuition déjà présente dans les WAM efficaces récents : le bénéfice de la branche vidéo ne vient pas tant du rendu futur en lui-même que des représentations visuelles orientées contrôle qu'elle induit pendant l'entraînement. Pour les équipes qui développent des politiques robotiques génériques, c'est un argument concret contre le tout-photoréaliste et en faveur d'une supervision ciblée sur la dynamique d'interaction, un axe pertinent face à l'écart classique entre performance en démonstration et robustesse en conditions réelles. DC-WAM s'inscrit dans la lignée des travaux sur les modèles monde appliqués au contrôle robotique et sur les architectures vision-langage-action (VLA), où plusieurs équipes cherchent à réduire le coût de la prédiction future tout en conservant son bénéfice pour l'apprentissage de politiques. La démarche des auteurs consiste à repartir d'un WAM RGB existant plutôt que d'ajouter une modalité dédiée, une approche incrémentale qui vise l'adoption pratique plutôt que la rupture architecturale. Le papier ne précise pas de partenaire industriel ni de calendrier de déploiement : il s'agit à ce stade d'un résultat de recherche, dont la prochaine étape logique serait une évaluation sur des plateformes robotiques plus variées et des tâches de manipulation plus complexes.

RecherchePaper
1 source
Robots à levées de Lévy émergentes : exploration décentralisée et scalable avec capteurs minimaux
3353arXiv cs.RO 

Robots à levées de Lévy émergentes : exploration décentralisée et scalable avec capteurs minimaux

Des chercheurs présentent un nouveau contrôleur de navigation, baptisé SDLW (sensor-driven Lévy walk), conçu pour des nano-drones de moins de 50 grammes dotés de capteurs minimalistes. La méthode combine un tirage aléatoire de la longueur des déplacements selon une marche de Lévy avec une politique de cap réactive basée sur des mesures de distance directionnelles simples. Chaque appareil échantillonne indépendamment son exposant de Lévy dans une distribution uniforme, ce qui diversifie l'exploration sans nécessiter la moindre communication inter-robots. Le cap est ensuite choisi via une distribution de von Mises qui privilégie les directions dégagées tout en conservant les propriétés de superdiffusion propres à la marche de Lévy. Testé en simulation, le contrôleur améliore la couverture de zone de 79,6% dans des arènes ouvertes, 43,1% dans des environnements de type pièces-et-couloirs, et 13,6% en milieu encombré, par rapport à une marche de Lévy à cap uniforme classique. Les collisions reculent respectivement de 13,0%, 7,1% et 1,4% selon ces mêmes scénarios. L'intérêt de l'approche tient à sa frugalité : elle atteint ces gains à coût de calcul constant, sans coordination centralisée ni échange de messages entre appareils, ce qui la rend directement compatible avec le budget énergétique et computationnel très serré des nano-drones actuels. Pour des applications comme la recherche et sauvetage, l'inspection de sites dangereux ou la surveillance de zones étendues, cela ouvre la voie à des essaims low-cost purement décentralisés, capables de passer à l'échelle sans infrastructure de communication ni supervision, un angle mort des approches multi-robots plus lourdes qui reposent souvent sur du SLAM embarqué ou des liaisons radio permanentes. Cette piste s'inscrit dans une longue tradition de recherche en robotique s'inspirant des stratégies de fourragement animal, où la marche de Lévy est connue pour optimiser la recherche de ressources rares dans un environnement inconnu. Les auteurs se positionnent en alternative aux méthodes d'exploration coopérative nécessitant cartographie partagée ou communication inter-robots, généralement hors de portée du matériel ultra-léger. Les résultats restent toutefois cantonnés à la simulation ; une validation sur essaim physique de nano-UAV serait l'étape logique suivante pour confirmer la robustesse de l'approche face au bruit réel des capteurs.

RecherchePaper
1 source
Cadre de politique adaptatif au contexte pour une manipulation robotique robuste et réactive via apprentissage par imitation sensible à l'incertitude
3354arXiv cs.RO 

Cadre de politique adaptatif au contexte pour une manipulation robotique robuste et réactive via apprentissage par imitation sensible à l'incertitude

Une nouvelle version (v2) de l'article arXiv:2410.24035 propose un cadre de politique adaptatif au contexte pour la manipulation robotique, combinant robustesse et réactivité. Les auteurs s'appuient sur l'apprentissage par démonstration (Learning from Demonstration, LfD), et plus précisément sur les approches basées sur des systèmes dynamiques (DS), pour apprendre une politique conditionnée à la fois par l'état du robot et par des paramètres de tâche de basse dimension représentant le contexte environnant. Cette politique est ensuite combinée à des politiques additionnelles sensibles à l'incertitude via une formulation de type mélange d'experts (Mixture of Experts, MoE). Le système est validé sur le jeu de données de référence LASA handwriting, utilisé classiquement pour évaluer l'apprentissage de trajectoires, ainsi que sur un robot réel à 7 degrés de liberté (7-DoF), dans trois scénarios concrets : la saisie conditionnée par la force appliquée, la manipulation d'aliments déformables, et la saisie centrée sur l'objet. L'enjeu technique visé est précis : les approches DS de l'état de l'art excellent généralement en robustesse mais restent rigides face aux variations de contexte, car elles ne modulent pas leur comportement selon des variables dépendantes de la tâche. En articulant fusion de politiques et quantification d'incertitude, ce cadre cherche à améliorer le comportement hors distribution (out-of-distribution) et la convergence des trajectoires générées, deux propriétés critiques pour tout déploiement en environnement réel non contrôlé. Pour les intégrateurs robotiques, l'intérêt pratique tient surtout à la manipulation d'objets déformables, un cas d'usage encore mal résolu dans l'industrie (agroalimentaire, logistique), et à la promesse d'une politique réutilisable sans réentraînement complet à chaque changement de tâche ou d'environnement. Sur le plan du contexte scientifique, le LfD via systèmes dynamiques est un axe de recherche établi depuis plusieurs années pour produire des politiques de contrôle réactives en robotique. Ce travail se positionne comme une extension de recherches antérieures sur la fusion de politiques et l'estimation d'incertitude, plutôt que comme une rupture méthodologique. L'abstract ne mentionne ni laboratoire ni entreprise associée, et il s'agit d'une publication académique (statut « replace », donc une révision d'un article déjà soumis) sans indication de déploiement industriel à ce stade.

RecherchePaper
1 source
Décomposer et réorganiser : planification par primitives et politiques visuomotrices apprises par démonstration
3355arXiv cs.RO 

Décomposer et réorganiser : planification par primitives et politiques visuomotrices apprises par démonstration

Traduction/résumé en cours, article de recherche robotique (arXiv), pas de deploiement produit, j'adapte la structure à ce contenu académique. Une équipe de chercheurs propose DR-LfD (Decomposed and Reorganized Skills Learned from Demonstrations), un nouveau cadre pour la manipulation robotique dextre à long horizon, détaillé dans un article publié sur arXiv (référence 2607.25397v1). Le système décompose des démonstrations humaines en compétences élémentaires ("atomic skills"), identifiées à partir des relations de contact entre le robot et les objets manipulés. Chaque compétence est ensuite reproduite soit sous forme de politique visuomotrice (un modèle qui associe directement perception visuelle et commande motrice), soit sous forme de primitive centrée sur l'objet. Ces briques sont intégrées dans un système de planification de tâches et de mouvements (TAMP), avec un modélisation précise des conditions de déclenchement, d'arrêt et des contraintes de chaque politique. Les auteurs ont testé leur approche sur des bancs d'essai réels et simulés couvrant des scénarios variés, incluant des tâches à étapes multiples, des configurations inédites et des contraintes physiques spécifiques. L'enjeu principal est de résoudre une tension classique du secteur : les méthodes de planification symbolique (TAMP) excellent en raisonnement de haut niveau mais deviennent fragiles dès que les opérations impliquent des contacts complexes, tandis que l'apprentissage par imitation (IL) gère bien le retour visuel mais généralise mal dans l'espace et peine sur les tâches multi-étapes. En combinant les deux, DR-LfD change surtout l'économie des données d'entraînement : au lieu de nécessiter un volume de démonstrations qui croît de façon exponentielle avec le nombre de séquences de tâches possibles, le besoin en données ne dépend plus que du nombre de types de compétences distincts, chacune nécessitant relativement peu d'exemples. C'est une piste concrète pour réduire le coût d'apprentissage sur des tâches longues et variées, un frein connu au déploiement de politiques visuomotrices à l'échelle industrielle. Le travail s'inscrit dans la lignée des recherches cherchant à réconcilier planification symbolique et apprentissage par démonstration, deux approches historiquement développées séparément dans la littérature robotique. Les auteurs mettent en avant la capacité de leur méthode à réorganiser des compétences apprises depuis des sources différentes, un point clé pour la modularité. Le site du projet (dr-lfd.github.io) propose des démonstrations complémentaires à l'article.

RecherchePaper
1 source
Station holding égocentrique d'un poisson robotique dans un écoulement turbulent inconnu
3356arXiv cs.RO 

Station holding égocentrique d'un poisson robotique dans un écoulement turbulent inconnu

Des chercheurs présentent SWiFT (Swimming With Flow Toolbox), un cadre d'apprentissage par renforcement permettant à un poisson robotique de type BCF (corps et nageoire caudale) de maintenir sa position dans un courant turbulent inconnu, sans capteur de flux dédié. Le système combine un banc d'essai en canal hydraulique avec nage libre, un simulateur de mécanique des fluides numérique (CFD) conçu pour rester physiquement cohérent tout en restant efficace en calcul, et un pipeline de transfert simulation vers réel. La politique de contrôle obtenue s'appuie uniquement sur un retour égocentrique, c'est à dire la perception du robot sur son propre état, sans mesure explicite du courant environnant. Selon les auteurs, elle dépasse les méthodes de référence existantes sur l'ensemble des métriques testées, avec une amélioration notable de l'erreur quadratique moyenne (RMSE) sur la distance à la position cible. L'article, publié sur arXiv fin juillet 2026, reste un préprint de recherche et non un produit ou un système déployé en conditions réelles. L'enjeu est significatif pour la robotique sous marine: tenir une station fixe face à un courant est une brique de base pour l'inspection de structures, la surveillance environnementale ou l'intervention en eaux naturelles, un environnement bien plus imprévisible que les bassins contrôlés où la plupart des poissons robotiques ont jusqu'ici été testés. Le résultat suggère qu'un contrôle purement égocentrique suffit à répliquer un comportement proche de la rhéotaxie observée chez les poissons biologiques, ce qui simplifierait l'instrumentation nécessaire sur de futurs robots sous-marins tout en améliorant leur robustesse face à des flux non caractérisés à l'avance. Ce travail s'inscrit dans une lignée de recherches sur l'efficacité et la maniabilité des poissons robotiques, un domaine actif depuis plusieurs décennies mais où la tenue de station en flux inconnu restait peu explorée, faute de modèles fiables des interactions fluide-structure fortement non linéaires en nage libre. Les auteurs positionnent SWiFT comme une fondation réutilisable pour des tâches de nage plus complexes, avec pour prochaine étape l'extension à d'autres scénarios de manœuvre en environnement turbulent réel.

RecherchePaper
1 source
SONG : une plateforme de simulation 3D en Gaussian Splatting photoréaliste pour évaluer la navigation sociale
3357arXiv cs.RO 

SONG : une plateforme de simulation 3D en Gaussian Splatting photoréaliste pour évaluer la navigation sociale

Sortie automatisée de mouvements corporels complets à partir de ces trajectoires. Un chercheur propose SONG, une plateforme de simulation pour la navigation sociale robotique, construite sur le 3D Gaussian Splatting (3DGS), une technique de rendu photoréaliste qui reconstruit à la fois les scènes et les avatars humains évoluant dedans. Les piétons virtuels ne suivent pas des scripts fixes: leurs trajectoires sont générées par un grand modèle de langage de façon sémantiquement cohérente, puis converties en mouvements corporels continus via un générateur conditionné par trajectoire. Autour de cette plateforme, les auteurs construisent SONG-Bench, un ensemble de scénarios d'évaluation classés par niveau de difficulté, associé à une suite de métriques multidimensionnelles couvrant l'efficacité du déplacement, la sécurité et le respect des conventions sociales. Le travail est décrit dans un article déposé sur arXiv (2607.25219v1) comme une nouvelle soumission. L'enjeu dépasse le simple outil de test. Jusqu'ici, les simulateurs de navigation sociale souffraient d'un compromis frustrant: soit ils offraient des observations visuelles pauvres, soit ils manquaient d'avatars humains mobiles, soit leur rendu et le comportement des piétons restaient trop éloignés du réel pour valider des algorithmes de navigation guidés uniquement par la vision embarquée. En évaluant des méthodes de référence sur SONG-Bench, les auteurs tirent trois constats qui pèsent sur tout le secteur de la robotique mobile: la navigation sociale basée vision est loin d'être résolue, les modèles actuels présentent un déficit de sécurité plus criant encore que leurs manquements en étiquette sociale, et l'entraînement sur des données réelles compte davantage que la simple augmentation de la taille des modèles. Point notable, les auteurs montrent qu'un ajustement fin sur les données qu'ils ont constituées améliore concrètement le taux de réussite en conditions réelles, ce qui distingue cette contribution d'une simple démonstration en simulation. Ce travail s'inscrit dans une trajectoire de recherche qui est passée d'environnements 2D simplifiés à des cadres visuels plus exigeants, où le robot ne dispose que de sa caméra embarquée pour se comporter correctement en présence d'humains. Les auteurs présentent SONG comme un banc d'essai destiné à structurer la prochaine génération de recherches sur la navigation sociale visuelle, sans toutefois annoncer de partenariat industriel ou de déploiement au-delà du cadre académique à ce stade.

RecherchePaper
1 source
Adaptation de modalité en test, un cadre causal d'inférence-diagnostic-raffinement pour les modèles VLA
3358arXiv cs.RO 

Adaptation de modalité en test, un cadre causal d'inférence-diagnostic-raffinement pour les modèles VLA

Une équipe de chercheurs publie sur arXiv un nouveau cadre baptisé infer-diagnose-refine (IDR), conçu pour améliorer les modèles vision-langage-action (VLA) qui pilotent des bras ou des robots humanoïdes à partir d'instructions en langage naturel, d'images et de l'état proprioceptif du robot. Le problème ciblé: dans une tâche de manipulation, l'importance de la vision varie selon la phase, un déplacement longue distance dépendant surtout de la caméra tandis qu'une prise fine dépend davantage du retour proprioceptif, et les VLA actuels fusionnent ces modalités de façon statique. IDR corrige cela au moment du test, sans réentraînement: le modèle infère d'abord une action factuelle avec l'image réelle, puis une action contrefactuelle en neutralisant l'image via une intervention de type "zero-padding", avant qu'un module ne quantifie l'écart entre les deux par une mesure de norme pour estimer l'importance causale de la vision à cet instant précis, puis qu'une fusion résiduelle à gate ajustable ne recombine les deux prédictions. Les auteurs rapportent des gains de performance sur plusieurs benchmarks de simulation et sur des tâches réelles, avec plusieurs architectures VLA testées comme backbones. Pour l'industrie robotique, l'intérêt tient au fait que ce travail s'attaque à une limite bien identifiée mais rarement corrigée des VLA: leur incapacité à pondérer dynamiquement les modalités selon le contexte, ce qui pèse sur la robustesse en conditions réelles (occlusions, éclairage variable, phases de contact). Le caractère "model-agnostic" et "training-free" est ce qui retient le plus l'attention des intégrateurs: si la méthode tient ses promesses hors cadre académique, elle pourrait s'appliquer en post-traitement à des VLA déjà déployés, sans le coût d'un réentraînement complet, rare parmi les correctifs proposés dans la littérature. Il s'agit toutefois d'une publication de recherche évaluée sur des benchmarks propres aux auteurs, pas d'un produit ni d'un déploiement industriel, et le gain réel dépendra d'une reproduction indépendante sur des tâches de manipulation hors laboratoire. Ce travail s'inscrit dans une vague de recherche plus large autour des VLA, catégorie qui regroupe aujourd'hui des systèmes comme RT-2, OpenVLA, pi-0 de Physical Intelligence ou GR00T de Nvidia, tous confrontés au même arbitrage entre richesse perceptuelle et robustesse d'exécution. Chercher des gains de fiabilité au moment de l'inférence, plutôt que via un réentraînement massif, reflète une tendance récente à vouloir corriger à moindre coût des modèles déjà volumineux. Les auteurs ne précisent ni calendrier d'intégration industrielle ni partenariat avec un fabricant de robots; la suite logique serait une validation sur des plateformes commerciales et une comparaison directe avec les méthodes de fusion de modalités déjà employées par les principaux acteurs du secteur.

RechercheActu
1 source
DSCD-Nav : débat coopératif à double posture pour la navigation vers un objet
3359arXiv cs.RO 

DSCD-Nav : débat coopératif à double posture pour la navigation vers un objet

Le robot d'assistance domestique orienté navigation vient d'être testé sur trois jeux de données de référence, HM3Dv1, HM3Dv2 et MP3D, avec un nouveau mécanisme baptisé DSCD-Nav (Dual-Stance Cooperative Debate Navigation). Le principe : au lieu de faire évaluer chaque action candidate par un seul passage de scoring, comme le font les systèmes actuels bâtis sur des modèles vision-langage, la méthode confronte deux points de vue construits sur des objectifs complémentaires. Le premier, appelé TSU (Task-Scene Understanding), privilégie la progression vers l'objectif à partir d'indices de disposition de la scène. Le second, SIB (Safety-Information Balancing), met l'accent sur le risque et la valeur informationnelle de chaque choix. Ces deux "postures" débattent en confrontant leurs meilleures candidates avec des arguments ancrés dans l'observation, puis un agent d'arbitrage nommé NCA (Navigation Consensus Arbitration) synthétise les raisons des deux camps et peut déclencher une micro-vérification légère en cas de doute persistant. Les auteurs rapportent des gains constants en taux de réussite et en efficacité de trajectoire, avec une réduction de l'exploration redondante sur les trois benchmarks. L'enjeu dépasse la seule performance chiffrée : il touche à un problème connu des systèmes de navigation basés sur des VLA (vision-language-action), le fait qu'un scoring en un seul passage produit une confiance excessive et des erreurs qui s'accumulent sur des trajectoires longues, dans des environnements observés seulement partiellement. En reformulant la décision comme un débat entre postures antagonistes plutôt qu'un score unique, DSCD-Nav s'attaque directement à ce biais de surconfiance, un sujet critique pour tout intégrateur voulant déployer des robots domestiques ou de service dans des environnements réels non cartographiés au préalable. Si l'approche tient à l'échelle au-delà des benchmarks académiques, elle offre une piste concrète pour fiabiliser la prise de décision des robots autonomes sans nécessiter de re-entraînement lourd du modèle de perception sous-jacent. Le papier s'inscrit dans la lignée des travaux récents sur la navigation zero-shot en environnement intérieur inconnu, un axe de recherche actif depuis l'essor des modèles vision-langage capables de raisonner sur des scènes jamais vues. Contrairement aux approches à score unique dominantes dans la littérature actuelle, DSCD-Nav mise sur une architecture multi-agents délibérative, une tendance émergente dans plusieurs sous-domaines de l'IA où la confrontation de perspectives remplace l'inférence directe. Le texte, republié en version 3 sur arXiv, ne précise pas de déploiement matériel réel ni de partenaire industriel : il s'agit à ce stade d'une contribution méthodologique validée en simulation, dont la prochaine étape naturelle serait un test sur plateforme robotique physique pour confirmer que les gains observés en simulation se transposent au monde réel.

RecherchePaper
1 source
Belief-Aware Influence and Trust (BAIT) : façonner les croyances humaines lors d'interactions répétées avec un robot
3360arXiv cs.RO 

Belief-Aware Influence and Trust (BAIT) : façonner les croyances humaines lors d'interactions répétées avec un robot

Une équipe de recherche présente BAIT (Belief-Aware Influence and Trust), un contrôleur pensé pour les interactions répétées entre humains et robots, où l'humain ajuste continuellement sa perception du robot au fil des rencontres. Le système combine un filtre particulaire hiérarchique, capable d'inférer à la fois les changements stratégiques rapides de l'humain et l'évolution plus lente de ses croyances perceptives, avec un planificateur MPPI (Model Predictive Path Integral) intégrant explicitement ces croyances. BAIT a été évalué en simulation, lors d'une étude impliquant des sujets humains, puis en conditions réelles sur un véhicule de recherche GEM, dans des scénarios répétés d'insertion de voie (lane-merging). Résultat annoncé: une performance de tâche équivalente à celle des méthodes de référence qui maximisent l'influence à long terme via un comportement imprévisible, mais avec un niveau de confiance de l'utilisateur nettement supérieur. L'enjeu dépasse le simple exercice académique. Dans les interactions répétées, homme-robot ou véhicule autonome-conducteur, deux écueils dominent aujourd'hui: soit traiter chaque rencontre comme isolée, ce qui dégrade progressivement la performance à mesure que la perception humaine dérive, soit maintenir une influence durable par des comportements erratiques, au prix d'une confiance érodée et de calculs difficilement généralisables à grande échelle. BAIT propose de traiter le compromis entre influence à long terme et confiance humaine comme un objectif d'optimisation explicite, tout en imposant la performance immédiate de la tâche comme contrainte stricte plutôt que comme variable négociable. Pour des intégrateurs travaillant sur des flottes de véhicules autonomes ou des robots collaboratifs amenés à interagir de façon répétée avec les mêmes opérateurs, cela suggère une voie pour préserver l'acceptabilité sans sacrifier l'efficacité. Le travail s'inscrit dans la lignée des recherches en interaction homme-robot centrées sur la calibration de la confiance, un terrain d'étude classique pour les véhicules autonomes, où l'insertion de voie sert souvent de banc d'essai standardisé. Il s'agit à ce stade d'un résultat de recherche publié sur arXiv, validé par simulation, étude utilisateur et déploiement réel limité sur véhicule GEM, et non d'un produit commercialisé. L'article ne précise pas de calendrier de généralisation à d'autres scénarios d'interaction répétée.

RecherchePaper
1 source
Motion Generation avec contraintes environnementales
3361arXiv cs.RO 

Motion Generation avec contraintes environnementales

Un nouveau preprint arXiv (2607.25053, publié fin juillet 2026) propose une approche baptisée Environmental Constraint Exploitation (ECE) pour la planification de mouvement en robotique. Le constat de départ est classique : dans les espaces de configuration à haute dimension, la planification sans collision devient rapidement coûteuse en calcul et fragile face à l'incertitude sur l'environnement. Les auteurs renversent la logique habituelle en proposant d'exploiter délibérément le contact avec l'environnement plutôt que de le fuir systématiquement. Concrètement, la méthode intègre cette exploitation de contraintes environnementales dans des planificateurs de type RRT (Rapidly-exploring Random Tree), en biaisant l'exploration vers les régions pertinentes pour la tâche et en utilisant le contact physique comme moyen de réduire l'incertitude pendant l'exécution du mouvement. Les auteurs indiquent avoir validé l'approche à la fois en simulation et lors d'une application concrète en conditions réelles, sans toutefois préciser dans le résumé le type de robot ni le contexte industriel exact. L'intérêt pour le secteur tient au changement de paradigme proposé : la quasi-totalité des planificateurs de mouvement déployés en usine ou en logistique traitent tout contact non voulu comme un échec à éviter à tout prix, ce qui impose des marges de sécurité coûteuses en temps de cycle et en flexibilité. Une planification qui utilise le contact comme information plutôt que comme risque pourrait simplifier des tâches où un robot doit évoluer dans des espaces encombrés, glisser le long d'une surface ou stabiliser sa trajectoire en s'appuyant sur son environnement, un enjeu pertinent aussi bien pour les bras manipulateurs en entrepôt que pour les humanoïdes appelés à travailler dans des environnements non structurés. Le papier se présente lui-même comme une consolidation et une extension de travaux antérieurs des mêmes auteurs sur ce concept d'exploitation des contraintes environnementales, plutôt qu'une rupture inédite. À ce stade, il s'agit d'un résultat académique publié en preprint, sans affiliation industrielle ni feuille de route de commercialisation mentionnée : la contribution reste à ce jour du côté de la recherche fondamentale en planification robotique, avec un potentiel de transfert vers l'industrie qui reste à démontrer sur des cas d'usage à plus grande échelle.

RecherchePaper
1 source
Planification réactive de mouvement 3D pour un bras Franka via remodelage de l'espace de travail en étoile
3362arXiv cs.RO 

Planification réactive de mouvement 3D pour un bras Franka via remodelage de l'espace de travail en étoile

Des chercheurs proposent une méthode de retraitement géométrique de l'espace de travail, baptisée "Star-World reshaping", pour la planification de mouvement réactive d'un bras Franka Emika Panda en trois dimensions. Le problème visé : quand la marge de sécurité autour des obstacles est gonflée pour éviter les collisions, les zones inflées finissent par se chevaucher, ce qui casse l'hypothèse d'obstacles disjoints sur laquelle reposent de nombreux planificateurs réactifs par modulation. La méthode regroupe à chaque mise à jour les obstacles inflés qui se chevauchent et les remplace par des formes en étoile ("star-shaped proxies"), avant qu'un contrôleur d'effecteur basé sur un système dynamique n'évalue la trajectoire ; un terme de champ de potentiel artificiel dans l'espace nul gère en complément l'évitement du bras lui-même. Testée sur six scénarios PyBullet et 12 essais, l'approche atteint l'objectif dans cinq cas sur six, contre quatre sur six pour la méthode sans retraitement, avec un temps de calcul de 0,68 à 8,70 millisecondes par mise à jour pour des scènes comportant un à sept obstacles. L'intérêt pour la robotique industrielle est ciblé : la planification réactive en temps réel reste un point dur pour les bras manipulateurs évoluant en environnement encombré, notamment en cellule collaborative où les marges de sécurité imposées par les normes créent justement ce type de chevauchements. Mais les auteurs eux-mêmes tempèrent la portée du résultat : l'évaluation reste préliminaire, avec seulement 12 essais, une augmentation de la longueur des trajectoires générées, l'apparition de quasi-équilibres bloquants dans deux scénarios, et un cas où le regroupement trop agressif des obstacles ferme un couloir de passage pourtant navigable. Autrement dit, la méthode gagne en robustesse sur le cas canonique du "mur qui se chevauche" mais introduit de nouveaux modes d'échec. Ce travail s'inscrit dans la lignée des planificateurs réactifs par modulation dérivés de la théorie des champs de vitesse ("dynamical systems"), historiquement validés en 2D et dont le passage à la 3D sur manipulateur redondant reste un défi ouvert. Aucun acteur industriel n'est cité : il s'agit d'une publication de recherche amont, sans annonce de produit ni de déploiement. Les auteurs présentent leurs résultats comme une preuve de concept montrant à la fois le potentiel et les limites pratiques du transfert des garanties théoriques du Star-World, initialement pensées pour la géométrie de l'espace de travail, à un bras contrôlé par cinématique inverse.

RecherchePaper
1 source
Transport de point à point avec bras robotique à continuum : mise en forme du signal d'entrée
3363arXiv cs.RO 

Transport de point à point avec bras robotique à continuum : mise en forme du signal d'entrée

Traduction terminée. Voici le résumé en français : Une équipe de recherche a appliqué une technique de mise en forme de commande ("input shaping") à un bras robotique continuum actionné par câbles, un mécanisme sous-actionné sujet à des vibrations résiduelles en fin de mouvement point à point. Le problème : quand ce type de bras s'arrête après une trajectoire de repos à repos, l'effecteur continue d'osciller avant de se stabiliser, ce qui limite la précision et allonge le temps de cycle réel. Les chercheurs ont conçu deux filtres à retard temporel basés sur un modèle de système linéaire, un non robuste et un robuste, puis les ont comparés à une commande d'entrée classique en impulsion de vitesse. Les essais expérimentaux sur un bras continuum réel montrent une réduction mesurable du dépassement (overshoot) et du temps de stabilisation avec les deux filtres, le filtre robuste améliorant encore la réponse par rapport au filtre non robuste. L'enjeu dépasse la seule démonstration en laboratoire. Les bras continuum, appréciés pour leur flexibilité en espaces confinés (chirurgie mini-invasive, inspection de moteurs d'avion, intervention en milieu encombré), souffrent justement de ce compromis entre compliance mécanique et précision de positionnement : leur sous-actionnement, qui fait leur intérêt pour épouser des géométries complexes, est aussi ce qui génère des oscillations difficiles à maîtriser. Réduire ces vibrations sans ajouter de capteurs ou d'actionneurs supplémentaires, uniquement par la forme du signal de commande, est une piste économique pour rapprocher ces robots d'usages industriels exigeants en trajectoires arbitraires plutôt que de simples démonstrations en point fixe. L'input shaping lui-même n'est pas nouveau : la méthode a été développée dès les années 1990 pour amortir les vibrations de grues, de bras robotiques flexibles et de structures spatiales. Son application aux robots continuum, plus récents et combinant sous-actionnement et souplesse structurelle, reste en revanche peu explorée. Les auteurs positionnent ce travail comme une étape vers une mise en œuvre robuste de ces bras pour des tâches nécessitant un suivi précis de trajectoires arbitraires de l'effecteur, une extension au-delà du simple mouvement point à point testé ici étant une suite logique attendue.

RecherchePaper
1 source
IA en Réalité étendue : une couche de médiation pour le contrôle humain situé dans la collaboration homme-robot
3364arXiv cs.RO 

IA en Réalité étendue : une couche de médiation pour le contrôle humain situé dans la collaboration homme-robot

Des chercheurs proposent, dans un article publié sur arXiv (2607.25047v1, catégorie cross-listing), un cadre conceptuel pour repenser le rôle de la réalité étendue (XR) dans la collaboration homme-robot. Plutôt que de limiter la XR à l'affichage d'intentions ou de trajectoires planifiées, les auteurs avancent qu'elle doit devenir une véritable couche de médiation pour ce qu'ils nomment le "contrôle humain situé" : la capacité d'un opérateur à comprendre, orienter, autoriser ou interrompre l'action d'un robot dans le contexte physique, social et temporel précis où elle se déroule. Le raisonnement s'appuie sur trois scénarios concrets : l'assistance robotique au chevet de patients en soins infirmiers, la supervision de bras robotiques multiples, et l'assemblage collaboratif sous attention divisée. À partir de ces cas, l'équipe identifie quatre fonctions de médiation (entre intention humaine et autonomie du robot, entre plans du robot et jugement humain, entre niveaux de contrôle partagé, et entre rôles d'équipe, passations et récupération d'erreurs), puis en déduit six dimensions de conception : possibilités d'action conjointe, contraintes socio-physiques, gestion de l'incertitude et de la validité des plans, contrôle et correction multimodaux, répartition des rôles avec traçabilité, et anticipation de la récupération après incident. L'enjeu dépasse la simple interface homme-machine. Dans les environnements industriels ou de soin où les robots gagnent en autonomie, le déficit d'inspectabilité reste un frein majeur à l'adoption : un opérateur qui ne peut pas anticiper ni corriger une décision robotique en temps réel perd la confiance nécessaire à une collaboration fluide, surtout quand les objectifs changent, que la perception du robot est incomplète, ou que les rôles entre humain et machine évoluent en cours de tâche. Ce travail rappelle que la robustesse d'un système collaboratif ne se joue pas seulement dans l'algorithme de planification, mais dans la capacité de l'humain à rester "dans la boucle" de façon actionnable, un enjeu direct pour les intégrateurs qui déploient des cobots ou des systèmes supervisés en environnement partagé. Il s'agit ici d'un article de position et non d'un système déployé ou d'un produit commercialisé : aucun prototype XR complet n'est présenté, l'apport est une grille d'analyse destinée à orienter la recherche future. Le texte s'inscrit dans la continuité des travaux sur le contrôle partagé et l'autonomie ajustable en robotique collaborative, et propose un agenda de recherche pour concevoir des systèmes XR qui rendraient l'autonomie robotique plus lisible et plus redevable dans des environnements dynamiques, sans préciser à ce stade de calendrier ni de partenaires industriels associés.

RecherchePaper
1 source
Automatisation d'entrepôt et IA incarnée : Meituan, JD.com, ByteDance et Baidu accélèrent leur expansion dans le monde physique
3365Pandaily 

Automatisation d'entrepôt et IA incarnée : Meituan, JD.com, ByteDance et Baidu accélèrent leur expansion dans le monde physique

Les géants technologiques chinois accélèrent massivement leur expansion vers le monde physique, transformant leurs plateformes numériques en infrastructures robotiques verticalement intégrées. Meituan a déployé sa flotte de robots de livraison autonomes qui a cumulé plusieurs millions de trajets sans intervention humaine, naviguant en zones piétonnes, aux passages routiers et jusqu'aux entrées d'immeubles en environnement urbain dense. L'entreprise a bâti une pile complète d'IA physique incluant véhicules de livraison autonomes, drones, robots de service en magasin et systèmes cloud de gestion de flotte. JD.com a de son côté intégré la robotique sur toute sa chaîne logistique, des chariots élévateurs autonomes en entrepôt jusqu'au routage optimisé par IA pour ses camions de livraison. Baidu poursuit le développement de ses robotaxis Apollo, qui ont accumulé des dizaines de millions de kilomètres de conduite autonome, tout en investissant dans l'IA incarnée et ses puces Kunlun. ByteDance a opté pour une stratégie de portefeuille, injectant des capitaux dans des startups de robotique humanoïde, de cobots et d'automatisation industrielle via son bras d'investissement et sa R&D interne. Alibaba exploite les robots logistiques Cainiao et son laboratoire de recherche DAMO, tandis que Tencent Robotics X travaille sur l'IA incarnée. Ce virage n'est pas anecdotique pour l'industrie robotique et les décideurs B2B. Il traduit un épuisement des relais de croissance du pur numérique en Chine, qui pousse les géants internet à chercher de la valeur dans une économie physique encore peu digitalisée. Il signale surtout que les progrès en perception, décision et actionnement rendent désormais l'automatisation du monde physique viable technologiquement et économiquement à grande échelle, un seuil que le secteur attendait depuis des années sans le franchir massivement. Les avantages structurels de ces plateformes, données massives, bases d'utilisateurs, capital disponible, se transposent directement à l'opérationnel physique, où l'optimisation par la donnée et les économies d'échelle jouent le même rôle que dans le numérique pur. Pour les intégrateurs et industriels traditionnels, cela signifie à la fois une pression concurrentielle accrue et de nouvelles opportunités de partenariat avec des acteurs data-natifs. Cette bascule s'inscrit dans une trajectoire longue: les plateformes de livraison et de logistique chinoises ont d'abord digitalisé leurs opérations avant de les automatiser physiquement, un mouvement que la maturation de l'IA rend aujourd'hui exécutable à l'échelle nationale. La compétition entre Meituan, JD.com, Baidu, Alibaba, ByteDance et Tencent structure désormais un marché où chacun bâtit sa propre pile physique-IA, sans consolidation apparente à ce stade. Les implications dépassent la Chine: la combinaison de capacités IA, d'échelle manufacturière et de volumes massifs de données de déploiement constitue un avantage compétitif que les acteurs occidentaux devront désormais prendre en compte dans leurs propres feuilles de route robotiques.

Chine/AsieOpinion
1 source
Robot à capteurs tactiles flexibles lève un nouveau financement, revenus visés x10 en 2026
336636Kr 

Robot à capteurs tactiles flexibles lève un nouveau financement, revenus visés x10 en 2026

La start-up chinoise Yaole Technology, spécialisée dans les capteurs tactiles souples tissés directement dans le textile, vient de boucler un tour de table Pre-A+ mené par Dinghe Gaoda, avec la participation de l'équipementier automobile coté Changshu Automotive Trim et du studio Zulong Entertainment, Yundao Capital agissant comme conseiller financier exclusif de long terme. Les fonds serviront à développer la technologie de détection textile, industrialiser la production des gants de collecte de données et étoffer les capacités de calibration et d'interface, avec un déploiement visé vers l'IA incarnée, les modèles du monde et les habitacles intelligents. Fondée par Lü Liyun, ex-architecte en chef chez Harman où elle pilotait des plateformes de fusion multimodale de capteurs, la société s'appuie sur une équipe issue de l'Académie chinoise des sciences, de l'université du Michigan et de Pékin. Son gant, bientôt commercialisé, repose sur une architecture baptisée "fil métallique plus matrice sandwich" : un fil d'alliage métallique pur tissé en réseau conducteur et intégré en une seule pièce dans le tissu, sans capteur film ou circuit imprimé rapporté en surface comme le font la plupart des solutions concurrentes. Le boîtier de collecte, séparé du gant, embarque alimentation, traitement du signal et stockage ; le gant lui-même est lavable et remplaçable indépendamment. Yaole prévoit que l'activité gants de données pèsera plus de la moitié de son chiffre d'affaires en 2026, année où l'entreprise vise une multiplication par dix de son revenu global. Cette opération illustre un déplacement de l'attention dans la course à la robotique humanoïde : à mesure que les progrès matériels (moteurs, articulations, châssis) s'accumulent, le goulot d'étranglement se déplace vers la donnée physique réelle. Selon le Rapport sur le développement de l'industrie chinoise de l'IA incarnée, le volume mondial de données d'interaction physique réelle et de haute qualité atteignait environ 500 000 heures début 2026, alors qu'entraîner un modèle incarné généraliste doté d'une capacité de généralisation de base en réclamerait plusieurs dizaines de millions, un écart supérieur à 90 %. Contrairement à la vision ou au texte, le tactile résiste mal à la simulation : la répartition de pression, le frottement et la déformation des matériaux lors d'un contact réel restent difficiles à reproduire fidèlement, ce qui pousse le secteur à revenir vers la collecte physique directe. Au-delà de l'entraînement de mains robotiques, les gants intéressent aussi des industriels et logisticiens (type UPS) pour l'évaluation des risques ergonomiques sur chaîne, ou le secteur médical pour le suivi de rééducation fonctionnelle, ce qui élargit le marché adressable au-delà de la seule robotique. Le secteur chinois des gants de capteurs tactiles a vu cette année une prolifération rapide d'acteurs, entre approches à film imprimé, vision-tactile et textile. Yaole met en avant son expérience acquise sur des cahiers des charges automobiles pour revendiquer une fiabilité transposable à la robotique ; Changshu Automotive Trim a d'ailleurs été introduit au tour en partie pour répondre à la demande croissante des constructeurs étrangers en systèmes de classification des passagers (OCS). Dinghe Gaoda, dont le portefeuille inclut déjà Hesai, Momenta et Liufen Technology, situe l'investissement dans une thèse plus large sur la perception physique des machines, tandis que Yundao Capital insiste sur le fait que la vraie valeur ne réside pas dans le capteur lui-même mais dans sa capacité à devenir un point d'entrée standardisé pour des données exploitables à l'échelle de l'entraînement des modèles.

Chine/AsieActu
1 source
L'interdiction des robots étrangers aux États-Unis
3367The Verge 

L'interdiction des robots étrangers aux États-Unis

Traduction/résumé selon le format demandé. La Federal Communications Commission a annoncé mardi une interdiction d'importation visant les "appareils robotiques avancés" et les onduleurs de puissance fabriqués à l'étranger, selon des informations rapportées par Reuters puis relayées par The Verge. La mesure couvre les robots mobiles, notamment les modèles humanoïdes et quadrupèdes, sans se limiter aux machines capables de marcher. La FCC affirme que cette décision ne cible pas un pays en particulier, mais son impact retombera principalement sur la Chine, où des entreprises comme Unitree ont multiplié les démonstrations virales, robots dansant sur du Michael Jackson ou s'affrontant lors de combats de MMA inclus. Cette interdiction s'inscrit dans une logique de sécurité nationale déjà appliquée aux drones chinois DJI et aux équipements télécoms de Huawei et ZTE : washington cherche à limiter la présence de matériel étranger jugé sensible dans des systèmes robotiques de plus en plus capables. Pour les intégrateurs et décideurs industriels, le signal est clair : le marché américain de la robotique humanoïde et des AMR se referme progressivement aux fournisseurs chinois, ce qui pourrait accélérer la fragmentation des chaînes d'approvisionnement entre écosystèmes américain et chinois. La Chine a fait de la robotique humanoïde une priorité industrielle, avec un soutien étatique massif et des acteurs comme Unitree, désormais concurrents directs de Figure, Tesla (Optimus) ou Boston Dynamics sur la scène internationale. Les modalités précises de mise en œuvre de l'interdiction, ainsi que d'éventuels recours juridiques, restent à préciser dans les prochaines semaines.

RegulationReglementation
1 source
Les compagnies aériennes américaines interdisent les robots humanoïdes en cabine face aux inquiétudes de sécurité
3368Interesting Engineering 

Les compagnies aériennes américaines interdisent les robots humanoïdes en cabine face aux inquiétudes de sécurité

Delta Air Lines et United Airlines viennent d'interdire le transport de robots humanoïdes sur leurs vols, que ce soit en bagage cabine, en bagage enregistré ou en soute cargo. United a inscrit les robots à forme humaine dans une catégorie d'objets prohibés, distincte des appareils électroniques grand public classiques. Delta applique une règle similaire mais la qualifie pour l'instant de temporaire, refusant tout robot conçu pour imiter l'apparence, la taille, le mouvement ou le comportement d'un humain ou d'un animal, quelle que soit sa taille ou sa destination. Ces décisions font suite à celle de Southwest Airlines, prise plus tôt cette année après qu'un robot humanoïde a été transporté à bord d'un de ses vols, un épisode largement relayé qui a mis en lumière l'absence de procédures claires pour ce type d'appareil. Les robots aspirateurs, jouets robotisés et autres appareils électroniques restent, eux, autorisés sous réserve des règles habituelles sur les batteries au lithium et les bagages. Ces interdictions traduisent un problème très concret pour l'industrie robotique et ses intégrateurs B2B: le décalage entre le rythme de déploiement des humanoïdes et l'absence totale de cadre réglementaire adapté à leur transport, leur stockage et leur manutention. Bras et jambes articulés, dimensions inhabituelles, composants lourds, systèmes de batteries lithium-ion multiples et complexes, autant de caractéristiques que les règles aériennes existantes, pensées pour de l'électronique standard, ne couvrent pas. Pour un secteur qui vend l'idée d'humanoïdes bientôt déployés en usine, en logistique ou en service client à grande échelle, le fait que de simples compagnies aériennes se retrouvent à improviser des interdictions faute de procédure de sécurité montre que la logistique du dernier kilomètre, transporter, stocker, assurer un robot, reste largement impensée en dehors du site de déploiement lui-même. L'élément déclencheur reste l'incident Southwest, qui a soulevé des questions inédites sur la classification, le placement en soute ou en cabine, le stockage des batteries et les procédures d'urgence applicables à un robot capable de bouger ou de peser lourd. Southwest a réagi la première en interdisant les robots humanoïdes et zoomorphes, ouvrant la voie à United et Delta. Rien n'indique pour l'instant de position harmonisée entre transporteurs américains, ni d'intervention de la FAA ou de l'IATA pour fixer une norme commune, ce qui laisse chaque compagnie fixer ses propres critères. À mesure que des acteurs comme Figure, Tesla (Optimus) ou Agility Robotics multiplient les démonstrations et les premiers déploiements pilotes, la question du transport aérien de ces machines, entre deux sites clients ou vers un salon professionnel, devrait rapidement s'imposer comme un point de friction supplémentaire pour la filière.

RegulationReglementation
1 source
Le doigt du robot ressent en couleur
3369IEEE Spectrum Robotics 

Le doigt du robot ressent en couleur

Une équipe de chercheurs européens a mis au point un doigt robotique doté d'une peau synthétique capable de "voir" la texture et la pression par changement de couleur, avec une résolution de 100 micromètres et sans latence de calcul. Le projet réunit le Queen Mary University of London, l'Université de Florence, l'Université de Trieste et l'Université de Trento. L'idée revient à Giacomo Sasso, chercheur postdoctoral dans le laboratoire de Federico Carpi à Queen Mary, qui s'est appuyé sur un matériau "mécanochrome" décrit dans la revue Nature. En exposant un film photosensible à un laser rouge de 635 nanomètres et 5 mégawatts pendant sept minutes, Sasso a créé un réflecteur de Bragg : une structure à couches alternées de densité et d'indice de réfraction différents. Quand ce réflecteur est déformé par un contact, ses couches s'amincissent et changent la longueur d'onde de lumière réfléchie, du rouge (faible déformation) au vert puis au bleu (déformation maximale). Ce réflecteur est intégré dans un doigt en silicone transparent équipé d'une caméra et d'une LED internes, avec une couche externe noire pour maximiser le contraste des couleurs captées. L'équipe a déjà généré des cartes topographiques d'un bout de doigt humain, d'une pièce d'un cent et d'une feuille. Cette approche change la donne pour le toucher robotique, un domaine où la plupart des capteurs tactiles doivent multiplier les points de mesure de pression et de force pour reconstituer une surface, au prix d'un traitement de données lourd et lent. Ici, la couleur seule encode directement la topologie, la déformation et la pression de contact, ce qui élimine le goulot d'étranglement computationnel et ouvre la voie à une perception tactile en temps réel bien plus fine que ce qu'offrent les capteurs à base de grille de capteurs de force. Rich Walker, directeur de Shadow Robot, la plus ancienne entreprise robotique britannique et spécialiste des mains robotiques, a qualifié la méthode de radicalement différente des approches existantes. Pour les intégrateurs travaillant sur la manipulation fine (préhension d'objets fragiles, tri, chirurgie assistée), un tel niveau de résolution sans surcoût de calcul pourrait combler un écart réel entre les démonstrations en laboratoire et les usages industriels, où la vitesse de traitement tactile reste un facteur limitant. Le projet est encore au stade de recherche académique, sans annonce de commercialisation ni de partenaire industriel identifié à ce jour. Sasso a mis moins d'une semaine à reproduire le matériau en laboratoire après être tombé sur l'article de Nature en cherchant des solutions optiques pour le toucher robotique. Les prochaines étapes concerneront probablement l'intégration du capteur sur des mains robotiques complètes et la comparaison de ses performances face aux technologies concurrentes de peau tactile, notamment les capteurs capacitifs ou piézorésistifs déjà utilisés par des acteurs comme Shadow Robot.

RecherchePaper
1 source
IA incarnée : comment les actionneurs intégrés améliorent les performances des articulations chez les robots humanoïdes
3370Robotics Business Review 

IA incarnée : comment les actionneurs intégrés améliorent les performances des articulations chez les robots humanoïdes

Le fabricant chinois CubeMars a développé l'AK45-10, un actionneur robotique intégré destiné aux articulations de robots humanoïdes. Le module mesure 53mm de diamètre pour environ 260 grammes, et délivre jusqu'à 7Nm de couple de pointe grâce à un réducteur planétaire à rapport 10:1. Sa particularité tient à l'intégration en un seul bloc du moteur brushless, du réducteur, de l'encodeur et de l'électronique de contrôle, au lieu d'assembler ces composants séparément comme le veut l'approche traditionnelle. CubeMars positionne ce produit pour équiper aussi bien les articulations du haut du corps (coudes, poignets) que celles du bas du corps (hanches, genoux), avec des besoins de couple et de stabilité différents selon la charge appliquée. Cette annonce illustre une tendance de fond dans l'industrie des robots humanoïdes plutôt qu'une rupture technologique isolée : la miniaturisation et l'intégration des actionneurs deviennent un enjeu central pour rendre les plateformes humanoïdes viables commercialement. Avec des dizaines d'articulations à motoriser par robot, le poids et l'encombrement cumulés des actionneurs pèsent directement sur l'autonomie énergétique et la complexité d'assemblage. Pour les intégrateurs et fabricants de robots, disposer de modules compacts et prêts à l'emploi réduit le câblage, la maintenance et le temps de développement, un facteur déterminant alors que plusieurs acteurs cherchent à passer du prototype de démonstration à la production en série. Il faut toutefois noter que l'article ne fournit ni prix, ni volumes de production, ni client identifié utilisant cet actionneur dans un robot complet : il s'agit d'une présentation produit, pas d'un déploiement confirmé sur une plateforme humanoïde nommée. CubeMars s'inscrit dans un marché des actionneurs pour robotique où la concurrence s'intensifie, notamment face à des fournisseurs spécialisés dans les moteurs à couple élevé et faible encombrement pour la robotique légère et les drones, secteur d'origine de plusieurs fabricants chinois de ce type de composants. La course aux articulations compactes fait écho aux besoins exprimés par les développeurs de plateformes humanoïdes comme Figure, Tesla avec Optimus, ou Unitree, qui doivent tous arbitrer entre couple, poids et coût par articulation. Sans annonce de partenariat ou de déploiement précis à ce stade, l'AK45-10 reste positionné comme un composant générique destiné aux développeurs de robots plutôt qu'un produit associé à un humanoïde spécifique déjà commercialisé.

HumanoïdesActu
1 source
MIT dévoile un modèle qui réduit les délais de réaction de 30 fois pour des mouvements robotiques plus rapides
3371Interesting Engineering 

MIT dévoile un modèle qui réduit les délais de réaction de 30 fois pour des mouvements robotiques plus rapides

Des chercheurs du MIT ont développé une nouvelle méthode baptisée VLASH, qui permet aux robots pilotés par des modèles vision-langage-action (VLA) de planifier leur prochaine séquence de mouvements pendant qu'ils exécutent encore la précédente, en anticipant leur position future plutôt qu'en attendant la fin du geste en cours pour ré-observer l'environnement. Cette seule modification réduit le délai de réaction de plus de 30 fois en supprimant la pause habituelle entre deux blocs d'actions. Une technique complémentaire, la quantification d'action, regroupe des mouvements suivant une même trajectoire en blocs plus larges ; elle réduit légèrement la précision mais accélère l'exécution des tâches de deux à trois fois. L'équipe a aussi conçu une méthode d'augmentation des données d'entraînement qui réorganise les données existantes pour diviser par cinq le temps d'entraînement, sans surcoût de calcul. En simulation, VLASH produit systématiquement des mouvements plus rapides sans perte de précision de manœuvre. Sur robots physiques, les gains se confirment sur des tâches de prise-dépose, d'empilement et de tri : dans une démonstration, un robot triant des cubes colorés a été deux fois plus rapide que les systèmes de référence, avec 90% de précision, un score équivalent à la meilleure méthode conventionnelle testée. Le système gère aussi des activités très dynamiques comme le tennis de table ou le Whack-a-Mole. Cette avancée cible un goulot d'étranglement connu du déploiement des VLA, de plus en plus utilisés comme "cerveau" des robots pour interpréter leur environnement et générer des actions physiques : le coût de calcul de l'inférence introduit des délais qui rendent les robots lents et saccadés face aux changements de leur environnement, un frein concret pour les intégrateurs visant des environnements dynamiques. Doubler la vitesse d'exécution sans matériel supplémentaire ni entraînement plus long change la donne économique. C'est un signal utile pour la course actuelle aux VLA généralistes (Pi-0, GR00T N2, Helix, ou les modèles embarqués dans des humanoïdes comme Figure 03 ou Optimus) : la latence d'inférence reste un frein réel à la fluidité mise en avant dans les vidéos de démonstration, et des optimisations logicielles comme celle-ci pourraient compter autant que la taille des modèles. Les chercheurs évoquent aussi des applications en recherche et sauvetage, où la réactivité aux changements est critique. Le travail s'inscrit dans les recherches du MIT sur l'intégration des VLA en robotique physique, un domaine où les grands laboratoires (Physical Intelligence, NVIDIA, Figure AI, Tesla) misent surtout sur des modèles plus lourds pour gérer perception et planification. VLASH prend l'angle inverse : restructurer le cycle observation-planification-exécution plutôt que changer le modèle. Aucun acteur français ou européen n'est cité dans ces travaux, qui restent à ce stade un résultat académique validé en simulation et sur quelques démonstrations en laboratoire, sans partenariat industriel ni calendrier commercial annoncés. La prochaine étape pour l'équipe consiste à combiner VLASH avec des modèles de monde génératifs capables de prédire l'évolution de l'environnement, et non plus seulement l'état futur du robot.

IA physiqueActu
1 source
Le fondateur, docteur de l'UCLA, lance une startup de modèles fondation pour robots humanoïdes, lève près de 500 millions de yuans en amorçage
337236Kr 

Le fondateur, docteur de l'UCLA, lance une startup de modèles fondation pour robots humanoïdes, lève près de 500 millions de yuans en amorçage

Près de 500 millions de yuans levés en tour d'amorçage "angel++", sixième tour de financement en seulement six mois d'existence pour la jeune pousse chinoise Delta Intelligence (德塔智能), fondée en janvier 2026 à Pékin. L'entreprise développe des modèles de fondation pour robots humanoïdes (Humanoid Foundation Models, HFMs), visant une manipulation locomotrice généraliste corps entier plutôt qu'une simple démonstration de marche. Le tour réunit des groupes industriels cotés en bourse, des fonds financiers de premier plan (Hillhouse Ventures/GL Ventures, Yuanhe Holdings, Fosun RZ Capital, Huaying Capital, Lenovo Capital) et, fait notable, plusieurs constructeurs de robots humanoïdes eux-mêmes: Zhiyuan Robotics (AgiBot), Leju Robotics, Galbot et Unitree. Les trois cofondateurs, dont le CEO Ma Xiaojian, sont tous docteurs de l'UCLA, formés à Tsinghua et Peking University, et sont passés par Google Robotics, NVIDIA Research, DeepMind, Meta ainsi que l'Institut de recherche en intelligence artificielle générale de Pékin, avec une expérience sur des projets DARPA, ONR et NSF. Techniquement, Delta Intelligence mise sur un moteur de monde 3D natif traitant nuages de points et gaussian splatting plutôt que des représentations visuelles 2D, couplé à un dispositif de capture propriétaire purement visuel qui enregistre en une seule prise les mouvements corps entier (mains, pieds, bassin, épaules) et reconstruit la scène 3D en temps réel, en mode téléopération ou sans robot physique. Le contrôle repose sur une architecture à trois couches: un "cerveau" pour la perception et la planification longue durée, un "cervelet" entraîné par renforcement en simulation massive pour le pilotage moteur fin à des fréquences de dizaines à centaines de hertz, et une couche hybride force-position pour la fluidité du geste. L'argument central de Delta Intelligence répond à une limite documentée du secteur: la plupart des modèles d'IA incarnée raisonnent encore sur des représentations 2D, insuffisantes pour juger la profondeur ou la géométrie nécessaires pour ouvrir une porte ou grimper un escalier, ce qui accumule des erreurs sur les tâches longues en conditions réelles. En entraînant le "cerveau" uniquement sur données réelles (la simulation ne modélisant pas fidèlement les contacts multiples de préhension et d'appui) et le "cervelet" surtout en simulation, l'entreprise illustre une fragmentation croissante du secteur entre fournisseurs de modèles de fondation et constructeurs de robots. Son partenariat direct avec Zhiyuan, Leju, Galbot et Unitree, via un pipeline standardisé de retargeting inter-plateformes, en fait un fournisseur de socle logiciel transférable d'un robot à l'autre sans réentraînement complet, un enjeu central pour l'industrialisation du secteur. Ce rythme de levées reflète l'appétit du capital chinois pour les modèles de fondation robotique, où les constructeurs de robots préfèrent désormais investir chez leurs futurs fournisseurs logiciels plutôt que tout développer en interne. Delta Intelligence se positionne face à des acteurs comme Physical Intelligence (Pi-0) ou NVIDIA (GR00T N2), en misant sur un moteur 3D natif et un dispositif de capture censé lever le goulot d'étranglement des données corps entier, souvent limitées aux mains chez les concurrents. Les fonds serviront à industrialiser ce dispositif de capture, construire la boucle de données associée et étoffer l'équipe de recherche, sans calendrier précis de déploiement client communiqué à ce stade.

Chine/AsieActu
1 source
Étude de cas sur l'acceptation d'une tête robotique humanoïde utilisée dans trois espaces publics
3373arXiv cs.RO 

Étude de cas sur l'acceptation d'une tête robotique humanoïde utilisée dans trois espaces publics

Une équipe de recherche a testé en conditions réelles une tête robotique humanoïde interactive dans trois lieux publics allemands : un office de tourisme, une bibliothèque municipale et l'accueil d'une administration du bâtiment (Bauamt). Le robot y a fonctionné en continu pendant plusieurs jours, engageant la conversation avec les visiteurs dans leur propre langue grâce à un pipeline de traitement du langage naturel couplé à un moteur de simulation émotionnelle, qui génère des réponses verbales multimodales enrichies d'expressions faciales. Les chercheurs ont mesuré l'acceptation des usagers via le questionnaire TAM2 (Technology Acceptance Model), un outil standard évaluant l'utilité perçue et la facilité d'usage. Résultat global : les utilisateurs se sont montrés motivés à interagir avec le robot et l'ont jugé plutôt utile et facile à prendre en main, quel que soit le site. Mais un usager sur cinq a trouvé le temps de réponse du système trop lent, ce qui nuisait à la fluidité du dialogue. L'enseignement principal dépasse la simple démonstration technique : l'acceptation d'un robot humanoïde conversationnel dépend fortement du contexte d'usage, pas seulement de ses capacités. L'office de tourisme et la bibliothèque, lieux où l'interaction est perçue comme légitime et sans enjeu, se sont révélés bien plus favorables que l'accueil administratif, où la volonté d'engager la conversation était nettement plus faible. Pour les intégrateurs et décideurs qui envisagent de déployer des robots d'accueil ou d'assistance multilingue, ce résultat suggère de prioriser les environnements à faible friction sociale plutôt que les guichets administratifs, et de traiter la latence de réponse comme un frein d'adoption aussi critique que la précision linguistique elle-même. Ce travail s'inscrit dans la lignée des recherches en interaction homme-robot social, où l'acceptation en conditions réelles reste plus rarement documentée que les démonstrations en laboratoire. Contrairement aux plateformes humanoïdes orientées tâches industrielles ou logistiques, ce projet cible l'accueil du public et la médiation linguistique. Les auteurs identifient la réduction du temps de réponse comme priorité pour les développements futurs, condition jugée nécessaire avant d'envisager un déploiement plus large de ce type de tête robotique interactive dans d'autres services publics.

RecherchePaper
1 source
Robotique par imitation autorégressive : un VLM incarné unifié pour l'action robotique
3374arXiv cs.RO 

Robotique par imitation autorégressive : un VLM incarné unifié pour l'action robotique

Des chercheurs présentent GenieReasoner, un modèle Vision-Langage-Action (VLA) conçu pour combler l'écart entre raisonnement sémantique et précision d'exécution motrice chez les robots généralistes. L'équipe introduit d'abord ERIQ (Embodied Reasoning Intelligence Quotient), un benchmark de plus de 6 000 paires question-réponse couvrant quatre dimensions du raisonnement incarné, qui permet d'évaluer séparément la capacité de raisonnement d'un modèle et sa capacité à agir. Cette évaluation découplée révèle une corrélation forte entre le score de raisonnement d'un modèle et sa capacité de généralisation en tâche réelle. Pour traduire ce raisonnement en gestes précis, les auteurs développent FACT, un tokenizer d'actions basé sur le flow matching, qui convertit des trajectoires de contrôle continues en séquences discrètes tout en préservant une reconstruction fidèle du mouvement. GenieReasoner, le modèle final, optimise conjointement raisonnement et action dans un espace unifié et surpasse, selon les auteurs, les approches à action continue comme les approches à action discrète existantes sur des tâches de manipulation en conditions réelles. L'enjeu dépasse la simple performance sur un jeu de tests: c'est le compromis raisonnement-précision, souvent cité comme le principal frein à la généralisation des VLA hors laboratoire, que ce travail cherche à quantifier puis à résoudre. Pour les intégrateurs et équipes R&D en robotique, disposer d'un benchmark comme ERIQ offre un outil de diagnostic pour repérer si un modèle échoue par manque de compréhension sémantique de la scène ou par imprécision motrice, deux problèmes qui appellent des solutions très différentes. Les résultats annoncés restent toutefois issus des auteurs eux-mêmes, sans validation tierce indépendante à ce stade. Ce travail s'inscrit dans la lignée des modèles VLA à grande échelle type Pi-0 ou GR00T N2, qui cherchent tous à unifier compréhension du langage, de la vision et génération d'actions robotiques dans une seule architecture. La tokenisation discrète des actions, plutôt que leur régression continue, est une piste explorée par plusieurs laboratoires pour rapprocher l'entraînement des VLA de celui des grands modèles de langage. Le code et les détails du projet sont disponibles sur la page dédiée des auteurs; les prochaines étapes attendues portent sur l'extension du benchmark ERIQ et des tests sur une plus grande diversité de plateformes robotiques.

IA physiqueActu
1 source
VLASH : des VLA en temps réel grâce à une inférence asynchrone anticipant les états futurs
3375arXiv cs.RO 

VLASH : des VLA en temps réel grâce à une inférence asynchrone anticipant les états futurs

Des chercheurs du MIT Han Lab publient VLASH, une méthode d'inférence asynchrone pour les modèles Vision-Language-Action (VLA) qui vise à résoudre le problème de latence de réaction sur les robots. Aujourd'hui, la plupart des VLA fonctionnent en mode synchrone : le robot suspend son action pendant que le modèle calcule la suivante, ce qui crée des à-coups visibles et l'empêche de réagir aux changements de son environnement pendant l'exécution. L'inférence asynchrone permettait déjà d'agir et de calculer en parallèle, mais générait un décalage temporel entre l'état prédit et l'état réel au moment de l'exécution, provoquant de l'instabilité. VLASH corrige ce décalage en projetant l'état futur du robot à partir du chunk d'action précédent, sans changement d'architecture ni surcoût de calcul. Les auteurs annoncent une réduction de la latence de réaction jusqu'à 11,8 fois par rapport à l'inférence synchrone, une précision supérieure à toutes les méthodes asynchrones existantes, et, combinée à une quantification des actions, une accélération de 1,5 à 2 fois du temps de complétion des tâches avec une perte de précision minime. Le code est disponible sur GitHub (mit-han-lab/vlash). Pour l'industrie robotique, cette avancée s'attaque directement à un goulot d'étranglement connu des VLA à l'échelle : leur difficulté à gérer des tâches rapides et dynamiques, un point faible régulièrement cité face aux approches de contrôle classiques. En améliorant un modèle existant comme π0.5 sans le réentraîner ni alourdir son architecture, VLASH illustre une voie d'optimisation logicielle low-cost pour rendre les VLA déployables sur des cas d'usage à haute cadence, un enjeu clé pour les intégrateurs qui cherchent à sortir ces modèles du seul cadre de la démonstration en laboratoire. Les auteurs démontrent concrètement ce gain sur des tâches exigeant une réaction fine et rapide, comme jouer au ping-pong ou au jeu de la taupe, des scénarios où l'inférence synchrone échoue purement et simplement. Ce travail s'inscrit dans une course plus large autour des VLA temps réel, aux côtés de modèles comme GR00T N2, Pi-0 ou Helix, où la latence de contrôle devient un critère de différenciation aussi important que la précision des gestes.

IA physiqueActu
1 source
Pyramide de données pour la manipulation incarnée
3376arXiv cs.RO 

Pyramide de données pour la manipulation incarnée

Une équipe de recherche publie sur arXiv (2607.24744) une revue structurant l'écosystème des données pour l'apprentissage robotique en une "pyramide" à cinq niveaux : données réelles issues de robots physiques, données de type UMI (capture de démonstrations humaines avec interface portable), vidéos égocentriques et exocentriques, données de simulation, et données vision-langage générales issues du web. Les auteurs organisent cette pyramide autour d'un compromis central entre scalabilité et alignement robotique, et évaluent chaque source selon quatre critères : qualité, diversité, réutilisabilité et fidélité physique. Ils passent ensuite en revue les modèles fondation récents pour la robotique, qu'il s'agisse de modèles de "cerveau" incarné, de modèles vision-langage-action (VLA) ou de modèles monde-action, en analysant comment chacun sélectionne, aligne et mélange ces différentes sources lors du pré-entraînement, et comment ce choix conditionne leurs capacités de perception, de raisonnement, de planification et de prédiction. Cette cartographie répond à un problème identifié depuis plusieurs années dans le secteur : contrairement aux modèles de langage ou de vision, qui s'entraînent sur la quasi-totalité du contenu textuel et visuel disponible sur internet, les agents incarnés ne peuvent pas se contenter de données passives puisqu'ils doivent apprendre le couplage entre observation, état physique et action. C'est ce goulot d'étranglement qui explique pourquoi des modèles comme Pi-0, GR00T N2 ou Helix combinent systématiquement plusieurs sources de données plutôt qu'une seule, et pourquoi des plateformes comme Figure 03 ou Optimus Gen 3 misent autant sur la collecte de données réelles en usine que sur la simulation. Les auteurs terminent par six chantiers non résolus : constituer des jeux de données tactiles à grande échelle, capturer des séquences d'échec et de récupération, développer des pipelines de collecte scalables, aligner les actions entre différentes morphologies de robots, exploiter les données égocentriques pour la manipulation dextre, et concevoir des recettes de données principielles plutôt qu'empiriques, autant de points de friction qui continuent de freiner le passage de la démonstration au déploiement industriel fiable.

RecherchePaper
1 source
Real2Sim2Real pour la manipulation vision-langage-action : un pipeline basé sur AMD ROCm
3377arXiv cs.RO 

Real2Sim2Real pour la manipulation vision-langage-action : un pipeline basé sur AMD ROCm

Des chercheurs publient sur arXiv (2607.22997v1) une pile logicielle de bout en bout entièrement basée sur ROCm, l'écosystème ouvert d'AMD, pour entraîner et déployer des modèles vision-langage-action (VLA) en robotique de manipulation. L'architecture couvre trois niveaux de matériel AMD : silicium d'entraînement en datacenter, cartes Radeon PRO pour la simulation et le rendu, et puces Ryzen AI pour le calcul embarqué. Quatre démonstrations illustrent la pile : un pipeline sim-to-real entraîné avec le modèle SmolVLA et déployé sur un bras robotique Franka ; une tâche de sélection d'objet guidée par le langage baptisée « one-of-three » ; un pipeline real-to-sim qui associe des reconstructions de scènes réelles par 3D Gaussian Splatting (3DGS) au moteur physique Genesis pour générer des données d'entraînement synthétiques ; et un entraînement par renforcement à grande échelle pour la locomotion de robots quadrupèdes et humanoïdes, benchmarké sur plusieurs plateformes matérielles. L'ensemble fonctionne nativement sous ROCm et PyTorch sur des GPU RDNA4 (Radeon AI PRO R9700) et RDNA3.5 (Radeon PRO W7900), et les pipelines sont reproductibles gratuitement sur la Radeon Cloud Platform. L'enjeu dépasse la simple démonstration technique : la quasi-totalité des pipelines VLA publiés jusqu'ici, de SmolVLA à Pi-0 en passant par GR00T N2 ou Helix, s'entraînent et se déploient sur des écosystèmes CUDA de Nvidia, aujourd'hui quasi incontournable dans l'IA physique. En montrant qu'un pipeline sim-to-real complet, du rendu 3DGS à l'inférence embarquée, tient sur ROCm sans réécriture lourde, les auteurs ouvrent une alternative matérielle crédible pour les intégrateurs et laboratoires cherchant à diversifier leurs fournisseurs de calcul ou à réduire leurs coûts. Pour les décideurs B2B, le signal principal reste la reproductibilité gratuite via la Radeon Cloud Platform, qui abaisse la barrière d'entrée pour tester des politiques VLA sans investir dans du matériel Nvidia. Le papier demeure toutefois une preuve de faisabilité technique sur des tâches de manipulation limitées (un bras Franka, un tri à trois objets), sans démonstration de déploiement industriel à l'échelle ni de comparaison chiffrée de performance face aux stacks CUDA équivalentes. Cette publication s'inscrit dans la course engagée par AMD pour rattraper son retard face à Nvidia sur le marché de l'IA, et plus spécifiquement sur celui, naissant, de l'IA physique évoqué par Lisa Su au CES 2026 et par Jensen Huang lors de la GTC Paris de juin 2025. Le choix des briques logicielles, SmolVLA (Hugging Face), Genesis (moteur physique open source) et 3D Gaussian Splatting, situe les auteurs dans la mouvance open source de la robotique généraliste, aux côtés d'acteurs comme Physical Intelligence (Pi-0) ou Nvidia lui-même avec GR00T. Aucun acteur français ou européen n'apparaît dans cette publication centrée sur l'infrastructure matérielle. Les auteurs annoncent code et pipelines reproductibles dès aujourd'hui sur la Radeon Cloud Platform, sans toutefois préciser de calendrier de commercialisation ni de partenariats industriels concrets à ce stade.

InfrastructureActu
1 source
N₀-TWAM : passage à l'échelle d'un modèle monde-action tactile natif pour la manipulation à contacts riches
3378arXiv cs.RO 

N₀-TWAM : passage à l'échelle d'un modèle monde-action tactile natif pour la manipulation à contacts riches

Des chercheurs présentent N0-TWAM, un modèle monde-action "tactile natif" conçu pour la manipulation robotique dans des tâches à contact riche, capable de prédire à la fois l'image future et le contact physique futur. Selon les auteurs, il s'agirait du premier modèle monde-action tactile entraîné à grande échelle, une affirmation à prendre avec la prudence habituelle pour ce type de papier arXiv (2607.23783, non encore relu par les pairs). Le pré-entraînement combine vision et tactile sur des démonstrations couvrant six morphologies de robots différentes et 450 tâches. Le système s'appuie sur NeoForce, une représentation tactile unifiée basée sur la force, censée fournir un signal de contact physiquement ancré pour guider la génération d'actions. Pour gérer les tâches longues et multi-étapes, les auteurs introduisent des "événements de contact tactile" qui marquent la progression d'une étape à l'autre. Côté architecture, un Mixture-of-Transformers asymétrique associe un expert large pour la prédiction vidéo à des experts plus légers pour l'action et le tactile, dans un souci d'efficacité temps réel. Le modèle a été évalué sur des benchmarks réels et simulés, et le code ainsi que les poids seront publiés en open source. L'enjeu dépasse la simple prouesse technique. Les modèles vision-langage-action actuels, de π0 à GR00T N2 en passant par Helix, reposent presque exclusivement sur la vision, ce qui explique une bonne partie de leurs échecs sur les tâches fines de contact : insertion de pièces, préhension d'objets déformables, assemblage. Un modèle qui démontre un gain mesurable grâce au passage à l'échelle des données tactiles apporterait un signal utile pour les intégrateurs industriels confrontés à ce fossé entre démonstration en vidéo et fiabilité en production. Le manque de jeux de données tactiles standardisés à grande échelle est resté un frein connu du secteur, contrairement à la vision où les corpus type RT-X abondent. En couvrant six embodiments, N0-TWAM s'inscrit dans cette logique de généralisation multi-robots. La publication annoncée du code et des checkpoints permettra à la communauté de vérifier ces résultats et d'évaluer si l'approche tient face à des déploiements réels sur des tâches d'assemblage ou de manipulation fine.

RecherchePaper
1 source
Robot low-cost, banc de test ArmnetBench v0.1 pour évaluer des politiques de manipulation en parallèle
3379arXiv cs.RO 

Robot low-cost, banc de test ArmnetBench v0.1 pour évaluer des politiques de manipulation en parallèle

Des chercheurs ont publié ArmnetBench v0.1, un benchmark d'évaluation en conditions réelles pour les politiques de manipulation robotique, exécuté sur une flotte de bras low-cost SO-101 sous supervision humaine légère sur site. Cette première version compare 7 politiques sur 12 tâches, en configuration bras unique et bimanuelle. Chaque politique est entraînée ou affinée sur 50 démonstrations par tâche. Le benchmark comptabilise 2 518 rollouts de politiques et 600 démonstrations de référence, soit 3 118 épisodes au total, chacun annoté selon une échelle à trois niveaux (réussite, sous-optimal, échec). Les rollouts sont notés manuellement, tandis que les démonstrations sont par construction considérées comme réussies. L'ensemble des 3 118 épisodes est publié en deux formats standards, LeRobot v3.0 et RoboMeter, pour faciliter la réutilisation par la communauté. L'évaluation en conditions réelles reste le principal goulot d'étranglement du développement de politiques de manipulation généralistes : chaque rollout nécessite du matériel physique et un opérateur pour installer, réinitialiser et noter la tentative, ce qui limite fortement le volume de tests réalisables face aux simulateurs. En s'appuyant sur des bras SO-101 peu coûteux et une supervision réduite, ArmnetBench propose un compromis entre le coût d'un banc d'essai physique et la scalabilité recherchée pour comparer des politiques à grande échelle. Au-delà du classement, la valeur du jeu de données tient surtout à son étiquetage qualité par épisode : ces trajectoires annotées peuvent nourrir l'entraînement de modèles de récompense, de modèles du monde prédictifs, ou de politiques apprises sur des données de qualité mixte, un axe distinct de la simple mesure de performance. Ce travail s'inscrit dans la lignée des efforts communautaires autour de l'écosystème LeRobot et des bras robotiques abordables comme le SO-101, popularisés notamment par Hugging Face pour démocratiser la recherche en manipulation hors des laboratoires équipés de bras industriels coûteux. Il fait écho aux benchmarks existants bâtis en simulation ou sur du matériel plus onéreux, en offrant une alternative reproductible à bas coût. Les auteurs présentent ce classement initial comme un point de départ sous budget partagé plutôt qu'une évaluation définitive, cette v0.1 servant avant tout à valider l'infrastructure de la ferme de bras de bout en bout. Les suites attendues incluent l'élargissement du nombre de tâches et de politiques comparées, ainsi que l'exploitation des données mixtes pour entraîner de nouveaux modèles.

InfrastructureActu
1 source
τ : apprendre des modèles vision-langage-action augmentés par le toucher à partir d'une supervision visuelle future
3380arXiv cs.RO 

τ : apprendre des modèles vision-langage-action augmentés par le toucher à partir d'une supervision visuelle future

Un article publié sur arXiv (référence 2607.24485v1, catégorie "new") présente τ (tau), un framework qui enrichit les modèles Vision-Language-Action (VLA) avec une représentation tactile spatio-temporelle conditionnée par l'action. La méthode s'inspire du JEPA (Joint-Embedding Predictive Architecture) : elle apprend cette représentation en prédisant les futures observations visuelles à partir du signal tactile, puis fusionne cette information avec les caractéristiques vision-langage pour générer les actions du robot. Cette supervision opère uniquement dans l'espace latent et pendant l'entraînement, sans surcoût au moment du déploiement. Les auteurs publient également TacAura, un jeu de données synchronisant vision, proprioception et signaux tactiles à base de capteurs visuels, collecté sur quatre tâches de manipulation impliquant des contacts riches. L'enjeu est la sous-exploitation du toucher dans les modèles VLA actuels, qui reposent majoritairement sur la vision et le langage, ou au mieux sur une détection binaire de contact ou des séquences de torseurs 6D, insuffisantes pour exploiter des signaux tactiles haute dimension. Le papier s'attaque frontalement au problème de rareté des données : les démonstrations spécifiques à une tâche sont limitées, tandis qu'un pré-entraînement tactile à grande échelle reste coûteux. En montrant qu'une supervision auto-supervisée de type JEPA permet d'extraire une représentation tactile exploitable avec peu de données, l'étude touche à un débat central du secteur, celui de l'efficacité des données pour des tâches de manipulation fine (insertion, préhension d'objets déformables) où la seule vision atteint ses limites, un enjeu direct pour les intégrateurs industriels visant l'assemblage de précision. Ce travail s'inscrit dans la lignée des modèles VLA généralistes (Pi-0, GR00T N2, Helix) qui combinent perception et langage pour piloter des robots, mais qui ont historiquement négligé le tactile faute de capteurs standardisés et à cause du coût de collecte. Les auteurs comparent τ à des approches existantes centrées sur les états de contact instantanés, et démontrent une meilleure généralisation à des objets et scènes inédits. Il s'agit à ce stade d'un travail de recherche académique, sans annonce de déploiement industriel ni de partenariat commercial.

RecherchePaper
1 source
Renormalisation des paramètres effectifs : comportement réel, du concept de masse infinie de l'électron à l'écart simulation-réel en robotique
3381arXiv cs.RO 

Renormalisation des paramètres effectifs : comportement réel, du concept de masse infinie de l'électron à l'écart simulation-réel en robotique

Des chercheurs proposent une nouvelle approche pour combler l'écart entre simulation et réalité (sim-to-real gap) en robotique, publiée sur arXiv sous le titre « Effective Parameters, Real Behavior: Renormalization for Robotics ». Plutôt que de construire des simulateurs toujours plus précis, l'équipe emprunte le concept de renormalisation, issu de la physique théorique, pour introduire des paramètres effectifs dépendant de la résolution, qui absorbent les détails que le simulateur omet. Ces valeurs peuvent s'écarter des grandeurs physiques mesurées car elles compensent ce que le modèle ne capture pas. Les auteurs démontrent analytiquement ce mécanisme pour un contrôle proportionnel dérivé (PD) à fréquence de simulation finie : le gain proportionnel modifie le gain dérivé effectif, et le retour dérivé modifie l'inertie effective du système. Ils appliquent ensuite cette lecture à deux cas concrets, la manipulation dynamique de corde et la nage sous marine, avant de proposer une procédure pratique en trois étapes : choisir les bonnes observables, identifier la physique omise par le simulateur, puis en déduire les paramètres effectifs à utiliser. Le sim-to-real reste le principal goulot d'étranglement pour déployer des politiques entraînées en simulation, qu'il s'agisse d'apprentissage par renforcement ou de modèles VLA (vision-language-action) comme Pi-0, GR00T N2 ou Helix, calibrés en environnement virtuel avant transfert sur robot réel. L'hypothèse dominante du secteur veut que ce fossé se résorbe en améliorant la fidélité physique des simulateurs (contact, friction, dynamique des fluides). Cette approche par renormalisation la nuance : elle suggère qu'un simulateur volontairement simplifié, combiné à des paramètres correctement recalibrés, peut reproduire un comportement réel sans effort de modélisation supplémentaire. Pour les intégrateurs et équipes de recherche qui calibrent des contrôleurs PD ou entraînent des politiques en simulation, cela ouvre une piste potentiellement moins coûteuse en calcul que la course à la simulation haute fidélité. Le concept s'inspire directement de la renormalisation en physique quantique, où la masse « habillée » d'un électron diffère de sa masse nue pour absorber des interactions non modélisées, un problème historiquement lié à la masse infinie de l'électron en électrodynamique quantique. Son transfert à la robotique reste, à ce stade, une contribution théorique : la démonstration analytique porte sur un cas simple (PD à fréquence finie) et deux illustrations qualitatives (corde, nage), sans expérimentation à grande échelle sur robot physique ni comparaison chiffrée avec les méthodes de calibration existantes comme l'identification de système ou la randomisation de domaine. Les auteurs présentent leur procédure comme un complément, non un remplacement, aux efforts de simulation haute fidélité ; les prochaines étapes attendues portent sur la validation avec des systèmes robotiques plus complexes et des déploiements réels.

RecherchePaper
1 source
Benchmark LabRobFail : évaluer l'analyse des défaillances robotiques dans les laboratoires autonomes de chimie
3382arXiv cs.RO 

Benchmark LabRobFail : évaluer l'analyse des défaillances robotiques dans les laboratoires autonomes de chimie

Une équipe de recherche (affiliée à SciRobo, projet disponible sur GitHub sous Su-ISE-2001) a publié LabRobFail, un référentiel dédié à l'analyse des défaillances robotiques dans les laboratoires chimiques autonomes. Le système repose sur trois briques : LabRobFail-Sim, un simulateur qui injecte des pannes contrôlées à trois niveaux (contrôle, physique, sémantique) ; LabRobFail-Data, une base de plus de 20 000 trajectoires couvrant plus de 70 scénarios de tâches, cinq catégories de défaillances et 11 types de pannes détaillés ; et LabRobFail-Bench, un protocole d'évaluation testant six capacités : compréhension de la tâche, détection de défaillance, localisation temporelle, évaluation de la sévérité, classification et correction actionnable. Les chercheurs ont aussi entraîné LabRobFail-VLM, un modèle vision-langage spécialisé pour ce domaine, qui atteint 92,58 % de précision en détection de défaillance et 85,58 % en localisation temporelle sur des environnements déjà vus, surpassant nettement les VLM généralistes. Intégré comme superviseur en temps réel, ce modèle améliore le taux de réussite des tâches VLA en aval de 10 à 20 points de pourcentage. Ce travail cible un angle mort connu du secteur de la robotique de laboratoire : la fiabilité. Les expériences chimiques sont irréversibles et potentiellement dangereuses, ce qui rend la simple absence de données de défaillance un obstacle majeur au déploiement d'agents robotiques autonomes en labo. En créant un jeu de données synthétique massif et un protocole d'évaluation fin plutôt qu'un simple score de réussite binaire, l'équipe déplace le débat du "est-ce que ça marche en démo" vers "est-ce que le système sait détecter et corriger ses propres erreurs". Le gain de 10 à 20 points sur les tâches VLA lorsqu'un superviseur de supervision des pannes est ajouté est significatif pour les intégrateurs et responsables R&D qui évaluent si les architectures VLA (vision-langage-action) actuelles, comme Pi-0 ou GR00T N2 dans d'autres contextes robotiques, sont mûres pour une autonomie en boucle fermée sans supervision humaine constante. Le contexte est celui d'une course plus large à l'automatisation de la découverte scientifique, où les laboratoires "self-driving" combinent bras robotiques, instruments automatisés et modèles d'IA pour accélérer chimie et science des matériaux, un secteur où les incidents matériels coûtent cher et où la confiance des chercheurs reste un frein à l'adoption. Contrairement à des annonces de robots humanoïdes commerciaux où l'accent est mis sur la performance brute, LabRobFail adopte une approche inverse : construire un référentiel de sécurité et de diagnostic avant le déploiement à grande échelle. Le code et les données étant publiés en open source, cette initiative pourrait servir de base de comparaison pour d'autres équipes développant des VLM ou VLA spécialisés en robotique de laboratoire, avec pour prochaine étape probable l'extension du référentiel à d'autres types d'instruments ou de protocoles chimiques.

RecherchePaper
1 source
N₀-VTLA : passage à l'échelle du modèle vision-tactile-langage-action grâce à des tokens tactiles latents
3383arXiv cs.RO 

N₀-VTLA : passage à l'échelle du modèle vision-tactile-langage-action grâce à des tokens tactiles latents

Une équipe de recherche présente N0-VTLA, un modèle fondation vision-tactile-langage-action (VTLA) conçu pour la manipulation fine en contact avec des objets, combinant perception tactile et contrôle par retour tactile. Décrit dans un article publié sur arXiv (2607.23782), le système repose sur trois étapes d'entraînement : un pré-entraînement visuo-tactile sur NeoData, un vaste jeu de données robotiques propriétaire combinant vision et toucher, une intégration progressive d'un canal tactile dédié, puis une amélioration de politique hors ligne baptisée ALTER. Les auteurs revendiquent le premier modèle VTLA pré-entraîné sur des données tactiles à cette échelle. Sur les neuf tâches du benchmark réel NeoReal, N0-VTLA l'emporte face à toutes les méthodes concurrentes testées. Sur une suite de vingt tâches en simulation, il atteint 63,8% de réussite moyenne, contre 44,0% pour la meilleure référence. Les politiques entraînées avec ALTER atteignent 75 à 95% de réussite sur trois tâches réelles à horizon long. Ces résultats ciblent un point de friction connu de la robotique manipulatrice : les modèles vision-langage-action actuels gèrent mal les tâches nécessitant un contact fin et continu, comme la manipulation d'objets déformables, faute d'un signal tactile correctement intégré. En démontrant qu'un canal tactile prédictif, distillé à partir de priors appris à grande échelle, améliore significativement la réussite sur des tâches de préhension délicate, l'étude apporte un argument concret pour l'intégration systématique du toucher dans les futures architectures VLA, un sujet jusqu'ici moins mature que la seule perception visuelle. La méthode ALTER, qui transforme des comparaisons de progression et d'événements de trajectoire en étiquettes d'avantage binaires, offre aussi une piste pour exploiter des corpus de déploiement déjà collectés sans reconstruire un pipeline de reward complexe. Le travail s'inscrit dans la vague récente de modèles VLA génériques (Pi-0, GR00T N2, Helix) qui cherchent à généraliser la manipulation robotique au-delà de tâches scriptées, mais reste à ce stade une contribution académique évaluée sur des benchmarks internes aux auteurs plutôt qu'un produit ou un déploiement industriel documenté. Aucune date de disponibilité, aucun partenariat commercial ni acteur français ou européen n'est mentionné dans l'article ; les prochaines étapes annoncées concernent l'extension du jeu de données NeoData et l'application d'ALTER à d'autres familles de tâches de manipulation contact-riches.

RechercheActu
1 source
La malédiction de la précision : une loi d'échelle des données pour la manipulation robotique de haute précision
3384arXiv cs.RO 

La malédiction de la précision : une loi d'échelle des données pour la manipulation robotique de haute précision

Le laboratoire à l'origine de cet article, publié sur arXiv (2607.23108v1) sous le titre "The Curse of Precision", s'attaque à une question restée peu étudiée dans l'apprentissage par imitation : la relation entre volume de données et précision atteignable sur des tâches d'assemblage robotique en environnement fermé. Les auteurs établissent une nouvelle loi d'échelle empirique : pour maintenir un taux de réussite fixe, le nombre de démonstrations N nécessaires croît de façon super-exponentielle à mesure que la précision cible P se rapproche d'une limite c, selon la relation log(N) proportionnel à 1/(P-c). Autrement dit, au-delà d'un certain seuil de précision, ajouter des démonstrations supplémentaires devient rapidement improductif, voire prohibitif en coût de collecte. Le résultat central de l'étude est que cette limite c n'est pas une constante physique propre à la tâche, mais une propriété émergente de l'ensemble du système agent, incluant ses capteurs et sa politique experte. Les expériences, menées sur des tâches de manipulation canoniques, montrent que des ajustements système comme l'ajout d'une caméra poignet ou l'utilisation d'un expert plus performant abaissent mesurablement c, élargissant ainsi la précision maximale accessible. Cette découverte a une portée pratique directe pour les équipes qui développent des systèmes de manipulation robotique de haute précision, un domaine clé pour l'assemblage industriel et l'intégration de bras robotiques dans des lignes de production. Plutôt que de multiplier aveuglément les démonstrations pour améliorer la précision d'un modèle appris par imitation, la loi proposée offre une méthode de diagnostic : si les gains stagnent malgré l'ajout de données, le problème vient probablement d'une limite systémique (capteur insuffisant, politique experte imparfaite) plutôt que d'un manque de volume. Cela répond à une hypothèse implicite mais rarement testée dans le secteur des politiques vision-langage-action (VLA), à savoir que plus de données suffit toujours à améliorer la précision. Le travail s'inscrit dans la lignée des études sur les lois d'échelle en apprentissage par imitation, jusqu'ici centrées sur la généralisation en environnement ouvert plutôt que sur la précision en tâche fermée. Il fournit un cadre théorique et une métrique quantitative pour évaluer les capacités d'un système de manipulation, avec des implications pour le débogage et la conception des futures générations de politiques robotiques à haute précision.

RecherchePaper
1 source
Épisode oublié : mise en œuvre et évaluation d'une mémoire épisodique personnalisée pour la tête du robot humanoïde Kim
3385arXiv cs.RO 

Épisode oublié : mise en œuvre et évaluation d'une mémoire épisodique personnalisée pour la tête du robot humanoïde Kim

Des chercheurs ont développé et testé un module de mémoire épisodique pour Kim, une tête de robot humanoïde social, afin de résoudre un problème classique des agents conversationnels basés sur des grands modèles de langage : l'absence de mémoire persistante entre les sessions. Le système combine une récupération sémantique par vecteurs avec un modèle de dialogue piloté par LLM, en utilisant une fonction de score hybride qui associe similarité cosinus et une métrique de "force mémorielle" pour sélectionner les interactions passées les plus pertinentes et les injecter dans le prompt de génération. L'équipe a évalué l'approche via une étude en ligne à base de vidéos, en intra-sujets, auprès de 43 participants, à l'aide de l'échelle HRIES (Human-Robot Interaction Evaluation Scale). Les résultats montrent une augmentation significative de la sociabilité perçue (d = 0,60, p < .001), avec des effets particulièrement marqués sur la confiance perçue (d = 0,62) et la chaleur perçue (d = 0,56), tandis que le niveau de gêne ressenti par les participants est resté strictement inchangé (d = 0,00). Ce dernier point est le résultat le plus significatif pour l'industrie : ajouter de la mémoire personnalisée à un robot social améliore la qualité relationnelle perçue sans déclencher de malaise lié à la vie privée ni d'effet de vallée dérangeante, deux risques souvent redoutés par les concepteurs de robots compagnons. Pour les équipes qui développent des agents conversationnels embarqués, ces travaux apportent une validation empirique concrète à une intuition répandue mais peu testée : la mémoire à long terme agit comme un "lubrifiant social" qui renforce la relation humain-robot, sans compromis apparent sur l'acceptabilité. C'est un signal utile alors que la majorité des déploiements actuels de robots conversationnels restent limités à des interactions sans continuité d'une session à l'autre. Le travail s'inscrit dans la lignée des systèmes de récupération augmentée (RAG) appliqués à l'interaction humain-robot, un domaine où la plupart des architectures LLM conversationnelles butent encore sur la gestion du contexte long terme. Contrairement aux approches propriétaires opaques des grands robots commerciaux, cette étude fournit une méthodologie reproductible et une mesure quantifiée de l'impact social de la mémoire, ouvrant la voie à des évaluations comparables sur d'autres plateformes robotiques et à une intégration plus large de mécanismes de mémoire persistante dans les futurs robots compagnons ou d'assistance.

RecherchePaper
1 source
Vue-Langage-Action : agir, réfléchir ou s'abstenir selon la complexité perçue
3386arXiv cs.RO 

Vue-Langage-Action : agir, réfléchir ou s'abstenir selon la complexité perçue

Une équipe de recherche propose un mécanisme d'inférence adaptative pour les modèles Vision-Language-Action (VLA), publié sur arXiv (2603.05147v2). Le principe: au lieu d'appliquer systématiquement un raisonnement coûteux à chaque tâche, le système classe la complexité de la situation perçue et choisit entre trois modes, Act (exécution immédiate pour les tâches connues), Think (raisonnement approfondi pour les cas ambigus) et Abstain (arrêt préventif face à une anomalie physique ou sémantique). La méthode transforme le backbone vision-langage du VLA en détecteur actif, en projetant ses embeddings latents dans des estimateurs paramétriques et non paramétriques. Testé sur les benchmarks LIBERO et LIBERO-PRO ainsi que sur un robot réel, le modèle combinant un Gaussian Mixture Model appliqué aux embeddings fusionnés vision-langage-instruction obtient jusqu'à 87,5% de F1-score sur deux backbones VLA différents, SmolVLA et π0, et conserve 83% de performance avec seulement 5% des données d'entraînement, dépassant les détecteurs d'échec de l'état de l'art. Pour l'industrie robotique, ce travail s'attaque à deux problèmes concrets qui freinent le déploiement des VLA en production: le coût de calcul du raisonnement systématique, qui pénalise le temps de cycle et l'autonomie embarquée sur des tâches triviales, et l'absence de garde-fou fiable face aux scénarios hors distribution, source de défaillances catastrophiques en environnement réel. En donnant au modèle une estimation d'incertitude native plutôt qu'un raisonnement en force brute partout, l'approche vise un compromis entre latence et sécurité que les intégrateurs réclament pour justifier un passage du laboratoire à l'usine ou à l'entrepôt. Le fait que la robustesse se maintienne avec 5% des données seulement suggère aussi une piste pour réduire le coût d'entraînement spécifique à chaque nouvelle tâche. Le travail s'inscrit dans la lignée des VLA généralistes comme π0 (Physical Intelligence) et des modèles compacts comme SmolVLA, dont la généralisation reposait jusqu'ici surtout sur l'ajout de modules de raisonnement, au prix de la latence. En s'appuyant sur les benchmarks de simulation LIBERO et sa variante durcie LIBERO-PRO, complétés par une validation sur robot physique, les auteurs positionnent leur détecteur de complexité comme une alternative aux approches existantes de détection d'échec. Les prochaines étapes attendues concernent l'extension à d'autres familles de VLA et une validation à plus grande échelle en conditions industrielles réelles.

RechercheActu
1 source
Système Anti-Complémentarité et Fonctions Barrières de Contrôle pour un Contrôle Corporel Complet et Sûr du Robot
3387arXiv cs.RO 

Système Anti-Complémentarité et Fonctions Barrières de Contrôle pour un Contrôle Corporel Complet et Sûr du Robot

Une équipe de chercheurs publie une version révisée sur arXiv (2504.17647v2) d'un travail théorique qui établit, pour la première fois de façon formelle, l'équivalence mathématique entre deux outils utilisés séparément pour garantir la sécurité des robots en temps réel : les contraintes de complémentarité et les fonctions barrières de contrôle, plus connues sous l'acronyme CBF. La démonstration porte sur des systèmes du premier ordre à données échantillonnées, c'est à dire le cadre typique du contrôle numérique embarqué sur un robot réel, et couvre à la fois le cas d'une seule contrainte de sécurité et celui de contraintes multiples simultanées, comme lorsqu'un bras ou un robot à corps entier doit éviter plusieurs obstacles ou respecter plusieurs limites articulaires en même temps. Cette unification théorique a une portée pratique directe pour le contrôle dit "whole body", c'est à dire la coordination de l'ensemble des degrés de liberté d'un robot humanoïde ou d'un bras manipulateur pour garantir l'évitement de collision en réactif, sans replanification lourde. Les deux communautés, celle de l'optimisation sous contraintes de complémentarité et celle des CBF popularisées ces dernières années en robotique et en conduite autonome, avaient développé des garanties de robustesse et des méthodes algorithmiques largement indépendantes. Prouver leur équivalence permet désormais de transférer directement les avancées de l'un vers l'autre : un résultat de robustesse démontré côté complémentarité devient exploitable côté CBF, et inversement, sans repartir de zéro. Pour les équipes qui développent des contrôleurs de sécurité pour robots industriels ou humanoïdes, cela signifie un choix d'implémentation moins contraint par la littérature disponible dans chaque sous domaine. Les CBF se sont imposées depuis une dizaine d'années comme un cadre de référence pour encoder des contraintes de sécurité dans des lois de commande temps réel, tandis que les contraintes de complémentarité viennent de la tradition de l'optimisation et du contrôle optimal sous contraintes d'inégalité. Le fait que ces deux approches, nées dans des communautés distinctes, se révèlent mathématiquement équivalentes dans ce cadre précis ouvre la voie à des travaux de comparaison plus larges, notamment pour des systèmes du second ordre et des scénarios de contraintes plus complexes, que les auteurs identifient explicitement comme prochaine étape de recherche.

RecherchePaper
1 source
RRTrack : suivi robuste et récupérable de la pose 6D d'objets pour scènes dynamiques
3388arXiv cs.RO 

RRTrack : suivi robuste et récupérable de la pose 6D d'objets pour scènes dynamiques

Des chercheurs ont présenté RRTrack, un système de suivi de pose 6D d'objets conçu pour les scènes robotiques dynamiques, dans un article publié sur arXiv fin juillet 2026. L'architecture repose sur une boucle fermée à deux niveaux : une branche 2D assure la localisation continue de la cible via un module de segmentation vidéo d'objets basé sur la mémoire (VOS), tandis qu'une branche 6D vérifie la cohérence géométrique avant chaque mise à jour de cette mémoire. Pour récupérer une cible perdue après une occlusion complète, les auteurs ajoutent un module d'appariement de templates à double banque, fondé sur DINOv2, qui combine des modèles synthétiques générés hors ligne avec des ancres d'observation captées en temps réel. Un nouveau benchmark RGB-D synthétique, couvrant trois scénarios robotiques à mouvement rapide et occlusion totale, a été introduit pour évaluer la méthode. Sur ce benchmark, RRTrack améliore le score ADD-S AR de 66,3 % et l'AUC ADD-S de 65,7 % par rapport à FoundationPose, tout en tournant à 55,2 images par seconde. Des essais en conditions réelles, avec capteurs bruités, confirment la robustesse du système. Ce travail s'attaque à une limite concrète des pipelines de manipulation robotique : les estimateurs de pose image par image sont précis mais trop lourds pour du temps réel, alors que les trackers existants décrochent dès qu'un objet disparaît brièvement du champ de vision, par exemple lors d'une prise rapide ou d'une occlusion par un bras ou un autre objet. Un suivi capable de récupérer automatiquement la cible sans relancer une détection complète réduit la latence et la fragilité des boucles de perception-action, un point critique pour les intégrateurs qui déploient des bras ou des AMR dans des environnements encombrés où la visibilité continue n'est jamais garantie. FoundationPose, utilisé ici comme référence de comparaison, s'est imposé ces deux dernières années comme une base solide pour l'estimation de pose 6D généralisable sans réentraînement par objet, mais reste coûteux à faire tourner en continu. RRTrack se positionne comme une alternative plus légère et récupérable, taillée pour la robotique embarquée. Le code et le benchmark sont publiés sur GitHub, ce qui laisse la porte ouverte à une adoption rapide par la communauté recherche avant d'éventuels transferts vers des systèmes industriels.

RecherchePaper
1 source
Try Once, Puis Optimal : Mémoire de Procédure Dé-redondée pour l'Amortissement de l'Exploration Inter-Épisodes
3389arXiv cs.RO 

Try Once, Puis Optimal : Mémoire de Procédure Dé-redondée pour l'Amortissement de l'Exploration Inter-Épisodes

Des chercheurs présentent Instance-Oriented Memory (IOM), un système de mémoire objet-centrique qui évite aux robots manipulateurs de re-sonder à chaque rencontre les objets à état caché, comme un four à micro-ondes verrouillé ou une porte au mécanisme invisible. Dès la première rencontre, réussie ou non, IOM enregistre une courte procédure indexée sur les caractéristiques visuelles de l'objet, puis l'injecte comme biais souple dans une politique de manipulation ; à la rencontre suivante, le robot reconnaît l'objet et rappelle directement la procédure au lieu de re-explorer. La distillation s'appuie sur un modèle vision-langage (VLM) prêt à l'emploi, sans entraînement spécifique à la tâche. Sur quatre tâches d'objets articulés (four et porte en simulation, bouteille et armoire sur robot réel), une mémoire de procédure oracle réduit les opérations de manipulation de 16 à 30 % sans perte de réussite, et la version instrumentée par VLM récupère 69 à 88 % de ce gain dès la sortie de boîte. L'apport cible un angle mort des mémoires inter-épisodes existantes, qui organisent la réutilisation autour d'états génériques plutôt qu'autour de l'objet et du coût réel de sa re-exploration. Pour des intégrateurs déployant des robots en environnement semi-structuré (entrepôt, cuisine, hôpital) où les mêmes appareils reviennent souvent dans le champ d'action, ce gain d'efficacité réduit directement le temps de cycle. Le point le plus significatif pour la fiabilité en conditions réelles : la procédure retrouvée n'est qu'un biais sur une politique pilotée par retour sensoriel, pas une instruction impérative, donc une mémoire erronée est corrigée plutôt que suivie aveuglément. Le taux de réussite ne régresse jamais, même quand la procédure rappelée est fausse, ce qui arrive dans environ 12 % des instances de porte, et il s'améliore même sur le robot réel. IOM s'inscrit dans la recherche sur la manipulation d'objets articulés à état caché, où le robot doit sonder physiquement un loquet ou une charnière avant d'agir de façon fiable. Contrairement aux politiques VLA généralistes récentes comme GR00T N2, Helix ou Pi-0, centrées sur la généralisation de compétences entre tâches, IOM se positionne comme une couche de mémoire additionnelle au-dessus d'une politique existante plutôt que comme un concurrent direct. L'article, soumis sur arXiv le 28 juillet 2026 en tant que nouvelle contribution, précise que le code sera publié après acceptation : aucune implémentation n'est donc encore disponible publiquement, et la validation reste pour l'instant limitée à quatre tâches de laboratoire.

RecherchePaper
1 source
« À base d'agents » ou pas, ce titre parle de synthèse de politiques robotiques guidées par le langage
3390arXiv cs.RO 

« À base d'agents » ou pas, ce titre parle de synthèse de politiques robotiques guidées par le langage

Traduction et résumé français de l'article ARCHITECT : Une équipe de recherche présente ARCHITECT, un framework qui reformule l'apprentissage de politiques robotiques comme une tâche de synthèse de programme interactive plutôt que comme un modèle de bout en bout. Contrairement aux modèles vision-langage-action (VLA) qui produisent des politiques opaques et difficiles à corriger, ARCHITECT s'appuie sur des agents de codage basés sur des LLM pour générer des programmes robotiques modulaires exploitant une bibliothèque d'outils de perception et de contrôle. Un superviseur humain peut intervenir par des corrections en langage naturel, que le système relie directement au code de la politique grâce aux traces d'exécution du programme, puis distille dans une bibliothèque de compétences persistante, une forme d'apprentissage en contexte à long terme. Sur un benchmark utilisant un bras robotique Franka Panda, ARCHITECT surpasse à la fois les modèles VLA de référence et les méthodes de synthèse de programme concurrentes sur des tâches longues et complexes, dont la manipulation d'objets articulés et le pliage de tissu. L'intérêt principal réside dans la réponse apportée à un problème récurrent du secteur : le décalage entre les démonstrations impressionnantes des modèles VLA et leur fragilité en conditions réelles, où un changement de distribution provoque des échecs en cascade difficiles à diagnostiquer. En rendant chaque politique modulaire et traçable, ARCHITECT permet d'isoler précisément l'origine d'un échec et de corriger uniquement le module fautif, plutôt que de réentraîner un modèle entier. Pour les intégrateurs et décideurs industriels, cela ouvre la voie à des systèmes plus auditables et moins gourmands en données d'entraînement, un argument clé face au coût et à l'opacité des grands modèles de fondation robotiques. Ce travail s'inscrit dans un mouvement de recherche cherchant des alternatives aux VLA monolithiques, en misant sur les capacités de raisonnement des LLM pour écrire et corriger du code robotique plutôt que d'apprendre des politiques end-to-end. La bibliothèque de compétences accumulée permettrait au système de transférer ses acquis vers des tâches nouvelles avec une intervention humaine décroissante, un axe que les auteurs présentent comme une alternative data-efficiente et pilotable à l'apprentissage robotique en boîte noire. Il s'agit pour l'instant d'un résultat de recherche évalué en laboratoire, sans indication de déploiement industriel.

RecherchePaper
1 source
MSG-Loc : appariement de graphes sémantiques multi-étiquettes basé sur la vraisemblance pour la localisation globale au niveau des objets
3391arXiv cs.RO 

MSG-Loc : appariement de graphes sémantiques multi-étiquettes basé sur la vraisemblance pour la localisation globale au niveau des objets

Une équipe de recherche en robotique a présenté MSG-Loc, un nouveau cadre de localisation globale pour robots basé sur l'appariement de graphes sémantiques à étiquettes multiples. Publié sur arXiv (version révisée, décembre 2025), le travail s'attaque à un problème concret : lorsqu'un robot cherche à se repérer dans un environnement dont il ne connaît pas à l'avance les classes d'objets, l'ambiguïté sémantique multiplie les erreurs de classification et les associations incorrectes entre objets détectés et carte de référence, ce qui dégrade fortement la précision de la pose estimée. Plutôt que de représenter chaque objet observé par une seule étiquette sémantique comme le font les approches existantes, MSG-Loc construit des représentations en graphe à étiquettes multiples, capturant le contexte sémantique complet de chaque observation. La méthode affine ensuite la correspondance entre graphes en combinant, pour chaque nœud, sa propre vraisemblance avec la vraisemblance maximale de ses voisins, via un mécanisme de propagation contextuelle. Les auteurs valident l'approche à la fois en configuration "closed-set" (catégories d'objets connues à l'avance) et "open-set" (catégories non anticipées), sur des scènes intérieures réelles et des environnements synthétiques, en testant la scalabilité à un grand vocabulaire d'objets. Pour l'industrie robotique, ce travail s'attaque à un vrai point de friction dans le déploiement de robots mobiles autonomes en environnement non structuré : la plupart des systèmes de localisation sémantique actuels supposent un ensemble fermé et connu de catégories d'objets, une hypothèse qui s'effondre dès qu'un robot rencontre un objet inattendu sur un site industriel ou logistique réel. En montrant qu'une représentation multi-étiquettes réduit les erreurs d'association même en configuration open-set, MSG-Loc pointe vers des systèmes de navigation plus robustes pour les AMR (robots mobiles autonomes) déployés hors des laboratoires contrôlés, un enjeu direct pour les intégrateurs qui doivent garantir une localisation fiable sans cartographie exhaustive préalable de chaque objet possible. Ce papier s'inscrit dans la lignée des méthodes de localisation par graphes sémantiques, une alternative aux approches purement géométriques (SLAM classique) qui gagne du terrain à mesure que la détection d'objets par vision profonde devient plus fiable et plus rapide. La démarche de validation croisée entre closed-set et open-set, ainsi que le test de scalabilité sur un vocabulaire large, suggère une comparaison implicite avec les méthodes de graphe sémantique à étiquette unique publiées ces dernières années. L'article ne mentionne pas de partenariat industriel ni de déploiement sur robot physique en conditions réelles au-delà des scènes intérieures testées, ce qui en fait pour l'instant une contribution de recherche plutôt qu'une brique prête à l'industrialisation.

RecherchePaper
1 source
IA incarnée dans GPT-5.1 : la preuve d'un modèle du monde ?
3392arXiv cs.RO 

IA incarnée dans GPT-5.1 : la preuve d'un modèle du monde ?

Une équipe de chercheurs publie une étude exploratoire sur arXiv (2607.23899) testant GPT-5.1 comme contrôleur haut niveau d'un robot mobile physique, sans qu'il ait reçu le moindre entraînement en simulation ni la moindre expérience sensorimotrice préalable. Le modèle ne dispose que d'images en première personne à basse résolution et d'un ensemble d'actions discrètes pour naviguer et accomplir des tâches orientées objet, comme localiser puis entrer en contact avec un jouet cible. Sur plusieurs essais, GPT-5.1 a montré des capacités émergentes inattendues: mémoire à court terme de la position d'objets sortis du champ de la caméra, inférence des conséquences physiques de ses propres déplacements, et exécution de séquences cohérentes comme percuter un objet puis reculer pour vérifier visuellement le résultat. Le modèle reste toutefois limité, avec des stratégies d'alignement imprécises et des erreurs d'identification sur des distracteurs éloignés. Ces résultats intéressent directement l'industrie robotique car ils questionnent l'idée reçue, ancrée en sciences cognitives et en robotique, selon laquelle un corps physique et un entraînement embarqué (simulation, données réelles massives) seraient des prérequis indispensables pour développer une forme de compréhension spatiale et physique. Si un modèle multimodal généraliste peut afficher un comportement proche d'un "modèle du monde" sans pipeline d'entraînement dédié à l'embodiment, cela ouvre la voie à des architectures de contrôle plus légères pour les intégrateurs, où un LLM prêt à l'emploi ferait office de cerveau haut niveau au-dessus d'une couche d'actions bas niveau, plutôt qu'une politique VLA entraînée spécifiquement. Le résultat s'inscrit en contraste avec la génération actuelle de modèles vision-langage-action (type Pi-0, GR00T N2 ou Helix) qui acquièrent leurs compétences physiques via de vastes corpus de démonstrations simulées ou réelles. L'étude reste exploratoire, à petite échelle et sans comparaison benchmarkée face à ces systèmes dédiés: les auteurs eux-mêmes appellent à des travaux complémentaires pour cerner l'ampleur, les limites et la robustesse de ces capacités émergentes avant d'en tirer des conclusions définitives.

IA physiquePaper
1 source
Modélisation sensible à la pose pour atténuer les artefacts liés à la posture dans les gants tactiles
3393arXiv cs.RO 

Modélisation sensible à la pose pour atténuer les artefacts liés à la posture dans les gants tactiles

Une équipe de recherche publie sur arXiv (2607.22964, soumis le 27 juillet) une méthode logicielle pour corriger un défaut connu des gants tactiles utilisés en robotique. Ces gants, volontairement conçus souples et flexibles pour préserver la dexterité de la main lors des interactions avec des objets, souffrent d'un effet de bord : leurs capteurs réagissent non seulement aux forces de contact mais aussi aux simples changements de posture, générant des artefacts dits liés à la pose (pose-related artifacts, PRA). Ce bruit est particulièrement problématique dans la plage des faibles forces, où il provoque des détections tardives ou manquées, ce qui dégrade la force minimale détectable (MDF) du gant. Plutôt que de redessiner le matériel, les chercheurs proposent un cadre algorithmique agnostique au type de gant : le modèle exploite les données de posture de la main, de plus en plus disponibles via les systèmes de capture de mouvement, pour estimer et soustraire la déformation du capteur induite par la posture, via une branche de prédiction résiduelle ajoutée au pipeline classique tactile vers force. Testée sur 3 modèles de gants différents et 15 utilisateurs, la méthode réduit la MDF de 10,4%, 12,2% et 18,3% selon le gant, avec des gains cohérents sur l'ensemble des métriques évaluées. L'enjeu dépasse le confort de laboratoire. Les gants tactiles sont un outil clé pour collecter des données de démonstration humaine (téléopération, apprentissage par imitation) destinées à entraîner des politiques de manipulation dexterous chez les robots, un maillon central des approches VLA actuelles. Une MDF plus basse signifie moins de contacts fins manqués lors de la capture, donc des jeux de données d'entraînement plus fidèles, sans changer de capteur ni de fournisseur. C'est un correctif purement logiciel et rétrocompatible, ce qui compte pour les équipes qui ont déjà investi dans du matériel de capture existant. Le travail s'inscrit dans la tension classique des capteurs tactiles souples : la flexibilité qui garantit le confort et la naturalité du geste dégrade la précision de mesure, un compromis bien documenté dans la littérature sur la robotique tactile. Le papier reste à ce stade un preprint arXiv, sans nom de laboratoire mis en avant dans le résumé ni partenariat industriel annoncé ; il ne précise pas non plus de calendrier d'intégration dans des pipelines commerciaux de téléopération ou de collecte de données pour l'entraînement de modèles robotiques.

RecherchePaper
1 source
VL-LN Bench : vers une navigation orientée objectifs à long horizon avec dialogues actifs
3394arXiv cs.RO 

VL-LN Bench : vers une navigation orientée objectifs à long horizon avec dialogues actifs

Une équipe de recherche propose Interactive Instance Goal Navigation (IIGN), une nouvelle tâche de navigation robotique où l'agent peut librement interroger un oracle en langage naturel pendant sa recherche d'un objet spécifique, plutôt que de recevoir une instruction figée et non ambiguë comme c'est le cas dans la navigation par instruction classique. Pour évaluer cette capacité, les chercheurs publient VL-LN Bench, un benchmark construit autour d'un pipeline de collecte de données automatisé ayant généré plus de 41 000 trajectoires de dialogue longues et augmentées, destinées à l'entraînement des modèles. Le benchmark inclut aussi un protocole d'évaluation automatique couplé à un oracle dédié capable de répondre aux questions de l'agent en cours de mission. Les expériences menées identifient deux verrous techniques majeurs : l'exploration sur de longs horizons temporels et la capacité à relier finement une information textuelle à la bonne instance parmi des distracteurs de même catégorie visuelle. Ce travail éclaire un point sensible pour l'industrie de la robotique embarquée : la plupart des agents de navigation actuels, y compris les modèles vision-langage-action (VLA) les plus avancés, fonctionnent bien sur des instructions bien formées mais s'effondrent dès que la consigne devient ambiguë, ce qui est pourtant la norme dans un usage réel en entrepôt, en intérieur domestique ou en environnement industriel non structuré. Les résultats montrent que le dialogue actif atténue partiellement ces limites, mais que l'écart avec la performance humaine reste important, ce qui tempère les annonces de robots capables de "comprendre" des instructions naturelles complexes sans supervision. IIGN s'inscrit dans la continuité de l'Instance Goal Navigation (IGN), une tâche déjà établie dans la littérature d'IA embarquée, en y ajoutant la dimension conversationnelle qui manquait pour rapprocher les benchmarks académiques des conditions réelles de déploiement. Les auteurs valident également, via des ablations, l'intérêt de leur pipeline de génération de données et montrent que leur oracle automatisé peut se substituer à une supervision humaine à moindre coût, ouvrant la voie à un entraînement à plus grande échelle de ces agents dialogiques.

RecherchePaper
1 source
Modèle vision-langage-action adaptatif via hyperréseaux pour le guidage, la navigation et le contrôle multitâche
3395arXiv cs.RO 

Modèle vision-langage-action adaptatif via hyperréseaux pour le guidage, la navigation et le contrôle multitâche

Une équipe de recherche présente HYPER-GNC, un système de contrôle par apprentissage par renforcement multi-tâches destiné aux robots autonomes en vol libre dans l'environnement orbital, c'est-à-dire aux satellites capables de manœuvrer seuls. Le principe repose sur un hyper-réseau qui traduit des embeddings de tâches informés par la physique en poids d'un réseau acteur-critique partagé, permettant à un seul contrôleur compact de maîtriser quatre missions de guidage, navigation et contrôle (GNC) distinctes : le suivi de vitesse, l'amarrage (docking), l'inspection et la navigation avec évitement d'obstacles. L'espace d'embedding étant continu, le système généralise à de nouvelles configurations de mission au moment du déploiement, sans réentraînement. Les auteurs rapportent une efficacité d'apprentissage comparable à celle de contrôleurs spécialisés entraînés tâche par tâche, une stabilité maintenue face à des perturbations inertielles importantes et à des forces externes, ainsi qu'une validation sur un émulateur satellite physique, franchissant l'écart simulation-réel sur l'ensemble des profils de mission. Le code, les modèles entraînés et les scripts de déploiement sont publiés en accès libre. L'enjeu dépasse la seule performance académique : dans l'industrie spatiale, chaque mission de servicing, d'inspection ou de rendez-vous orbital nécessite aujourd'hui un contrôleur dédié, ce qui complique la maintenance logicielle et ralentit l'adaptation à de nouvelles missions. Un contrôleur unique capable de couvrir plusieurs tâches et de généraliser sans réentraînement réduirait la charge d'ingénierie pour les opérateurs de satellites de servicing et de constellations, un argument comparable à celui avancé par les modèles génériques de robotique terrestre de type VLA. La validation sur banc physique, et non uniquement en simulation, répond directement au scepticisme habituel sur l'écart entre démonstrations simulées et comportement réel. Ce travail s'inscrit dans la tendance plus large des hyper-réseaux et du RL multi-tâches appliqués à la robotique, où l'architecture partagée remplace la multiplication de politiques spécialisées. La publication du code et des modèles entraînés ouvre la voie à une reproduction et à une extension par d'autres équipes, notamment vers des missions orbitales réelles au-delà du seul émulateur satellite utilisé pour la validation.

IA physiqueActu
1 source
WorldDiT : une architecture de diffusion unifiée pour la modélisation du monde et des actions
3396arXiv cs.RO 

WorldDiT : une architecture de diffusion unifiée pour la modélisation du monde et des actions

WorldDiT est une nouvelle architecture de transformeur à diffusion présentée dans un article arXiv publié fin juillet 2026, qui unifie la génération d'actions robotiques et la modélisation visuelle du monde dans un seul réseau. Contrairement à la tendance dominante consistant à adosser les politiques robotiques à de grands modèles vision-langage (VLM) préentraînés comme backbone, un unique transformeur à diffusion génère ici des séquences d'actions continues tout en prédisant, en parallèle, des patchs RGB normalisés issus des futures images de caméra. Sur les quatre suites de simulation LIBERO, référence standard pour évaluer la généralisation en manipulation robotique, WorldDiT se positionne sur la frontière de Pareto reliant nombre de paramètres et taux de réussite moyen, avec un modèle de moins d'un milliard de paramètres. Ce résultat questionne une hypothèse répandue dans le secteur des politiques vision-langage-action (VLA) : que la performance en manipulation exige de coupler l'action à un VLM massif préentraîné, comme le font des approches telles que Pi-0 ou GR00T N2. Un modèle sub-milliard capable de rivaliser sur ces bancs d'essai ouvre une voie vers des architectures moins gourmandes en calcul, un enjeu concret pour les intégrateurs visant un déploiement embarqué plutôt que du cloud. Le papier s'inscrit dans une lignée de recherches couplant prédiction visuelle et contrôle moteur, alors que le secteur multiplie les architectures VLA à grande échelle (Helix chez Figure, GR00T N2 chez Nvidia). Les auteurs présentent toutefois WorldDiT comme une base de référence pour de futures études de mise à l'échelle, uniquement validée en simulation LIBERO, sans expérimentation sur robot réel à ce stade.

RechercheActu
1 source
FloAff-Kitchen : relier navigation et manipulation par apprentissage canonique et progressif de l'affordance du sol
3397arXiv cs.RO 

FloAff-Kitchen : relier navigation et manipulation par apprentissage canonique et progressif de l'affordance du sol

Des chercheurs du HERO Lab (Central South University, Chine) ont publié fin juillet 2026 sur arXiv "FloAff-Kitchen", un système qui apprend aux robots mobiles à choisir où poser leur base au sol non pas seulement pour atteindre une cible de navigation, mais pour maximiser la réussite d'une tâche de manipulation qui suit. Le cœur technique repose sur deux briques : une représentation canonique de l'affordance au sol (CFAR), qui isole la géométrie d'interaction utile en supprimant les variations de position et d'orientation des objets sans rapport avec le placement du robot, et un apprentissage progressif (PFAL), qui transfère des priors appris sur une tâche de manipulation de référence vers un éventail de compétences hétérogènes en aval. Pour évaluer l'approche, l'équipe a construit le premier benchmark multi-scènes et multi-points de vue dédié à cette problématique, FloAff-Kitchen, couvrant différentes compétences de manipulation, agencements de pièces, styles de mobilier et angles de caméra. Sur trois configurations de test, la méthode dépasse systématiquement les approches de référence, et des études d'ablation confirment l'apport de chaque composant proposé. La contribution cible un angle mort classique de la manipulation mobile : la plupart des systèmes de navigation évaluent uniquement si une position est atteignable, sans tenir compte de si elle permet réellement de réussir la préhension ou la manipulation qui suit. Distinguer une perception conditionnée par la navigation d'une perception conditionnée par la tâche est précisément ce qui bloque souvent le passage de la démonstration en environnement contrôlé au déploiement en cuisine ou en environnement domestique réel, où l'orientation des objets et l'encombrement varient. Pour les intégrateurs travaillant sur des robots mobiles manipulateurs ou des humanoïdes destinés à des tâches ménagères ou de service, ce travail illustre une tendance de fond de la recherche actuelle : combler l'écart entre modules de navigation et de manipulation plutôt que les traiter comme deux problèmes séparés, une des limites régulièrement citées pour expliquer l'écart entre vidéos de démonstration et fiabilité en conditions réelles. Ce travail s'inscrit dans la lignée des recherches sur l'apprentissage d'affordances spatiales pour la robotique, un domaine qui s'est étendu des affordances de préhension d'objets aux affordances de placement du robot lui-même, en écho aux efforts de modèles VLA comme Pi-0 ou GR00T N2 qui cherchent à unifier perception et action dans un même modèle. Contrairement aux approches génériques de navigation qui ignorent l'objectif de manipulation final, FloAff-Kitchen propose un cadre pensé spécifiquement pour l'environnement cuisine, un cas d'usage central pour les startups de robots domestiques. L'équipe met à disposition le benchmark et la page du projet publiquement, ce qui devrait permettre des comparaisons directes avec de futures méthodes sur ce sous-problème encore peu standardisé de la manipulation mobile.

RecherchePaper
1 source
Le contexte peut-il combler l'écart de réalité ? Transfert simulation-réel des politiques sensibles au contexte
3398arXiv cs.RO 

Le contexte peut-il combler l'écart de réalité ? Transfert simulation-réel des politiques sensibles au contexte

Le sim-to-real transfer, c'est-à-dire le passage d'une politique de contrôle entraînée en simulation vers un robot réel, reste l'un des obstacles majeurs de l'apprentissage par renforcement (RL) en robotique. Une équipe de recherche propose dans cet article (arXiv:2511.04249, version révisée) d'intégrer un module d'estimation du contexte, c'est-à-dire une estimation des paramètres dynamiques de l'environnement, directement dans le pipeline d'entraînement basé sur la Domain Randomization (DR). Les chercheurs comparent plusieurs stratégies de supervision de cet estimateur de contexte, considérées comme état de l'art, et évaluent les politiques résultantes sur deux terrains : un benchmark de contrôle standard en simulation, et une tâche réelle de poussée d'objet (pushing) exécutée avec un bras robotique Franka Emika Panda. L'enjeu dépasse la seule prouesse technique : la Domain Randomization, qui consiste à exposer la politique à une large gamme de dynamiques aléatoires pendant l'entraînement pour la rendre robuste, améliore le transfert vers le réel mais dégrade souvent les performances, car la politique doit rester valable pour tous les cas randomisés plutôt que de s'optimiser pour un seul. En conditionnant la politique sur une estimation du contexte plutôt qu'en l'entraînant à l'ignorer, les auteurs cherchent à réconcilier robustesse et performance, un compromis central pour quiconque déploie du RL sur du matériel réel en usine ou en logistique. Les résultats montrent que les politiques context-aware surpassent systématiquement la baseline context-agnostic sur tous les scénarios testés, ce qui confirme l'intérêt de cette approche, mais sans stratégie de supervision universelle : le choix optimal dépend de la tâche. Ce travail s'inscrit dans une lignée de recherches visant à combler l'écart de réalité (reality gap) qui limite le RL appliqué à la robotique depuis plusieurs années, la DR classique restant la référence malgré ses limites connues. En publiant une version révisée sur arXiv, les auteurs affinent une méthode déjà proposée plutôt que d'annoncer un nouveau système. La validation reste à ce stade circonscrite à une tâche de manipulation simple sur un seul bras robotique commercial ; l'étape suivante consisterait à tester la généralisation de cette approche sur des tâches plus complexes et des plateformes variées avant d'envisager une adoption industrielle.

RecherchePaper
1 source
IA incarnée : représentations polynomiales pour le contrôle moteur structuré par l'interaction
3399arXiv cs.RO 

IA incarnée : représentations polynomiales pour le contrôle moteur structuré par l'interaction

Des chercheurs présentent PRISM (Polynomial Representations for Interaction-Structured Motor Control), une nouvelle architecture pour les politiques de contrôle robotique, décrite dans un preprint arXiv publié fin juillet 2026. Le constat de départ : la quasi-totalité des politiques robotiques reposent aujourd'hui sur des MLP (perceptrons multicouches) qui associent observations et actions de façon linéaire couche par couche, alors que des phénomènes physiques clés (puissance, effets inertiels, contact, glissement, compliance) dépendent en réalité de produits entre variables observées, pas de leur simple somme pondérée. PRISM introduit un module polynomial factorisé qui expose ces interactions d'ordre supérieur sans énumérer tous les termes polynomiaux possibles, ce qui le rend compact et entraînable de bout en bout. En apprentissage par renforcement, le module s'ajoute après un backbone MLP standard via une fonction polynomiale élément par élément activée progressivement ; en apprentissage par imitation, il remplace le conditionnement proprioceptif linéaire de Diffusion Policy par une couche polynomiale. Sur des tâches de locomotion humanoïde et de manipulation à contacts riches, PRISM surpasse les MLP classiques, y compris des MLP plus larges à capacité équivalente, et produit un comportement compliant sans capteur de force, de couple, tactile, ni étiquette de contact ou contrôle en admittance. Pour l'industrie robotique, le résultat central est que la structure des interactions ne se remplace pas simplement par davantage de paramètres, un argument qui s'oppose à la tendance actuelle consistant à gonfler la taille des modèles VLA (Pi-0, GR00T N2, Helix) pour gagner en performance. La compliance sans capteur intéresse particulièrement les intégrateurs, car elle réduit le coût et la complexité du câblage tactile sur les mains et pinces. PRISM se positionne comme une brique architecturale plutôt qu'un produit : c'est un preprint non encore relu par les pairs, testé en simulation sur des benchmarks académiques, avec code et vidéos disponibles sur la page du projet. La comparaison directe avec Diffusion Policy, référence largement utilisée en apprentissage par imitation, suggère une piste d'intégration dans les têtes d'action des futurs modèles VLA plutôt qu'un remplacement complet des architectures existantes.

RecherchePaper
1 source
Object SLAM sémantique semi-incrémental sans association de données
3400arXiv cs.RO 

Object SLAM sémantique semi-incrémental sans association de données

Une équipe de recherche publie sur arXiv (identifiant 2607.23384) un nouveau framework de SLAM baptisé "Semantic Semi-Incremental Data-Association-Free Object SLAM", conçu pour résoudre conjointement quatre problèmes habituellement traités séparément : l'association des mesures aux bons landmarks, l'estimation de la trajectoire du robot, la position des objets repérés dans l'environnement, et leur sémantique. Le système exploite à la fois des mesures de position classiques et des informations sémantiques issues de réseaux de détection d'objets (labels de classe) ou de modèles de fondation visuels (vecteurs de features), qu'il combine avec les données odométriques du robot. La méthode adopte un schéma d'estimation semi-incrémental, un compromis entre les approches purement incrémentales et par lots, pensé pour améliorer la précision tout en maîtrisant le coût de calcul. Les auteurs fournissent également des heuristiques et une justification théorique pour estimer automatiquement le nombre de landmarks présents dans une scène, un paramètre souvent fixé arbitrairement dans les systèmes existants. Le framework est validé sur des jeux de données synthétiques et réels, avec deux types d'information sémantique testés, et affiche des performances supérieures à des baselines jugées solides par les auteurs. L'enjeu dépasse la seule prouesse académique. L'association de données reste l'un des goulots d'étranglement historiques du SLAM : une erreur d'appariement entre une mesure et un landmark peut faire diverger toute la carte construite par un robot mobile ou un AMR en environnement encombré. En intégrant la sémantique directement dans le calcul d'association plutôt qu'en l'utilisant comme simple filtre a posteriori, cette approche s'inscrit dans une tendance de fond où les systèmes de perception cessent de traiter géométrie et sémantique comme deux couches indépendantes. Pour les intégrateurs travaillant sur la navigation autonome en entrepôt ou en environnement industriel, cela laisse entrevoir des cartes plus robustes aux occlusions et aux environnements dynamiques, où les repères géométriques seuls sont souvent ambigus. Ce travail s'inscrit dans la lignée des systèmes "SLAM sémantique" et "SLAM sans association explicite" qui se sont multipliés depuis l'essor des détecteurs d'objets profonds et des modèles de fondation visuels type CLIP ou DINO. Contrairement aux approches qui traitent l'association de données comme un problème résolu en amont par un simple seuillage de similarité, les auteurs la formulent comme une variable à estimer conjointement avec le reste du système, ce qui la rapproche des travaux récents en SLAM bayésien multi-hypothèses. La publication ne mentionne pas de déploiement sur robot réel en conditions industrielles ; il s'agit à ce stade d'une contribution méthodologique évaluée en benchmark, dont l'adoption pratique dépendra de sa capacité à tourner en temps réel embarqué.

RecherchePaper
1 source