Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
Apprendre aux robots à interpréter les interactions sociales via l'apprentissage sur graphes dynamiques guidé par le lexique
RecherchearXiv cs.RO 

Apprendre aux robots à interpréter les interactions sociales via l'apprentissage sur graphes dynamiques guidé par le lexique

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Une équipe de chercheurs publie SocialLDG (Social Lexically-guided Dynamic Graph learning), un cadre d'apprentissage multi-tâches destiné à doter les robots d'intelligence sociale. Déposé sur arXiv (2604.10895v2), le travail vise un problème central de l'interaction humain-robot : inférer les états internes d'un utilisateur (émotions, intentions, états cognitifs non directement observables), prédire ses comportements futurs et y répondre de façon adaptée. Le cadre modélise six tâches distinctes représentant la relation dynamique entre états latents et actions observables, en intégrant un modèle de langage pour introduire des priors lexicaux par tâche, et un apprentissage par graphe dynamique pour suivre l'évolution temporelle des affinités entre tâches. Les auteurs rapportent des performances état de l'art sur deux jeux de données publics d'interaction sociale humain-robot, sans que le résumé disponible précise les benchmarks ni les marges de gain exactes.

L'apport le plus concret pour les équipes de R&D en robotique sociale est la résistance au catastrophic forgetting : SocialLDG intègre de nouvelles tâches comportementales sans dégrader les capacités acquises, une propriété critique pour des déploiements réels où l'étendue des interactions croît progressivement. L'usage de priors linguistiques pour structurer le raisonnement sur graphe est également original : il permet d'exploiter la sémantique du langage naturel comme contrainte sur la modélisation sociale du robot, ouvrant la voie à une adaptation sans réentraînement complet. La lisibilité des affinités entre tâches offre en outre un levier d'interprétabilité utile pour le debug et la validation industrielle.

La compréhension sociale en robotique est un chantier actif de longue date, avec des contributions notables de CMU, du MIT, et des travaux sur OpenFace ou EMOTIC. SocialLDG se distingue des approches actuelles qui traitent séparément reconnaissance d'émotion, détection d'intention et prédiction de geste, en proposant un cadre unifié inspiré des sciences cognitives. Les travaux récents sur les vision-language agents et les VLA adressent partiellement ce champ, mais restent centrés sur la manipulation physique plutôt que sur la dynamique socio-cognitive. En tant que prépublication non encore évaluée par les pairs, les performances annoncées restent à confirmer indépendamment avant toute intégration.

Dans nos dossiers

arXiv cs.RO

À lire aussi

Apprentissage de la dynamique de contact par le toucher : réseaux de neurones sur graphes conditionnés par l'action pour l'insertion de tiges robotique
1arXiv cs.RO 

Apprentissage de la dynamique de contact par le toucher : réseaux de neurones sur graphes conditionnés par l'action pour l'insertion de tiges robotique

Une équipe de recherche publie sur arXiv (2509.12151, version 3) un modèle physique apprenable capable de prédire le mouvement de l'effecteur terminal d'un robot ainsi que la force et le couple de réaction lors de manipulations à contact riche. L'architecture représente l'effecteur et l'environnement comme des maillages en interaction organisés en graphe, et conditionne explicitement ses prédictions sur la commande de contrôle appliquée : elle prédit directement la mise à jour de pose au niveau de l'objet, tandis que le couple de réaction émerge d'un champ de force calculé par sommet du maillage. L'entraînement est auto-supervisé, à partir des seules données des encodeurs articulaires et du capteur de force-couple, pendant que le robot touche aléatoirement son environnement sans consigne de tâche. En simulation, ce modèle se transfère à une tâche d'insertion de pièce (peg insertion) sur des géométries concaves inédites : un agent de commande prédictive (MPC) qui l'utilise atteint jusqu'à 98% de taux de réussite, et après un réglage fin sur des données auto-collectées, il égale un agent planifiant avec la dynamique de référence au jeu le plus serré testé, 1 mm. Dans le monde réel, ce modèle surpasse un modèle MuJoCo calibré par identification de système classique de 45% en précision de position, et de 74% et 63% respectivement en erreur de force et de couple. L'enjeu dépasse la démonstration académique : l'insertion de pièces à tolérances serrées reste un point de blocage classique pour l'assemblage robotique de précision, car les simulateurs physiques standards peinent à modéliser fidèlement le frottement et la déformation de contact, ce qui creuse l'écart simulation-réel et oblige les intégrateurs à des campagnes coûteuses de calibration manuelle. En montrant qu'un modèle appris à partir de simples contacts aléatoires, sans démonstration de tâche, généralise à des géométries jamais vues et rivalise avec une dynamique de référence à 1 mm de clearance, ce travail suggère une voie pour réduire la dépendance à l'identification de système traditionnelle et améliorer la robustesse hors simulation, un enjeu direct pour les intégrateurs travaillant sur l'assemblage électronique ou mécanique fin. Les résultats restent toutefois circonscrits à une tâche unique testée en conditions contrôlées, avec une comparaison réelle limitée à un seul modèle de référence, et non à un déploiement industriel à l'échelle. Cette approche s'inscrit dans un courant de recherche appliquant les réseaux de neurones sur graphes à la simulation physique à base de maillages, et l'étend ici à la dynamique de contact robot-environnement conditionnée par l'action. Elle se distingue des politiques de bout en bout de type vision-langage-action, qui apprennent un comportement directement à partir de démonstrations massives et spécifiques à la tâche, en misant plutôt sur un modèle dynamique générique et réutilisable appris de façon indépendante de la tâche. Le principal point de comparaison méthodologique reste l'identification de système classique utilisée dans des moteurs comme MuJoCo, que ce travail cherche explicitement à dépasser sur la fidélité des forces de contact. Le fait que le papier en soit à sa troisième version sur arXiv signale des itérations après relecture, sans partenariat industriel, pilote ou calendrier de déploiement mentionné à ce stade ; les suites attendues porteraient sur l'extension à d'autres tâches d'assemblage à tolérances serrées et une validation sur davantage de plateformes robotiques réelles.

RecherchePaper
1 source
Apprentissage robotique guidé par le toucher : des représentations aux modèles fondation
2arXiv cs.RO 

Apprentissage robotique guidé par le toucher : des représentations aux modèles fondation

Une revue de littérature publiée sur arXiv (2610.20134, première version) propose de relire la manipulation robotique par le toucher sous un angle centré sur l'apprentissage, et non plus sur le matériel. Les auteurs structurent le domaine selon le rôle fonctionnel du toucher dans la chaîne d'apprentissage et de contrôle: apprentissage de représentations tactiles et de politiques, modèles de fondation tactiles, contrôle prédictif et adaptatif, puis généralisation entre objets, tâches, capteurs, morphologies de robots et transfert simulation-réel. Le texte ne rapporte ni nouveau robot, ni benchmark chiffré, ni déploiement industriel. Il s'agit d'une synthèse accompagnée d'une base de données publique des travaux recensés, accessible via un site dédié. L'intérêt pour les intégrateurs et les ingénieurs tient au constat que le toucher change de statut. Longtemps cantonné à la détection de contact et au contrôle réactif, il sert désormais à apprendre des représentations transférables, à conditionner des politiques de manipulation et à soutenir un raisonnement physique incarné. Les auteurs soulignent que les revues existantes se concentrent sur les capteurs et la perception, ce qui laisse sans synthèse le virage vers la manipulation tactile apprise. Ils identifient trois verrous: apprendre des représentations physiques réellement transférables, articuler le raisonnement sémantique (type VLA, modèles vision-langage-action) avec le contrôle fin au niveau du contact, et passer à l'échelle sur des données et des capteurs hétérogènes. Cette hétérogénéité des capteurs reste le point dur pour tout acteur qui voudrait déployer une politique tactile sur plusieurs plateformes. Il faut aussi noter qu'une revue décrit un état de la recherche, pas des performances démontrées en production. Ce travail s'inscrit dans la course aux modèles de fondation pour la robotique, où la vision et le langage dominent encore les grands modèles généralistes, tandis que le tactile demeure fragmenté entre capteurs optiques, magnétiques ou capacitifs et entre jeux de données peu compatibles. Les auteurs esquissent la suite: des modèles de fondation et des modèles du monde tactiles capables de prédire, raisonner et adapter les interactions physiques. Aucun calendrier ni pilote industriel n'est annoncé, ce qui place cette perspective au stade de la feuille de route académique. Pour les décideurs, la revue sert surtout de carte pour repérer quelles approches méritent un suivi avant d'éventuels transferts vers des mains dextres commerciales.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Apprentissage de politiques robotiques à partir de signaux de succès épars via le gradient de politique de Stein guidé par STL
3arXiv cs.RO 

Apprentissage de politiques robotiques à partir de signaux de succès épars via le gradient de politique de Stein guidé par STL

Des chercheurs présentent STL-SVPG (Signal Temporal Logic-guided Stein Variational Policy Gradient), une méthode d'apprentissage de politiques robotiques pour des taches ou le signal de succès est rare, décrite dans un preprint mis en ligne sur arXiv en septembre 2026 (référence 2609.31606). La méthode combine la logique temporelle de signal (Signal Temporal Logic, STL) avec un algorithme d'optimisation de politique base sur une population, le Stein Variational Policy Gradient. Plutot que d'utiliser des récompenses locales façonnées, qui peuvent progresser sans jamais aboutir a la complétion réelle de la tache, STL-SVPG calcule une mesure de robustesse STL différentiable sur la trajectoire complète, ce qui permet d'attribuer le mérite aux actions selon leur contribution a la spécification globale plutôt qu'au seul progrès local. La méthode est évaluée sur six taches impliquant un quadricoptere et un bras manipulateur: réponses déclenchées par événements, comportements strictement ordonnes, respect de délais, et interactions physiques de contact. STL-SVPG obtient le meilleur taux de succès moyen sur cinq des six bancs d'essai compares, et les politiques entraînées en simulation transfèrent leur comportement temporel et de contact vers le monde réel, sans que l'article ne precise le nombre d'essais physiques réalisés. Pour l'industrie robotique, ce travail cible un problème très concret: de nombreuses taches manufacturières ou logistiques (assemblage séquentiel, manipulation sous contrainte de temps, réaction a des événements extérieurs) ne se réduisent pas a un objectif unique mais a une combinaison de contraintes temporelles et logiques, exactement ce que la STL est censée capturer. Le reward shaping classique, très utilise en apprentissage par renforcement applique a la robotique, produit souvent des politiques qui optimisent des récompenses intermédiaires sans accomplir la tache complète, un écart connu entre démonstration et fiabilité en production. En améliorant le taux de succès sur des taches composées a contraintes multiples, l'étude plaide pour des spécifications formelles plutôt que des récompenses ad hoc, un argument utile pour les intégrateurs qui cherchent a fiabiliser des politiques de RL avant tout déploiement en manipulation fine ou en pilotage de drones en environnement contraint. Cette approche s'inscrit dans une ligne de recherche déjà établie sur l'usage de logiques temporelles (STL, logique temporelle linéaire) comme alternative au reward shaping face aux limites de ce dernier sur les taches a succès rares. STL-SVPG s'en distingue en associant la robustesse STL a une optimisation par population de politiques, censé améliorer l'exploration sur des objectifs multi-contraintes. Le résume disponible ne mentionne aucun partenariat industriel, aucune entreprise ni laboratoire spécifique, et aucun calendrier de suite: il s'agit d'un travail académique valide sur bancs d'essai simules, avec une démonstration de transfert réel encore limitée, dont l'adoption industrielle dépendra de la publication complète des résultats et, le cas échéant, du code.

RecherchePaper
1 source
L'engagement induit par la dynamique dans les tirs au but robotiques fondés sur l'apprentissage
4arXiv cs.RO 

L'engagement induit par la dynamique dans les tirs au but robotiques fondés sur l'apprentissage

Un article publié sur arXiv (2609.21100v1) décrit un système robotique hiérarchique opposant un robot humanoïde tireur et un robot quadrupède gardien dans un jeu de penalty. Les chercheurs combinent des politiques de haut niveau entraînées par auto-jeu (self-play) avec des contrôleurs de corps entier fixes dédiés au football, appelés S-WBC. La compétence de tir de l'humanoïde est initialisée à partir de données de capture de mouvement collectées par les auteurs, tandis que la compétence d'arrêt du quadrupède est apprise par renforcement. L'équipe introduit une méthode nommée DIC-Map (dynamics-induced commitment mapping), une analyse ancrée dans la dynamique corporelle qui estime la capacité de chaque robot à changer d'action en cours d'exécution, repère le moment où une option devient définitivement irréalisable, et vérifie si l'interaction restante se réduit à un jeu à somme nulle simplifié. Pour des alternatives symétriques, cette réduction produit une borne analytique sur la concentration optimale de la stratégie de tir. Les expériences situent ce point d'engagement irréversible à environ 0,29 seconde avant le contact avec le ballon, et une simple variation de la vitesse du tir déplace la fenêtre pendant laquelle le gardien peut encore différer sa décision. Sur quatre politiques de gardien testées, remplacer l'estimateur utilisé pour lire le tireur fait passer le taux d'arrêt de 0,240 à 0,472, contre seulement 0,246 pour un gain comparable de précision obtenu simplement en attendant plus longtemps. Ce résultat contredit une intuition répandue en robotique compétitive apprise, selon laquelle mieux lire l'adversaire vaut surtout par le temps d'observation gagné: ici, améliorer la qualité de l'estimation de l'intention adverse rapporte près du double du gain obtenu en attendant. Pour les chercheurs et intégrateurs en robotique humanoïde et quadrupède, l'étude montre que les marges stratégiques d'une politique apprise par self-play ne dépendent pas seulement de l'information disponible, mais aussi de ce que le corps du robot peut encore physiquement modifier une fois un mouvement engagé, un facteur rarement quantifié jusqu'ici. En isolant un instant de non-retour mesurable, les auteurs proposent un outil potentiellement transférable à d'autres tâches robotiques rapides (manipulation, évitement, sports robotiques) où les contraintes cinématiques comptent autant que l'incertitude stratégique, ce qui nuance les promesses de certaines démonstrations d'humanoïdes agiles. Le travail s'inscrit dans une architecture de plus en plus courante consistant à faire piloter des contrôleurs de corps entier appris séparément par des politiques de décision de haut niveau, afin de doter humanoïdes et quadrupèdes de comportements sportifs sans réentraîner tout le contrôle moteur. Il s'agit d'une publication académique sur arXiv, sans annonce de produit ni de déploiement commercial: la comparaison aux stratégies d'équilibre repose sur une analyse a posteriori, les auteurs précisant eux-mêmes que les mesures de couverture disponibles restent des indicateurs observationnels indirects. Aucun acteur industriel, français ou européen n'est cité. Un site de projet accompagne la publication, mais aucun calendrier de suite ni extension au-delà du cadre expérimental du penalty à deux robots n'est annoncé.

RecherchePaper
1 source