Aller au contenu principal
Devenir un ninja des fruits : planification cinodynamique probabiliste en temps réel pour l'interception de projectiles par un bras manipulateur
RecherchearXiv cs.RO 

Devenir un ninja des fruits : planification cinodynamique probabiliste en temps réel pour l'interception de projectiles par un bras manipulateur

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs présentent FRUITNINJA, un planificateur de trajectoire en temps réel conçu pour intercepter en vol des objets lances vers un bras robotique, sur le principe du jeu vidéo Fruit Ninja. Decrit dans un preprint publie sur arXiv le 22 septembre 2026 (référence 2609.22608), le système construit par lots, sur GPU, un arbre de trajectoires candidates dont chaque branche est une courbe cubique exacte : le temps de parcours de chaque segment est calcule par une recherche parallèle qui vérifie en continu le respect des limites de couple et de vitesse des actionneurs du bras. La cible n'est pas un point fixe mais une "variété d'interception" mouvante, définie par la position, la vitesse et l'orientation que doit avoir la lame au moment du contact, et qui se déplace au rythme de la chute de l'objet. Les trajectoires générées sont ensuite classées selon un critère intégrant l'incertitude sur la position réelle de l'objet et sur le temps d'arrivée du bras. Teste en simulation temps réel calibrée sur un bras Franka Research 3, face a six méthodes concurrentes, FRUITNINJA tranche 96,7% des lancers en espace dégage et 68,3% lorsque cinq obstacles sont ajoutes a la scene, contre respectivement 68,3% et 35,0% pour la meilleure des méthodes de référence.

L'intérêt pour le secteur tient moins au geste spectaculaire de découpe qu'a la classe de problème visée : la manipulation dynamique réactive, ou le bras doit réagir en quelques millisecondes a une trajectoire imprévisible, un régime très différent du pick-and-place quasi statique qui domine la robotique industrielle actuelle. Une approche qui tient les contraintes d'actionneurs en temps réel sur GPU pourrait, au delà du tranchage, s'appliquer au tri sur convoyeur d'objets en mouvement rapide ou a la préhension collaborative homme-robot. Le résultat reste toutefois un benchmark en simulation, non une démonstration sur matériel physique : le passage au réel, avec ses erreurs de perception et de calibration, n'est pas encore documente.

La manipulation dynamique, jonglage, frappe de balle de ping-pong, capture d'objets lances, est un axe de recherche robotique de longue date, et la planification kinodynamique par échantillonnage (dérivée des familles RRT) une technique établie. L'apport ici est de faire tourner cette recherche d'arbre a l'échelle du GPU pour des décisions en quelques millisecondes. Les auteurs ne précisent pas de calendrier de validation matérielle ni de partenaire industriel ; les prochaines étapes attendues sont des essais sur bras physique et l'extension a des scènes encombrées plus réalistes.

Dans nos dossiers

À lire aussi

Planification en temps réel du mouvement complet pour manipulateurs mobiles portant des charges de forme arbitraire via SVSDF couplé cinématiquement
1arXiv cs.RO 

Planification en temps réel du mouvement complet pour manipulateurs mobiles portant des charges de forme arbitraire via SVSDF couplé cinématiquement

Des chercheurs décrivent, dans un article publie sur arXiv (identifiant 2608.07005), un nouveau système de planification de mouvement en temps réel pour manipulateurs mobiles charges de transporter des objets volumineux et de forme non convexe a travers des environnements encombres. La méthode repose sur une version couplée cinématiquement du SVSDF (Swept Volume Signed Distance Field), baptisée KC-SVSDF. L'architecture comporte trois étages: un front-end qui vérifie les collisions par décomposition en chaine et requêtes booléennes rapides tout en préservant la géométrie réelle du robot et de sa charge; un mid-end qui transforme le chemin obtenu en trajectoire continue, lisse et faisable, exécutée directement si elle est sans collision afin d'éviter le recours au back-end, plus couteux en calcul; et un back-end, active seulement quand nécessaire, qui optimise la trajectoire en propageant les gradients d'évitement de collision le long de la chaine cinématique pour produire des manoeuvres d'esquive cohérentes sur l'ensemble du corps du robot. Les auteurs valident l'approche par des études d'ablation, des comparaisons avec des méthodes de référence existantes, et des essais réels sur un manipulateur mobile a entrainement différentiel, franchissant des passages étroits avec des charges volumineuses et irrégulières. Le problème cible reste largement sous-estime en robotique industrielle: la plupart des planificateurs actuels réduisent les charges transportées a des boites englobantes ou des sphères, une simplification qui dégradé fortement les performances des que l'objet réel présente une forme irrégulière ou des parties saillantes, un cas fréquent en logistique, en construction ou en maintenance industrielle. En traitant explicitement le couplage cinématique entre les liaisons du bras et la charge, l'approche vise a éviter deux écueils classiques, la perte d'espace de solutions faisable et le blocage de l'optimisation, qui empêchent souvent les démonstrations en laboratoire de se traduire en déploiements fiables en entrepôt. Pour les intégrateurs de robots mobiles équipes de bras, une planification en trois étages qui ne déclenche l'optimisation lourde qu'en cas de besoin répond directement a la contrainte de temps de calcul compatible avec des cadences industrielles réelles. Ce travail s'inscrit dans la lignée des recherches sur les champs de distance signée et les volumes balayes, déjà exploites pour des robots a corps unique mais rarement étendus a des chaines cinématiques multi-corps couplées comme un bras sur base mobile portant une charge solidaire. Classe "new" sur arXiv, il reste a ce stade une contribution académique, validée sur une seule plateforme en laboratoire, et non un produit déployé ni un pilote industriel annonce. Les comparaisons se limitent a des méthodes génériques de l'état de l'art, sans mention d'entreprises ou de systèmes commerciaux concurrents. Les suites attendues pour ce type de travaux passent généralement par une extension a des bras multiples et une intégration aux piles logicielles de robots mobiles existantes, avant d'envisager des tests en flotte réelle.

RecherchePaper
1 source
Téléopération en temps réel d'un bras manipulateur en environnement dynamique via un cadre VR
2arXiv cs.RO 

Téléopération en temps réel d'un bras manipulateur en environnement dynamique via un cadre VR

Une équipe de chercheurs a publié sur arXiv (preprint 2605.30989, mai 2026) un framework de téléopération en réalité virtuelle pour piloter un bras manipulateur 7-DOF en temps réel dans des environnements dynamiques. Le système intègre un solveur de cinématique inverse (IK) accéléré sur GPU et un module d'optimisation de trajectoires directement dans l'interface VR, générant des commandes articulaires réalisables à chaque cycle de contrôle. Les expériences couvrent trois scénarios : environnement sans obstacle, avec obstacles statiques, et avec obstacles en mouvement. Dans les trois cas, le système maintient une trajectoire conforme aux intentions de l'opérateur tout en produisant des déviations sécurisées lorsqu'un obstacle interfère avec le chemin commandé. L'intérêt de cette approche réside dans l'adresse d'une lacune connue : la majorité des systèmes de téléopération VR existants ont été conçus comme outils de collecte de données pour l'apprentissage par imitation, sans traiter explicitement les risques de collision ni les erreurs d'opérateurs novices. Ce framework cible un déploiement opérationnel réel dans des environnements à accès difficile ou dangereux (zones irradiées, maintenance industrielle à distance). La capacité à gérer des obstacles mobiles en temps réel, sans interrompre la boucle de contrôle, représente un passage de la démonstration en labo vers une robustesse compatible avec le terrain. Cela dit, les conditions exactes des tests (vitesse des obstacles, latence réseau, durée des séquences) ne sont pas détaillées dans l'abstract, ce qui invite à la prudence sur la généralisation des résultats. La téléopération VR pour la manipulation robotique connaît un regain d'intérêt depuis 2022-2023, portée par des projets comme AnyTeleop, UMI (Universal Manipulation Interface) de Stanford, et les systèmes de collecte de données de Physical Intelligence (pi0). Ces travaux ont majoritairement servi à entraîner des politiques de manipulation, reléguant la sécurité opérationnelle au second plan. En Europe, des acteurs comme Enchanted Tools et des laboratoires comme le LIRMM travaillent sur des problématiques voisines d'interaction humain-robot sécurisée. Ce preprint se positionne comme une brique vers une téléopération déployable plutôt que comme un produit fini, et les prochaines étapes restent à définir : intégration avec des politiques VLA, tests en conditions réelles ou validation en environnement industriel certifié.

UEImpact indirect : le LIRMM et Enchanted Tools travaillent sur des problématiques voisines de téléopération sécurisée, mais ce preprint ne les implique pas et n'est associé à aucun déploiement ou financement européen documenté.

RecherchePaper
1 source
IndoorBEV : un système léger de perception BEV par LiDAR en temps réel pour robots mobiles d'intérieur
3arXiv cs.RO 

IndoorBEV : un système léger de perception BEV par LiDAR en temps réel pour robots mobiles d'intérieur

Des chercheurs publient sur arXiv (2610.00355) IndoorBEV, un système de perception LiDAR conçu pour les robots mobiles d'intérieur. Le modèle ne compte que 0,6 million de paramètres et occupe 2,3 Mo de stockage. Sur un NVIDIA AGX Orin, il consomme 21,52 Mo de mémoire GPU par inférence et affiche une latence moyenne de 169,6 ms, pour une échéance de perception fixée à 200 ms. Le taux de dépassement de cette échéance est de 1,8 %. Le système produit simultanément des cartes sémantiques en vue de dessus (BEV, bird's-eye view) et des boîtes englobantes orientées pour les objets. Il repose sur une représentation BEV « consciente de la hauteur » : pour chaque cellule, la distribution verticale des points est résumée par des statistiques de hauteur et un encodage multi-fréquence, ce qui permet à de simples convolutions 2D de traiter une information 3D. Un encodeur léger fusionne ces indices géométriques avec des représentations locales multi-échelles et un contexte global compact, puis des têtes de prédiction découplées génèrent les sorties. L'évaluation couvre des scènes simulées, des scans réels de robots et un jeu de données ouvert de nuages de points d'intérieur. L'enjeu est très concret pour les intégrateurs et les équipes qui embarquent de la perception sur des plateformes à budget calcul limité. Les méthodes à base de points ou de voxels restent coûteuses, tandis que les BEV classiques, issus surtout de la conduite autonome, sacrifient la géométrie verticale, un handicap dans des intérieurs encombrés où tables, étagères, suspensions et objets en surplomb comptent. Avec un modèle de 2,3 Mo, IndoorBEV laisse l'essentiel du GPU disponible pour la navigation, la planification ou d'autres réseaux sur la même machine. Les auteurs affirment ainsi qu'encoder explicitement la hauteur dans une représentation 2D compacte est une voie viable. Quelques réserves s'imposent : il s'agit d'une préimpression non relue par les pairs, une latence moyenne de 169,6 ms sous une échéance de 200 ms laisse une marge mince, soit environ 6 images par seconde, ce qui est modeste pour un robot rapide, et le résumé ne donne aucun chiffre de précision, ni comparaison chiffrée avec des modèles concurrents. L'affirmation d'un « compromis favorable » reste donc à vérifier dans l'article complet. Ce travail s'inscrit dans la série des architectures BEV, popularisées par la conduite autonome (PointPillars, BEVFusion) et désormais adaptées aux contraintes de l'embarqué. Le choix de l'AGX Orin, plateforme de référence pour la robotique mobile, rend les résultats comparables à ce que les intégrateurs déploient réellement. Les concurrents sont les réseaux voxel creux et les approches point à point, plus précis mais plus lourds, ainsi que les modèles de fondation de perception 3D, qui visent la généralité plutôt que la frugalité. Aucune annonce de déploiement industriel, de code ou de pilote n'accompagne la publication à ce stade. La suite logique consisterait à publier des benchmarks comparatifs, à tester le système sur des robots en conditions réelles de logistique ou de service, et à vérifier sa tenue face à des environnements dynamiques et à des capteurs LiDAR de résolutions différentes.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
PIER-Flow : un flux rectifié efficace et informé par la physique pour la navigation en temps réel des robots mobiles
4arXiv cs.RO 

PIER-Flow : un flux rectifié efficace et informé par la physique pour la navigation en temps réel des robots mobiles

Des chercheurs présentent PIER-Flow (Physics-Informed Efficient Rectified Flow), une politique de navigation légère pour robots mobiles, décrite dans un preprint arXiv publié le 14 juillet 2026 (arXiv:2607.10288v1). La méthode distille un expert MPC (Model Predictive Control) dans une équation différentielle ordinaire à temps continu, ce qui permet de générer une action en une seule étape grâce à un échantillonnage latent parallèle et une sélection de faisabilité allégée. Un objectif d'entraînement intégrant la physique impose la cohérence cinématique du robot, couplé à une architecture de "chunking" d'actions asynchrone pensée pour le transfert simulation vers réel. En simulation, PIER-Flow atteint un taux de réussite de 98,85% sans aucune collision, avec un temps d'inférence moyen d'environ 1,29 ms, soit une planification 37,2 fois plus rapide que le MPC classique et plus de 800 fois plus rapide que les modèles de diffusion standards. Déployé sur un calculateur embarqué à ressources limitées, le système conserve une latence d'inférence stable d'environ 5,3 ms. Ces chiffres, s'ils se confirment au-delà du cadre expérimental, répondent à une tension centrale de la navigation robotique autonome: les méthodes d'optimisation comme le MPC gèrent explicitement les contraintes de sécurité et de cinématique mais souffrent d'une optimisation non linéaire répétée coûteuse en temps réel, tandis que les politiques de clonage comportemental déterministes sont rapides mais peinent à représenter des comportements d'évitement multimodaux, et les politiques de diffusion capturent cette multimodalité au prix d'un débruitage itératif lent. En combinant la rapidité d'inférence d'un modèle distillé avec la robustesse théorique d'un expert MPC, PIER-Flow illustre une piste concrète pour rapprocher performance temps réel et sécurité formelle chez les robots mobiles évoluant en environnements denses et dynamiques, un enjeu direct pour les intégrateurs d'AMR (robots mobiles autonomes) en entrepôt ou en usine où les pics de latence et les gels de planification restent un point de friction opérationnel majeur. L'approche s'inscrit dans une lignée de travaux cherchant à accélérer les politiques génératives pour la robotique, où les modèles de diffusion classiques, malgré leur expressivité, imposent un coût d'inférence incompatible avec le contrôle temps réel embarqué. Le recours au "rectified flow" comme alternative plus rapide au débruitage itératif fait écho à des développements récents dans la littérature sur les modèles génératifs accélérés. Aucun acteur industriel n'est nommé dans ce travail, qui reste à ce stade une contribution académique validée uniquement en simulation et sur un déploiement limité en conditions réelles sur matériel edge; les auteurs ne précisent pas de calendrier de transfert vers des plateformes robotiques commerciales ni de comparaison directe avec des politiques VLA (Vision-Language-Action) comme Pi-0 ou GR00T N2, ce qui invite à la prudence sur la portée exacte des gains annoncés hors du cadre testé.

RecherchePaper
1 source