Robbyant, entreprise d’intelligence artificielle incarnée rattachée à Ant Group, a lancé LingBot-VA 2.0, un modèle conçu dès l’origine pour permettre aux robots de comprendre leur environnement, d’anticiper les effets de leurs actions et d’ajuster leurs mouvements en temps réel.
Contrairement aux modèles de génération vidéo adaptés après coup à la robotique, LingBot-VA 2.0 a été entraîné spécifiquement pour le monde physique. Son architecture autorégressive relie perception visuelle, prédiction causale et exécution afin d’aider les robots à décider de leur prochaine action.
Le système repose notamment sur un encodeur associant informations visuelles et actions, une architecture Mixture of Experts et un mécanisme d’inférence asynchrone. Celui-ci permet au robot d’agir tout en anticipant les états futurs de son environnement et en corrigeant ses décisions à partir de nouvelles observations.
Selon Robbyant, le modèle atteint une vitesse d’inférence de 150 Hz sur un seul GPU. Il peut également s’adapter à de nouvelles tâches à partir d’environ 20 démonstrations, sans mise à jour de ses paramètres.
LingBot-VA 2.0 complète une gamme de six modèles couvrant la perception, la simulation du monde, la compréhension visuelle et le contrôle robotique. Robbyant vise notamment des applications dans l’industrie, l’assistance médicale, l’accompagnement des personnes âgées et les tâches domestiques.
Rejoignez-nous sur WhatsApp
Rejoignez-nous sur telegram
Suivez-nous sur Google News
