Praxis-1 transforme la vidéo en pilote de robots
Runway ouvre en partie son modèle robotique Praxis-1 sous licence Apache 2.0. Pensé pour convertir images, texte et position d’un robot en gestes, il vise surtout l’exécution rapide, avec des limites encore nettes sur les tâches longues.
Runway a rendu public Praxis-1, un modèle de robotique ouvert en poids et en code source sous licence Apache 2.0. Présenté d’abord en septembre à un cercle restreint de partenaires, puis détaillé dans un rapport de recherche publié le 14 novembre 2026, il traduit des images de caméra, des instructions textuelles et des données de position en mouvements de robot. L’enjeu est simple à résumer : faire servir la vidéo à autre chose qu’à générer des clips, et réduire le coût des jeux de données spécialisés.
Quand la vidéo devient un terrain d’entraînement pour les robots
Praxis-1 part d’un modèle vidéo qui a appris comment les objets bougent et interagissent dans des séquences ordinaires. Runway l’a ensuite affiné avec des vidéos d’actions humaines et des données robotiques, afin qu’il prévoie l’évolution d’une scène puis calcule le bon mouvement pour le robot. Cette approche, que Runway qualifie de World Action Model, vise à s’appuyer sur des données plus générales que les corpus classiques, souvent longs et coûteux à réunir. Une petite gymnastique de laboratoire, mais avec de vrais bras mécaniques.
Dans ses tests, la société dit avoir confronté Praxis-1 à plusieurs systèmes, dont un humanoïde, un bras industriel et un robot d’entrepôt à deux bras. Des entreprises comme Standard Bots, Noble Machines et Ultra auraient évalué le modèle depuis septembre, selon Runway. La logique est claire : si le modèle sait déjà interpréter des scènes vidéo, il peut apprendre plus vite à agir dans le monde réel, à condition de recevoir encore un complément de données pour chaque machine.
Des résultats solides, mais encore loin d’un pilote autonome
Sur le classement RoboLab-120 de Nvidia, Praxis-1 affiche un taux de réussite de 46,2 % et prend la première place de la catégorie World Action Model. Le benchmark mesure la capacité d’un modèle à trier, saisir ou empiler des objets sur 120 tâches en simulation. FLUX 3 Action atteint 42,9 % dans les mêmes conditions, ce qui place Runway devant ce concurrent direct, mais encore derrière deux agents d’IA et deux modèles robotiques d’architectures différentes dans le classement global. Les chiffres ont été publiés par Runway lui-même et n’ont pas encore été vérifiés de manière indépendante.
Sur un bras Franka affiné avec les données DROID, le modèle a réussi 88 tentatives sur 100 sur dix tâches, comme poser une banane sur une assiette ou fermer un tiroir. Pour un autre test de transfert vers un robot mobile équipé d’un bras de préhension, Runway indique un taux moyen de 80 % en simulation après environ 95 heures de données robot, contre 52,4 % pour le modèle RT-1 de Google sur le même benchmark [à vérifier selon le protocole exact de comparaison]. Le message est positif, mais les limites restent visibles : le modèle confond parfois des objets qui se ressemblent et gère mal les consignes vagues ou les suites d’actions longues.
Ouvert, mais pas prêt pour un usage sans filet
Les développeurs peuvent récupérer Praxis-1 sur Hugging Face après inscription et acceptation des conditions d’accès, tandis que le code est publié sur GitHub. Runway propose aussi des versions pré-adaptées pour certains robots, mais le modèle de base doit encore être ajusté avant d’être branché sur une nouvelle plateforme. La version standard réclame un GPU doté de 80 Go de mémoire, quand une version compressée est annoncée comme compatible avec une RTX 5090 de 32 Go de VRAM selon les estimations de Runway, sans mesure réelle du pic mémoire pour l’instant.
La portée industrielle du projet tient donc moins à une autonomie immédiate qu’à une promesse d’intégration plus rapide. Runway veut d’abord un système qui exécute bien des mouvements robotisés, puis le combiner plus tard avec des modèles généralistes capables de découper des tâches complexes en étapes. Autrement dit, Praxis-1 ne remplace pas encore le chef d’orchestre ; il sait surtout jouer sa partition très vite.
Points clés
- Runway a publié Praxis-1 sous licence Apache 2.0.
- Le modèle a été présenté d’abord en septembre, puis détaillé le 14 novembre 2026.
- RoboLab-120 : 46,2 % pour Praxis-1, selon Runway.
- FLUX 3 Action atteint 42,9 % sur le même benchmark.
- Le modèle a été testé par Standard Bots, Noble Machines et Ultra.
- Runway annonce 80 % de réussite sur un test de transfert robotique.
En chiffres
- 277 heures — données DROID utilisées pour un bras Franka, selon Runway.
- 1 400 à 2 600 heures — données nécessaires pour un robot à deux bras, selon le rapport.
- 88 réussites sur 100 — sur dix tâches exécutées avec un bras Franka.
- 95 heures — données robot utilisées pour le test de transfert vers un robot mobile.
- 80 Go de mémoire — exigence annoncée pour la version standard du modèle.