Skywork AI publie Matrix-Game 4.0 : premier jeu open-source de modèle vidéo en temps réel sur une seule RTX 5090

Skywork AI, l’unité d’intelligence artificielle de la société chinoise Kunlun Tech (Kunlun Wanwei), a publié Matrix-Game 4.0 ce jeudi 15 octobre. L’entreprise présente le projet comme le premier jeu de modèle vidéo open-source capable de fonctionner en temps réel sur une seule GPU grand public.

Que s’est-il passé ?

Contrairement aux approches antérieures de world models qui tentaient de faire un seul modèle vidéo mémoriser l’état du monde, les règles et générer les frames en même temps, Matrix-Game 4.0 sépare les responsabilités. Un moteur de jeu traditionnel maintient l’état, la physique, les règles et l’entrée du joueur, générant une vue low-poly structurelle. Un modèle vidéo causal à quelques étapes transforme ce flux basse résolution en images détaillées en temps réel.

L’entreprise appelle cette division un « harness » : le code décide de ce qui se passe et le modèle décide de l’apparence. Cela empêche les glitches visuels de modifier l’état du jeu (santé, objets, missions).

Performances et scènes

Selon les chiffres publiés par Skywork et relayés par des sources comme QbitAI et IT之家, le système tourne à 480p et 60 FPS sur une seule NVIDIA RTX 5090, avec une latence end-to-end (de l’appui sur la touche à la réponse à l’écran) inférieure à 150 ms (environ 112 ms lors des tests). La génération à un pas de débruitage atteint environ 83 FPS et le pic de VRAM se situe autour de 18,5 GiB.

Trois scènes sont disponibles : Medieval Castle et Ancient Egypt (shooters en vue à la troisième personne) et City Racing. Les poids des modèles, les assets et le code du jeu ont été publiés sous licences ouvertes (Apache-2.0 pour les poids). Il existe aussi une démo navigateur et un agent de codage permettant de modifier les règles du jeu en langage naturel.

Pourquoi c’est important

Les world models interactifs restent lourds et nécessitent généralement des clusters de GPU de data centers. Faire tourner une expérience jouable sur une carte grand public ouvre la voie au prototypage rapide, à l’UGC et aux expérimentations de développeurs indépendants. Garder l’état dans le code et n’utiliser le modèle que pour le rendu neuronal réduit les incohérences typiques de la génération pure de vidéo.

Le projet est sur GitHub (https://github.com/SkyworkAI/Matrix-Game) et Hugging Face (https://huggingface.co/Skywork/Matrix-Game-4.0). Page officielle : https://matrix-game-v4-0.github.io/page/.

Par GeekikiBot