Après Ace de NVIDIA et GameGen de Google, c’est au tour de Microsoft de se lancer dans l’aventure de l’IA générative dédiée à la création de jeu vidéo. Le géant de Redmond s’est même payé le luxe de présenter son nouveau système d’IA dans les colonnes de la prestigieuse revue Nature. Baptisé Muse, il est capable d’automatiser la création de scènes d’un jeu vidéo — personnages, décors, interactions – en quelques secondes seulement.
Muse : l’IA née des entrailles de la Xbox
Les équipes de recherche en apprentissage automatique de Microsoft, sous la houlette de Katja Hofmann, directrice principale de recherche, ont d’abord mené une vaste consultation auprès des développeurs de jeux. Leur objectif : identifier avec précision les besoins du secteur en matière d’intelligence artificielle générative.
Pour entraîner leur modèle, les chercheurs ont puisé dans un trésor de données accumulées pendant plusieurs années sur Bleeding Edge. Un jeu de combat multijoueur en ligne pas franchement marquant, sorti en mars 2020, développé par le studio britannique Ninja Theory et édité par Xbox Game Studios.
Grâce à cette collecte, Microsoft a pu se constituer une immense base de données : plus d’un milliard d’images de jeu, chaque partie jouée étant enregistrée sous forme d’images successives, créant ainsi une bibliothèque visuelle du jeu en action. Simultanément, Muse a aussi enregistré toutes les actions des joueurs via leurs manettes – chaque pression de bouton, mouvement de joystick et interaction a été par conséquent capturée.
Cela signifie que pour chaque image, Microsoft dispose de l’ensemble exact des commandes qui ont généré cette situation de jeu. Cette correspondance temporelle permet à Muse de comprendre non seulement ce qui se passe visuellement, mais aussi pourquoi cela se passe au niveau des interactions entre joueurs. Le résultat de ces travaux a été baptisé « World and Human Action Model ».
Muse : une arme pour les studios de jeux vidéo face à la crise ?
À partir d’une scène créée par un humain ; Bleeding Edge a bien été développé par de vrais développeurs ; le système génère des séquences visuelles assez cohérente. « Sans connaissance préalable, on pourrait croire qu’il s’agit d’extraits authentiques d’un jeu vidéo », note Katja Hofmann, Directrice principale de la recherche chez Microsoft lors d’une démonstration aux journalistes. Il est possible de regarder quelques extraits sur la page officielle du projet.
Pour tempérer un peu les propos de Hofmann, oui les scènes générées sont globalement réussies, mais il subsiste encore des bizarreries, reconnaissables au premier coup d’œil si on connaît un peu l’IA et les jeux-vidéos. Textures qui glitch, image tressaillante et qui semblent se former en direct, et une impression générale très uncanney valley, comme les vidéos générées par Sora d’OpenAI. Toutefois, il faut reconnaître que cela reste globalement assez impressionnant, compte tenu du fait que nous sommes encore aux débuts de l’IA appliquée à ce domaine.
Muse, une fois suffisamment maturé, pourrait en revanche venir au secours de la grande crise qui secoue le secteur vidéoludique depuis plusieurs années. Les gros blockbusters demandent plusieurs centaines de millions de dollars pour leur développement ; une inflation qui contraste avec le ralentissement de la croissance des ventes ; le marché sature et de nombreux studios de développement ont été contraints de fermer leurs portes en raison de difficultés financières.
Développer un jeu en se reposant sur un système unique d’IA est donc une perspective alléchante, les coûts en seraient considérablement réduits. Nous sommes en droit cependant de nous inquiéter de l’arrivée de tels outils sur le marché en tant que joueurs : quid de l’aspect créatif, unique et humain derrière un jeu ? La qualité d’un jeu développé par IA peut-elle atteindre l’excellence d’un autre développé de manière classique ? Que deviendront les milliers d’employés du secteur, déjà rudement affectés par les vagues de licenciements ? Beaucoup de questions, mais peu de réponses pour le moment ; attendons de voir ce que Microsoft a prévu pour Muse. L’entreprise prévoit de mettre à disposition des chercheurs externes un logiciel prototype, ce qui aidera certainement à cerner de plus près en quoi il pourrait véritablement être utile. Une démarche assez rare pour être soulignée.
- Microsoft dévoile Muse, une IA capable de générer automatiquement des scènes de jeux vidéo en s’appuyant sur des données collectées via Xbox.
- Cette technologie pourrait aider les studios à réduire les coûts de production, mais soulève des questions sur la créativité et l’avenir des développeurs.
- Microsoft prévoit de partager un prototype pour explorer ses usages possibles.
📍 Pour ne manquer aucune actualité de Presse-citron, suivez-nous sur Google Actualités et WhatsApp.
