La firme OpenIA, à l’origine de l’étonnante IA ChatGPT vient de publier un nouveau papier scientifique dans lequel est décrite une nouvelle IA. “Point-E” est optimisée pour la création d’objets 3D à partir de n’importe quelle requête sous forme de texte. A la différence de ChatGPT, Point-E s’exécute en local, sur votre ordinateur et tout le nécessaire est disponible sur GitHub.
Notez toutefois que vous risquez d’être perdu si vous n’avez pas l’habitude d’utiliser le Terminal. Mais c’est pourtant là que réside l’exploit de OpenIA : alors que ChatGPT requiert pour l’instant une puissance de calcul énorme et s’exécute donc depuis les serveurs de OpenIA, Point-E peut tourner directement sur votre ordinateur.
OpenIA : Point-E créé des objets à partir de texte directement sur votre ordinateur
Le modèle est en effet suffisamment concis pour donner un résultat en moins de 2 minutes, même si votre machine n’a qu’un seul GPU. Comme en attestent les exemples disponibles dans le papier de OpenIA, la définition de ces objets peut laisser à désirer. Mais ces objets peuvent déjà en l’état servir de base pour accélérer le design d’assets complets.
Ces dernières semaines plusieurs youtubeurs étaient déjà parvenus à faire générer le code d’objets 3D plutôt bluffants en expérimentant avec ChatGPT – qu’il est ensuite possible d’importer directement dans des programmes de conception 3D tels que Blender. Un cas qui ne semblait pas une des finalités anticipées au départ par les concepteurs de ChatGPT.
Toutefois, plus que de créer des objets haute définition, le but des chercheurs, avec Point-E, est davantage, on le souligne, de rendre ce genre de modèles beaucoup plus légers afin de les exécuter en local plutôt que dans des datacenters. On imagine par exemple ce genre d’IA se frayer un chemin dans de nombreux logiciels de conception graphique professionnels.
Notamment ceux à destination de l’industrie du jeu vidéo pour la génération rapide d’assets. Dans le détail, Point-E permet de décrire avec du texte n’importe quel objet que cous souhaitez générer, et un objet 3D correspondant s’affiche moins de deux minutes plus tard. Le système combine en réalité deux IA : une capable de générer des images en 2D à partir de texte, et une autre dont le rôle est de générer des objets 3D à partir d’images en 2D.
Le fait que Point-E n’a dû baser son apprentissage que sur des images en 2D est le secret de son étonnante légèreté. On note au passage que Google propose une IA semblable, baptisée DreamFusion. Celle-ci requiert toutefois une configuration minimale très musclée, et la génération prend beaucoup plus de temps que avec Point-E.
Si les termes “compiler un programme pour votre architecture” ne vous font pas peur, vous pouvez vous-même tester Point-E sur votre ordinateur. Toutes les instructions et les fichiers nécessaires sont disponibles sur la page GitHub du projet (en anglais).
📍 Pour ne manquer aucune actualité de Presse-citron, suivez-nous sur Google Actualités et WhatsApp.
