Du 4O d'OpenAI à la diffusion stable, les modèles de fondation AI qui créent des images réalistes à partir d'une invite de texte sont désormais abondants. En revanche, les modèles de fondation capables de générer des environnements en ligne 3D complets et cohérents à partir d'une invite de texte ne sont que d'émerger.
Pourtant, ce n'est qu'une question de savoir quand, pas si, ces modèles seront facilement disponibles. Maintenant, l'un des chercheurs de modèle 3D les plus importants d'Europe, Matthias Niessner, a pris un congé entrepreneurial de son laboratoire visuel et de son laboratoire AI à l'Université technique de Munich pour fonder une startup travaillant dans la région: l'espaitiel.
Autrefois cofondateur de Synthesia, la startup réaliste de l'AVATAR AI d'une valeur de 2,1 milliards de dollars, Niessner a levé une série de semences inhabituellement importante pour une startup européenne de 13 millions de dollars. Le tour a été dirigé par Earlybird Capital Capital, un investisseur européen de premier stade (Backers of UIPATH, PeakGames par exemple) avec la participation de SpeedInvest et de plusieurs anges de haut niveau.
Cette taille ronde est encore plus impressionnante lorsque l'on tient compte du fait que Spaitial n'a pas encore grand-chose à montrer au monde autre qu'une vidéo teaser récemment publiée montrant comment une invite de texte pourrait générer une salle 3D.
Mais ensuite, il y a l'équipe technique que Niessner a rassemblé: Ricardo Martin-Brualla, qui a précédemment travaillé sur la plate-forme de téléconférence 3D de Google, maintenant appelée Beam; et David Novotny, qui a passé six ans à Meta où il a dirigé le projet de génération d'actifs de texte à 3D de l'entreprise.
Leur expertise collective leur donnera une chance de combattre dans un espace qui comprend déjà certains concurrents en mettant un accent similaire sur le photoréalisme. Il y a Odyssey, qui a levé 27 millions de dollars et va après les cas d'utilisation du divertissement. Mais il y a aussi World Labs, la startup fondée par le pionnier de l'AI Fei-Fei Li, et déjà évaluée à plus d'un milliard de dollars.
Niessner pense que c'est encore peu de concurrence par rapport à ce qui existe pour d'autres types de modèles de fondation, mais aussi en ce qui concerne la «vision plus grande» que lui et d'autres poursuivent.
«Je ne veux pas seulement avoir un monde 3D. Je veux aussi que ce monde se comporte comme le monde réel. Je veux que ce soit interactable et [let you] Faites des choses dedans, et personne n'a encore vraiment craqué », a-t-il déclaré.
Jeux vidéo dans le monde réel
Personne n'a encore vraiment craqué quelle est la demande d'environnements 3D photoréalistes non plus. La promesse d'une opportunité de « milliard de dollars '' allant des jumeaux numériques à la réalité augmentée semble assez grande pour exciter les VC, mais il est également vague et multiforme suffisamment pour rendre la stratégie de mise sur le marché difficile à comprendre. Le cas d'utilisation le plus évident est pour la création de jeux vidéo, mais ces modèles pourraient également avoir des applications dans le divertissement, des visualisations 3D utilisées dans la construction et éventuellement une utilisation dans le monde réel pour des domaines comme l'entraînement robotique.
Niessner espère contourner ce problème en demandant aux développeurs de concéder au modèle de fondation pour proposer des applications en aval pour des utilisations spécifiques. Il a également enrôlé un quatrième cofondateur, l'ancien directeur de Cazoo, Luke Rogers, une fois son colocataire à Palo Alto alors qu'il était professeur adjoint invité à Stanford, pour l'aider du côté des affaires.
L'une des premières tâches de la feuille de route de Spaitial sera d'identifier des partenaires qui peuvent fonctionner avec des modèles antérieurs, par rapport à ceux qui devraient attendre une meilleure qualité.
« Nous voulons au moins travailler avec quelques partenaires », a déclaré Niessner, « et voyez comment ils peuvent utiliser les API. »
Par rapport à d'autres startups d'IA bien financées, Spaitial augmente les revenus plus élevés à son programme. Mais d'abord, il devra en dépenser, à la fois en calcul et en embauchant. Pour ce dernier, il se concentre sur la qualité, pas sur la quantité. Selon Niessner, «l'équipe ne va pas passer à des centaines de personnes tout de suite; cela ne se produit tout simplement pas, et nous n'en avons pas besoin.»
Au lieu de cela, Niessner et ses cofondateurs travaillent à générer des espaces 3D plus grands et plus interactifs, où, par exemple, un verre peut se briser de manière réaliste. Cela débloquerait ce que Niessner appelle le «Saint Graal»: qu'un enfant de 10 ans pourrait taper un texte et faire son propre jeu vidéo en 10 minutes.
À son avis, cet objectif ambitieux est en fait plus réalisable que ce qui peut sembler être le fruit bas – permettant aux utilisateurs de créer des objets3D – car la plupart des plateformes de jeu contrôlent toujours étroitement ce que les tiers peuvent ajouter. C'est-à-dire, bien sûr, à moins qu'ils ne décident de le construire eux-mêmes, comme Roblox le pourrait. Mais à ce moment-là, l'espaitiel pourrait être occupé à remplacer CAD à la place; Le chapitre suivant de la génération 3D ne fait que commencer.
