La technologie générative d'Anamorph réorganise les scènes pour créer des versions illimitées d'un film

Anamorph, une nouvelle société de cinéma et de technologie, a annoncé son lancement aujourd’hui. La startup, fondée par le cinéaste Gary Hustwit et l’artiste numérique Brendan Dawes, souhaite remodeler l’expérience cinématographique grâce à sa technologie générative exclusive capable de créer des films différents à chaque fois qu’ils sont projetés.

Anamorph a révélé sa technologie innovante au Festival du film de Sundance 2024 en lançant son premier documentaire, « Eno », qui suit le musicien, producteur et artiste visuel anglais Brian Eno, qui a travaillé avec les légendes David Bowie, U2, Coldplay, Grace Jones, Talking. Têtes et bien d’autres. Son objectif principal est d’expérimenter des logiciels de musique générative.

« Brian semblait être le candidat idéal pour [using Anamorph’s software] puisqu’il a toujours défendu la technologie et la manière dont elle peut être utilisée dans l’art et la musique », a déclaré Hustwit à TechCrunch.

Chaque fois que « Eno » était projeté à Sundance, la plateforme de médias génératifs sélectionnait des scènes parmi plus de 500 heures de séquences d’archives et d’interviews restaurées, ainsi que des visuels et de la musique animés. Le système d’Anamorph est capable de générer des milliards de séquences potentielles, offrant ainsi une expérience visuelle unique à chaque public.

Certes, nous étions sceptiques au début. Notre plus grande question était : l’ordre des scènes aura-t-il un sens ? Mais comme le souligne Hustwit, le but du système génératif n’est pas de produire des films avec un « arc chronologique ».

« Vous pouvez toujours avoir un arc narratif captivant dans un film, un peu ce à quoi nous nous attendons lorsque nous voyons un film. [normal] documentaire… même si les scènes, les images, la musique et les séquences changent, nous pouvons toujours obtenir une histoire engageante et cohérente. Dans ce cas, il est utile qu’il s’agisse d’une seule personne », note-t-il. « Votre cerveau essaie d’établir des liens et de comprendre l’histoire. Et cette histoire change en fonction de la manière dont vous recevez l’information et de la façon dont elle se déroule.

Cela aide également que les première et dernière scènes de « Eno » soient toujours les mêmes. De plus, certaines scènes sont épinglées sur le même créneau horaire dans chaque version, y compris la scène où Eno discute de l’art génératif.

« Nous avons pensé que c’était probablement une bonne scène que tout le monde devrait voir », déclare Hustwit.

Anamorph a utilisé des fichiers HD à Sundance, mais son logiciel peut également créer le film en direct lors d’une projection, que la startup a présentée lors d’une installation à la Biennale de Venise en octobre 2023.

« Nous laissons simplement la plate-forme générative se déchaîner avec l’intégralité du catalogue musical d’Eno et toutes les séquences, sans règles. [The software] a réalisé un film de 168 heures et non une boucle. Cela générait un film original qui ne se répétait pas pendant 168 heures. Cela aurait pu durer plus longtemps, mais l’exposition n’a été ouverte que pendant une semaine », partage Hustwit.

Il n’y avait que six versions présentées à Sundance. Depuis, la société a affiné le logiciel et ajouté davantage de séquences, de sorte que « Eno » continuera d’évoluer.

Des projections supplémentaires seront projetées ce printemps et cet été dans 50 villes.

Comme vous pouvez l’imaginer, une plate-forme générative capable de créer différentes variations en utilisant des centaines d’heures de séquences ne se construit pas en un jour ou même en un an. Anamorph a passé cinq ans à créer son logiciel à partir de zéro, combinant des techniques en instance de brevet et les propres connaissances de l’équipe en matière de narration. La société affirme ne pas être formée sur les données, la propriété intellectuelle ou d’autres films de quelqu’un d’autre.

«Le principal défi consistait à créer un système capable de traiter potentiellement des centaines de fichiers vidéo 4K, chacun avec ses propres pistes audio 5.1, en temps réel», nous explique Dawes. « La plateforme sélectionne et séquence les fichiers de scènes édités, mais elle crée également ses propres scènes et transitions purement génératives, créant dynamiquement des éléments vidéo et audio 5.1 originaux. La plate-forme devait également être robuste dans une situation réelle, il n’était pas possible de la faire planter. Nous avons donc fait une quantité folle de tests. Nous pouvons créer une version unique d’un film en direct dans une salle de cinéma, ou nous pouvons restituer un fichier ProRes avec son propre mixage audio 5.1 et créer un DCP à partir de cela.

Dawes affirme notamment que le système peut effectuer plus de 52 quintillions de variations. (À quel point est-ce fou ?)

Il souligne également : « Il s’agit d’un système génératif, pas d’une IA générative. Je dois donc juste que ce soit clair, car à peu près tout ce qui a été dit à propos de [‘Eno’] utilise le mot IA.

Le seul problème qui empêche Anamorph de proposer son système au grand public est qu’il n’existe aucune plate-forme de streaming existante capable de prendre en charge ce type de technologie. Cependant, la société affirme vouloir développer les capacités en interne pour que les principaux streamers puissent les utiliser.

« Je pense que la principale contrainte est que les réseaux de streaming actuels ne sont pas équipés pour générer dynamiquement des fichiers vidéo uniques et les diffuser à des milliers de téléspectateurs afin que chaque spectateur obtienne sa propre version d’un film. Lorsque nous avons présenté « Eno » à Sundance, toutes les grandes sociétés de streaming ont adoré, mais elles ont également admis que leurs systèmes ne pouvaient pas gérer la technologie impliquée… Ces streamers doivent se différencier, et je pense que permettre aux films et aux émissions qu’ils diffusent la technologie générative est un moyen d’y parvenir », déclare Hustwit.

Il faudra probablement des années avant que les services de streaming s’adaptent à la technologie. En attendant, Anamorph s’en tient aux événements en direct et aux sorties en salles.

« Ce dont l’industrie du théâtre a cruellement besoin en ce moment, c’est une raison pour attirer les gens, et s’il y a un caractère unique dans l’expérience cinématographique en direct, c’est une façon d’y parvenir », ajoute Hustwit.

En plus des documentaires, la société explore d’autres projets qui pourraient utiliser des plateformes génératives, notamment des expositions d’art et même des films à succès. Des agences de publicité ont également manifesté leur intérêt, révèle Hustwit, une entreprise souhaitant réaliser 10 000 versions d’une publicité d’une minute.

Il est difficile d’imaginer qu’une série télévisée suivant une structure épisodique puisse avoir un sens dans ce type de format, surtout si les scénarios B et C sont incorporés. Contrairement au film « Black Mirror : Bandersnatch » de Netflix, choisissez votre propre aventure, les téléspectateurs ne peuvent pas décider quelles scènes ils veulent regarder, ni revoir une version.

« Cela nécessite une participation un peu plus active de la part du spectateur pour remarquer les différences s’il revoit le film à nouveau et être enthousiaste à l’idée de découvrir ce qui n’était pas là », explique Hustwit.

Dans l’ensemble, cette idée ne conviendra pas à tout le monde, mais elle offre certainement une expérience divertissante et nouvelle que personne n’a vue auparavant.

Maintenant qu’Anamorph est officiellement lancé, il est ouvert aux consultations avec les cinéastes, les créateurs de contenu, les studios, les sociétés de streaming et bien plus encore. Plutôt que de rendre ses outils accessibles au public, l’entreprise souhaite collaborer sur des projets afin de pouvoir « prendre en compte le matériel source et les objectifs généraux de l’histoire », explique Hustwit. Il a ajouté qu’Anamorph est actuellement en discussion avec une douzaine de sociétés ou plus.

De plus, le coût de chaque projet variera.

« Nous pourrions créer un film Marvel qui change à chaque fois qu’il est diffusé – ce qui serait incroyable – et les coûts seraient supérieurs à ceux d’un petit projet d’art vidéo. Mais nous sommes intéressés à collaborer sur des projets dans ces deux domaines. Notre objectif principal est de faire connaître ce nouveau type de cinéma et de nouer des contacts avec d’excellents collaborateurs pour nous aider à explorer cette idée », explique Hustwit.

A lire également