Hop, encore une longue brève pour pointer un horrible upscale AI "HD" officiel.

En l'occurrence celui d'Interstella 5555, utilisé hier soir sur Twitch par Daft Punk.

En effet, après avoir fait un premier tweet pour promouvoir cette sympathique diffusion gratuite de l'anthologie de clips réalisés en 2003 par Leiji Matsumoto sur des musiques du mythique duo français (ce livestream coïncidant en outre au 3e anniversaire de leur séparation), j'ai ensuite fait un deuxième tweet, moins promo, pour pointer la qualité du "master" utilisé.

Car ce dernier n'est autre qu'un upscale AI dégueulasse, comme en témoigne les screenshots que j'ai publié, en comparaison avec la version Blu-ray officielle du film (qui est loin d'être parfaite non plus, et entrelacée...).

Close-up Blu-Ray :



Close-up upscale AI :



Tout ça pour dire, d'une part, qu'Interstella 5555 mériterait un vrai remaster HD, qui n'existe pour l'instant pas (voir les comparatifs des différentes versions existantes ici). Car on ne parle pas d'un vieux film avec légende urbaine de masters perdus. On parle d'une oeuvre faite au 21e siècle.
Et si le début des années 2000 fût une période de transition vers le numérique qui n'est pas toujours évidente pour certains masters, on parle aussi d'une oeuvre qui est sortie au cinéma, et a même été projetée, entre autres, au Festival de Cannes. Donc quelque part, il existe forcément des masters autres que des vidéos entrelacées, afin de faire une vraie remasterisation, et pas une horreur comme cet upscale AI.

D'autre part, je rappelle toujours que l'arrivée imprévue de ces outils d'upscales AI (encore jeunes, et utilisables par n'importe qui pour pas cher) est aussi une aubaine commerciale inespérée et évidente pour les ayant droits, éditeurs et diffuseurs, qui peuvent donc faire et vendre des upscales AI comme des versions "HD" en attendant tranquillement de faire plus tard un vrai remaster (et donc se faire encore plus d'argent au final, évidemment).

Enfin, à chaque fois que je pointe cela, c'est aussi car ces ayant droits, éditeurs et diffuseurs, dans leur quasi totalité, ne mentionnent jamais l'utilisation de l'AI dans ces cas là.
Alors que ces upscales AI sont pour certains commercialisés, en SVOD et Blu-Ray.
Et alors même que, depuis plus d'un an, l'enjeu mondial (des professionnels et des politiques qui les y poussent) est de mentionner et watermarker tous les contenus utilisant de l'AI et qui sont simplement diffusés/montrés aux gens, sur internet par exemple.
Donc je vous laisse déduire les responsabilités que devraient commencer à prendre et comprendre ces ayant droits, éditeurs et diffuseurs, quant à leurs upscales AI qu'il ne font pas que montrer, mais qu'ils vendent aux gens, sans jamais mentionner l'AI.

L'occasion aussi de rappeler que les outils d'upscale AI ne sont pas très différents des outils AI décriés actuellement.
Un upscale AI utilise toujours un "model" AI entraîné sur une grande quantité d'animations existantes, par différents artistes, et sans leur consentements.
Un upscale AI génère de nouvelles images, selon ce qu'il croit être (une ligne, une ombre, etc puissance 1000) dans un style pour lequel il a été plus ou moins bien entraîné sur des oeuvres du même style (ou avec un certain type/pattern de défauts de master / encodage, par exemple).
La différence étant surtout que ces upscales AI sont pour l'instant méconnus du grand public. Ce sont des contenus traités par AI assez fourbes puisque non précisés par ceux qui les font (et les vendent, surtout). Mais en ayant l'oeil et en regardant dans les détails, on voit toujours très vite les aberrations contre-nature que tout upscale AI génère (et même les upscales les moins crappy).

Surtout que je connais un peu le sujet, je fais des upscales AI, j'ai testé des dizaines de "models" pour le fun, je le précise quand j'en poste, et évidemment je ne les vends pas. Comme je l'ai souvent expliqué par le passé, je m'amuse uniquement à upscaler de temps en temps des choses qui n'existent qu'en qualité pourrie, et qui n'existeront jamais en HD (vielles cinématiques et autres mini vidéos promos obscures).
Je ne suis donc pas anti upscale AI, mais tout dépends du cadre et de la finalité. Un upscale AI pouvant aussi officiellement être intéressant si les masters ont été perdus, mais en rappelant aussi qu'un upscale AI fait sur un master pourri donnera forcément au final quelque chose d'encore plus pourri à plein de niveaux.

En rappelant aussi que les outils d'upscales vidéo à base de réseaux neuronaux ne sont pas nouveaux et datent de bien longtemps avant OpenAI. Ils ont émergé il y a plus de 10 ans avec d'abord des outils d'upscales d'images (GAN en 2014, SRGAN en 2016, ESRGAN en 2018...) pour se spécialiser depuis seulement quelques années dans la vidéo (Real-ESRGAN en 2021, notamment, beaucoup utilisé comme base). Tout ces outils étant en accès libre (en notant qu'en parallèle certaines sociétés ont aussi développé leurs propres outils comme Sony avec ses process RS+ depuis 2020). Ce n'est donc que depuis peu que les upscales AI commencent à s'immiscer (de manière secrète donc puisque non communiquée au public) dans le marché vidéo, aussi car n'importe quel ordinateur grand public d'aujourd'hui a maintenant la puissance suffisante pour faire tourner de tels outils. Et que n'importe qui peut donc faire n'importe quoi très facilement, pour pas cher, y compris chez les "pros".

Et évidemment, montrer cela, c'est aussi informer et former les gens à ce qu'ils voient, ont envie de voir (et voient/achètent même donc parfois, sans le savoir).
Ce que je fais, donc, et que j'avais même commencé à faire avant l'arrivée d'OpenAI et les questions actuelles de watermark.

Screenshot Blu-ray :



Screenshot upscale AI :



From Catsuka on Twitter :

Another example of these crappy AI upscales with this livestream by @daftpunk.
"Interstella 5555" deserves a real HD remaster. https://t.co/La6wCP4yh5 pic.twitter.com/NdoRhrqr96

— Catsuka (@catsuka) February 22, 2024