AI Startup neural.love améliore les vidéos anciennes

Après que sa vidéo vintage améliorée par l’IA soit devenue virale, Denis Shiryaev a lancé une startup pour mettre en bouteille la magie. Bientôt, quiconque veut dépoussiérer ses vieux films pourra peut-être utiliser ses réseaux de neurones.

L’histoire a commencé avec un blog sur Telegram par l’entrepreneur russe vivant actuellement à Gdańsk, en Pologne.

«Il y a quelques années, j’ai commencé à bloguer sur l’apprentissage automatique et à jouer avec différents algorithmes pour mieux le comprendre», a déclaré Shiryaev, qui a ensuite fondé la startup connue sous son adresse Web, neural.love. «Je produisais de la musique avec des réseaux neuronaux et organisais des tests de Turing sur des chatbots – des trucs idiots et amusants.»

Il y a huit mois, il a tenté une expérience d’IA avec un court film granuleux qu’il avait trouvé sur YouTube d’un train en 1896 arrivant dans une petite ville française. Il a utilisé un logiciel open source et des modèles d’IA pour le mettre à l’échelle à une résolution 4K et lisser son mouvement saccadé de 15 images par seconde à 60 ips.

«Je l’ai posté un soir, et quand je me suis réveillé le lendemain, j’ai eu un million de vues et j’étais en première page de Reddit. Ma boîte de réception explosait de messages sur Facebook, LinkedIn – partout », a-t-il déclaré à propos des réponses à la vidéo ci-dessous.

Ne voulant pas être une merveille unique, il a trouvé d’autres vidéos vintage avec lesquelles travailler. Il les a exécutés à travers un flux de travail en expansion de modèles d’IA, y compris DeOldify pour ajouter de la couleur et d’autres algorithmes open source pour supprimer le bruit visuel.

Sa boîte de réception est restée pleine.

Il a reçu des demandes d’une société de médias aux Pays-Bas pour améliorer un vieux film d’Amsterdam. Des expositions dans le métro de Moscou ont diffusé une vidéo vintage qu’il a mise en valeur de la capitale russe. Un réalisateur de documentaires polonais a également frappé à sa porte.

Même les États-Unis appelaient. PBS a demandé de l’aide avec des images pour un site Web interactif pour son documentaire sur le suffrage des femmes.

«Ils avaient un coloriste pour les images fixes, mais même avec les progrès de la peinture numérique, la coloration des films prend un temps ridicule», a déclaré Elizabeth Peck, responsable du développement commercial pour l’équipe de cinq personnes de neural.love.

NVIDIA RTX accélère le travail AI 60x +

En cours de route, Shiryaev et son équipe ont obtenu une mise à niveau vers le dernier GPU NVIDIA RTX 6000. Il pouvait traiter 60 minutes de vidéo en moins de temps qu’une carte graphique précédente ne prenait pour gérer 90 secondes de séquences.

La carte RTX entraîne également les modèles d’IA personnalisés de l’équipe en huit heures, un travail qui prenait une semaine auparavant.

«Cette carte brille, c’est incroyable à quel point le bon matériel peut être utile», a-t-il déclaré.

Monteur de films AI dans le cloud

Les lumières vives que l’équipe voit ces jours-ci sont des images clignotantes d’un futur service grand public dans le cloud public. Un éditeur de vidéo AI en libre-service en ligne pourrait aider n’importe qui avec une copie numérique d’une vieille cassette VHS ou d’une bobine Super8 dans son placard.

«Les gens nous envoyaient des images vraiment touchantes – la dernière vidéo de leur père, un extrait d’un concert de Michael Jackson auquel ils ont assisté à l’adolescence. L’intérêt personnel que les gens portaient à ce que nous faisions était frappant », a expliqué Peck.

C’est encore tôt. Shiryaev prévoit qu’il faudra quelques mois pour préparer le lancement d’un service bêta.

Pendant ce temps, neural.love s’éloigne du monde du VC. «Nous ne voulons pas prendre d’argent tant que nous ne sommes pas sûrs qu’il existe un marché et que nous avons un produit fonctionnel», a-t-il déclaré.

Vous pouvez en savoir plus sur l’histoire de neural.love dans un webinaire organisé par PNY Technologies, un partenaire NVIDIA.