Google a dévoilé l’IA générative Lumiere pour aider les utilisateurs à créer des images et des vidéos réalistes à l’aide d’invites textuelles

L’IA générative a rapidement parcouru un long chemin. Au cours des derniers jours, j’ai eu plusieurs conversations avec mes proches et même avec mon tatoueur, discutant de la façon dont l’IA s’infiltre lentement dans tous les secteurs et que la seule façon d’avancer est de bien comprendre son fonctionnement. Google vient de présenter Lumiere, un nouvel outil d’IA générative qui va vous aider à créer des images et des vidéos plus réalistes via des commandes textuelles.

Lumiere de Google est une autre preuve que l’IA est l’avenir et que nous ne pouvons rien faire pour le changer

L’un des points forts de Lumière est le fait qu’il est capable de créer un mouvement qui semble réaliste et sans saccades. Cela peut ne pas paraître impressionnant, mais avec l’aide du dernier outil d’IA générative, nous pouvons aller très loin et créer quelque chose d’incroyable.

Lumière utilise également des modèles probabilistes de diffusion qui l’aident à générer des images. Ceci est couplé à un U-Net spatio-temporel. Pour ceux qui ne le savent pas, U-Net sert d’architecture qui apporte des mises à l’échelle temporelles, ainsi que des blocs d’attention qui sont ajoutés aux images. La meilleure chose est que cet outil d’IA de nouvelle génération peut être utilisé avec de nombreux autres modèles, ce qui aidera à créer des images et des vidéos qui sembleront beaucoup plus réalistes que tout ce que nous avons vu auparavant.

Lumiere peut être utilisé pour créer les éléments suivants,

Cinémagraphes : où une seule section d’une image est animée
Inpainting : Un objet dans une vidéo est remplacé par un autre
Génération stylisée : le style artistique de toute création peut être transformé en autre chose
Image vers vidéo : aide à animer n’importe quelle image souhaitée
Vidéo vers vidéo : permet aux utilisateurs de créer des vidéos dans un style artistique différent

Au moment de la rédaction, la durée de la vidéo n’est que de 5 secondes, alors que la possibilité de créer des transitions vidéo et plusieurs angles de caméra n’existe pas. Il convient également de noter que si vous souhaitez essayer Lumiere, vous ne pourrez pas le faire avec un simple GPU standard. Il doit y avoir quelque chose de puissant qui pilote la puissance graphique de votre PC, sinon l’outil ne fonctionnera tout simplement pas, ce qui est logique.

L’introduction de Lumière semble intéressante sous différents angles. Hier encore, je parlais à mon tatoueur de la façon dont il avait réussi à créer un certain nombre de tatouages pour son client en utilisant l’IA, car le client cherchait quelque chose qui n’avait jamais été créé auparavant. Je ne peux qu’imaginer à quel point ces outils seront puissants dans un avenir proche, et j’espère qu’ils ne pourront pas être utilisés par de mauvaises mains qui ne cherchent qu’à provoquer le chaos.

Source d’information : Lumière