<aside> 📌 10/07/2023 : Suite à une fuite du modèle partagée pour la recherche, Stability AI a décidé de partager officiellement SDXL 0.9.
Les fichiers du modèles sont donc désormais disponible sur Hugging Face
Pour utiliser ces fichiers avec une version adaptée d’automatic1111, suivez les instruction de cette vidéo (en anglais) :
https://www.youtube.com/watch?v=eg54fIOHlBU
</aside>
Il est toujours passionnant de voir l'émergence de nouvelles technologies qui repoussent les limites de ce qui est possible. L'une de ces avancées récentes est le lancement de Stable Diffusion XL, une nouvelle mise à jour majeure du modèle de génération d'images par IA de Stability AI.
Stable Diffusion XL 0.9 se distingue par sa capacité à générer des images de haute qualité à partir de descriptions textuelles, une fonctionnalité qui pourrait avoir des implications significatives dans des domaines allant de la conception graphique à la réalité virtuelle. Cependant, comme toute technologie, elle n'est pas sans ses défis et ses limites.
ssstwitter.com_1687519043789.mp4
<aside> 🎨 Où et comment utiliser Stable Diffusion XL 0.9 ?
Lancé à l’été 2022, stable Diffusion a été développé par des chercheurs du groupe CompVis de l'Université Ludwig Maximilian de Munich et de Runway et financé par Stability AI.
Stable Diffusion est un modèle de diffusion latente, un type de réseau neuronal génératif profond. Son code et ses poids de modèle ont été rendus publics, et il peut fonctionner sur la plupart des matériels grand public équipés d'un GPU modeste avec au moins 8 Go de VRAM. C’est une diffèrence majeure avec mes modèles texte-à-image propriétaires précédents comme DALL-E et Midjourney qui ne sont accessibles que via des services cloud.
En octobre 2022, Stability AI a levé 101 millions de dollars US lors d'un tour de table mené par Lightspeed Venture Partners et Coatue Management.
Après une version 2 qui a reçu un accueil mitigé eb début d’année, un nouveau modèle, Stable Diffusion XL a été annoncé et lancé en version Beta en Avril 2023. SDXL 0.9 est la nouvelle version qui fait suite à ces tests. Elle précède de quelques semaines la sortie officielle du Modèle de Stabvle Diffusion XL, la 1.0.
Stable Diffusion XL 0.9, ou SDXL 0.9 pour faire court, est la dernière mise à jour de la suite de modèles de génération d'images de Stability AI. Cette mise à jour marque une avancée significative par rapport à la version bêta précédente, offrant une qualité d'image et une composition nettement améliorées.
https://www.reddit.com/r/StableDiffusion/comments/14gg97w/some_sdxl_09_images_i_made/
SDXL 0.9 produit des images avec un niveau de détail et de composition nettement amélioré par rapport à son prédécesseur. Cela est dû à une augmentation significative du nombre de paramètres du modèle. SDXL 0.9 possède l'un des plus grands nombres de paramètres de tous les modèles d'image open source, avec un modèle de base de 3,5 milliards de paramètres et un pipeline d'ensemble de modèles de 6,6 milliards de paramètres.
SDXL 0.9 utilise deux modèles CLIP, dont l'un des plus grands modèles OpenCLIP entraînés à ce jour (OpenCLIP ViT-G/14). Cela renforce sa capacité à créer des images réalistes avec plus de profondeur et une résolution plus élevée de 1024x1024.
https://twitter.com/icreatelife/status/1671998236641447937
https://www.reddit.com/r/StableDiffusion/comments/14gnc8g/stormtrooper_having_a_tea_party_sdxl_09/
SDXL 0.9 offre une multitude d'applications créatives pour l'imagerie générative par IA. Que vous soyez dans le cinéma, la télévision, la musique, les vidéos pédagogiques, le design ou l'industrie, SDXL 0.9 a quelque chose à offrir. Il offre également une gamme de fonctionnalités qui vont au-delà du simple texte, y compris le prompt image-to-image (entrer une image pour obtenir des variations de cette image), l'inpainting et l'outpainting.
En somme, SDXL 0.9 est une avancée majeure dans le domaine de la génération d'images par IA, offrant une qualité d'image et une composition inégalées, ainsi qu'une multitude d'applications créatives.
Si vous êtes un fan de chiffres, SDXL 0.9 va certainement vous impressionner.
L'une des principales améliorations de cette version par rapport à la version bêta est l'augmentation significative du nombre de paramètres. Pour ceux qui ne sont pas familiers avec le jargon de l'IA, les paramètres sont essentiellement la somme de tous les poids et biais du réseau neuronal sur lequel le modèle est entraîné. Plus il y a de paramètres, plus le modèle a la capacité d'apprendre et de comprendre les données.
SDXL 0.9 possède l'un des plus grands nombres de paramètres de tous les modèles d'image open source. Il dispose d'un modèle de base de 3,5 milliards de paramètres et d'un pipeline d'ensemble de modèles de 6,6 milliards de paramètres. Pour mettre cela en perspective, la version bêta fonctionnait sur 3,1 milliards de paramètres et utilisait un seul modèle. C'est une augmentation massive qui se traduit par une amélioration significative de la qualité des images générées.