Découvrez la puissance incroyable du nouveau modèle IA Flux : dépassant Stable Diffusion et plus encore !

Black Forest Labs, une petite équipe de 15 personnes, dont 14 proviennent de Stability AI, a récemment publié un modèle d'IA de pointe appelé Flux. Ce modèle de 12 milliards de paramètres surpasse tout modèle de génération d'images précédent, y compris Stable Diffusion 3, en termes de qualité d'image, d'alignement texte-image et de capacités globales.

Flux peut générer de belles images photorealistes avec des mains correctes, des œuvres d'art de style anime et plus encore, tout en suivant étroitement les invites données. Le modèle est disponible en deux versions : le modèle standard Flux Dev et le modèle plus rapide Flux Chanel, qui peut générer des images en seulement 4 étapes mais avec une qualité légèrement inférieure.

Pour installer et utiliser Flux, vous pouvez soit utiliser l'installateur fourni, soit télécharger et configurer manuellement les fichiers requis. Le processus d'installation est simple, et les modèles peuvent être exécutés localement sur votre ordinateur ou sur un GPU loué, comme via le service RunPod.

Lors de l'exécution de Flux, il est important d'optimiser les paramètres en fonction de la mémoire VRAM de votre GPU. Par exemple, si vous avez un 3090 ou un 4090, vous pouvez désactiver le cache CUDA pour maximiser les performances. Pour les GPU avec moins de VRAM, vous devez utiliser les versions FP8 des modèles et le modèle CLIP FP16 pour réduire l'utilisation de la VRAM.

Bien que Flux soit un modèle incroyablement puissant, il y a quelques préoccupations potentielles. La taille et la complexité du modèle peuvent le rendre difficile à affiner ou à entraîner sur du matériel grand public, limitant potentiellement son développement futur. De plus, le niveau de censure du modèle n'est pas encore totalement connu, bien qu'il semble être moins restrictif que Stable Diffusion 3.

Dans l'ensemble, Flux représente une avancée significative dans le domaine de l'imagerie générée par l'IA, et ses capacités sont vraiment impressionnantes. Que vous soyez un artiste professionnel, un passionné ou simplement curieux des dernières avancées de l'IA, Flux vaut vraiment le coup d'être exploré.

Pour installer le modèle Flux localement, vous avez deux options :

1. Utilisation de l'installateur Maring :

   • Si vous êtes un supporter Patreon, vous pouvez utiliser l'installateur automatique Flux Confy UI Manager.
   • Exécutez l'installateur, choisissez l'option "fast low vram install" et laissez-le télécharger et configurer les fichiers nécessaires.
   • Si vous avez déjà Confy UI installé, vous pouvez utiliser le fichier "flux s model install.bat" pour installer les modèles Flux.

2. Installation manuelle :

   • Téléchargez et extrayez la version portable de Confy UI pour Windows.
   • Téléchargez les fichiers suivants :
     • Modèle VAE (AE.sft)
     • Modèle Flux Dev (Flux Dev.sft) ou le modèle Flux FP8 optimisé
     • Modèle Flux Chanel (Flux Chanel.sft) ou le modèle Flux Chanel FP8 optimisé
     • Encodeurs de texte (T5X XL et CLIP ViT-L/14)
   • Placez les fichiers téléchargés dans les dossiers appropriés dans le répertoire Confy UI :
     • Modèle VAE dans le dossier "vae"
     • Modèles Flux dans le dossier "models/unit"
     • Encodeurs de texte dans le dossier "models/clip"
   • Lancez Confy UI et chargez le workflow.

Quelle que soit la méthode d'installation, assurez-vous de configurer les paramètres en fonction de la capacité de VRAM de votre GPU :

• Si vous avez un GPU 3090 ou 4090, définissez la "politique de repli des cœurs CUDA" sur "Préférer aucun repli des cœurs CUDA" pour des performances optimales.
• Si vous avez moins de 16 Go de VRAM, activez l'option de repli des cœurs CUDA.
• Utilisez les versions FP8 des modèles et définissez le type de poids sur FP8 pour de meilleures performances sur les GPU avec moins de VRAM.

Une fois l'installation terminée, vous pouvez commencer à générer des images à l'aide du modèle Flux dans Confy UI.

Pour exécuter le modèle Flux sur RunPod, suivez ces étapes :

1. Créez un nouveau compte sur RunPod en cliquant sur le lien dans la description.
2. Déployez un pod GPU et sélectionnez une carte avec 24 Go de VRAM comme la RTX 3090 ou la RTX A5000.
3. Modifiez le modèle pour qu'il soit celui d'ashle kza et modifiez le disque du conteneur pour qu'il soit de 50 Go.
4. Cliquez sur "Déployer à la demande" pour lancer le pod.
5. Une fois le pod en cours d'exécution, cliquez sur "Connecter" puis sur le port 8888.
6. Si vous êtes un supporter Patreon, faites glisser et déposez l'un des trois fichiers (A, B ou C) dans l'espace de travail pour installer le modèle Flux optimisé.
7. Copiez et collez les deux lignes de commande du message Patreon dans le terminal pour télécharger automatiquement les modèles.
8. Une fois l'installation terminée, retournez et cliquez sur le port 3000 pour lancer Conf UI.
9. Chargez le premier workflow, puis mettez à jour Conf UI vers la dernière version.
10. Fermez la fenêtre et relancez le port 3000.
11. Assurez-vous d'utiliser le modèle FP8 Safe TS, puis écrivez votre invite et cliquez sur "Q Prompt" pour générer l'image.

Si vous voulez télécharger les modèles manuellement, faites un clic droit sur le modèle que vous voulez, copiez le lien, puis utilisez la commande curl dans le terminal pour le télécharger dans le bon dossier.

Le modèle Flux, développé par la nouvelle entreprise Black Forest Labs, est un système d'IA remarquable qui a dépassé les modèles précédents de pointe dans diverses tâches de génération d'images. Avec ses 12 milliards de paramètres, le modèle Flux peut générer de belles images photorealistes qui suivent étroitement les invites données, y compris des mains correctes, des œuvres d'art de style anime et des capacités d'alignement texte-image impressionnantes.

Cependant, le modèle Flux n'est pas sans limites. Bien qu'il soit moins censuré que des modèles comme Stable Diffusion 3, il a encore des restrictions sur les types de contenu qu'il peut générer. Le modèle n'est pas capable de produire des images hardcore, non sécuritaires, car cela dépasserait ses capacités prévues.

Un autre problème potentiel avec le modèle Flux est le défi de l'affiner ou de le former davantage. La taille colossale du modèle, avec 12 milliards de paramètres, signifie que l'entraînement nécessiterait une quantité immense de puissance de calcul, probablement au-delà des capacités des GPU grand public. Cela pourrait limiter la capacité de la communauté à améliorer ou à personnaliser le modèle, car les ressources nécessaires pour l'entraînement peuvent ne pas être facilement disponibles.

Malgré ces limites, le modèle Flux reste une réalisation impressionnante, montrant les progrès rapides de la génération d'images par l'IA. Sa capacité à générer des images de haute qualité et détaillées qui correspondent étroitement aux invites fournies est vraiment remarquable et établit une nouvelle référence pour le domaine.

Le modèle Flux de Black Forest Labs est un système d'IA incroyablement puissant qui peut générer des images époustouflantes avec une précision et un niveau de détail remarquables. Avec ses 12 milliards de paramètres, il surpasse même les derniers modèles comme Stable Diffusion 3, produisant des résultats vraiment impressionnants.

Bien que les capacités du modèle soient indéniables, il y a quelques problèmes potentiels à prendre en compte. La puissance de calcul immense requise pour former un modèle aussi volumineux peut le rendre difficile à affiner ou à améliorer pour les utilisateurs individuels. De plus, le niveau de censure du modèle n'est pas encore clair, et il est possible qu'il ne puisse pas générer certains types de contenu.

Malgré ces préoccupations, le modèle Flux représente une avancée significative dans le domaine de l'imagerie générée par l'IA. Sa capacité à suivre les invites avec précision et à créer des images hautement réalistes, de style anime et même photorealistes est vraiment remarquable. Pour les utilisateurs disposant du matériel nécessaire, le modèle peut être facilement installé et utilisé, soit localement, soit via des services cloud comme RunPod.

Dans l'ensemble, le modèle Flux est un jeu-changer dans le monde de la génération d'art par l'IA, et son impact sur le domaine sera probablement considérable. Alors que la communauté continue d'explorer et d'expérimenter cette technologie, nous pouvons nous attendre à voir encore plus d'applications impressionnantes et innovantes à l'avenir.