Flux & Stable diffusion

Stable diffusion permet de générer des images, open source il permet de générer des images a partir de texte ou d'autres images gratuitement sur un ordinateur offline, il permet aussi de créer des apprentissage pour créer ses propres modèles et générer des vidéos.

• https://fr.wikipedia.org/wiki/Stable_Diffusion

Pour installer SD il faut un ordi récent, Windows ou mac avec une carte graphique adequate >RTX 3060. Il faudra aussi installer Python, Git bash , et télécharger des fichiers assez lourd via HugginFace et d'autres dépots.

Temps d'installation, prévoir 1 à 2 heures de galère potentielle.

• https://www.stablediffusion.blog/installation-windows-webgui

• https://pinokio.computer/ Installation facile avec Forge qui installera flux, mais permettera aussi Stable Diffusion en telechargeant des modeles checkpoint

Les modèles d'images sont des fichiers qui compile des milliers d'image et leur description, certains sont orienté photo, dessin animé, manga … Un modele est lourd et pese généralement quelques gigas.

• https://dataconomy.com/2023/08/28/best-stable-diffusion-models-how-to-use/

Il ya aussi des modeles pour certains plugin comme controlnet :

• https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main

Plusieurs interfaces de contrôle sont disponibles, la plus utilisé se nomme A1111.

• https://stable-diffusion-art.com/automatic1111/
• https://github.com/invoke-ai/InvokeAI plus user friendly …

• Control net
• Dreambooth
• Roop
• Upscaler ..

https://stable-diffusion-art.com/automatic1111-extensions/

Pour rendre plus realiste une image généré par flux. Regenere l'image avec SD (un model special photo realiste) en img2img avec ces parametres :

• Steps: 34,
• Sampler: DPM++ 2M, Schedule type: Karras,
• CFG scale: 7,
• Model: epicphotogasm_amateurreallife,
• Denoising strength: 0.34,

Cette fonctionnalité permet ainsi de generer d'apres vos contenu de nouvelles images.

• https://tryolabs.com/blog/2022/10/25/the-guide-to-fine-tuning-stable-diffusion-with-your-own-images

On peut générer des videos ou suite d'images à partir d'une video source et un prompt (texte ou image).

• https://stable-diffusion-art.com/video-to-video/

Control net Guide : https://stable-diffusion-art.com/controlnet/

Upscale forum : https://www.reddit.com/r/StableDiffusion/comments/11qrleg/basic_guide_10_upscaling_how_to_make_images/?rdt=43573

• https://www.nextdiffusion.ai/tutorials/how-to-style-your-face-portrait-with-stable-diffusion-controlnet-ip-adapter