| Les deux révisions précédentes
Révision précédente
Prochaine révision
|
Révision précédente
|
bases:fabnum:ai:stable_diffusion [2025/12/04 10:08]
enseignant [Interface] |
bases:fabnum:ai:stable_diffusion [2026/01/10 08:42] (Version actuelle)
enseignant [Entrainement LORA z-image] |
| Stable diffusion permet de générer des images, open source il permet de générer des images a partir de texte ou d'autres images gratuitement sur un ordinateur offline, il permet aussi de créer des apprentissage pour créer ses propres modèles et générer des vidéos. | Stable diffusion permet de générer des images, open source il permet de générer des images a partir de texte ou d'autres images gratuitement sur un ordinateur offline, il permet aussi de créer des apprentissage pour créer ses propres modèles et générer des vidéos. |
| |
| {{https://assets.hongkiat.com/uploads/a1111-stable-diffusion-mac/automatic1111-stable-diffusion-webui.jpg?990|}} | {{:bases:fabnum:ai:capture_d_ecran_2025-12-04_110459.png|}} |
| | Interface de Comfy ui |
| |
| * [[https://fr.wikipedia.org/wiki/Stable_Diffusion]] | * [[https://fr.wikipedia.org/wiki/Stable_Diffusion]] |
| |
| ===== Installation ===== | ===== Installation ===== |
| Pour installer SD il faut un ordi récent, Windows ou mac avec une carte graphique adequate >RTX 3060. | Pour installer SD il faut un ordi récent, Windows ou mac avec une carte graphique adequate >RTX 3070. |
| Il faudra aussi installer Python, Git bash , et télécharger des fichiers assez lourd via HugginFace et d'autres dépots. | Il faudra aussi installer Python, Git bash , et télécharger des fichiers assez lourd via HugginFace et d'autres dépots. |
| |
| * [[https://pinokio.computer/]] Installation facile avec Forge qui installera flux, mais permettera aussi Stable Diffusion en telechargeant des modeles checkpoint | * [[https://pinokio.computer/]] Installation facile avec Forge qui installera flux, mais permettera aussi Stable Diffusion en telechargeant des modeles checkpoint |
| |
| ===== Comfy ui ===== | **Plusieurs interfaces de contrôle sont disponibles, la plus utilisé se nomme A1111 ou Comfy ui** |
| **Installation :** Vous pouvez utiliser SwarmUI (https://swarmui.net/) pour une installation facile. | |
| |
| Ensuite, ouvrez l'espace workflow où un exemple de workflow Stable Diffusion (SDXL) est disponible. | * [[https://stable-diffusion-art.com/automatic1111/]] |
| | * [[https://github.com/invoke-ai/InvokeAI]] |
| |
| Dans l'onglet "Templates", vous pouvez voir d'autres workflows téléchargeables avec différents modèles (Z image / Flux/ Wan...). En cliquant sur un workflow, il s'affiche, et s'il manque des modèles, il propose de les télécharger (mais veillez à les mettre dans les bons dossiers, car certains sont différents de ceux annoncés, par exemple : Text Diffuser → CLIP). | ===== Comfy ui ===== |
| | <WRAP center round tip 60%> |
| | Page dédiée : [[bases:fabnum:ai:comfyui:start|ComfyUI]] |
| | </WRAP> |
| |
| Aussi, si certains nœuds manquent, il faut installer** le plugin "Manager"** (https://github.com/Comfy-Org/ComfyUI-Manager). Celui-ci permet de télécharger les bibliothèques manquantes et de faire les mises à jour facilement. | |
| |
| |
| ===== Les modèles d'images ===== | ===== Les modèles d'images ===== |
| Les modèles d'images sont des fichiers qui compile des milliers d'image et leur description, certains sont orienté photo, dessin animé, manga ... Un modele est lourd et pese généralement quelques gigas. | Les modèles d'images (checkpoint) sont des fichiers qui compile des milliers d'image et leurs descriptions, certains sont orienté photo, dessin animé, manga ... Un modele est lourd et pese généralement quelques gigas. |
| |
| | * [[https://civitai.com/]] grande source de modele image et video, et lora... |
| * [[https://dataconomy.com/2023/08/28/best-stable-diffusion-models-how-to-use/]] | * [[https://dataconomy.com/2023/08/28/best-stable-diffusion-models-how-to-use/]] |
| |
| Il ya aussi des modeles pour certains plugin comme [[https://stable-diffusion-art.com/controlnet/#Install_ControlNet_extension_WindowsMac|controlnet]] : | Il y a aussi des modeles pour certains plugin comme [[https://stable-diffusion-art.com/controlnet/#Install_ControlNet_extension_WindowsMac|controlnet]] : |
| * [[https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main]] | * [[https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main]] |
| |
| === Utilisation dans Forge ==== | === Utilisation dans Forge ==== |
| Steps: 20, Sampler: Euler, Schedule type: Simple, CFG scale: 1, Distilled CFG Scale: 3.5, **Model: flux1-dev-bnb-nf4-v2,** **Diffusion in Low Bits: Automatic (fp16 LoRA)** | Steps: 20, Sampler: Euler, Schedule type: Simple, CFG scale: 1, Distilled CFG Scale: 3.5, **Model: flux1-dev-bnb-nf4-v2,** **Diffusion in Low Bits: Automatic (fp16 LoRA)** |
| | |
| | |
| ===== Générer des videos ===== | ===== Générer des videos ===== |
| On peut générer des videos ou suite d'images à partir d'une video source et un prompt (texte ou image). | |
| |
| Via ComfyUI (sur sswarm ui) des workflow avec WAN sont disponible et efficace. (necessite Gpu >12go de Vram) | On peut générer des videos ou suite d'images à partir d'une video source et un prompt (texte ou image). |
| | Via ComfyUI (sur swarm ui) des workflow avec WAN sont disponible et efficace. (necessite Gpu >12go de Vram) |
| |
| * [[https://stable-diffusion-art.com/video-to-video/]] | * [[https://stable-diffusion-art.com/video-to-video/]] |
| | * https://github.com/Wan-Video/Wan2.2 |
| |
| ==== Kohya-ss install ==== | ==== Kohya-ss install ==== |
| |
| |
| ==== Entrainement LORA z-image ==== | |
| |
| {{youtube>Kmve1_jiDpQ?medium}} | |
| |
| |