寫在前面
本文爲資料整合,沒有原創內容,方便自己查找和學習,
花費了一晚上把sd安裝好,又花了大半天瞭解sd周邊的知識,終於體會到爲啥這些生成式AI被稱爲魔法了,魔法使用前要吟唱類比到AI上不就是那些關鍵詞參數什麼的嗎,描述的越具體生成的東西越具體.可以想象現在還需要手動輸入詞語的魔法,結合語音識別即可實現真吟唱效果,再結合腦機接口達成無需吟唱的效果...所思即所得,那時候才真正拼才華和想象力.
對普通人來說,AI幾乎就是魔法.未來可期!
安裝(簽訂契約)
- Home · AUTOMATIC1111/stable-diffusion-webui Wiki --- 首頁 ·AUTOMATIC1111/stable-diffusion-webui Wiki (github.com) ==官方文檔最爲準確
- 本地部署 stable-diffusion-webui 並替換模型爲 waifu-diffusion - 掘金 (juejin.cn)
- AbdBarho/stable-diffusion-webui-docker: Easy Docker setup for Stable Diffusion with user-friendly UI (github.com) docker部署,也挺方便
- lllyasviel/ControlNet: Let us control diffusion models (github.com)
- Mikubill/sd-webui-controlnet: WebUI extension for ControlNet (github.com)
- VinsonLaro/stable-diffusion-webui-chinese: stable-diffusion-webui 的漢化版本 (github.com) 漢化包
模型安裝(符文)
自帶模型models/Stable-diffusion
下載好模型後將文件將t文件放入models\stable-diffusion文件夾即可
擴展安裝(天賦樹)
擴展都存在於目錄內自己的子目錄中。您可以使用 git 安裝這樣的擴展： extensions
git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui-aesthetic-gradients extensions/aesthetic-gradients
給模型添加預覽圖(印象)
新版webUI自帶模型預覽圖功能,默認本地所有模型上都顯示 no preview 即沒有預覽圖,我們可以生成完圖片後 再次找到添加模型的位置,鼠標移動模型卡標題處,上方會出現replace preview(替換預覽)紅色字樣 點擊即可將剛剛生成的圖設置爲此模型的預覽圖
如果想把任意一張圖片設置爲模型的預覽圖,可以將圖片拖拽到img2img中 然後進行替換.
模型資源(道具商店)
- Civitai | Stable Diffusion models, embeddings, hypernetworks and more
- https://huggingface.co/
- 原神 | SD - WebUI 資源站 (123114514.xyz) 模型太多了,很國內味
- ChilloutMix | Stable Diffusion Checkpoint | Civitai
- Realistic Vision V1.3 | Stable Diffusion Checkpoint | Civitai 寫實風格
- lllyasviel/ControlNet at main (huggingface.co)
- webui/ControlNet-modules-safetensors at main (huggingface.co)
- Korean Doll Likeness | Stable Diffusion LORA | Civitai
- LoRA 指南 - 知乎 (zhihu.com) ==LoRA: Low-Rank Adaptation of Large Language Models
性能(體質)
測試4GB的卡可以生成384x384的圖片，512的大概需要6G左右， 1024的則需要8G+，推理速度慢，根據顯卡和圖片大小不同，大概需要20-60s
調參(吟唱)
調參教程(魔導書)
- Disco Diffusion (notion.site) 建議細讀, 非原創聚合型文檔，偏速查工具屬性
- Discover and generate AI Art | OpenArt ==語句和參數的參考分享
- 咒語生成器 | 無界AI (wujieai.com) ==中英文可選,666
樣例
<lora:koreanDollLikeness_v10:0.66>, **cat ears**,best quality, ultra high res, (photorealistic:1.4), 1woman, sleeveless white button shirt, black skirt, black choker, cute, (Kpop idol), (aegyo sal:1), (platinum blonde hair:1), ((puffy eyes)), looking at viewer, full body, facing front
SD 關鍵詞參考
- https://arthub.ai/
- https://lexica.art/
- https://www.krea.ai/?continueFlag=6591d07b3186f4c7e58de1a4bcfaefb0
- https://promptomania.com/stable-diffusion-prompt-builder/
實踐與參考(前輩們的故事)
- 模型應用---使用Stable Diffusion UI手冊 - 知乎 (zhihu.com) UI上參數的翻譯以及解釋
- AbdullahAlfaraj/Auto-Photoshop-StableDiffusion-Plugin: A user-friendly plug-in that makes it easy to generate stable diffusion images inside Photoshop using Automatic1111-sd-webui as a backend. (github.com)
- PS上的開源Stable Diffusion插件來了：一鍵AI腦補，即裝即用 - 知乎 (zhihu.com) ==集成到ps中作爲插件
- hua1995116/awesome-ai-painting: AI繪畫資料合集（包含國內外可使用平臺、使用教程、參數教程、部署教程、業界新聞等等） stable diffusion tutorial、disco diffusion tutorial、 AI Platform (github.com) ==可以的
- awesome-stable-diffusion/awesome-stable-diffusion: Curated list of awesome resources for the Stable Diffusion AI Model. (github.com)
- Stability-AI/stablediffusion: High-Resolution Image Synthesis with Latent Diffusion Models (github.com) sd2版本
- cmdr2/stable-diffusion-ui: Easiest 1-click way to install and use Stable Diffusion on your own computer. Provides a browser UI for generating images from text prompts and images. Just enter your text prompt, and see the generated image. (github.com) 桌面端UI
- gradio-app/gradio: Create UIs for your machine learning model in Python in 3 minutes (github.com)
- 攝影師危！AI繪畫即將降維打擊攝影行業 - 知乎 (zhihu.com)
- ControlNet正在補完AIGC工業化的最後一塊拼圖 - 知乎 (zhihu.com)
- (15條消息) 【AI繪畫】全部模型種類總結 / 使用方法 / 簡易訓練指導——魔導緒論_慄少的博客-CSDN博客 ==挺好,有對名詞做解釋,概念入門
- https://note.youdao.com/ynoteshare/index.html?id=83ec1a4d9c7dc00191133c384df587b8&type=note&_time=1650330649515 ==教程-使用-思路-擴展,但依賴谷歌
- Stable Diffusion 完美複製Korean doll likeness！（詳細版，持續更新中！） - 知乎 (zhihu.com)
- 如何使用stable diffusion批量爲“虛擬女友”換衣服 - 知乎 (zhihu.com)
- AI技術“造人”：如何使用stable diffusion爲你批量打造美麗的“虛擬女友” - 知乎 (zhihu.com)
- StableDiffusion模型資源探索食用指南 - 知乎 (zhihu.com) ==質量很高,總結的很好
在線體驗(麻瓜)
- Stable Diffusion 2-1 - a Hugging Face Space by stabilityai sd2版本的試用環境
- andreasjansson/stable-diffusion-animation – Run with an API on Replicate ==可以輸出動畫和gif,挺有趣
- 無界AI-人人都是藝術家 (wujieai.com) ==國內的,已註冊手機號
崗位要求(初級魔法師)
AI插圖繪製師
崗位職責：
1. 設計多種繪畫風格，實現AI風格遷移；
2. 高效熟練的使用AI（如Disco Diffusion、Stable Diffusion等工具）生產不同風格要求的人像與動畫；
3. 跟蹤前沿算法，熟悉AI繪畫領域技術進展；
崗位要求：
1.深度研究AI繪畫軟件，熟悉Stable Diffusion開源技術的使用；
2.熟練使用Python語言，及OpenCV、waifu2x等工具；
3.熟悉基於AI的人像生成與風格遷移，有項目落地經驗；
4.瞭解前沿圖像生成算法&產品（如 Disco Diffusion，Stable Diffusion，Dalle2，MidJourney，Tiamat, Lensa）；
5. 具備修圖與分層的能力；
6. 繪畫基礎紮實，準備把握場景設定及透視的結構比例，造型能力強，色彩感強；
7. 具備1年以上動畫/遊戲美術經驗