SD002｜用StabilityMatrix安裝新模型；模型種類說明與WebUI基本操作

[!COMMENT]+ 為何要使用StabilityMatrix來安裝與使用Stable diffusion？

1. 網路上很多方便的方法都過時了(例如免費使用Google colab來運行SD)，不如自建環境
2. AI繪圖方興未艾，掌握新的AI技術是很好的投資
3. 只要擁有NVIDIA顯示卡就能無限制練習AI繪圖，投資報酬率頗高
4. StabilityMatrix整合度高，不用花精力在Python等技術上，方便又簡單

1. 模型的種類

Stable Diffusion使用的模型有下列幾大類，對照模型網站 https://civitai.com 以形成更直觀的認識：

1. Base Model: Stable Diffusion的基底模型(Base models)，由StableAI公司開源而來的最基礎模型
   • 常見的基底模型有SD 1.5、SD2.0、SDXL 1.0等
2. Checkpoint: 當做圖像生成的基礎模型，通稱為大模型
   1. 由Base Model為基礎微調而形成的模型，可生成品質更高的圖像
   2. 形成圖像的基本風格，例如真實風格或卡通風格等，分別使用不同的兩種Checkpoint
   3. 合併多個Checkpoint而成的形成Checkpoint Merge
3. 選項模型：附加在Checkpoint上的微調模型，可視為修補＋濾鏡功能的模型，增強或改變圖像的風格
   1. Textual Inversion(文本反轉，embedding): 用新的關鍵詞來產生新的特徵
   2. LoRA(Low-Rank Adaptation，低秩調整): Checkpoint就像是AI畫家的「基本畫功」，而LoRA則是要求AI畫家「照這個風格」產生圖片
   3. VAE(Value Auto Encoder): 用來調整亮度或飽和度的微調模型

2. 下載Checkpoint

• 由 https://civitai.com 查詢到要試用的Checkpoint後，到Model Browser搜尋，輸入模型名稱部份字串後點擊【Search】
• 再點擊Import Latest以下載並安裝該模型
• 下載完成後回到瀏覽器 Web UI 重新整理Checkpoint，就能找到新安裝好的Checkpoint
  

3. 下載LoRA

• 在【Model Type】裡勾選LORA
• 輸入要試用的LoRA小模型後按【Search】，再按【Import Latest】

▼ 在Checkpoints裡可以看到新下載的墨心 LoRA，【StableDiffusion】裡也會顯示下載了的Checkpoints

4. 相關鏈接

• LykosAI/StabilityMatrix: Multi-Platform Package Manager for Stable Diffusion

5. 教學影片

＃＃

您可能也會有興趣的類似文章

• SD001｜用StabilityMatrix一鍵安裝Stable Diffusion－免費的AI圖像生成工具 (2則留言, 2023/10/22)
• SD003｜懶人提示詞產生器 OldSix Stable Diffusion 擴充完整操作教學 (0則留言, 2023/11/11)
• Stable Diffusion WebUI中文化與添加控制欄位＋Stability Matrix自訂設定 (0則留言, 2023/11/18)
• Obs157｜用Copilot外掛使用本地AI模型服務－使用Ollama與LM Studio (0則留言, 2024/03/17)
• Apache Web Server 2.4 自動轉址：http redirect to https (0則留言, 2022/11/09)
• 能離線使用的語音識別工具：Buzz，使用OpenAI Whisper神經網路，正確率高 (0則留言, 2022/12/04)
• Apache Web Server/Resin Server設置https通訊的步驟 (0則留言, 2015/06/23)
• 能使用GPU的OpenAI Whisper語音識別工具(ASR)，超快超準確：WhisperDesktop (9則留言, 2023/03/16)
• AHK63｜AutoHotkey V2 語言概述＃1－字串、熱字串與變數 (0則留言, 2024/03/30)
• [AHK＃50] 輸入關鍵字，同時查詢多個圖庫以取得圖片的作法 (0則留言, 2021/10/16)
• 超值的iPad分頁式瀏覽器：Mercury Browser (3則留言, 2011/01/19)
• Site Meter的訪客統計功能揭密 (0則留言, 2005/04/03)
• 使用ownCloud打造專用的「類Dropbox」雲端儲存系統 (15則留言, 2013/03/19)
• [Obs＃114] 取代Obsidian核心外掛的替代性外掛：Better Commander、Another Quick Switcher、Alternate File Tree、Quiet Outline (0則留言, 2023/02/20)
• 推薦《12 Undocumented Tricks for Google Buzz (12項不為人知的Google Buzz技巧)》 (0則留言, 2010/02/16)