Adventure Book

## **ComfyUI 安裝與常見問題完整指南系列** ### **第 1 章：ComfyUI 安裝與環境配置** 1. **ComfyUI 安裝教學：在 Windows 上快速入門**    - 簡介 ComfyUI，下載與安裝步驟。    - 如何確認安裝是否成功。 2. **如何在 Windows 上安裝 Python 與 Pip：ComfyUI 初始設置**    - 如何安裝 Python 3.10 並配置環境變數。    - 安裝 Pip 並檢查版本。 3. **CUDA 與顯示卡驅動的安裝與配置**    - 安裝 CUDA 驅動，並檢查版本兼容性。    - 如何從 CUDA 12.6 降級到 CUDA 12.4。    - 使用 `nvidia-smi` 確認 CUDA 驅動是否正常工作。 ### **第 2 章：ComfyUI 依賴問題與解決方案** 4. **ComfyUI 缺少 Python 模組的解決方案：一次性安裝所有依賴**    - 使用 `requirements.txt` 安裝所有所需的 Python 包。    - 常見依賴模組列表與安裝教學。 5. **如何解決 ModuleNotFoundError：No Module Named 'psutil'**    - 安裝 `psutil` 的詳細步驟。    - 常見依賴模組的安裝問題總結。 6. **如何解決 ModuleNotFoundError：No Module Named 'einops'**    - 安裝 `einops` 的詳細步驟。    - 可能引發問題的原因及解決方法。 ### **第 3 章：PyTorch 與 CUDA 配置問題** 7. **PyTorch 與 CUDA 版本不匹配：如何正確安裝 PyTorch**    - 安裝 PyTorch 與 CUDA 支援版本的指南。    - 使用 `pip` 安裝支持 CUDA 12.4 的 PyTorch ...

 在使用ComfyUI搭配Stable Diffusion進行生成時，模型的選擇和正確放置位置非常重要。以下是各個Stable Diffusion模型版本的介紹、檔案名稱及相應的目錄結構。 ### 1. **Stable Diffusion模型檔版本選擇**    - **v1.4** 和 **v1.5**：      - 這些是最早期的模型版本，也是最常用於訓練的基礎版本。v1.5是v1.4的改良版，生成圖像更細膩穩定。      - **檔案名稱**：通常為 `v1-5-pruned.ckpt` 或類似的名稱。      - **適合場合**：如果要進行通用生成或擴充基礎資料集，可以選擇v1.5。    - **v2.0** 和 **v2.1**：      - 這些是較新的版本，支援更多的功能，例如支持 `768x768` 的高解析度生成，但對於某些語言描述（Prompt）的響應可能和v1.5有些不同。      - **檔案名稱**：通常為 `sd-v2-1-base.ckpt` 或 `sd-v2-1-768.ckpt`。      - **適合場合**：需要更高解析度的圖像生成時選擇v2.1；若偏向風格化或進階LoRA訓練的基礎，v2.1也表現良好。 ### 2. **下載模型檔案**    - 大多數Stable Diffusion模型可以在  [Hugging Face Model Hub]( https://huggingface.co/ ) 或  [CivitAI]( https://civitai.com/ )  等網站上找到，這些網站會標記清楚模型版本。    - 下載模型後，檔案格式一般為 **`.ckpt`** 或 **`.safetensors`**，視乎模型作者的設置而定。 ### 3. **放置Stable Diffusion模型檔案**    - **主要路徑**：在ComfyUI的根目錄下找到 `models` 資料夾...

 使用 ComfyUI 搭配Stable Diffusion訓練和使用LoRA（Low-Rank Adaptation）模型，可以提升模型在特定風格或主題下的生成表現。以下是相關的教學步驟： ### 1. **LoRA 基本概念**    - **LoRA模型**是一種適合在特定主題上進行小規模訓練的技術，能夠在不大幅更改模型原有權重的情況下，增加新風格或細節。使用LoRA模型可以降低計算成本，讓訓練和微調更為快速且靈活。 ### 2. **環境準備**    - 確保已經安裝 **ComfyUI** 和 **Stable Diffusion**。    - 下載並安裝Stable Diffusion的模型檔（如v1.5或v2.1）以及任何額外需要的LoRA訓練工具，如 `diffusers`（使用Transformers和Diffusers的API進行微調）。 ### 3. **訓練LoRA模型**    - **準備數據集**：      - 收集適合訓練主題的圖片集，並將它們放在同一資料夾中。      - 確保圖片大小一致（一般為512x512或768x768像素），若不一致可使用批次調整工具進行裁切和調整。    - **安裝LoRA訓練環境**：      - 使用`pip`安裝必要的LoRA訓練工具，像是 `transformers` 和 `diffusers`。        ```bash        pip install transformers diffusers accelerate        ```    - **進行LoRA訓練**：      - 利用 `Diffusers` 庫中的 `StableDiffusionPipeline` 進行微調訓練：        ```python       ...

 以下是一個快速上手的ComfyUI與Stable Diffusion生成圖片的cheat sheet，希望可以幫助你快速上手： ### 1. **環境設置**    - **安裝ComfyUI**：先確認電腦上已經安裝好Python 3.9或以上版本。      1. 克隆ComfyUI的GitHub專案，並進入到該資料夾：         ```bash         git clone https://github.com/comfyanonymous/ComfyUI         cd ComfyUI         ```      2. 安裝所需的Python相依套件：         ```bash         pip install -r requirements.txt         ```      3. 啟動ComfyUI伺服器，使用命令：         ```bash         python main.py         ```      4. 在瀏覽器開啟 [http://localhost:8188](http://localhost:8188) 來使用ComfyUI。 ### 2. **連結Stable Diffusion模型**    - 下載Stable Diffusion模型檔（一般為.ckpt或.safetensors檔案），並將其放置在ComfyUI專案資料夾的`models`資料夾中。    - 確認模型名稱與路徑無誤，然後在ComfyUI的UI界面中選擇該模型以供生成。 ### 3. **界面使用入門**   ...

接續前面的AI繪圖筆記 從第一篇 如何藉由Google Colab 快速安裝環境開始，再來介紹了用文字描述產生圖的方式。接著要來做的就是該如何客製化 !! AI繪圖筆記 藉由Google Colab 來安裝Stable Diffusion 玩AI繪圖 AI繪圖筆記 使用ChatGPT 協助產生Stable Diffusion 正向提示詞Positive Prompt AI繪圖筆記 Stable Diffusion AI繪圖 萬用負面關鍵字Negative Prompt 收集 在之前的文章中 正向提示詞Positive Prompt範例： /在圖書館看書的女孩 1girl, solo, digital painting, sitting, glasses, book, library, long hair, brown hair, loose hair, hair between eyes, peaceful expression, casual clothing, indoor, shelves, table, chair, natural light, calm atmosphere, bookish, (8k, RAW photo, photorealistic:1.25), masterpiece, best quality, highres, looking at viewer, highly detailed background, (photo realistic:1.2), (MASTERPIECE), (ULTRA DETAILED), (PHOTO-REALISTIC), SHARP, HDR 套用上原亞衣的LoRA之後的結果： 搭配RION 的LoRA的結果： 同樣的提示詞，可以藉由套用客製化的LoRA來做微調。 這個過程可以想成藉由客製化模型(LoRA)搭配客製化的提示詞如上原亞衣及RION 就讓原本的圖書館女孩做了改變。 如何製作這個客製化模型(LoRA) 會需要再開一篇文章。這一篇文章主要介紹LORA怎麼使用。 可以跟著這些文章一步一步完成： 上原亞衣AI繪圖模型LoRA 免費用，教你製作日本女優參賽圖 【教學】AI 繪圖上原亞衣官方 AI LoRA 模型 Step by Step 學懂製作女優圖片參賽 Civitai 上原亞衣LORA A...

想要用線上資源來玩AI繪圖，可以按照以下步驟： 1. 從好心人整理的各種model 下載及安裝script  推薦github網址  https://github.com/camenduru/stable-diffusion-webui-colab   選擇自己想要安裝的model 點左邊按鈕會打開Colab model的選擇可以到 Civitai  這個網站搜尋。 目前討論度很高的是 ChilloutMix 用關鍵字ChilloutMix也可以查詢到很多教學文 2. 在Colab 建立副本雲端硬碟後 一鍵執行安裝 Colab畫面： 安裝過程中最後會出現對應的Public WebUI Colab URL，就會打開另一個網頁出現Stable Diffustion Web UI 就完成了 畫面左上角會顯示Stable Diffustion checkpoint 目前使用的model。 關於Colab 安裝Stable Diffustion  Youtube上相關討論影片： 不用買顯卡　也能跑Stable Diffusion？！｜Colab＋Stable Diffusion　免費進行AI繪圖計算【stable-diffusion-webui-colab】 接下吧!!這是我最後的安裝Stable Diffusion中文網頁介面，Google colab線上運行!! 剛加入的玩家，看到很多名詞建議可以從這一部影片了解： 關於Stable Diffusion你應該要知道的所有基礎知識，我把它們都放在這裡了!!! 更多Stable Diffustion AI繪圖 討論文章： 環境安裝 藉由Google Colab 來安裝Stable Diffusion 玩AI繪圖 基本功能txt2img AI繪圖筆記 使用ChatGPT 協助產生Stable Diffusion 正向提示詞Positive Prompt 基本功能txt2img Stable Diffusion AI繪圖 萬用負面關鍵字Negative Prompt 如何使用LoRA AI繪圖筆記 安裝完基本的模型後 如何藉由套用客製化LoRA 幫上原亞衣穿上婚紗

正向關鍵字(prompt)告訴AI要畫哪些東西，負向關鍵字則是不要畫哪些東西。 萬用負向關鍵字(negative prompt)，加入大量的負向關鍵字能防止畫出斷手斷腳的圖： 之前收集了一串 萬用負向關鍵字(negative prompt)： (((deformed))), blurry, bad anatomy, disfigured, poorly drawn face, mutation, mutated, (extra_limb), (ugly), (poorly drawn hands), fused fingers, messy drawing, broken legs censor, censored, censor_bar, multiple breasts, (mutated hands and fingers:1.5), (long body :1.3), (mutation, poorly drawn :1.2), black-white, bad anatomy, liquid body, liquidtongue, disfigured, malformed, mutated, anatomical nonsense, text font ui, error, malformed hands, long neck, blurred, lowers, low res, bad anatomy, bad proportions, bad shadow, uncoordinated body, unnatural body, fused breasts, bad breasts, huge breasts, poorly drawn breasts, extra breasts, liquid breasts, heavy breasts, missingbreasts, huge haunch, huge thighs, huge calf, bad hands, fused hand, missing hand, disappearing arms, disappearing thigh, disappearing calf, disappearing legs, fusedears, bad ears, poorly drawn ears...

Stable Diffusion 提示詞是指用來描述所需生成圖像的文字，例如 “1girl”、”1boy” 等，AI 會根據這些描述生成相應的圖片。Stable Diffusion 提示詞又稱為關鍵詞、提示、咒語；簡單說就是用來跟Stable Diffusion溝通的方式。 但如何將中文描述的風格轉為提示詞？可以讓火紅的ChatGPT來幫助。 例如輸入以下要求： 我在使用一個名為 Stable Diffusion 的 AI 繪圖工具。指定你成為 Stable Diffusion 的提示生成器。接著我會在想要生成的主題前添加斜線（/）。 你將在不同情況下用英文生成合適的提示。例如，如果我輸入 /一個亞洲女孩 在草地上 的美麗形象 ,您將生成prompt用以下的格式： 1girl, solo, asia, sitting, an extremely delicate and beautiful, beautiful detailed sky, beautiful detailed eye, side blunt bangs, hairs between eyes, close to viewer, breeze,flying splashes,flying petals, wind, grass The prompt requires the following elements.  (1) Words to describe the method of depiction, such as digital painting, oil painting, realistic 8k. (2) Words to describe external features, ornaments and belongings (also specify colors, patterns, shapes), such as button-up blouse, hair tied back, red lipstick. (3) Words to describe age, body type, hair color, hairstyle, hair length, hair accessory, eye color, eye shape, facial ex...