Hướng dẫn cài đặt Flux - ComfyUI để tạo ảnh AI

Flux là gì
Flux là một dòng SD model tạo hình từ văn bản được phát triển bởi Black Forest Labs. Tính đến tháng 8/2024, đây là model mã nguồn mở tốt nhất mà bạn có thể chạy trên máy tính cá nhân, vượt trội hơn cả SDXL và Stable Diffusion 3 medium.
FLUX có ba phiên bản: pro, dev, schnell:
- pro: Phiên bản tốt nhất của FLUX.1, cho chất lượng hình ảnh và khả năng tuân thủ prompt tốt nhất.
- dev: Là phiên bản mã nguồn mở dành cho mục đích phi thương mại. Được tinh chỉnh trực tiếp từ bản pro, cho chất lượng tương đương nhưng hiệu quả hơn. Có sẵn trên HuggingFace.
- schnell: Phiên bản nhanh nhất, phù hợp cho phát triển và sử dụng cá nhân. Được phát hành dưới giấy phép Apache2.0. Có sẵn trên HuggingFace và có thể dùng với ComfyUI.
Model Flux có khả năng tuân thủ prompt rất tốt, tạo ra hình ảnh chất lượng cao với tỷ lệ cơ thể chính xác, và khá giỏi trong việc tạo chữ.
Trong bài hướng dẫn này, mình sẽ chỉ bạn cách cài đặt một số phiên bản Flux trên ComfyUI:
- flux1-dev-fp8: Phiên bản một file dễ cài đặt - cần 16GB VRAM
- flux1-schnell: Phiên bản nhanh - cần 16GB VRAM
- flux1-dev full: Phiên bản thường cho chất lượng tốt nhất - cần 24GB VRAM
Cài đặt
Bước 1: Cài đặt phiên bản mới nhất của ComfyUI
Nếu bạn chưa cài ComfyUI, làm theo hướng dẫn sau:
ComfyUI bắt đầu hỗ trợ Flux từ tháng 8/2024. Nếu bạn chưa cập nhật ComfyUI từ đó, hãy cập nhật ngay.
Cách dễ nhất để cập nhật ComfyUI là qua ComfyUI Manager. Nhấp vào Manager > Update ComfyUI.
Khởi động lại ComfyUI và tải lại trang.
Bước 2: Tải model Flux
Tải các model sau:
- flux1-dev-fp8 đặt vào ComfyUI > models > checkpoints
- flux1-schnell đặt vào ComfyUI > models > unets
- flux1-dev đặt vào ComfyUI > models > unets
Bạn có thể tải models bằng Hugging Face CLI:
huggingface-cli download Comfy-Org/flux1-dev flux1-dev-fp8.safetensors --local-dir /works/ComfyUI/models/checkpoints/
huggingface-cli download Comfy-Org/flux1-schnell flux1-schnell-fp8.safetensors --local-dir /works/ComfyUI/models/unets/
huggingface-cli download black-forest-labs/FLUX.1-dev flux1-dev.safetensors --local-dir /works/ComfyUI/models/unets/
Với flux1-dev, bạn cần chấp nhận điều khoản trước khi tải.
huggingface-cli download black-forest-labs/FLUX.1-dev flux1-dev.safetensors --local-dir /works/ComfyUI/models/checkpoints/
Bước 3: Tải text encoders
Với flux1-schnell và flux1-dev, bạn cần tải thêm các model text encoder:
- clip_l.safetensors
- flux1-schnell: t5xxl_fp8_e4m3fn.safetensors
- flux1-dev: t5xxl_fp16.safetensors
Đặt vào thư mục ComfyUI > models > clip.
Tải bằng Hugging Face CLI:
huggingface-cli download stabilityai/stable-diffusion-3-medium text_encoders/clip_l.safetensors --local-dir ComfyUI/models/clip/
huggingface-cli download stabilityai/stable-diffusion-3-medium text_encoders/t5xxl_fp8_e4m3fn.safetensors --local-dir ComfyUI/models/clip/
huggingface-cli download stabilityai/stable-diffusion-3-medium text_encoders/t5xxl_fp16.safetensors --local-dir ComfyUI/models/clip/
Bước 4: Tải Flux Vae
Với flux1-schnell và flux1-dev, bạn cần tải model vae và đặt vào thư mục ComfyUI > models > vae:
huggingface-cli download black-forest-labs/FLUX.1-schnell ae.safetensors --local-dir ComfyUI/models/vae/
huggingface-cli download black-forest-labs/FLUX.1-dev ae.safetensors --local-dir ComfyUI/models/vae/
Bước 5: Tải workflow ComfyUI
Tải file workflow tương ứng và nạp vào ComfyUI:
Kéo thả vào ComfyUI và tải lại workflow.
Hãy chạy thử workflow và tạo một số hình ảnh!
Prompts: Fashion photography, captivating woman with piercingly intense eyes seen through the veil of cigarette smoke, enigmatic emotions portrayed, shallow depth of field, high-contrast lighting forming distinct features on her face, embracing cutting-edge fashion, fixated in intense focus, sunglasses framing her magnetic gaze against a delicately blurred background, ultra-clear, dramatic lighting.
Chào mừng bạn đến với HocCodeAI 👋
Hãy ghé thăm trang chủ hoccodeai.com để khám phá thêm nhiều bài viết hữu ích.
Nhớ xem thử khóa học Generative AI của bọn mình để nâng cao kỹ năng của bạn nhé!