IP-Adapter là gì?
Còn gọi: ip adapter, image prompt adapter
IP-Adapter (Image Prompt Adapter) là mô-đun gắn thêm vào mô hình diffusion, cho phép dùng một ảnh làm prompt để truyền phong cách, màu sắc hoặc khuôn mặt sang ảnh mới mà không cần huấn luyện LoRA.
Hiểu kỹ hơn
IP-Adapter được nhóm nghiên cứu của Tencent AI Lab công bố năm 2023 và nhanh chóng có mặt trong ComfyUI, Automatic1111 và Forge. Bạn đưa một ảnh tham chiếu, chỉnh độ mạnh (weight), rồi viết prompt như bình thường: ảnh mới sẽ mang không khí, màu sắc hoặc nhân vật của ảnh mẫu. Có các biến thể chuyên cho khuôn mặt (FaceID) để giữ danh tính nhân vật. Khác với ControlNet giữ cấu trúc (dáng, cạnh, chiều sâu), IP-Adapter truyền nội dung và phong cách. Hai thứ thường dùng cùng nhau: ControlNet giữ tư thế, IP-Adapter giữ nhân vật. Lỗi hay gặp là đặt weight quá cao khiến ảnh mới gần như sao chép ảnh mẫu và prompt mất tác dụng; nên thử khoảng 0,5–0,8 trước.
