SnapRef v2a: Cung cấp cho Anima một hình ảnh nhân vật, chỉ mô tả bối cảnh

Bộ thích ứng tham chiếu nhân vật do cộng đồng phát triển cho mô hình cơ sở anime Anima base v1.0: cung cấp một hình ảnh nhân vật, phần prompt chỉ mô tả bối cảnh, tư thế và ánh sáng, trong khi kiểu tóc, màu mắt và trang phục được kế thừa từ hình ảnh tham chiếu. Có hai chế độ: Character & Style (cs) giữ lại cả phong cách vẽ từ hình ảnh tham chiếu, còn Character (char) chỉ lấy đặc điểm nhân vật, phong cách vẽ do prompt quyết định. Nút đơn giản hỗ trợ tối đa 8 hình ảnh của cùng một nhân vật, ví dụ: một hình khuôn mặt rõ nét kết hợp với một hình toàn thân; nút nâng cao cho phép đặt trọng số riêng cho từng hình ảnh tham chiếu. Tác giả đã so sánh v1a trên 64 trường hợp sử dụng cố định × 2 seed, các chỉ số cơ bản tương đương, nhưng nhận thấy việc bám sát tham chiếu tốt hơn rõ rệt về mặt chủ quan.

Nguồn gốc: 0ppxnhximxr/snapref-v2a

Bộ thích ứng tham chiếu nhân vật do cộng đồng phát triển cho mô hình cơ sở anime Anima base v1.0: cung cấp một hình ảnh nhân vật, phần prompt chỉ mô tả bối cảnh, tư thế và ánh sáng, trong khi kiểu tóc, màu mắt và trang phục được kế thừa từ hình ảnh tham chiếu. Có hai chế độ: Character & Style (cs) giữ lại cả phong cách vẽ từ hình ảnh tham chiếu, còn Character (char) chỉ lấy đặc điểm nhân vật, phong cách vẽ do prompt quyết định. Nút đơn giản hỗ trợ tối đa 8 hình ảnh của cùng một nhân vật, ví dụ: một hình khuôn mặt rõ nét kết hợp với một hình toàn thân; nút nâng cao cho phép đặt trọng số riêng cho từng hình ảnh tham chiếu. Tác giả đã so sánh v1a trên 64 trường hợp sử dụng cố định × 2 seed, các chỉ số cơ bản tương đương, nhưng nhận thấy việc bám sát tham chiếu tốt hơn rõ rệt về mặt chủ quan.

Tại sao quan trọng Khi tạo minh họa nhiều bối cảnh cho cùng một nhân vật, không cần huấn luyện LoRA nhân vật trước đó, có thể chồng nhiều hình tham chiếu và điều chỉnh trọng số riêng cho từng hình

Điểm tăng 48 · Lượt thích 50 · Lượt tải 1740

Lý do

  • Kèm theo sáu workflow ComfyUI: một tham chiếu, chế độ nhân vật, nhiều tham chiếu, trọng số tham chiếu, hai nhân vật song song
  • Trọng số khoảng 382 MB, ngoài ra còn có phiên bản FP8 khoảng 195 MB, khi suy luận sẽ chuyển đổi về BF16

Cách sử dụng

  • Trước tiên, cài đặt Anima base v1.0 cùng với bộ mã hóa văn bản và VAE tương ứng trong ComfyUI; sao chép thư mục comfyui/snapref/ từ kho lưu trữ vào ComfyUI/custom_nodes/snapref/ và khởi động lại
  • Đặt tệp snapref_v2a.safetensors vào thư mục models/loras/, mở tệp workflows/snapref_v2a_simple.json, chọn hình ảnh tham chiếu trong nút SnapRef; ví dụ của tác giả sử dụng CFG 4.5, Euler / simple, Fidelity 1.0
  • Bắt buộc phải sử dụng nút riêng của SnapRef, không được tải bằng LoraLoader hoặc pipeline diffusers chung

Rủi ro

  • Trọng số là sản phẩm phái sinh của mô hình CircleStone, được phát hành theo giấy phép phi thương mại v1.2 của CircleStone Labs, chỉ được phép sử dụng phi thương mại
  • Các hạn chế do tác giả liệt kê: các phụ kiện nhỏ, cổ áo và hoa văn tinh tế có thể bị thay đổi, chi tiết khuôn mặt khó tái tạo khi khuôn mặt trong hình tham chiếu quá sáng, văn bản hoặc chữ ký trong hình tham chiếu có thể bị sao chép
  • Bài viết này chưa được chạy thử, hiệu quả thực tế dựa trên mô hình thẻ (model card)

Mở

Hugging Face Trending

Xem tin AI mới nhất