Trình tạo ảnh LoRA

LoRA, viết tắt của Low-Rank Adaptation, là một tệp nhỏ giúp mô hình ảnh gốc nghiêng về một thứ cụ thể: một phong cách vẽ, kiểu ánh sáng, một nhân vật, một đồ vật hay một kiểu bố cục. Tệp chỉ nặng vài chục đến vài trăm megabyte, thay vì hàng chục gigabyte như một mô hình đầy đủ, nên cộng đồng đã huấn luyện và chia sẻ hàng nghìn LoRA trên các trang như CivitAI.

Trình tạo ảnh LoRA sẽ chạy các tệp đó thay bạn. Thông thường, bạn phải tải mô hình gốc và từng LoRA muốn dùng, cài một giao diện trên máy và có card đồ họa đủ bộ nhớ để chạy tất cả. Trên Mage, bạn chọn mô hình gốc, thêm LoRA từ danh mục hoặc nhập bằng liên kết, chỉnh trọng số cho từng LoRA rồi tạo ảnh ngay trên trình duyệt, ở bất kỳ thiết bị nào.

LoRA gắn với mô hình mà nó được huấn luyện, nên bạn cần chọn mô hình gốc trước. Trên Mage, các mô hình ảnh hỗ trợ LoRA gồm MOSS-Image, Stable Diffusion XL cùng các dòng checkpoint của nó, Stable Diffusion 1.5, Anima, Z-Image, Krea 2 Turbo và Chroma. Các mô hình video Wan Video 2.2 và MiniMax-H3 cũng nhận LoRA.

Hãy bắt đầu với từng LoRA một. Mỗi LoRA kéo mô hình về phía dữ liệu huấn luyện của nó, và hai ba LoRA ở trọng số tối đa thường lấn át nhau, làm ảnh nhòe thành thứ không ai muốn. Khi một LoRA đã cho ra kết quả ưng ý, hãy thêm LoRA thứ hai ở trọng số thấp hơn, khoảng 0.5, rồi tăng dần.

Hãy đọc trang của LoRA trước khi dùng. Tác giả thường ghi từ khóa kích hoạt, trọng số khuyên dùng và mô hình gốc được huấn luyện, kèm các prompt đằng sau ảnh mẫu. Sao chép một prompt như vậy là cách nhanh nhất để thấy LoRA làm được gì trước khi tự viết prompt.

Hãy giữ phần còn lại của prompt thật đơn giản. LoRA phong cách đã mang sẵn diện mạo, nên bạn chỉ cần mô tả chủ thể, bối cảnh và ánh sáng, còn phần phong cách cứ để LoRA lo. Nếu kết quả lệch khỏi nét của LoRA, có thể prompt đang nhắc đến một phong cách khác cạnh tranh với nó.

• Dùng một LoRA trước, rồi thêm các LoRA khác ở trọng số thấp hơn.
• Sao chép từ khóa kích hoạt từ trang của LoRA.
• Giảm trọng số khi khuôn mặt hoặc bàn tay bắt đầu bị méo.
• Dùng cùng một seed để so sánh các mức trọng số một cách công bằng.
• Chọn LoRA khớp với mô hình gốc; LoRA SDXL sẽ không tải được trên MOSS-Image.

MOSS-Image là mô hình mã nguồn mở mới từ nhóm OpenMOSS, bám sát những prompt dài và chi tiết, đồng thời hiển thị được chữ tiếng Anh và tiếng Trung. Cộng đồng đang huấn luyện LoRA cho mô hình này rất nhanh, và Mage có sẵn một bộ ngày càng nhiều: phong cách tranh vẽ và anime, nét mực và than chì, thanh trượt ánh sáng và chi tiết, cùng các LoRA nhân vật. Xem trang mô hình MOSS-Image để biết điểm mạnh và mẹo viết prompt.

Vì MOSS-Image đọc prompt dài rất kỹ, LoRA phong cách kết hợp với một cảnh được mô tả cẩn thận sẽ cho kết quả tốt: LoRA tạo nên diện mạo, còn prompt quyết định những gì xuất hiện trong khung hình và các chữ hiện trong đó.

Tại trang Nhập, dán liên kết mô hình CivitAI, Mage sẽ nhận diện mô hình gốc, tải tệp về và kiểm tra xem có phù hợp không. Việc nhập xong trong khoảng một phút, sau đó LoRA sẽ xuất hiện trong bộ chọn LoRA của mô hình đó. Các tệp LoRA và LoCon chuẩn đều dùng được; MOSS-Image hiện chưa nhận tệp LoKr, LoHa hay DoRA.

Tính năng nhập có trong các gói Pro Plus và Max. Ở bất kỳ gói nào, bạn vẫn dùng được các LoRA có sẵn trong danh mục, cùng với trình tạo ảnh AI không giới hạn giải thích mỗi gói chạy không giới hạn những mô hình nào.