Flex 2

Flex.2-preview: Mô hình khuếch tán văn bản thành hình ảnh mã nguồn mở với 8 tỷ tham số

Nguồn: Hugging Face - ostris/Flex.2-preview
Tác giả: Jaret Burkett (ostris)

Giới thiệu

Flex.2-preview là phiên bản xem trước của mô hình khuếch tán văn bản thành hình ảnh với 8 tỷ tham số, hỗ trợ điều khiển đa dạng và chức năng inpainting tích hợp. Đây là bước tiến tiếp theo sau các phiên bản: Flux.1 Schnell → OpenFlux.1 → Flex.1-alpha → Flex.2-preview. Mô hình được phát triển hoàn toàn dựa trên sự hỗ trợ từ cộng đồng.

Tính năng nổi bật

• 8 tỷ tham số
• Bộ nhúng hướng dẫn (tăng tốc độ tạo gấp 2 lần)
• Hỗ trợ inpainting tích hợp
• Đầu vào điều khiển đa dạng (đường nét, tư thế, độ sâu)
• Có khả năng tinh chỉnh
• Giấy phép tuân thủ OSI (Apache 2.0)
• Đầu vào độ dài 512 token
• Không gian tiềm ẩn 16 kênh
• Được tạo ra bởi cộng đồng, vì cộng đồng

Cách sử dụng

ComfyUI

Flex.2 được hỗ trợ trong ComfyUI thông qua node Flex2 Conditioner trong ComfyUI-FlexTools. Khuyến nghị sử dụng thêm comfyui_controlnet_aux để tạo hình ảnh điều khiển (tư thế và độ sâu). Sau khi cài đặt, tải tệp Flex.2-preview.safetensors vào thư mục ComfyUI/models/diffusion_models/ và khởi động lại ComfyUI.

Diffusers

Mô hình có thể được sử dụng với thư viện diffusers bằng cách sử dụng AutoPipelineForText2Image. Cần cài đặt các thư viện cần thiết và tải mô hình từ Hugging Face để sử dụng.

Hạn chế

Flex.2-preview vẫn đang trong giai đoạn phát triển và có thể gặp khó khăn với một số yếu tố như giải phẫu và văn bản. Chức năng inpainting cũng đang được cải thiện.

Tinh chỉnh

Mô hình được thiết kế để dễ dàng tinh chỉnh, bao gồm hỗ trợ LoRA. Công cụ AI-Toolkit cung cấp chức năng tạo tự động các đầu vào điều khiển và inpainting cho bộ dữ liệu hiện có.

Phản hồi và hỗ trợ

Tác giả khuyến khích người dùng cung cấp phản hồi và đề xuất cải tiến thông qua Discord. Nếu bạn thấy dự án hữu ích hoặc sử dụng trong môi trường thương mại, hãy xem xét việc hỗ trợ tác giả thông qua GitHub, Patreon hoặc PayPal.

Để biết thêm thông tin chi tiết và tải mô hình, vui lòng truy cập: https://huggingface.co/ostris/Flex.2-preview