FedorAiToolkit: обучение LoRA с поддержкой 3D-сканирования тела
Н@GreenNeuralRobotsAI-инженер
1 месОбзор форка AI Toolkit с интеграцией SAM 3D Body Scanning для улучшения точности обучения LoRA на основе пропорций тела.
FedorAiToolkit
Форк AI Toolkit
Автор добавил в него SAM 3D Body Scanning, чтобы обучать лоры не только на лицо но и на форму тела
Процесс обучения состоит из двух этапов:
1. Обычное обучение LoRA/LoKr на фотографиях пользователя (около 200 шагов)
2. Второй этап: модель генерирует изображения, SAM 3D сканирует их, и обучение подгоняет LoRA под отсканированное тело и лицо
Это позволяет добиться большего сходства с реальным человеком в полных портретах. Время обучения на RTX 5090 около 30 минут для лица и около 60 минут с учетом тела
Реализовано для Krea 2
Есть еще похожий проект BodyRec - помогает лоре запомнить пропорции тела
#finetuning #personalization #krea2
Кратко (AI)
Представлен форк AI Toolkit под названием FedorAiToolkit, который добавляет поддержку SAM 3D Body Scanning для обучения LoRA. Процесс включает двухэтапное обучение, позволяющее модели лучше учитывать пропорции тела и лица пользователя. Решение оптимизировано для работы на RTX 5090 и интегрировано с Krea 2.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖