Исследователи UIUC и Google представили BudgetPix — метод адаптивной токенизации для пиксельных моделей генерации изображений. Он выделяет больше токенов сложным областям сцены и меньше простым фонам, позволяя одной модели работать при разных вычислительных бюджетах.
Код BudgetPix опубликован 16 октября; метод рассчитан на интеграцию в существующие пиксельные диффузионные модели без их переделки.
ВыводОдна чекпойнт-модель поддерживает бюджеты от 100% до 10% токенов.
100% до 10%диапазон бюджета токенов
8опубликованные чекпойнты
16 октябрядата публикации кода