Ошибка в настройках сэмплера превращает генерацию в синюю кляксу
Неверная формула дисперсии шума в некоторых инструментах ComfyUI приводит к искажению цвета и росту ошибок. Разбор работы сэмплеров показал, как математическая ошибка портит результат на современных моделях.
В некоторых версиях сэмплеров для ComfyUI вместо качественных изображений получается синий силуэт. Это происходит из-за того, что алгоритмы написаны под старые модели с определенным типом шума. Современные flow-модели работают иначе, и их дисперсия не совпадает с заложенными в код формулами. В итоге ошибка накапливается за каждый шаг генерации.
Проблема заключается в том, как сэмплер обрабатывает данные. В версиях с пометкой momentumized используется метод, который добавляет запаздывание. Положительный коэффициент в таких формулах работает как фильтр, который портит детализацию и увеличивает ошибку на 61%. Это делает результат непредсказуемым.
Однако правильный подход с отрицательным коэффициентом может быть полезным. При использовании экстраполяции ошибка снижается на 11-21% при том же количестве шагов. Это позволяет получать качественную картинку быстрее, примерно в 1,2 раза сокращая необходимое число вызовов нейросети.
Для исправления ситуации разработчик подготовил пакет с новыми настройками. В списке появятся режимы ddim_momentum и dpmpp_2m_sde_damped. Они позволяют вручную управлять коэффициентами, чтобы избежать искажений и использовать преимущества экстраполяции.
Вместо испорченных кадров теперь можно использовать исправленные алгоритмы. Это значит, что при работе с новыми моделями нужно проверять совместимость выбранного сэмплера с типом шума в модели.
Что поменялось
Доступны новые версии сэмплеров, которые исправляют ошибки дисперсии и позволяют ускорить генерацию без потери качества.
Источники · 1
Текст подготовила языковая модель по материалам источников.
