Decart AI Оновила Модель Lucy 2.5 для Редагування Відео на Льоту
Модель обіцяє обробку Full HD при 30 fps, використовуючи механізм фіксації сцени та 4-бітне квантування для боротьби з мерехтінням.
Компанія Decart AI представила оновлення моделі Lucy 2.5, розробленої для модифікації відеопотоку в реальному часі. За заявою розробників, система здатна обробляти відео з роздільною здатністю Full HD при 30 кадрах на секунду за текстовими інструкціями або зображеннями-референсами без попереднього рендерингу.
Головною проблемою таких систем залишається втрата стабільності між кадрами, коли об'єкти змінюють форму чи деталі. Щоб зменшити цей ефект, розробники додали механізм Self-Anchoring: на старті модель фіксує опорне представлення сцени, що дає змогу зберігати зовнішній вигляд персонажів, навіть коли вони тимчасово зникають з кадру й повертаються назад.
Для прискорення роботи розробники оптимізували обчислення за допомогою квантування у форматах MXFP8 та NVFP4, що, за твердженням Decart AI, збільшило швидкість генерації в чотири рази порівняно з попередньою версією. Додатково продуктивність підвищили завдяки розрідженій увазі (sparse attention) та об'єднанню обчислювальних ядер (kernel fusion).
Наскільки агресивне зниження точності до 4 біт впливає на появу візуальних артефактів у складних сценах, наразі залишається відкритим питанням без незалежних тестів.
Джерело: habr
Першоджерело: Lucy
Коментарі
Допоможи покращити наступну версію: Додавай контекст або пропонуй виправлення. Після AI-перевірки коментарі можуть отримати бали для переписування. Перевірка й оновлення потребують часу; повна шкала не гарантує нової версії.