Stable Video Diffusion — новий інструмент, що дозволяє створювати анімовані відео з картинки

Усі статті, обговорення, новини про AI — в одному місці. Підписуйтеся на DOU | AI!

Компанія Stability AI випустила Stable Video Diffusion — інструмент, заснований на базі генератора зображень Stable Diffusion, що дозволяє створювати анімовані відео з картинки. Код доступний у репозиторії GitHub, а ваги, необхідні для локального запуску моделі, можна знайти на сторінці Hugging Face.

На що варто звернути увагу:

  • Stable Video Diffusion має дві моделі, що перетворюють зображення у відео. Кожна модель здатна створювати від 14 до 25 кадрів зі швидкістю від 3 до 30 кадрів в секунду, з роздільною здатністю 576 × 1024.
  • Відео створюється на базі зображення, а для безпосередньо генерації необхідно задати текстовий опис.
  • Модель доступна в дослідницькій версії.
  • На думку компанії, ця розробка перевершує провідні закриті моделі в дослідженнях користувацьких уподобань (як-от Pika Labs і Runway).

Розробники підкреслюють, що поки модель не готова до комерційного застосування. Компанія планує розвивати можливості Stable Video Diffusion і надалі, а поки що збирає користувацькі відгуки та побажання.

Як думаєте, у яких галузях можна буде застосувати технологію?

👍ПодобаєтьсяСподобалось1
До обраногоВ обраному0
LinkedIn
Дозволені теги: blockquote, a, pre, code, ul, ol, li, b, i, del.
Ctrl + Enter
Дозволені теги: blockquote, a, pre, code, ul, ol, li, b, i, del.
Ctrl + Enter

Поки що дуже «сира» нейронка: на міському пейзажі досить коректно додала рух хмар, але фото людини та кадр з «Сімпсонів» перетворила на якусь рандомну купу мигаючих градієнтів з ледь помітними сілуетами початкових зображень

Підписатись на коментарі