Компанія Stability AI випустила нову модель штучного інтелекту – Stable Virtual Camera, яка, за твердженням компанії, може перетворювати 2D-зображення на «захопливі» відеоролики з реалістичною глибиною і перспективою.
Віртуальні камери – це інструменти, які часто використовуються в цифровому кіновиробництві та 3D-анімації для захоплення і навігації сценами в реальному часі. За допомогою Stable Virtual Camera компанія Stability прагнула додати генеративний AI в мікс, щоб забезпечити більший контроль і настроюваність, ідеться в повідомленні компанії в блозі.
Stable Virtual Camera генерує «нові види» сцени з одного або декількох зображень (загалом до 32) під кутами камери, які вказує користувач. Модель може генерувати відео, які переміщуються за «динамічними» траєкторіями камери або попередніми налаштуваннями, включно зі «Спіраллю», «Dolly Zoom», «Переміщенням» і «Панорамуванням».
Поточна версія Stable Virtual Camera, дослідницький попередній перегляд, може генерувати відео у квадратних (1:1), портретних (9:16) і альбомних (16:9) співвідношеннях сторін довжиною до 1000 кадрів. Однак Stable попереджає, що модель може давати результати нижчої якості в певних сценаріях, особливо із зображеннями людей, тварин або «динамічних текстур», таких як вода.
«Вкрай неоднозначні сцени, складні траєкторії руху камери, об’єкти, що перетинають, або поверхні, а також об’єкти неправильної форми можуть викликати артефакти мерехтіння», – зазначає Stability у своєму повідомленні в блозі, – “особливо коли цільові точки огляду значно відрізняються від вхідних зображень”.
Stable Virtual Camera доступна для дослідницького використання за некомерційною ліцензією. Її можна завантажити з платформи розробки AI Hugging Face.
