Усі нейромережі безкоштовні та з відкритим кодом
🟣 V-Express (на відео) – це технологія створення відео портретів, розроблена Tencent AI Lab і Нанкінським університетом. Дозволяє перетворити одне зображення на відео, використовуючи текст, аудіо та інші сигнали для управління.
Технологія корисна для анімації портретів у різних додатках, таких як віртуальні асистенти та розважальні платформи.
Іншими словами, дає змогу оживити будь-яке фото і створити за ним діпфейк. Аватар буде дуже реалістичний і максимально повторюватиме всі рухи за людиною.
Вам знадобляться тільки фото та аудіофайл з промовою, яку буде вимовляти персонаж.
🟣 Argil – нейромережа для створення якісних діпфейків, яка здатна скопіювати стиль спілкування, мову тіла і голос, плюс дуже добре імітує рух губ. Доступ до неї через лист очікування.
🟣 VideoReTalking – дає змогу створювати відео високої якості із синхронізацією руху губ навіть у разі зміни емоцій, тобто так, щоб людина на ньому говорила заданий текст з урахуванням синхронізації руху губ та емоцій, що відповідають звучанню.
🟣 Rope – дуже реалістично замінює обличчя у відео з використанням моделі inswapper_128 з проєкту InsightFace.
