Дослідницький підрозділ Meta* активно працює над новими технологіями генеративного ШІ, включно з новою платформою Meta* 3D Gen, яка дає змогу створювати 3D-об’єкти за текстовими описами з високою якістю геометрії та текстур.
Ця система може генерувати 3D-об’єкти з текстурами з високою роздільною здатністю і картами матеріалів від початку до кінця, результати яких перевершують за якістю попередні передові рішення – зі швидкістю, що в 3-10 разів вища за попередні роботи
– пояснює Meta* AI в Threads.
Meta* 3D Gen може створювати 3D-об’єкти та текстури за простим текстовим запитом менш ніж за хвилину, згідно з дослідницькою статтею Meta. Це функціонально схоже на генератори текстів у зображення, як-от Midjourney та Adobe Firefly, але 3DGen створює повністю тривимірні моделі з базовими сітковими структурами, які підтримують фізично коректний рендеринг (PBR). Це означає, що 3D-моделі, створені за допомогою Meta 3DGen, можна використовувати в реальних додатках моделювання та рендерингу.
“Meta* 3D Gen – це двоетапний метод, який поєднує в собі два компоненти, один для генерації 3D-об’єктів за текстом і один для генерації текстур за текстом”, – пояснює Meta*, додаючи, що цей підхід забезпечує “високоякісну генерацію 3D для створення захопливого контенту”.
3DGen об’єднує дві основоположні генеративні моделі Meta* AssetGen і TextureGen, приділяючи особливу увагу відносним перевагам кожної з них. Компанія Meta* стверджує, що, ґрунтуючись на відгуках професійних 3D-художників, її нова технологія 3DGen “у більшості випадків” є кращою за конкуруючі моделі перетворення тексту на 3D, оскільки вона до 60 разів швидша.
Варто зазначити, що розділяючи сіткові моделі та карти текстур, 3DGen обіцяє значний контроль над кінцевим результатом і дає змогу ітеративного вдосконалення, поширеного серед генераторів текст-в-зображення. Користувачі можуть регулювати вхідні дані для стилю текстури, не змінюючи базову модель.
Повний технічний документ Meta* про 3DGen містить значно більше подробиць і демонструє результати оціночних тестів порівняно з іншими моделями текст-в-3D.
