Компанія Meta представила новий генератор 3D Gen, який дає змогу створювати якісні 3D-об’єкти за текстовим описом. Згідно з опублікованим описом генератора, 3D Gen може створювати 3D-об’єкти і текстури на основі текстового опису менш ніж за хвилину.
Функціонально алгоритм схожий на наявні системи, такі як Midjourney і Adobe Firefly. Відмінність полягає в тому, що 3D Gen створює моделі, які підтримують фізично коректний рендеринг.
За словами розробників, висока якість генерації можлива завдяки двоступеневому методу. Він поєднує два компоненти: “один для перетворення тексту в 3D, а інший – для перетворення тексту в текстури”. Це дає змогу зробити контент більш імерсивним.
У роботі 3D Gen використовує дві мовні моделі Meta: AssetGen і TextureGen. Компанія зазначає, що нейромережа значно перевершує аналогічні алгоритми за якістю генерованих об’єктів і в три-десять разів випереджає їх за швидкістю генерації. У технічному описі моделі містяться деталі роботи і показані результати тестування 3D Gen у порівнянні з іншими генераторами.
