Meta, ранее называвшаяся Facebook, запустила новую версию Научно-исследовательская работа для Meta 3D Gen AI (3DGen). Это похоже на новый прорыв в генеративном искусственном интеллекте, благодаря которому пользователи смогут создавать реалистично выглядящие трехмерные персонажи, объекты и модели, используя только текстовые подсказки. Мета-блог поделился подробностями о новом 3D-поколении.
Meta утверждает, что ее инструмент для преобразования текста в 3D, удачно названный 3D Gen, может быстро преобразовывать текстовые описания в подробные 3D-модели, создавая высококачественные формы и текстуры менее чем за минуту.
Пока что инструменты создания изображений, такие как MidJourney , могут создавать 2D-изображения только из текстовых подсказок. В основном он используется для цифрового искусства, дизайна, маркетинга и многого другого. Однако Meta 3D имеет более широкое применение. Он идеально подходит для отраслей, требующих быстрого и точного создания 3D-ресурсов, таких как разработка видеоигр, виртуальная реальность (VR), AR и цифровое искусство.
📣 Новое исследование GenAI в Meta, представляющее Meta 3D Gen: новую систему для сквозного создания 3D-ресурсов из текста за <1 минуту. Meta 3D Gen — новая комбинированная система искусственного интеллекта. который может генерировать высококачественные 3D-ресурсы с текстурами высокого разрешения и сквозными картами материалов… pic.twitter.com/rDD5GzNinY
— AI в Meta (@AIatMeta) 2 июля 2024 г.
Глядя на исследовательскую работу и видеоролики, которыми поделилась команда искусственного интеллекта Meta, кажется, что модель 3D Gen может создавать короткие видеоролики с использованием 3D-ресурса в действии. И все это менее чем за одну минуту.
Не вдаваясь в технические аспекты, вы найдете это в исследовательской работе Меты. Давайте разберемся, что это такое и чем отличается от существующих моделей:
Основные особенности:
- Высокая точность, обеспечивающая точное соответствие 3D-моделей текстовым описаниям.
- Поддерживает физический рендеринг (PBR) для создания реалистичных световых эффектов.
- Генераторное ретекстурирование позволяет настраивать существующие 3D-модели.
- Представляет объекты в пространстве просмотра, объемном пространстве и пространстве UV (текстуры).
Итак, как модель Meta 3D Gen AI сочетается с существующими моделями генерации 2D-изображений, такими как, например, Midjourney?
Ключевые различия:
- Тип вывода :
- Meta 3D Gen : создает 3D-модели.
- MidJourney : создает 2D-изображения.
- Сложность и применение :
- Meta 3D Gen : используется для сложных приложений, требующих 3D-модели, таких как VR/AR и игры.
- MidJourney : основное внимание уделяется созданию изображений для цифрового искусства и дизайна.
- Настройка :
- Meta 3D Gen : позволяет повторно текстурировать 3D-модели с использованием дополнительных текстовых полей.
- MidJourney : позволяет итеративно уточнять изображения посредством текстовых корректировок.
- Рендеринг :
- Meta 3D Gen : поддерживает физический рендеринг для реалистичного освещения.
- MidJourney : основное внимание уделяется художественным стилям рендеринга.
- Представительство :
- Meta 3D Gen : представляет объекты в нескольких пространствах (вид, объем, UV).
- MidJourney : представляет объекты только как 2D-изображения.
Как вы заметили, инструменты искусственного интеллекта для преобразования текста в изображение и текста в 3D имеют разные рынки и приложения. Будет некоторое совпадение, но, в конце концов, они должны дополнять друг друга. Мы будем держать вас в курсе, когда инструмент выйдет в общедоступную бета-версию.