Главная страница » Meta запускает 3D Gen – это конец генераторов изображений AI, какими мы их знаем

Meta запускает 3D Gen – это конец генераторов изображений AI, какими мы их знаем

Автор: Евгений Стерликов

Meta, ранее называвшаяся Facebook, запустила новую версию Научно-исследовательская работа для Meta 3D Gen AI (3DGen). Это похоже на новый прорыв в генеративном искусственном интеллекте, благодаря которому пользователи смогут создавать реалистично выглядящие трехмерные персонажи, объекты и модели, используя только текстовые подсказки. Мета-блог поделился подробностями о новом 3D-поколении.

Meta утверждает, что ее инструмент для преобразования текста в 3D, удачно названный 3D Gen, может быстро преобразовывать текстовые описания в подробные 3D-модели, создавая высококачественные формы и текстуры менее чем за минуту.

Пока что инструменты создания изображений, такие как MidJourney , могут создавать 2D-изображения только из текстовых подсказок. В основном он используется для цифрового искусства, дизайна, маркетинга и многого другого. Однако Meta 3D имеет более широкое применение. Он идеально подходит для отраслей, требующих быстрого и точного создания 3D-ресурсов, таких как разработка видеоигр, виртуальная реальность (VR), AR и цифровое искусство.

Глядя на исследовательскую работу и видеоролики, которыми поделилась команда искусственного интеллекта Meta, кажется, что модель 3D Gen может создавать короткие видеоролики с использованием 3D-ресурса в действии. И все это менее чем за одну минуту.

Не вдаваясь в технические аспекты, вы найдете это в исследовательской работе Меты. Давайте разберемся, что это такое и чем отличается от существующих моделей:

Основные особенности:

  • Высокая точность, обеспечивающая точное соответствие 3D-моделей текстовым описаниям.
  • Поддерживает физический рендеринг (PBR) для создания реалистичных световых эффектов.
  • Генераторное ретекстурирование позволяет настраивать существующие 3D-модели.
  • Представляет объекты в пространстве просмотра, объемном пространстве и пространстве UV (текстуры).

Итак, как модель Meta 3D Gen AI сочетается с существующими моделями генерации 2D-изображений, такими как, например, Midjourney?

Ключевые различия:

  1. Тип вывода :
    • Meta 3D Gen : создает 3D-модели.
    • MidJourney : создает 2D-изображения.
  2. Сложность и применение :
    • Meta 3D Gen : используется для сложных приложений, требующих 3D-модели, таких как VR/AR и игры.
    • MidJourney : основное внимание уделяется созданию изображений для цифрового искусства и дизайна.
  3. Настройка :
    • Meta 3D Gen : позволяет повторно текстурировать 3D-модели с использованием дополнительных текстовых полей.
    • MidJourney : позволяет итеративно уточнять изображения посредством текстовых корректировок.
  4. Рендеринг :
    • Meta 3D Gen : поддерживает физический рендеринг для реалистичного освещения.
    • MidJourney : основное внимание уделяется художественным стилям рендеринга.
  5. Представительство :
    • Meta 3D Gen : представляет объекты в нескольких пространствах (вид, объем, UV).
    • MidJourney : представляет объекты только как 2D-изображения.

Как вы заметили, инструменты искусственного интеллекта для преобразования текста в изображение и текста в 3D имеют разные рынки и приложения. Будет некоторое совпадение, но, в конце концов, они должны дополнять друг друга. Мы будем держать вас в курсе, когда инструмент выйдет в общедоступную бета-версию.

Возможно вам будет интересно