3D-модель AI и создатель изображений Stable Zero123 представлены Stability AI

Компания Stability AI представила новую программу для создания 3D-моделей и изображений с искусственным интеллектом , которая призвана изменить способ создания 3D-контента из простых 2D-изображений. Этот новый создатель 3D-моделей с искусственным интеллектом, получивший название Stable Zero123 , в настоящее время находится на стадии предварительного исследования и вызывает фурор среди создателей и разработчиков, особенно тех, кто занимается видео- и игровой индустрией.

Способность модели интерпретировать и реконструировать глубину и размеры объектов по одной фотографии является значительным шагом вперед, потенциально улучшая возможности виртуальной реальности и упрощая процессы проектирования в различных областях, включая инженерию и архитектуру.

Stable Zero123 использует уникальный метод под названием Score Distillation Sampling (SDS) , который лежит в основе его способности преобразовывать плоские изображения в трехмерные чудеса. Этот прорыв может стать благом для виртуальной реальности, где иммерсивная среда имеет первостепенное значение, а также для таких отраслей, как архитектура, где визуализация проектов в 3D имеет решающее значение.

Stable Zero123 новый создатель 3D-изображений с искусственным интеллектом

Создатель 3D-моделей AI доступен через платформу Hugging Face , которая известна тем, что облегчает обмен моделями машинного обучения. Stability AI также рекомендует объединить Stable Zero123 с программным обеспечением Three Studio для эффективного управления 3D-контентом.

Помимо Stable Zero123, Stability AI работает над другими инструментами, предназначенными для расширения функциональности модели. К ним относятся заменитель неба и инструмент для создания 3D-моделей, оба из которых в настоящее время находятся в закрытой предварительной версии. Эти инструменты предназначены для предоставления специализированных функций, которые работают в тандеме со Stable Zero123, еще больше расширяя его полезность для пользователей .

Несмотря на свои впечатляющие возможности, Stable Zero123 предъявляет некоторые требования, которые могут создать проблемы для некоторых пользователей. Модель искусственного интеллекта требует значительной вычислительной мощности , а это означает, что для полного раскрытия ее потенциала необходимы высокопроизводительные видеокарты или профессиональные учебные графические процессоры. Это требование к оборудованию может ограничить доступность модели, особенно для любителей или мелких авторов, у которых может не быть доступа к таким ресурсам.

• Стабильный ноль123 :
  • Создает новые виды объекта, демонстрируя трехмерное изображение под разными углами.
  • Заметное улучшение качества по сравнению с предыдущими моделями, такими как Zero1-to-3 и Zero123-XL.
  • Улучшения за счет улучшенных наборов обучающих данных и условий высот.
• Технические детали :
  • На основе стабильной диффузии 1.5.
  • Потребляет тот же объем видеопамяти, что и SD1.5, для создания одного нового изображения.
  • Требует больше времени и памяти (рекомендуется 24 ГБ видеопамяти) для создания 3D-объектов.
• Использование модели и доступность :
  • Выпущено для некоммерческого и исследовательского использования.
  • Доступны загружаемые веса.
• Инновации и улучшения :
  • Улучшен набор обучающих данных от Objaverse с упором на высококачественные 3D-объекты.
  • Условия возвышения предоставляются во время обучения и вывода для более качественных прогнозов.
  • Предварительно рассчитанный набор данных и улучшенный загрузчик данных позволяют повысить эффективность обучения в 40 раз.
• Доступность и применение :
  • Выпущено на Hugging Face для исследователей и некоммерческих пользователей.
  • Улучшен открытый исходный код Threestudio для поддержки Zero123 и Stable Zero123.
  • Использует Score Distillation Sampling (SDS) для оптимизации NeRF со стабильным нулем123.
  • Может быть адаптирован для преобразования текста в 3D.
• Ограничения и контактная информация :
  • Модель предназначена исключительно для исследовательских, а не коммерческих целей .
  • Контактная информация предоставлена ​​для запросов о коммерческих приложениях .
  • Обновления и дополнительную информацию можно получить через информационный бюллетень, социальные сети и сообщество Discord.

Текущие ограничения Stable Zero123

Одним из текущих недостатков Stable Zero123 является его неспособность создавать изображения с прозрачным фоном — функция, которая имеет решающее значение для плавной интеграции визуальных эффектов в видео. Тем не менее, перспективность модели в сфере видео и игр неоспорима, учитывая растущий спрос на высококачественный 3D-контент в этих сферах.

Стабильность ИИ не почивает на лаврах; компания активно работает над улучшением приложений Stable Zero123 и преодолением текущих ограничений. Чтобы помочь пользователям максимально эффективно использовать модели искусственного интеллекта, такие как Stable Zero123, Stability AI также предлагает комплексный курс по машинному обучению и стабильному распространению. Эта образовательная инициатива является частью стремления компании предоставить авторам знания и инструменты, необходимые для достижения успеха в их творческих проектах.

Выпуск Stable Zero123 от Stability AI знаменует собой важную веху в области 3D-изображений на основе искусственного интеллекта. Хотя модель все еще находится на ранних стадиях разработки, ее потенциал влияния на создание контента огромен. Поскольку Stability AI продолжает совершенствовать и совершенствовать эту технологию, будущее выглядит многообещающим для разработки более сложных и доступных инструментов для создателей и разработчиков по всему миру. Ожидания того, что Stable Zero123 принесет на стол, высоки, и творческое сообщество внимательно наблюдает за тем, как Stability AI прокладывает путь к новым возможностям в создании цифрового контента.