OpenAI запускает Shap-E, инструмент для создания 3D-моделей из простого текста
Прямо сейчас OpenAI это не работает ЧатGPT 5, но сосредоточен на разработке других генеративных моделей. На днях компания представила Форма, новый инструмент, позволяющий создавать 3D-модели, начинающиеся с простых текстовых строк. Исключительных результатов нельзя ожидать прямо сейчас, но это, несомненно, первый шаг к более сложному использованию. Давайте посмотрим все подробно.
Что такое Shap-E, как это работает
SHAP-E находится в свободном доступе на GitHub и позволяет создание трехмерных объектов можно открывать в Paint 3D и конвертировать в файлы STL, также можно использовать с 3D-принтерами. Рассматриваемый искусственный интеллект основан на новой технике визуального синтеза, называемой НеРФ (Neural Radiance Fields), которая уже привлекла большой интерес к компьютерному зрению.
Этот новый метод визуального синтеза и 3D-реконструкции можно применять в различных областях, включая робототехнику (как мы недавно видели с ChatGPT и собакой Boston Dynamics), картографию, виртуальную и дополненную реальность и многие другие.
В случаях, представленных OpenAI, Shap-E может генерировать такие объекты, как миска для еды, пингвин, собака, космический корабль, а также стул и зеленый ботинок. Модели можно визуализировать за считанные секунды, и, как свидетельствуют многие, SHAP-E можно использовать для создания ресурсов для видеоигр, фильмов и впечатлений от виртуальной реальности. Это важный поворотный момент в 3D-моделировании и рендеринге.
Однако организация Сэма Альтмана не предоставила точных инструкций по использованию этого инструмента, но после установки с помощью команды Python «pip install -e» вы можете использовать один из блокнотов, представленных на GitHub, как «текст в 3D», который генерирует 3D-модель из текстовой подсказки или «изображение в 3D», которое преобразует 2D-изображение в 3D-объект.
Результаты не очень хорошие, особенно при использовании текстовых подсказок: в основном вы создаете монохромные файлы PLY и не очень убедительные анимированные цветные GIF-файлы. Кроме того, SHAP-E требует много системных ресурсов.
