Новый инструмент Shap-E от OpenAI — это Dall-E для 3D-объектов.

Последняя разработка OpenAI, Shap-E, представляет собой модель, которая позволяет создавать 3D-объекты из текста, мало чем отличаясь от того, как Dall-E может создавать 2D-изображения.

Согласно OpenAI, Shap-E — это «условная генеративная модель для 3D-ресурсов. В отличие от недавней работы над генеративными 3D-моделями, которые создают одно выходное представление, Shap-E напрямую генерирует параметры неявных функций, которые могут быть отображены как в виде текстурированных сеток, так и полей нейронного излучения».

В сообщении компании на GitHub далее объясняется, как Shap-E обучается сочетанию сопоставления 3D-ресурсов и модели условной диффузии.

Однако эту бесплатную программу немного сложнее установить и настроить, чем когда-либо популярный ChatGPT компании, как было исследовано Tom's Hardware .

Вы можете бесплатно загрузить модель Shap-E на GitHub и получить к ней доступ в Microsoft Paint 3D. Он также работает при преобразовании в файл STL, что позволяет воплощать в жизнь созданные вами рендеры с помощью 3D-принтеров.

Хотя эти базовые знания о модели Shap-E могут показаться достаточно простыми, для установки и запуска модели может потребоваться некоторая техническая смекалка.

Главный редактор издания Аврам Пилтч протестировал Shap-E, и, как он утверждает, ему потребовалось восемь часов, чтобы прийти в себя. Он добавил, что OpenAI предлагает мало инструкций, кроме объяснения того, что для установки следует использовать команду Python pip.

После установки Пилтч говорит, что смог протестировать подсказки с цветными анимационными файлами GIF и монохромными файлами PLY, при этом анимированные GIF-файлы оказались благоприятными, отметил он.

Некоторые подсказки включали акулу, крипера Minecraft и «самолет, похожий на банан», все они имели разный уровень качества в зависимости от типа файла. Пилтч также использовал функцию модели, которая позволяет пользователям загружать 2D-изображение для преобразования в 3D-объект.

Редактор отметил, что тем, кто пытается установить Shap-E и визуализировать 3D-объекты, следует помнить, что модель требует много системных ресурсов от ПК.

В частности, Shap-E совместим только с графическими процессорами Nvidia и требует, чтобы высокопроизводительные процессоры выполняли рендеринг за считанные минуты, а не часы.