Point-E

Point-E полезен для изучения того, как сгенерированная форма превращается в игровой ассет, особенно тех этапов, на которых возникают проблемы. Версия, выпущенная OpenAI в декабре 2022 года, создаёт цветные облака точек по отрендеренным изображениям или простым текстовым запросам; для преобразования в полигональную сетку предусмотрена отдельная модель. Модель прямой генерации по тексту плохо справляется со сложными запросами и необычными объектами; шумные точки, трещины и некорректная геометрия также ограничивают возможности моделей, работающих с изображениями. Прилагаемый ноутбук для работы с сеткой экспортирует файл PLY с цветами вершин. Прежде чем результат станет готовым ассетом, ещё нужно доработать материалы, риггинг и коллизии, а также тщательно проверить топологию. Используйте Point-E как учебную базу или для эксперимента с чётко ограниченными рамками и учитывайте не только генерацию, но и неудачные преобразования и время на очистку. Для производственного пайплайна новой игры это слабая отправная точка: версия устарела, а сама OpenAI не рекомендует коммерческое использование. Мы не проводили сравнительных тестов качества результатов, скорости или требований к оборудованию.

Коммерческое использование & лицензия

Лицензия MIT в репозитории разрешает использование кода в коммерческом программном обеспечении при сохранении уведомлений об авторских правах и предоставлении разрешения. Отдельно проверьте конкретные чекпойнты и зависимости; права на референсные изображения, изображения людей и сторонние ассеты нужно проверять отдельно.

Правила в отношении контента для взрослых

Лицензия MIT в репозитории не содержит ограничений на контент для взрослых, но не предоставляет прав на референсные изображения, изображения людей или сторонние ассеты. В карточке модели Point-E не рекомендуется коммерческое использование, а в карточке CLIP использование в развёрнутых системах находится за рамками предполагаемого назначения; это положения о предполагаемом использовании, а не дополнительные условия MIT. Проведите аудит конкретных чекпойнтов и зависимостей. У размещённых в сети сервисов есть отдельные условия; общее разрешение на контент для взрослых не установлено.

Читать политику ↗

Что вам понадобится

Python, PyTorch, OpenAI CLIP, загрузка чекпойнтов и среда для работы с ноутбуками из примеров. Используйте текстовые запросы на английском: карточка модели CLIP ограничивает использование английским языком. Примеры выбирают CUDA, если она доступна, и CPU в противном случае; мы не проверяли установку, потребности в памяти или практическую производительность на CPU. Отдельно запланируйте преобразование в сетку, работу с материалами и проверку ассетов.

Места в рейтинге — рекомендации для описанной задачи, основанные на изученной документации. Рейтинги моделей относятся к разработке без сексуально откровенного контента. Мы не проводили практических сравнительных тестов. Политики в отношении контента и коммерческие условия проверяйте отдельно. Как устроены рейтинги →