Point-E

O Point-E é útil para aprender como uma forma gerada se torna um asset de jogo, especialmente nos pontos em que esse processo dá errado. A versão lançada pela OpenAI em dezembro de 2022 produz nuvens de pontos coloridas a partir de imagens renderizadas ou prompts de texto simples, com um modelo separado para a conversão em malhas. O modelo de geração direta a partir de texto tem dificuldades com prompts complexos e objetos incomuns; pontos com ruído, rachaduras e geometria incorreta também limitam os modelos baseados em imagens. O notebook de malhas fornecido exporta um arquivo PLY com cores por vértice. Os materiais, o rigging, as colisões e uma verificação cuidadosa da topologia ainda exigem trabalho antes que o resultado se torne um asset finalizado. Use o Point-E como base de aprendizado ou para um experimento de escopo limitado, e leve em conta as falhas de conversão e o tempo de limpeza junto com a geração. Para o pipeline de produção de um jogo novo, ele é um ponto de partida pouco promissor, pois a versão é antiga e a própria OpenAI desaconselha o uso comercial. Não fizemos benchmarks da qualidade dos resultados, da velocidade ou dos requisitos de hardware.

Uso comercial & licença

A licença MIT do repositório permite o uso do código em software comercial, desde que os avisos de direitos autorais e de permissão sejam mantidos. Verifique separadamente os checkpoints específicos e as dependências; imagens de referência, representações de pessoas e assets de terceiros exigem suas próprias verificações de direitos.

Regras sobre conteúdo adulto

A licença MIT do repositório não restringe conteúdo adulto, mas não concede os direitos sobre imagens de referência, representações de pessoas ou assets de terceiros. A ficha do modelo Point-E desaconselha o uso comercial, e a ficha do CLIP coloca o uso em aplicações implantadas fora do escopo previsto; essas são declarações de uso previsto, e não condições adicionais da licença MIT. Audite os checkpoints específicos e as dependências. Serviços hospedados acrescentam termos separados; não está estabelecida uma permissão geral para conteúdo adulto.

Leia a política ↗

O que você precisa

Python, PyTorch, OpenAI CLIP, downloads de checkpoints e um ambiente de notebooks para os exemplos. Use prompts de texto em inglês: a ficha do modelo CLIP limita o uso ao inglês. Os exemplos selecionam CUDA quando está disponível e CPU caso contrário; não testamos a instalação, as necessidades de memória nem o desempenho prático em CPU. Planeje separadamente a conversão em malhas, os materiais e as verificações dos assets.

Os níveis são recomendações para a tarefa descrita, com base na documentação analisada. Os níveis dos modelos abrangem desenvolvimento sem conteúdo sexual explícito. Não realizamos benchmarks práticos. Verifique separadamente as políticas de conteúdo e os termos comerciais. Como os níveis funcionam →