CRM Convolutional Reconstruction Model

CRM es una referencia útil para la reconstrucción local para desarrolladores que quieren examinar cada etapa, desde las seis vistas generadas hasta una malla con textura. El flujo por línea de comandos guarda las vistas y los mapas de coordenadas y exporta un paquete OBJ con textura UV. Su demo alojada utiliza colores de vértices, por lo que las comparaciones de apariencia y tiempo de ejecución deben usar la misma modalidad de salida. La pila CUDA/PyTorch más antigua añade trabajo de configuración, y un personaje de un juego para adultos aún necesita revisiones de topología, limpieza y rigging antes de poder animarse. También hay un obstáculo concreto para su uso en producción: nvdiffrast, una dependencia obligatoria, está restringida a investigación y evaluación por su licencia de NVIDIA. CRM tiene más sentido para estudiar la reconstrucción que para iniciar un pipeline comercial de personajes con las dependencias predeterminadas.

Uso comercial & licencia

El código de CRM tiene licencia MIT y la ficha de sus pesos está etiquetada como MIT. Para quienes no forman parte de NVIDIA ni de sus filiales, la dependencia obligatoria nvdiffrast limita el uso a investigación y evaluación no comerciales; el código de geometría derivado de GET3D también conserva los avisos de NVIDIA. La etiqueta MIT de CRM no autoriza el uso del pipeline predeterminado para producción comercial. Compruebe por separado la compatibilidad de las condiciones de los checkpoints y las dependencias de origen.

Reglas sobre contenido para adultos

MIT no otorga derechos sobre las imágenes de referencia ni sobre la apariencia de las personas representadas. Las fichas de los pesos de los modelos de origen ImageDream/MVDream llevan etiquetas OpenRAIL y advierten contra las imágenes perturbadoras u ofensivas; compruebe la compatibilidad de esas condiciones con la etiqueta MIT de los pesos de CRM antes de usarlo para contenido para adultos. El renderizador predeterminado es solo para investigación y evaluación. El acceso alojado, la facturación y las condiciones sobre contenido no están verificados; no se ha establecido un permiso general para contenido para adultos.

Leer la política ↗

Lo que necesitas

La configuración documentada utiliza Python 3.9, PyTorch 1.13.0 con CUDA 11.7, Kaolin 0.14.0, xformers y nvdiffrast. Requiere un entorno NVIDIA/CUDA; no se probaron la configuración ni la cantidad mínima de VRAM.

Los niveles son recomendaciones para la tarea descrita, basadas en la documentación revisada. Los niveles de los modelos cubren trabajo de desarrollo sin contenido sexual explícito. No hemos realizado pruebas prácticas de rendimiento. Consulta por separado las políticas de contenido y las condiciones comerciales. Cómo funcionan los niveles →