CRM Convolutional Reconstruction Model

CRM constitue une base de référence utile pour la reconstruction en local, destinée aux développeurs qui souhaitent examiner chaque étape, des six vues générées au maillage texturé. Le traitement en ligne de commande enregistre les vues et les cartes de coordonnées, puis exporte un ensemble de fichiers OBJ avec une texture UV. Sa démo hébergée utilise les couleurs de sommets : les comparaisons de l’apparence et du temps d’exécution doivent donc s’appuyer sur le même mode de sortie. La pile CUDA/PyTorch plus ancienne demande davantage de travail de configuration, et un personnage de jeu pour adultes nécessite encore des vérifications de topologie, un nettoyage et la création d’un rig avant de pouvoir être animé. Il existe aussi un obstacle concret à la mise en production : nvdiffrast, une dépendance obligatoire, est réservé à la recherche et à l’évaluation par sa licence NVIDIA. CRM se prête davantage à l’étude de la reconstruction qu’au lancement d’un pipeline commercial de personnages avec les dépendances fournies par défaut.

Utilisation commerciale & licence

Le code de CRM est sous licence MIT, et la fiche de ses poids porte la mention MIT. Pour les utilisateurs autres que NVIDIA et ses sociétés affiliées, nvdiffrast, une dépendance obligatoire, limite l’utilisation à la recherche et à l’évaluation non commerciales ; le code de géométrie dérivé de GET3D conserve également les mentions de NVIDIA. La mention MIT de CRM ne suffit pas à autoriser la production commerciale avec le pipeline fourni par défaut. Vérifiez séparément la compatibilité des conditions applicables aux checkpoints et aux dépendances en amont.

Règles relatives au contenu pour adultes

La licence MIT n’accorde aucun droit sur les images de référence ni sur l’apparence des personnes représentées. Les fiches des poids des modèles en amont ImageDream/MVDream portent des mentions OpenRAIL et mettent en garde contre les images dérangeantes ou offensantes ; vérifiez la compatibilité de ces conditions avec la mention MIT des poids de CRM avant toute utilisation pour des contenus pour adultes. Le moteur de rendu fourni par défaut est réservé à la recherche et à l’évaluation. L’accès hébergé, la facturation et les conditions relatives aux contenus n’ont pas été vérifiés ; aucune autorisation générale concernant les contenus pour adultes n’est établie.

Lire la politique ↗

Ce dont vous avez besoin

La configuration documentée utilise Python 3.9, PyTorch 1.13.0 avec CUDA 11.7, Kaolin 0.14.0, xformers et nvdiffrast. Elle nécessite un environnement NVIDIA/CUDA ; la configuration et la quantité minimale de VRAM n’ont pas été testées.

Les classements sont des recommandations pour la tâche décrite, fondées sur la documentation examinée. Ceux des modèles concernent le développement de contenu non explicite. Nous n’avons pas effectué de tests de performance pratiques. Vérifiez séparément les politiques de contenu et les conditions commerciales. Fonctionnement des classements →