CRM Convolutional Reconstruction Model

CRM ist eine nützliche lokale Referenzlösung für die Rekonstruktion, wenn Entwickler jeden Schritt untersuchen möchten: von sechs generierten Ansichten bis zum texturierten Mesh. Der Ablauf über die Kommandozeile speichert die Ansichten und Koordinatenkarten und exportiert ein OBJ-Paket mit UV-Textur. Die gehostete Demo verwendet Vertex-Farben. Vergleiche von Darstellung und Laufzeit müssen deshalb denselben Ausgabeweg verwenden. Der ältere CUDA/PyTorch-Stack verursacht zusätzlichen Einrichtungsaufwand, und bei einer Figur für ein Spiel für Erwachsene sind vor der Animation weiterhin Topologieprüfungen, Bereinigung und Rigging nötig. Außerdem gibt es ein konkretes Hindernis für den Produktionseinsatz: Die erforderliche Abhängigkeit nvdiffrast ist durch ihre NVIDIA-Lizenz auf Forschung und Evaluierung beschränkt. CRM eignet sich eher zum Untersuchen der Rekonstruktion als zum Aufbau einer kommerziellen Charakter-Pipeline mit den standardmäßig vorgesehenen Abhängigkeiten.

Kommerzielle Nutzung & Lizenz

Der Code von CRM steht unter der MIT-Lizenz, und die zugehörige Gewichtsdokumentation ist mit MIT gekennzeichnet. Die erforderliche Abhängigkeit nvdiffrast beschränkt die Nutzung außerhalb von NVIDIA und dessen verbundenen Unternehmen auf nichtkommerzielle Forschung und Evaluierung; der aus GET3D abgeleitete Geometriecode behält ebenfalls die NVIDIA-Hinweise bei. Die MIT-Kennzeichnung von CRM gibt die Standardpipeline nicht für die kommerzielle Produktion frei. Prüfen Sie die Vereinbarkeit der Bedingungen für die vorgelagerten Checkpoints und Abhängigkeiten gesondert.

Regeln für Inhalte für Erwachsene

MIT gewährt keine Rechte an Referenzbildern oder am Erscheinungsbild abgebildeter Personen. Die Gewichtsdokumentationen der vorgelagerten Modelle ImageDream/MVDream tragen OpenRAIL-Kennzeichnungen und warnen vor verstörenden oder anstößigen Bildern. Prüfen Sie vor der Nutzung für Erwachseneninhalte die Vereinbarkeit dieser Bedingungen mit der MIT-Kennzeichnung der CRM-Gewichte. Der standardmäßige Renderer ist ausschließlich für Forschung und Evaluierung vorgesehen. Gehosteter Zugang, Abrechnung und Inhaltsbedingungen sind ungeprüft; eine pauschale Erlaubnis für Erwachseneninhalte ist nicht belegt.

Richtlinie lesen ↗

Was Sie benötigen

Die dokumentierte Einrichtung verwendet Python 3.9, PyTorch 1.13.0 mit CUDA 11.7, Kaolin 0.14.0, xformers und nvdiffrast. Sie setzt eine NVIDIA/CUDA-Umgebung voraus; die Einrichtung und der minimale VRAM-Bedarf wurden nicht getestet.

Die Rangstufen sind Empfehlungen für die beschriebene Aufgabe auf Grundlage der geprüften Dokumentation. Modellbewertungen beziehen sich auf Entwicklungsarbeit ohne sexuell explizite Inhalte. Wir haben keine praktischen Benchmarks durchgeführt. Prüfe Inhaltsrichtlinien und kommerzielle Bedingungen gesondert. So funktionieren die Rangstufen →