Point-Eは、生成された形状がゲーム用アセットになるまでの流れ、とりわけその過程でどこに問題が生じるかを学ぶのに役立ちます。OpenAIが2022年12月に公開したこのバージョンは、レンダリング画像や簡単なテキストプロンプトから色付きの点群を生成し、メッシュ変換には別のモデルを使います。テキストから直接生成するモデルは、複雑なプロンプトや珍しい物体を苦手としています。画像を入力に使うモデルにも、ノイズを含む点、亀裂、不正確なジオメトリといった制約があります。付属のメッシュ用ノートブックは、頂点カラー付きのPLYファイルを出力します。完成したアセットにするには、マテリアル、リギング、コリジョンの整備と、トポロジーの入念な確認がさらに必要です。学習の基礎として、あるいは範囲を絞った実験に使い、生成だけでなく、変換の失敗や修正にかかる時間も評価に含めてください。新作ゲームの制作パイプラインの出発点としては、公開時期が古いうえ、OpenAI自身が商用利用を推奨していないため、有力な選択肢とはいえません。私たちは出力品質、速度、必要なハードウェアについてベンチマークを実施していません。
商用利用 & ライセンス
リポジトリのMITライセンスは、著作権表示と許諾表示を保持することを条件に、商用ソフトウェアでのコードの利用を認めています。実際に使うチェックポイントと依存関係は個別に確認してください。参照画像、肖像、第三者のアセットについては、それぞれ別途権利の確認が必要です。
成人向けコンテンツのルール
リポジトリのMITライセンスには成人向けコンテンツに関する制限はありませんが、参照画像、肖像、第三者のアセットに関する権利まで許諾するものではありません。Point-Eのモデルカードは商用利用を推奨しておらず、CLIPのモデルカードはデプロイして運用する形での利用を想定用途の範囲外としています。これらは想定用途についての記述であり、MITライセンスへの追加条件ではありません。実際に使うチェックポイントと依存関係を精査してください。ホスティングサービスには別途利用規約が加わるため、成人向けコンテンツが一律に許可されているとは確認できません。
必要なもの
Python、PyTorch、OpenAI CLIP、チェックポイントのダウンロード、およびサンプル用のノートブック環境が必要です。テキストプロンプトには英語を使ってください。CLIPのモデルカードは利用言語を英語に限定しています。サンプルは、CUDAが利用できる場合はCUDAを、それ以外ではCPUを選択します。私たちはインストール、必要なメモリ容量、実用上のCPU性能を検証していません。メッシュ変換、マテリアルの整備、アセットの確認は別途計画してください。
ランクは、確認したドキュメントに基づく、記載の作業に対する推奨度です。モデルのランクは、性的に露骨な内容を扱わない開発作業を対象としています。実際のベンチマークは行っていません。コンテンツポリシーと商用利用条件は別途確認してください。 ランクの仕組み →