テクスチャ・PBR・マテリアル生成

3D生成

オープンソース

• MI

  MaTe: Images Are All You Need for Material Transfer via Diffusion Transformer AIが発見

  2026

  テキストによるガイダンスや参照ネットワークを排除し、共有潜在空間内のマルチモーダルアテンションを介してトークンレベルで入力画像を統合する、マテリアル転送のための合理化された拡散フレームワーク。

  diffusion material-transfer texture transformer

  arXiv · 論文

• MA

  Material Apprentice: Reflecting Process Expertise in Procedural Material Generation AIが発見

  2026

  専門家のデモンストレーションに対する検索時プロセス推論として手続き型マテリアル生成を定式化し、ベイクされたテクスチャではなく、編集可能なBlenderノードグラフを自動生成するフレームワーク。

  blender material procedural

  GitHub · arXiv · 公式サイト

• RE

  ReLi3D AIが発見

  2026

  複数の疎な画像から、3Dジオメトリ、空間的に変化するPBRマテリアル、および環境照明を1秒未満で同時に再構成する、Stability AIが開発した統合型エンドツーエンドパイプライン。

  3d material pbr reconstruction

  GitHub · arXiv

• TS

  Texture Space Material Diffusion AIが発見

  2026

  NVIDIAによるフレームワークで、ビデオ拡散トランスフォーマーを微調整し、3Dオブジェクトの高品質なPBRマテリアルをテクスチャ空間で直接生成。テキスト指示、マルチビュー生成、最大8Kのアップスケーリングに対応。

  diffusion material pbr texture

  プロジェクト · arXiv

• TR

  Toward Richer Material Generation via Procedural Data Enhancement AIが発見

  2026

  単一のGGXスペキュラローブをマルチローブ表現に拡張することで、シンプルなPBRマテリアルをより表現力豊かなものに強化し、生成マテリアルモデルの学習データの品質を向上させる手法。

  data-augmentation material pbr

  arXiv · 公式サイト

• TR

  Towards Realistic 3D Emission Materials: Dataset, Baseline, and Evaluation for Emission Texture Generation AIが発見

  2026

  自発光する放射（エミッション）マテリアルを忠実に再現する3Dオブジェクトの合成を可能にする、放射テクスチャ生成のためのベースラインモデルおよびデータセット（Objaverse-Emission）。

  emission material pbr texture

  GitHub · arXiv

• VI

  VideoNeuMat AIが発見

  2026

  ビデオ生成モデルを微調整し、逆レンダリングを行うことで、ビデオ拡散モデルから再利用可能なニューラルマテリアルアセットを抽出する2段階のパイプライン。

  material pbr texture video-diffusion

  GitHub · arXiv

• CU

  Chord (Ubisoft La Forge)

  2025

  Ubisoft La Forgeによる、生成されたテクスチャ画像からPBRマテリアルを推定する「レンダリング連鎖分解」。AIテクスチャをゲームで使えるマテリアルマップに変換する。

  material-estimation pbr ubisoft

  プロジェクト · GitHub

• CC

  Chord: Chain of Rendering Decomposition for PBR Material Estimation AIが発見

  2025

  Ubisoft La Forgeが開発したChordは、ファインチューニングされた拡散モデルを用いて陰影のあるタイラブルなテクスチャ画像を合成し、その後、シングルステップの画像条件付き拡散モデルを用いて高品質なPBRマテリアルチャンネル（アルベド、法線、粗さ、金属度）に順次分解する2段階の生成・推定フレームワーク。

  diffusion material pbr texture

  プロジェクト · GitHub · arXiv

• HD

  HiMat: DiT-based Ultra-High Resolution SVBRDF Generation AIが発見

  2025

  複数の反射率マップ間でピクセルレベルの整合性を維持しながら、最大4Kの超高解像度SVBRDF（空間的に変化する双方向反射率分布関数）を生成するために設計されたDiffusion Transformer（DiT）フレームワーク。

  dit pbr svbrdf texture

  GitHub · arXiv · 論文

• IH

  IntrinsiX: High-Quality PBR Generation using Image Priors AIが発見

  2025

  テキスト記述から、焼き込み照明のない物理ベースレンダリング（PBR）マップ（アルベド、粗さ、メタリック、法線マップ）を生成する手法。強力な画像先験情報を活用して高品質なテクスチャを予測します。

  material pbr text-to-texture

  GitHub · arXiv · 公式サイト

• LU

  LumiTex AIが発見

  2025

  照明コンテキストを活用して画像プロンプトからマテリアルを分解し、シームレスで視点一貫性のあるテクスチャを補完することで、高精度なPBRテクスチャを生成するフレームワーク。

  diffusion material pbr texture

  GitHub · arXiv · 論文

• MA

  MatE AIが発見

  2025

  幾何学的プライアを利用して歪みを補正・軽減し、制約のない現実世界の単一画像から高精度なPBRマテリアルを抽出する手法。

  material pbr svbrdf texture

  GitHub · arXiv

• MA

  Material Anything

  2025

  さまざまな照明条件下で任意の3D物体に対し物理ベースマテリアル(アルベド・粗さ・金属度・法線)を生成し、再ライティング可能なPBRアセットを作成する。

  diffusion material pbr relighting

  GitHub

• MA

  MaterialMVP

  2025

  視点間で整合するアルベドやマテリアルチャンネルを予測する、3Dメッシュ向けの多視点一貫したPBRマテリアル生成。

  material multi-view pbr

  GitHub

• MI

  MaterialMVP: Illumination-Invariant Material Generation via Multi-view PBR Diffusion AIが発見

  2025

  テキストや画像プロンプトから、3Dメッシュに対して高品質かつ照明変化に影響されないPBRテクスチャ（アルベド、メタリック、ラフネス、ノーマル）を生成する、ワンステージのマルチビューPBR拡散モデル。

  diffusion material pbr texture

  プロジェクト · GitHub · arXiv

• MA

  MatLat AIが発見

  2025

  事前学習済みの潜在画像生成モデルをファインチューニングし、独自の材料潜在空間（MatLat）を学習することで、3Dメッシュ上に高品質なPBRテクスチャを生成するフレームワーク。追加のPBRチャンネルをエンコードする際の分布シフトを防ぎ、粗さ、金属度、混合素材などを正確に表現します。

  latent-space material pbr texture

  プロジェクト · GitHub · arXiv · 論文

• MM

  MatMart: Material Reconstruction of 3D Objects via Diffusion AIが発見

  2025

  MatMartは、入力からの正確なマテリアル予測と、未観測ビューに対する事前知識ガイド付きマテリアル生成を組み合わせた、3Dオブジェクト向けの2段階マテリアル再構成フレームワークです。拡散モデルとともに段階的な推論を利用し、高精度で再ライティング可能なPBRマテリアルの復元を実現します。

  diffusion material pbr texture

  プロジェクト · arXiv

• MA

  MatPedia: A Universal Generative Foundation for High-Fidelity Material Synthesis AIが発見

  2025

  RGBの外観とPBRの物理特性を相互に依存する潜在変数にコンパクトにエンコードする、共同RGB-PBR表現に基づいたマテリアル合成のための基盤モデル。

  foundation-model material pbr texture

  GitHub · arXiv

• MA

  MatSpray AIが発見

  2025

  拡散モデルからの2Dマテリアル知識を3D Gaussian Splattingの幾何構造に融合させ、空間的に変化するPBRパラメータを持つ再ライティング可能なアセットを再構成するフレームワーク。

  gaussian-splatting material pbr texture

  GitHub · arXiv

• ME

  MeshGen AIが発見

  2025

  詳細なジオメトリと物理ベースレンダリング（PBR）テクスチャを備えた高品質な3Dメッシュを生成する、高度なImage-to-3Dパイプライン。

  3d mesh pbr texture

  GitHub · arXiv

• M3

  MuMA: 3D PBR Texturing via Multi-Channel Multi-View Generation and Agentic Post-Processing AIが発見

  2025

  マルチチャネル・マルチビュー生成を通じてシェーディングとアルベドの外観チャネルをモデル化し、固有分解とエージェント型ポストプロセッシングを統合して、高品質で物理的に妥当なPBRマテリアルを生成する3Dテクスチャリング手法。

  agentic pbr texture

  arXiv

• MA

  MVPainter: Accurate and Detailed 3D Texture Generation via Multi-View Diffusion with Geometric Control AIが発見

  2025

  MVPainterは、幾何学的制御を伴うマルチビュー拡散モデルを使用して、高忠実度で詳細なテクスチャを生成する3Dテクスチャ生成フレームワークです。生成されたビューから物理ベースレンダリング（PBR）属性を抽出し、実世界のレンダリングアプリケーションに適したPBR対応メッシュを作成します。

  3d diffusion pbr texture

  GitHub · arXiv

• NN

  NaTex: Native Texture Generation

  2025

  多視点の2D画像を融合するのではなく3D上で直接テクスチャを合成するネイティブテクスチャ生成。継ぎ目や視点間の不整合アーティファクトを低減する。

  diffusion native-3d texture

  GitHub

• PA

  PBR3DGen: A VLM-guided Mesh Generation with High-Quality PBR Texture AIが発見

  2025

  視覚言語モデル（VLM）を活用して多視点拡散を誘導し、反射や金属の質感を正確に捉えた高品質なPBRマテリアル付き3Dメッシュを生成する2段階フレームワーク。

  mesh pbr texture vlm

  GitHub · arXiv

• RO

  RomanTex

  2025

  視点間の整合性とディテールを高める、メッシュテクスチャ生成のための多視点拡散手法。制作現場のテクスチャリングに向く。

  diffusion multi-view texture

  GitHub

• SE

  SeqTex

  2025

  多視点レンダリングを動画シーケンスとして扱い、動画拡散モデルを活用して空間的・時間的に一貫したメッシュテクスチャを生成する。

  multi-view texture video-diffusion

  GitHub

• VP

  VLMaterial: Procedural Material Generation with Large Vision-Language Models AIが発見

  2025

  大型視覚言語モデル（VLM）を活用し、入力画像からプログラム（Python）形式のノードグラフとして表現される手続き型（プロシージャル）マテリアルを生成するフレームワーク。

  material pbr procedural

  GitHub · arXiv

• 3X

  3DTopia-XL

  2024

  プリミティブベースの潜在拡散表現を用いて、テキストや画像からPBRマテリアル付きの高品質な3Dアセットを生成する。

  diffusion pbr primitive

  GitHub · arXiv

• CT

  ComfyUI-TextureAlchemy AIが発見

  2024

  単一の画像から物理ベースレンダリング（PBR）テクスチャを抽出・処理・強化し、ゲームエンジンや3Dパイプライン向けに最適化する、ComfyUI用の総合テクスチャ処理ツールキット。

  comfyui pbr texture-generation

  GitHub

• CT

  Cosmos-Transfer1-DiffusionRenderer AIが発見

  2024

  NVIDIA Cosmos World Foundation Modelsをベースにした、動画の再ライティングおよびデライティング専用のフレームワーク。高品質な物理マテリアル推定と制御可能な動画ライティング操作を可能にする。

  diffusion material pbr relighting

  GitHub

• DR

  DreamMat AIが発見

  2024

  ジオメトリおよび光を考慮した拡散モデルを使用することで、不正確なマテリアル分解を解決し、アルベドマップにおける焼き付けられた陰影効果を排除する、高品質なPBRマテリアル生成フレームワーク。

  diffusion material pbr texture

  GitHub · arXiv

• II

  InTeX: Interactive Text-to-texture Synthesis via Unified Depth-aware Inpainting AIが発見

  2024

  統一された深度対応インペインティングモデルを利用して、3Dメッシュ上に一貫した高品質なテクスチャを生成し、ユーザーフレンドリーなインタラクティブ編集を提供するテキストからのテクスチャ合成フレームワーク。

  inpainting interactive texture

  GitHub · arXiv

• JG

  Jointly Generating Multi-view Consistent PBR Textures using Collaborative Control AIが発見

  2024

  テキストからテクスチャへの生成において、ビュー空間で完全なPBRスタック（アルベド、法線、粗さマップを含む）を直接モデリングする協調制御拡散モデルです。このアプローチによりマルチビューの一貫性が確保され、生成されたPBRテクスチャを3Dメッシュにシームレスに融合させることができます。

  collaborative-control diffusion pbr texture

  arXiv

• MA

  Material Anything: Generating Materials for Any 3D Object via Diffusion AIが発見

  2024

  テクスチャなし、アルベドのみ、あるいはスキャンされたメッシュなど、多様な3Dオブジェクトに対して、様々な照明条件下で物理ベースのマテリアル（PBR）を生成する、完全自動化された統合拡散フレームワーク。

  diffusion material pbr texture

  プロジェクト · GitHub · arXiv

• MM

  MaterialPicker: Multi-Modal Material Generation with Diffusion Transformers AIが発見

  2024

  Diffusion Transformer（DiT）アーキテクチャを活用し、高品質なSVBRDFマテリアルの作成を簡素化するマルチモーダルマテリアル生成モデルです。テキストプロンプト、画像クロップ、または歪んだ表面の写真を入力条件として、完全なPBRマテリアルマップを生成できます。

  dit material pbr svbrdf

  arXiv

• MA

  MatFusion AIが発見

  2024

  合成マテリアルのサンプルで訓練された無条件SVBRDF拡散バックボーンを利用し、様々な照明条件下での写真からSVBRDFを推定するために設計された生成拡散モデル。

  diffusion pbr svbrdf texture

  GitHub · arXiv

• MM

  MCMat: Multiview-Consistent and Physically Accurate PBR Material Generation AIが発見

  2024

  多視点拡散モデルの事前学習を活用し、3Dメッシュに対して一貫性があり物理的に正確なPBRマテリアル（アルベド、金属度、粗さマップ）を生成するフレームワーク。

  diffusion multiview pbr texture

  GitHub · arXiv

• NL

  Neural LightRig: Unlocking Accurate Object Normal and Material Estimation with Multi-Light Diffusion AIが発見

  2024

  拡散モデルを用いてマルチライト画像を生成することで、単一の画像から正確な表面法線とPBRマテリアル特性を推定し、豊富な補助照明キューを提供するフレームワーク。

  diffusion material normal-map pbr

  GitHub · arXiv · 公式サイト

• PB

  PBRFusion AIが発見

  2024

  RTX Remixのワークフローで広く使用されている、コミュニティ開発の拡散モデルおよびComfyUI拡張機能。ゲームのリマスター向けにテクスチャをアップスケールし、高品質な法線、粗さ、深度マップを生成します。

  pbr rtx-remix texture

  GitHub · Hugging Face

• SE

  StableMaterials: Enhancing Diversity in Material Generation via Semi-Supervised Learning AIが発見

  2024

  テキストまたは画像プロンプトからフォトリアルなPBRマテリアルを生成する拡散モデル。半教師あり学習と潜在拡散モデル（LDM）を統合し、多様で高品質なマテリアルマップを生成します。

  diffusion pbr texture

  GitHub · arXiv · Hugging Face

• SY

  SyncMVD

  2024

  レンダリングした複数視点間で2D拡散プロセスを同期させてメッシュテクスチャを生成し、アセットごとの学習なしに継ぎ目のないテクスチャマップを作成する。

  diffusion multi-view texture

  GitHub

• TE

  TexGaussian AIが発見

  2024

  テキストや画像入力から、高品質な物理ベースレンダリング（PBR）マテリアルを高速に生成するために、オクタント整列された3D Gaussian Splattingを使用する新しい手法。

  gaussian-splatting material pbr texture

  プロジェクト · GitHub · arXiv · 論文

• TE

  TEXGen

  2024

  UV空間で直接高解像度テクスチャを生成するフィードフォワード型拡散モデル。テキストや画像で誘導した3Dメッシュの高速なテクスチャリングを可能にする。

  diffusion feed-forward texture uv

  GitHub

• TE

  TexPro AIが発見

  2024

  プロシージャルマテリアルモデリングを用いて3Dメッシュ用の高品質なPBRテクスチャマップをテキストから生成し、物理ベースレンダリングや再ライティングを可能にする手法。

  material pbr texture

  arXiv

• MA

  MatFuse AIが発見

  2023

  カラーパレット、スケッチ、テキスト、画像などのマルチモーダルな入力を使用して、SVBRDFマップを合成および編集するために拡散モデルを活用する、制御可能なマテリアル生成フレームワーク。

  diffusion material pbr svbrdf

  GitHub · arXiv

• PI

  Paint-it AIが発見

  2023

  ニューラル再パラメータ化テクスチャ最適化を介して、3Dメッシュ用の高品質なPBRテクスチャマップをテキストから合成する手法。

  material pbr texture

  GitHub · arXiv

• PP

  Paint3D: Paint Anything 3D with Lighting-Less Texture Diffusion Models AIが発見

  2023

  テキストや画像入力から、照明情報の入っていない高解像度（2K）のUVテクスチャマップを生成する粗から密への生成フレームワーク。ベイクされた照明を含まないため、最新のグラフィックスパイプラインでの再ライティングや編集が容易になります。

  diffusion pbr texture

  GitHub · arXiv

商用・業界ツール

• PA

  PATINA AIが発見

  2026

  テキスト記述または単一の入力画像から、シームレスで高解像度なPBRマテリアルマップ（ベースカラー、法線、粗さ、金属度、高さ）を生成する、fal.aiによる商用クラウドAPIおよびモデル。

  api material pbr texture

  公式サイト

• AS

  Adobe Substance 3D Sampler AIが発見

  2021

  AI搭載の『Image to Material』機能を備えた、3Dマテリアル作成およびフォトグラメトリの業界標準ツール。機械学習を用いて、現実世界の1枚の写真から、正確なノーマル、ラフネス、メタリック、ハイトマップを含む完全な高品質PBRマテリアルを自動的に生成します。

  image-to-material material pbr photogrammetry

  公式サイト