プロシージャル・インタラクティブ音声¶
音声・オーディオ
オープンソース¶
-
A Text-Steerable Instrument for Sketching Procedural Soundscapes via Language Models AIが発見
2026
自然言語によるシーン記述を、リアルタイムに変化するプロシージャルな音響空間へと変換する音楽インターフェース。プロシージャル・シンセサイザー向けの人間が読めるパラメータ構成を生成し、音を途切れさせることなく、きめ細かな制御とシームレスなクロスフェードを可能にします。
llm-steeringprocedural-audiosound-synthesis -
Formula-Bank (Rethinking Procedural Audio Pre-training) AIが発見
2026
手続き型オーディオ（プロシージャルオーディオ）の事前学習をスケーリングおよび適応させるためのベンチマークおよびフレームワーク。数式クラスの網羅性とレンダリングの多様性が、転移可能なオーディオ表現学習に与える影響を調査しています。
audio-synthesispre-trainingprocedural-audio -
HelixWorld: Real-Time Interactive Audio-Visual World Model AIが発見
2026
単一のネイティブTransformerから24 FPSのビデオと48kHzのステレオオーディオを同時に生成する、リアルタイムでインタラクティブな音響・映像世界モデル。ユーザーのカメラの動きやナビゲーションに基づいて、視覚的なシーンと空間音場（方位角、距離、残響など）の両方を動的に更新する。
interactivespatial-audioworld-model -
PLAUD: Performative Latents and Unsupervised DDSP AIが発見
2026
小規模な個人用データセットを対象とし、演奏性、モジュール性、リアルタイム性を重視した微分可能デジタル信号処理（DDSP）用のモジュール式PyTorchフレームワーク。明示的なControlSpace、モジュール式シンセサイザーのルーティング、および生成制御のためのオプションのトランスフォーマーベースのPriorモデルを備えている。
ddspreal-timesynthesis -
Quality Audio Prototyping (QuAP) AIが発見
2026
コンテンツベースのオーディオ検索とプロシージャル音響生成を単一のインターフェースに統合したプロトタイプシステム。類似性ベースの検索エンジンとリアルタイムのプロシージャルオーディオモデル、およびサウンドデザイナー向けのパラメータ調整を支援するルールベースのアシスタントを統合しています。
audio-retrievalprocedural-audiosound-synthesis -
6KSFx AIが発見
2025
プロシージャルオーディオやデジタルフォリー合成の研究とベンチマークを推進するために設計された、30のサウンドカテゴリにわたる6,000個の合成オーディオサンプルのデータセット。
datasetfoleyprocedural-audiosynthesis -
NeuralPM AIが発見
2025
物理モデルに着想を得た、インタラクティブなアプリケーション向けに直感的かつ連続的な音響パラメータ制御を可能にするリアルタイムニューラル音響効果合成モデル。
neural-synthesisphysical-modelsound-effects -
2025
ライブ演奏向けのリアルタイムAIループ生成VST3プラグイン。テキスト→オーディオや実験的なドロー→オーディオ生成を備えた、MIDIトリガー式の8トラックサンプラーを搭載する。
interactivelivereal-timevst -
SonicGauss AIが発見
2025
3Dガウシアンスプラッティング（3DGS）表現から、その幾何学的および材料的特性を利用して、物理ベースの衝突音を直接合成する新しいフレームワーク。
3dgsimpact-soundsound-synthesis -
SpecMaskFoley AIが発見
2025
ControlNetフレームワークを使用して事前学習済みのスペクトルマスク生成トランスフォーマー（SpecMaskGIT）を制御し、高度に同期されセマンティクス的に正確なオーディオ生成を実現する、ビデオガイド付きのフォーリー音合成モデル。
controlnetfoley-synthesisgenerative-audiovideo-to-audio -
TexStat: A Statistics-Driven Differentiable Approach for Sound Texture Synthesis AIが発見
2025
PyTorchで実装された、知覚的に動機付けられた音響テクスチャ用の特徴量抽出ライブラリ。GAN、VAE、拡散モデルなどの生成モデルを訓練するための微分可能な損失関数として、また音質の評価や類似性を測定するための評価指標としての両方に使用できる。
loss-functionsound-texturesynthesis -
DiffSound AIが発見
2024
物理ベースのモーダル音響合成および実世界のオーディオからの物理特性推定のために設計された、微分可能なモーダル音響レンダリングおよび逆レンダリングフレームワーク。
differentiablephysical-audioprocedural-audiosound-synthesis -
UE5-PMG: Procedural Music Generator for Unreal Engine 5 AIが発見
2024
Unreal Engine 5向けにリアルタイムで著作権フリーの適応型サウンドトラックを生成する、AI駆動のプロシージャル音楽生成プラグイン。テキストからの音楽生成、ゲームプレイへのリアルタイム適応、ステム分離、ローカル推論をサポートし、BlueprintおよびC++から利用可能です。
adaptive-audiomusic-generationprocedural-audiounreal-engine -
Cmajor AIが発見
2023
高速でポータブルなDSP信号処理コードを記述するために設計されたCファミリーのプログラミング言語。ゲームやプラグインにおけるリアルタイムのプロシージャルオーディオ合成に適しています。
audio-programmingdspprocedural-audiosynthesis -
DDSP-SFX AIが発見
2023
ピッチ、明るさ、エンベロープなどの音響属性を決定論的に制御できる、微分可能デジタル信号処理（DDSP）に基づく音響ガイド型効果音生成フレームワーク。
ddspneural-synthesisprocedural-audiosound-effects -
Heavy Compiler Collection (hvcc) AIが発見
2023
Pure Dataのパッチを高度に最適化されたC/C++コードに変換するPythonベースのコンパイラ。UnityなどのゲームエンジンやWwiseなどのオーディオミドルウェア向けのラッパーを生成し、ゲーム内での効率的なプロシージャルオーディオを実現します。
dspgame-audioprocedural-audiopure-data -
MetaSounds Procedural Audio Engine AIが発見
2023
Unreal Engine 5のMetaSounds向けに構築された、リアルタイムのプロシージャル音響合成および音響レイキャストエンジン。シリンダーの点火率やラジアルドップラー効果などの内燃機関の物理的な音響不変量をモデル化し、リアルタイムで数学的にオーディオパラメータを合成します。
metasoundsprocedural-audiosound-synthesisunreal-engine -
NoiseBandNet AIが発見
2023
ホワイトノイズを制御可能なフィルターバンクに通すことで、時間変化する効果音を生成・制御するニューラル音声合成モデル。インタラクティブメディア向けに高品質なプロシージャル音響生成を提供します。
deep-learningneural-synthesisprocedural-audiosound-effects -
ProVE AIが発見
2023
環境音のプロシージャルオーディオモデルを学習するための一般的なフレームワーク。変分オートエンコーダーとコントロールマッピングを組み合わせ、リアルでパラメータ制御可能な効果音を生成します。
deep-learningprocedural-audiosynthesisvae -
FunDSP AIが発見
2022
音響ネットワークの記述と合成のための強力なインライングラフ表記法を備えた、Rust向けのオープンソースのデジタル信号処理（DSP）およびオーディオ合成ライブラリ。
audio-librarydsprustsynthesis -
Godot Mixing Desk AIが発見
2021
Godot Engine向けの完全なプロシージャルおよびインタラクティブオーディオソリューションであり、開発者が最小限のコードでインタラクティブな音響空間や動的な音楽を簡単に実装できるようにする。
adaptive-musicgame-audiogodotprocedural-audio -
RAVE AIが発見
2021
消費者向けCPU/GPU上で動作し、インタラクティブな音響合成やパフォーマンスのために高音質48kHz音声のリアルタイム生成と潜在空間制御を可能にする音声変分オートエンコーダー。
neural-audioprocedural-audioreal-timevae -
SpecSinGAN AIが発見
2021
単一のワンショット効果音を入力とし、スペクトログラム上の単一画像GANを使用してその新しいバリエーションを生成する無条件生成アーキテクチャ。ゲームのサウンドバリエーション生成に最適です。
ganprocedural-audiosound-effectssynthesis -
DDSP: Differentiable Digital Signal Processing AIが発見
2020
シンセサイザーやフィルターなどの古典的なデジタル信号処理（DSP）要素をディープラーニングと統合するライブラリ。DSPモジュールを介した誤差逆伝播を可能にし、高度に制御可能で効率的なニューラル音声合成を実現します。
deep-learningdspneural-synthesisprocedural-audio -
ZzFX AIが発見
2019
容量制限のあるWebゲームやゲームジャム向けに設計された、軽量で極小のJavaScript音響効果ジェネレーター。外部の音声ファイルを使用せず、コードからレトロな効果音をプロシージャルに生成できます。
gamedevjavascriptprocedural-audiosound-effects -
AudioKit AIが発見
2016
iOS、macOS、tvOS 向けの包括的なオーディオ合成・処理・分析プラットフォーム。モバイルゲーム開発において、リアルタイムのプロシージャルオーディオ、インタラクティブな音響空間、カスタムシンセサイザーの実装に広く使用されています。
iosmacosprocedural-audiosynthesis -
SoLoud AIが発見
2014
リアルタイムのプロシージャル音響生成、音声合成、カスタムオーディオフィルターをネイティブにサポートする、使いやすく軽量なオープンソースのC++ゲーム用オーディオエンジン。
audio-enginecppgamedevprocedural-audio -
LabSound AIが発見
2013
WebKitのWebAudio実装のフォークから派生した、リアルタイムのプロシージャルオーディオおよびインタラクティブな音響合成向けに設計されたC++グラフベースのオーディオエンジン。
audio-enginecppgraph-basedreal-time -
Tonic AIが発見
2013
クリーンなパッチベースの構文を特徴とする、効率的で純粋な C++ オーディオ合成ライブラリ。開発者がリアルタイムアプリケーション向けにカスタムシンセサイザーやプロシージャル音源を簡単に構築できるようにします。
cppdspprocedural-audiosynthesis -
libpd AIが発見
2010
Pure Dataオーディオ合成エンジンの組み込み用バージョン。開発者はUnityやUnrealなどのゲームエンジン内でインタラクティブなプロシージャルオーディオパッチを直接実行できます。
game-audioprocedural-audiopure-datasynthesis -
Maximilian AIが発見
2010
リアルタイムのインタラクティブオーディオ、ジェネレーティブミュージック、プロシージャルサウンドデザイン向けに設計された、包括的なC++オーディオ合成および信号処理ライブラリ。
cppdspprocedural-audiosynthesis -
ChucK AIが発見
2003
リアルタイムの音響合成、作曲、およびインタラクティブなオーディオパフォーマンス向けに設計された、強力な時間制御と並行処理を備えた音響プログラミング言語。
live-codingprogramming-languagereal-timesynthesis -
Faust AIが発見
2002
リアルタイムのオーディオ信号処理と音響合成のために設計された関数型プログラミング言語。ゲームやインタラクティブなアプリケーションにおけるプロシージャルオーディオやカスタムDSPエフェクトの生成に広く使用されています。
audio-programmingdspprocedural-audiosynthesis -
SuperCollider AIが発見
1996
リアルタイムの音響合成とアルゴリズム作曲のための環境およびプログラミング言語。高度なプロシージャルサウンドデザインやインタラクティブなオーディオシステムに広く使用されています。
algorithmic-compositionprocedural-audiosynthesis -
The Synthesis ToolKit in C++ (STK) AIが発見
1995
リアルタイム音響合成と物理モデリングのための、広く使用されているオープンソースのC++ライブラリ。物理モデルに基づく楽器音やプロシージャルな効果音を作成するためのユニットジェネレーターとアルゴリズムを提供します。
cppinstrument-simulationphysical-modelingsynthesis
商用・業界ツール¶
-
Krotos Studio AIが発見
2024
ゲーム、映画、メディア制作向けに、リアルタイムのパフォーマンス型フォーリー生成やAI支援による映像同期音響制作を可能にするインタラクティブな音響設計ソフトウェア。
foleyprocedural-audioreal-timesound-effects -
Tsugi GameSynth AIが発見
2023
ゲーム、アニメーション、映画制作向けに設計された総合的なプロシージャルサウンドデザインツール。足音、天候、エンジン、衝撃音などの特化型シンセサイザーに加え、130以上の合成・制御モジュールを備えたモジュラーパッチ環境を搭載しています。
game-audiomodular-synthprocedural-audiosound-design -
Nemisindo AIが発見
2022
Unreal EngineおよびUnity向けのインタラクティブなプロシージャルオーディオプラットフォームおよびプラグインスイート。ゲームエンジン内でリアルタイムかつパラメータ駆動の効果音生成を可能にします。
game-audioprocedural-audiounityunreal-engine -
MetaSounds AIが発見
2021
Unreal Engine 5に搭載された高性能なプロシージャルオーディオシステム。サウンドデザイナーがDSP（デジタル信号処理）グラフを完全に制御でき、サンプル精度でのタイミング制御や、ゲームパラメータと深く連動した動的な音響生成を可能にします。
dsp-graphgame-audiointeractive-audiounreal-engine -
Tsugi DSP Action AIが発見
2021
ジェスチャーを描き、合成パラメータをリアルタイムで調整することで、ダイナミックで高品質なアクション効果音を簡単に生成できるプロシージャルサウンドデザインツール。
game-audioprocedural-audiosound-effectssynthesis -
Tsugi DSP Series AIが発見
2021
ゲーム開発者やアニメーター向けに設計されたプロシージャルオーディオツール群（DSP Action、DSP Anime、DSP Motion、DSP Retroなど）であり、描画操作や合成パラメータの調整によって、ダイナミックでカスタマイズ可能な効果音を生成できる。
animeprocedural-audiosound-effectssynthesis -
Tsugi DSP Suite AIが発見
2021
DSP Anime、DSP Action、DSP Fantasy、DSP Sci-Fiなどを含むプロシージャル音響デザインツールのスイート。静的なサンプルライブラリに依存せず、高度な数理モデルを用いて、ゲーム、アニメ、ビジュアルノベル向けの高度にカスタマイズ可能でダイナミックな効果音を生成します。
anime-productionprocedural-audiosound-effects -
DSP Motion AIが発見
2020
マウスやペンタブレットで図形を描くことで、モーショングラフィックス、キャラクターアニメーション、ゲーム向けのダイナミックな効果音を生成できる、Tsugi による商用のプロシージャル音響デザインツール。
animationprocedural-audiosfxsound-design -
GameSynth AIが発見
2015
Tsugi社による主要な商用プロシージャルサウンドデザインツール。衝撃音、風切り音、足音、エンジン音、天候エフェクトなどの特化型合成モデルを提供し、ゲームエンジンとの高度な連携が可能です。
foleygame-audioprocedural-audiosound-effects -
FMOD Studio AIが発見
2013
ゲーム開発で広く使用されている、適応型・インタラクティブ・プロシージャルオーディオの設計、オーサリング、再生を行うための業界標準のプロプライエタリなオーディオミドルウェアおよびサウンドエンジン。
dspgame-audiointeractivemiddleware -
Audiokinetic Wwise AIが発見
2006
高度なオーサリングツールとクロスプラットフォームのサウンドエンジンを備え、ゲームにおけるインタラクティブな音響表現を実現する業界標準のプロプライエタリなオーディオミドルウェア。
game-audiointeractivemiddlewaresound-engine
