ポーズ→フレーム¶
アニメーション・モーション
オープンソース¶
-
EverAnimate: Minute-Scale Human Animation via Latent Flow Restoration AIが発見
2026
視覚的品質とキャラクターのアイデンティティを維持しながら、長時間のアニメーションビデオを生成する効率的な事後学習手法。チャンク間でコンテキストメモリを伝播するPersistent Latent Propagationと、チャンク内の忠実度を向上させるRestorative Flow Matchingを導入し、分単位の人物アニメーションを可能にする。
flow-matchinghuman-animationlong-videopose-guided -
LiveAnimate AIが発見
2026
140億パラメータのビデオDiffusion Transformerをベースにした、リアルタイムかつ長時間のポーズ駆動型人間アニメーションシステム。有界アテンションキャッシュとPose-Retrieval Sink Attentionを採用し、長時間のストリーミングシーケンスでも外観の一貫性と安定したメモリ使用量を維持します。
long-formpose-drivenreal-timestreaming -
MultiAnimate AIが発見
2026
複数キャラクターのシナリオ向けに設計されたポーズ誘導型人物画像アニメーションフレームワークであり、拡張可能なアーキテクチャを用いてアイデンティティの混同や遮蔽(オクルージョン)の問題に対処します。
diffusionhuman-animationmulti-characterpose-guided -
SoulX-LiveAct AIが発見
2026
Neighbor ForcingとConvKVメモリを利用して20 FPSでのストリーミング推論を実現する、時間単位のリアルタイム人物アニメーション用の自己回帰型拡散フレームワーク。
autoregressivediffusionhuman-animationreal-time -
Wan-Animate-2 AIが発見
2026
中間的なモーション抽出器を排除し、再設計されたDiffusion Transformerで駆動ビデオを直接処理するエンドツーエンドのキャラクターアニメーションフレームワーク。高精度なモーション生成、強力なアイデンティティ保持、およびテキスト駆動の視点制御を実現します。
character-animationdiffusion-transformermotion-transferviewpoint-control -
Animate Anyone 2 AIが発見
2025
Animate Anyone 2は、環境アフォーダンスを組み込むことでキャラクター画像の動画化を拡張し、ソース動画から環境との相互作用信号を捉えることで、現実的なキャラクターと環境のインタラクションを生成します。
character-animationenvironment-affordancepose-guided -
Animate-X++ AIが発見
2025
汎用キャラクターアニメーションに加え、テキスト駆動型の動的背景の生成をサポートする、Diffusion Transformer(DiT)アーキテクチャを採用したAnimate-Xフレームワークの拡張版。
character-animationdynamic-backgroundpose-guided -
AnimateAnywhere: Rouse the Background in Human Image Animation AIが発見
2025
CogVideoXをベースにした人物画像アニメーションフレームワーク。カメラの軌跡を必要とせず、人物のポーズシーケンスから背景の動きを推測するBackground Motion Learner(BML)を導入し、人物と背景の両方が同期して動くリアルなビデオを生成する。
background-motioncogvideoxhuman-animationpose-guided -
DynamiCtrl AIが発見
2025
マルチモーダル拡散トランスフォーマー(MM-DiT)において、ポーズ制御構造とテキストガイダンスを統合し、アイデンティティの保持と背景の制御を可能にするポーズ誘導型人物画像アニメーションフレームワーク。
dithuman-animationpose-guidedtext-guidance -
HumanDiT AIが発見
2025
14,000時間の動画で学習された、長時間の人物動作動画生成のためのポーズ誘導型Diffusion Transformer(DiT)フレームワーク。可変解像度およびシーケンス長にわたり、手や顔などの詳細な身体部位の高精度なレンダリングを実現します。
diffusion-transformerlong-formpose-guided -
HyperMotion AIが発見
2025
大規模なビデオ拡散Transformerに基づくポーズ誘導型の人物画像アニメーションフレームワークであり、複雑で非常にダイナミックな非標準的動作を処理できるように設計されています。
complex-motiondiffusion-transformerhuman-animationpose-guided -
InterAnimate: Taming Region-aware Diffusion Model for Realistic Human Interaction Animation AIが発見
2025
InterAnimateは、リアルな人間のインタラクションアニメーション、特に複雑な手と顔の相互作用を対象に設計された領域認識型拡散モデルです。領域認識アテンションシステムとID保存機構を導入し、参照画像とモーションガイダンスから自然で時間的に一貫したアニメーションを生成します。
character-animationdiffusion-modelpose-guided -
MTVCraft: Tokenizing 4D Motion for Arbitrary Character Animation AIが発見
2025
2Dレンダリングされたポーズ画像に依存せず、生の3Dモーションシーケンス(4Dモーション)を直接モデリングするキャラクターアニメーションフレームワーク。4Dモーションをトークン化することで、任意のキャラクターの正確でオープンワールドなアニメーションを可能にします。
4d-motioncharacter-animationpose-guided -
PoseAnything AIが発見
2025
パーツごとの時間的一貫性を維持しながら、任意の骨格入力から人間および非人間のキャラクターの両方を処理できる、汎用的なポーズ誘導型ビデオ生成フレームワーク。
pose-guidedtemporal-coherenceuniversalvideo-generation -
RealisDance-DiT: Simple yet Strong Baseline towards Controllable Character Animation in the Wild AIが発見
2025
Wan-2.1ビデオ拡散トランスフォーマー(DiT)をベースにした、制御可能なキャラクターアニメーションのためのシンプルかつ堅牢なベースラインモデル。複雑なReference Net設計をよりシンプルで効率的な条件付けメカニズムに置き換えることで、多様な実世界のシナリオにおいて高品質で時間的一貫性のある人間の動作生成を実現します。
character-animationdiffusion-transformerpose-guidedvideo-generation -
SkyReels-A1 AIが発見
2025
ビデオ拡散トランスフォーマー(DiT)をベースに構築され、アイデンティティの歪みや背景の不安定さを解消する、表現力豊かなポートレートおよびキャラクターアニメーションフレームワーク。
diffusion-transformerportrait-animationpose-guided -
StableAnimator++ AIが発見
2025
ポーズのズレや顔の歪みを克服するために学習可能なポーズアライメントを導入した、アイデンティティを保持する人物画像アニメーション用のビデオ拡散フレームワーク。後処理を必要とせず、参照画像とポーズシーケンスを条件とした高品質なビデオを生成します。
diffusionidentity-preservingpose-guided -
UniAnimate-DiT AIが発見
2025
大規模動画拡散トランスフォーマー「Wan2.1-14B-I2V」をベースにした高度な人物画像アニメーションフレームワーク。一貫性と忠実度の高いキャラクターアニメーションを可能にする。
diffusion-transformerhuman-animationpose-guidedGitHub · arXiv · Hugging Face · 論文
-
Animate-X AIが発見
2024
擬人化キャラクター、アニメ、3Dキャラクターなど、多様なキャラクタータイプに対応する潜在拡散モデルベースの汎用アニメーションフレームワーク。複雑な動作パターンを捉えるための強化されたモーション表現を導入。
character-animationdiffusionpose-guided -
Champ AIが発見
2024
Champは、潜在拡散フレームワーク内で3D人間パラメータモデル(SMPL)を活用し、形状の整合性とモーションガイダンスを強化する、制御可能で一貫性のある人物画像アニメーションフレームワークです。
character-animationpose-guidedsmpl -
DisPose AIが発見
2024
疎な骨格ポーズのガイダンスをモーションフィールドのガイダンスとキーポイントの対応関係に解きほぐすことで、異なる体型間での一般化性能を向上させた、制御可能な人物画像アニメーション手法。
diffusiondisentanglementpose-guided -
Follow-Your-Pose v2 AIが発見
2024
複数の条件をビデオ潜在拡散モデルに統合する、堅牢なポーズ制御可能キャラクターアニメーションフレームワーク。複数キャラクターのシナリオにおける背景の安定性と身体の遮蔽(オクルージョン)の問題に対処するよう設計されています。
character-animationmulti-characterpose-guided -
MimicMotion AIが発見
2024
MimicMotionは、信頼度を考慮したポーズガイダンスと領域損失の増幅により、任意の長さの高品質な人物モーション動画を生成する制御可能な動画生成フレームワークです。
character-animationpose-guidedvideo-generation -
Moore-AnimateAnyone AIが発見
2024
参照画像と駆動ポーズまたは顔のランドマークシーケンスを使用して、キャラクターアニメーションや顔の表情再現を可能にするAnimate Anyoneパイプラインのオープンソース実装。
character-animationface-reenactmentpose-guided -
MusePose AIが発見
2024
MusePoseは、単一の参照画像からキャラクターの高品質なダンスや動きの動画を生成するために設計された、拡散モデルベースでポーズ駆動型の仮想人間動画生成フレームワークです。
character-animationpose-guidedvirtual-human -
StableAnimator AIが発見
2024
リファレンス画像とポーズシーケンスを条件として、後処理なしで高品質なビデオを合成する、エンドツーエンドのアイデンティティ保持型ビデオ拡散フレームワーク。
diffusionidentity-preservingpose-guided -
TCAN: Animating Human Images with Temporally Consistent Pose Guidance using Diffusion Models AIが発見
2024
誤ったポーズ入力に対して頑健であり、時間的に極めて一貫した人物画像アニメーションを生成するポーズ駆動型手法。事前学習済みのControlNetを微調整なしで利用し、時間的一貫性モジュールとLoRAを組み合わせることで、安定した動画合成を実現します。
controlnetlorapose-guidedtemporal-consistency -
UniAnimate AIが発見
2024
UniAnimateは、統一されたビデオ拡散モデルをポーズガイダーおよび時間モデリングと統合し、一貫したキャラクターアニメーションをサポートする、効率的で長期的な人物動画生成フレームワークです。
character-animationpose-guidedvideo-generation -
VividPose AIが発見
2024
Stable Video Diffusion(SVD)の動き認識事前知識を活用し、1枚の参照画像とポーズシーケンスから時間的一貫性と滑らかさに優れた動画を生成する、エンドツーエンドの人物画像アニメーションフレームワーク。
diffusionpose-guidedsvd -
Animate Anyone AIが発見
2023
Animate Anyoneは、キャラクターアニメーションのための、一貫性があり制御可能な画像から動画への合成フレームワークであり、外観の一貫性を維持するReferenceNetと、キャラクターの動きを制御するポーズガイダーを利用しています。
character-animationdiffusionpose-guided -
DisCo AIが発見
2023
前景の人物、背景、およびポーズの制御を解きほぐす(ディセンタングルする)ことで、実世界のシナリオにおいて高精度な人物画像および動画の生成を可能にする、汎用的なダンス動画生成フレームワーク。
dance-generationhuman-animationpose-guided -
MagicAnimate AIが発見
2023
拡散モデルを用いて時間的一貫性のある人物画像アニメーションを生成するフレームワーク。新しい外観エンコーダと時間的アテンションを備えたビデオ拡散モデルを活用し、ターゲットの動作シーケンスに従って参照人物をアニメーション化します。
diffusion-modelhuman-animationpose-guided -
MagicDance AIが発見
2023
参照画像のアイデンティティを正確に維持しながら、ポーズと表情を制御して新しい画像を生成する、2D人間のポーズおよび表情リターゲティング用の拡散モデル。
diffusion-modelexpression-retargetingpose-guided

