オンラインAIモーション転送

AIモーション転送は、参照動画の動きを静止画内のキャラクターに適用するオンラインツールです。 参照クリップが動作、テンポ、ポーズ、ジェスチャーを定義し、アップロードした画像が結果に登場する人物やキャラクターを定義します。その後、選択した動きに従うキャラクターの新しい動画が生成されます。

このワークフローは、モーション転送AI、AIモーションコントロール、動画モーション転送とも呼ばれます。一般的な画像から動画への生成とは異なり、動き全体をモデルに創作させる必要はありません。参照クリップを通じて希望する動作を指定できるため、プロンプトを書いたりキャラクターを手動でリギングしたりせずに、より明確な動きの方向性を出力に与えられます。

AIモーション転送の仕組み

このツールでは、2つのアップロードを異なる目的で使用します。動画が動きを導き、画像がキャラクターを定義します。

• 参照動画によるモーションガイダンス: システムは、参照クリップ内の目に見えるポーズの変化、ジェスチャー、動きのタイミング、動作の軌跡を読み取ります。その連続した動きを生成動画のガイドとして使用するため、プロンプトだけのアニメーションよりも、ダンス、ターン、エクササイズ、演技のパフォーマンスを元の動きに近づけられます。

• キャラクターを考慮した動画生成: アップロードした画像から、キャラクターの顔、服装、体型、ビジュアルスタイルを取得します。生成ツールは参照動作に従いながら、そのキャラクターを中心に動くシーンを再構築します。被写体が明瞭で構図の相性が良いほど、動き全体を通して認識可能なキャラクターの細部を維持しやすくなります。

• 明瞭なキャラクターを1人使用する。 1人の人物またはキャラクターだけが見える画像を選びます。混雑した場面、重なった被写体、身体が大きく隠れている画像では、どの被写体が動きに従うべきかを特定しにくくなります。

• 画像と動画の構図を合わせる。 全身の動作クリップには全身のキャラクター画像を、上半身のパフォーマンスには上半身の画像を組み合わせます。構図が似ていると、動きに必要な身体の情報を十分に確保できます。

• 安定して明るく撮影された参照動画を選ぶ。 メインの被写体が見え続け、動作を追いやすい映像を使用します。強い影、激しい手ブレ、モーションブラーは重要なポーズの変化を隠す可能性があります。

• 急なカットや複数のパフォーマーを避ける。 1人の被写体による連続した動きは、編集されたモンタージュ、混雑したダンス、数秒ごとにアングルが切り替わるクリップよりも転送しやすくなります。

• 把握しやすい1つの動作から始める。 1つのダンスシーケンス、ジェスチャー、エクササイズ、ターンに焦点を当てた短いクリップは、関係のない動きが複数含まれる長い動画よりも評価や調整が簡単です。

明瞭な被写体、適切な構図、把握しやすい動きにより、AIモーションコントロールが従う参照情報をより強固にできます。

キャラクターに従わせたい動きがすでにある場合はAIモーション転送を選びます。画像をどのように動かすかをモデルに決めさせたい場合は、画像から動画への変換を選びます。