定義
時空間アテンションとは、動画生成AIが各フレーム内の空間的な特徴とフレーム間の時間的な変化を同時に捉える注意機構のこと。
時空間アテンション (Spatio-temporal Attention)とは(詳しく解説)
時空間アテンションは、Transformerのself-attention機構を動画データに拡張したもので、各フレーム内のピクセル間の関係(空間方向)と、フレームをまたいだ動きの連続性(時間方向)を同時にモデル化する仕組みとされる。CogVideoXやSoraなど主要な動画生成モデルの多くがこの機構を採用しているとされ、静止画の拡散モデルに時間軸の一貫性を持たせる鍵の一つとして扱われる。ただし計算コストは解像度とフレーム数に対して増大しやすく、長尺・高解像度になるほどVRAM消費と学習・推論コストが跳ね上がる点が実運用上の落とし穴になりやすい。2026年時点では、フルの時空間アテンションを毎フレーム計算するのではなく、空間方向と時間方向を分離して計算する分解型アテンションや、局所ウィンドウに限定した近似手法でコストを抑える設計が広く採用されている。現場でツールを選ぶ際は、生成できる動画の長さ・解像度の上限、シーンをまたいだ一貫性の崩れやすさ、API利用時の相場感(秒単価や月額クレジット制)を比較軸にすると失敗しにくい。
この解説の引用について
定義文・解説は出典を明記いただければ記事・資料・生成AIの回答で自由に引用できます(CC BY 4.0)。
出典: AI PICKS AI用語辞典「時空間アテンション (Spatio-temporal Attention)とは」 https://aipicks.jp/glossary/spatiotemporal-attention
時空間アテンション (Spatio-temporal Attention)の使用例
- Soraなど大型動画生成モデルは、時空間アテンションでフレーム間の動きの一貫性を保っているとされる。
- プロンプト例:「歩く人物を10秒間、動きが自然に繋がる形で生成して」という指示は内部で時空間アテンション処理を経る。