進行中(個人研究 / Solo)Spatio-Temporal Wave Function
Spatio-Temporal Wave Function
Collapse for Topology-Preserving
Pixel Art Animation Refinement
ピクセルアート・アニメの時間的一貫性を、制約充足で事後補正する
✦ 研究概要 (TL;DR)
生成AIが作るピクセルアート・アニメは、フレーム間でピクセルが明滅し、輪郭がドリフトし、キャラクター部位の接続(トポロジー)が破綻するなど時間的非一貫性に悩まされ、そのままでは制作現場で使えない。ピクセルアートの離散構造を活かし、フレーム間の不整合を制約充足問題として解く事後補正フレームワークを提案する。
01 課題
Problem
生成AIが作るピクセルアート・アニメは、時間的な非一貫性のために制作現場でそのまま使えません。
- フレーム間でピクセルが明滅する
- 輪郭がフレームごとにドリフトする
- キャラクター部位の接続(トポロジー)が破綻する
02 提案手法
Approach
ピクセルアートの離散構造を活かし、フレーム間の不整合を制約充足問題として解く事後補正フレームワークを提案します。
- アニメをX×Y×Tの三次元離散格子として再定式化
- Wave Function Collapse をベースに「時空隣接制約」を導入
- 追加学習なし・汎用ハードウェア上で数秒オーダーの事後補正
03 検証予定
Planned Evaluation
歩行アニメーションのスプライトを対象に、光学フロー系・拡散ベース手法をベースラインとして、Warp Error・LPIPS・ピクセルアート実務者による主観評価で比較検証する予定です。
ご質問や共同研究のご相談など、お気軽にご連絡ください。