「MagicAnimate」静止画からキャラが動く動画を生成する | らい氏のブックマーク

らい氏のブックマーク

気になったことを書いているブログです。

窓の杜から1枚の静止画からAIが人やキャラが動く動画を生成する「MagicAnimate」が公開 なんかおもしろそうな話(新技術)なので、調べてみました。

 

 

少し前に「Animate Anyone」というのが話題になっていたのですが、まだリリースされていなくて

 

 

Animate Anyoneという新モデルは、1枚の画像とポーズシーケンス(骨格動画)を入力にして、ポーズシーケンスの動きに応じて画像内のキャラクターを滑らかに動かすモーションアニメーションを生成する。動いた際のなびく服や髪の毛も再現される。

 

 

 

 

 

「TikTok」を運営するByteDanceは、人物やキャラクターの静止画や動画と、モーションシーケンスデータを組み合わせて、動画を生成できる動画生成モデル「MagicAnimate」を発表しました。

 

 

link:MagicAnimate

 

お、記事にしている方がいたので

【TikTokでバズ必須?】MagicAnimateの使い方!走る千手観音がリアルw

 

さっそくMagicAnimateをつかった感想など参考になります。

 

 

 

・MagicAnimateを動かすのに必要なPCのスペック 

 

MagicAnimateは、AIを使ってアニメーションを生成するので、それなりにPCのスペックが必要です。開発者のMrAlexTechは、以下のようなスペックを推奨しています。

  • CPU: Intel Core i7 8700K または AMD Ryzen 7 2700X 以上
  • GPU: NVIDIA GeForce GTX 1070 または AMD Radeon RX Vega 56 以上
  • RAM: 16GB 以上
  • SSD: 256GB 以上

 

MagicAnimate - GitHub

https://github.com/magic-research/magic-animate

 

MaginAnimate - GitHub (Colab)

https://github.com/camenduru/MagicAnimate-colab