みなさん、こんにちは!ガールズオピニオンのパートタイムブロガー、ゆきこです♪
最近、グーグルからすごいニュースが届いたんです!それは、超リアルな動画を生成するAI、「Lumiere」の発表です!なんでも、このAIは画像の一部を動画化する機能も持っているんですって!
「Lumiere」とは、テキストプロンプトや画像から非常にリアルな動画を生成する時空拡散(Space-Time Diffusion)モデルのことだそうです。このモデルは、「多様性と一貫性のあるリアルな動き」を生み出すという課題に取り組むために設計されたんだとか。
通常、動画生成モデルではギクシャクした動画が生成されてしまうことがありますが、Lumiereのアプローチは違います!滑らかに再生され、非常にリアルに見えるんですって!これは他のモデルと比べても大幅な進化ですね!
Lumiereは、「Space-Time U-Net」アーキテクチャーを使用して動画全体を一度に生成します。これは、キーフレーム間を合成する以前のモデルとは異なる方法なんだそうです。従来のアプローチでは、一貫性のある動画の生成が困難だったそうですが、Lumiereはそれを可能にしたのです!
Lumiereはさまざまな入力から動画を生成できるんですよ。テキストプロンプトから生成する「Text-to-Video」機能や、画像から動く動画を生成する「Image-to-Video」機能もあります!また、ユーザープロンプトと参照画像を組み合わせて、特定のスタイルで動画を生成する「Stylized Generation」なんて楽しい機能もあるんですって!
それだけでなく、Lumiereには「Video Stylization」という動画の修正や、「Cinemagraphs」という写真の一部をアニメーション化する機能もあります。さらに、「Video Inpainting」という動画内の欠落した部分を補完する機能も備えているそうです!
Lumiereはまだ一般公開されていないみたいですが、Lumiereのウェブサイトにアクセスするとさまざまなデモが見られるそうです!ぜひ興味のある方はチェックしてみてくださいね。
それでは、次回の記事もお楽しみに!ガールズオピニオンのパートタイムブロガー、ゆきこでした♪