4大AI動画ツールが「対決」、一文で遊び方を教えます

2023.12.14

共有先

TechFlow厳選深潮セレクト

4大AI動画ツールが「対決」、一文で遊び方を教えます

最適なAIツールを1つ選んでください。

2023.12.14 - 03:41:03

Web3業界の深掘り報道に専念し潮流を洞察

最適なAIツールを1つ選んでください。

執筆：木沐

AI動画ツールの競争はますます激しくなっており、次々とアップグレードが行われています。特にGen-2、Pika1.0、Stable Video Diffusion、Magic Animateは、ユーザーにとって最もよく使われる動画生成製品になりつつあり、それらの裏には強力なAI大規模モデルが支えています。

現時点では、動画生成向けの大規模AIモデルは「文章で物語を記述すれば映画が作れる」というレベルまでは達していませんが、一連のプロンプトによって生き生きとした動画を作成できるようになっており、画像から動画を生成するといった強力なマルチモーダル機能も発展しています。

『メタバースデイリー』は主要な4つのAI動画ツールをテストし、読者がすぐに体験できるようサポートします。なお、すべてのツールでプロンプト入力は英語を使用することをおすすめします。日本語よりも英語の方が生成結果が良好です。ここに、中国国内のAI動画生成ツールも早く追いつき、中国語ユーザーに適した優れた製品を開発することを期待しています。

Runway Gen-2

Gen-2は、Runway Researchが開発した最初の一般利用可能なテキストから動画を生成するツールです。テキスト・画像からの動画生成、動画スタイル変換、画像拡張、背景自動除去、特定要素の削除、カスタムAIモデルのトレーニングなど、多彩な機能を備えており、現在最も強力なAI動画生成・編集ツールと言えるでしょう。

Gen-2のテキスト-to-動画機能はGen-1に比べて大幅に向上しており、「raccoon play snow ball fight in sunny snow Christmas playground」（晴れた雪の降るクリスマス遊園地でアライグマが雪合戦をする）というプロンプトでの生成結果を見ても、画質や構図の面で非常に優れています。ただし、「クリスマス」や「雪合戦」といったキーワードが反映されていない場合もあり、一部のキーワードが欠落することがあります。

つい先日、Runwayは新機能「Motion Brush」（モーションブラシ）をリリースしました。画像の一部をブラシで塗ることで、静止画像を動的に変化させることができます。この「モーションブラシ」機能は操作性が非常に高く、画像を選択し、動かしたい部分をブラシで塗り、おおよその動きの方向を調整するだけで、静止画像が指定通りに動くようになります。

ただ、現時点では「モーションブラシ」にはいくつかの制限があります。たとえば、ゆっくりとした動きには適していますが、車が高速で走行するような急激な動きは生成できません。また、ブラシで塗った領域以外はほぼ静止したままとなり、複数の物体の動きを個別に調整することは難しいです。

現在、Runwayの無料アカウントでは最大4秒の動画しか生成できず、1秒あたり5ポイントを消費し、最大31本まで生成可能です。ただし、透かし（ウォーターマーク）は除去できません。高解像度で透かしなし、より長い動画を生成したい場合は、有料プランへのアップグレードが必要です。

また、AI動画制作を学びたい方は、Runwayが提供する「Runway TV」というテレビチャンネルも試してみてください。これは24時間AIで作成された動画をループ再生するサービスで、これらのAI動画からクリエイティブのインスピレーションを得られるかもしれません。

サイトリンク：https://app.runwayml.com/video-tools/teams/wuxiaohui557/ai-tools/gen-2

Pika 1.0

Pika 1.0は、華人チームが設立したAI技術スタートアップPika Labsがリリースした初の正式版製品です。Pika 1.0は3Dアニメーション、マンガ、カートゥーン、映画風の動画を生成できるだけでなく、スタイル変換、画面の拡張、動画編集といった高度な機能も実現しています。特にアニメ調の画像生成に強く、映画のような効果を持つ短い動画を作成できます。

Pika 1.0で特に人気があるのは、「AI魔法の杖」と呼ばれる部分編集機能です。数ヶ月前まではAIイラスト分野に限定されていたこの機能ですが、今や動画でも対応可能になりました。背景や主体の一部特徴を簡単に修正でき、手順も簡単です。まず動画をアップロードし、Pikaのコンソールで編集したい範囲を選択し、何に置き換えたいかをプロンプトで指示するだけです。

「部分編集」機能に加え、Pika 1.0はMidjourneyのような画像生成ツールが持つ「画像拡張」機能を動画分野に初めて導入しました。TikTokなどで流行した「AI拡張画像」のように不自然ではなく、Pika 1.0の動画拡張は非常に自然で論理的です。

現在、Pika 1.0は無料で体験できますが、試用枠の申請が必要です。まだ待ちリストにある場合は、公式サイトからDiscordログインを試してみてください。Midjourneyと同様に、ユーザーはDiscord上でクラウド創作を行い、テキスト→動画、画像→動画の両機能を体験できます。

Pika 1.0のDiscordサーバーに入ったら、「Generat」内の任意のチャンネルで「/」を入力し、「Create」を選択。ポップアップするプロンプト欄に内容を入力するだけです。

Gen-2と比較すると、Pika 1.0はプロンプト理解能力に優れていますが、画質はまだGen-2に及ばない可能性があります。これはクラウド上での処理によるものと思われます。

画像から動画を作成する場合は、「/」を入力後、「animate」を選択し、画像をアップロードしてプロンプトを入力してください。

Pika 1.0の画像→動画の品質はGen-2と同等です。

サイトリンク：https://pika.art/waitlist

Stable Video Diffusion

11月22日、Stability AIはAI動画生成のオープンソースプロジェクト「Stable Video Diffusion（SVD）」を発表しました。公式ブログによると、新しいSVDはテキストから動画、画像から動画の生成をサポートし、さらに単一視点から多視点へのオブジェクト変換（3D合成）も可能で、生成品質はRunway Gen-2やPika 1.0と同等です。

現在、オンラインで使用できる方法は2つあります。1つは公式がReplicateに公開した試用版demo、もう1つは新たに登場したオンラインウェブサイトで、どちらも無料です。

私たちはパラメータ調整が可能な1つ目の方法をテストしました。操作も比較的簡単で、画像をアップロードし、フレーム数、アスペクト比、全体の動きなどのパラメータを調整するだけで済みます。ただし、生成結果はややランダムであり、理想の出力を得るには繰り返し調整が必要です。

現時点のStable Video Diffusionはあくまで基本モデルであり、製品化はされていません。しかし、公式は「Stable Diffusionのようなエコシステムを構築するためにさらなる拡張を計画している」と明言しており、ユーザーからの安全性と品質に関するフィードバックをもとにモデルを継続的に改善していくとしています。

サイトリンク：試用demo版およびオンライン版‍‍‍‍‍