テキストから動画を生成するAI(人工知能)です

スクリプトを貼り付けると、ビジュアルとナレーション、キャプションが付いたMP4が返ってきます。言葉のリズムに合わせてカットします。

タイムラインやストックライブラリ、書き出しの手順は不要です。スクリプトがインプットで、完成動画がアウトプットになります。

ClipPilotで作られた動画

ナレーションとキャプション付きの、AI(人工知能)による縦型動画です
ClipPilotで作成したファンタジーベッドの動画です
テキストスクリプトから生成したAI(人工知能)のYouTube Shortです
ビフォーアフターの部屋リノベ動画です

使い方

  1. 1

    スクリプトを貼り付ける

    そのまま単語ごとにナレーションになります。あるいはワンラインのアイデアを渡してスクリプトを作成してもらうこともできます。

  2. 2

    静止画かアニメーションか選ぶ

    言葉が主役のスクリプトなら静止画を、視覚が主目的なら生成された動画クリップを選んでください。

  3. 3

    音声、スタイル、フォーマットを設定

    36の音声、10のビジュアルスタイル、キャプションのスタイルと色、アスペクト比と画質を設定できます。

  4. 4

    レンダーしてダウンロードしてください

    キャプションが同期されたMP4で、ウォーターマークはありません。シーンを見逃していた場合でも後で編集できます。

スクリプトを貼ってからの流れ

スクリプトは一度読まれ、自然な切れ目でシーンに分割されます。ペーシングによりますが、おおむね文や節ごとに1シーンです。各シーンには選んだビジュアルスタイルに沿った画像または動画のプロンプトが作成され、全体として統一感のある動画になります。

ナレーションは一度の処理で生成され、各単語のタイミングが返されます。そのタイミングが基準の時計となり、キャプションのハイライトやシーン切替は文字数で推定するのではなくそこから導出されます。だからカットが文の区切りで終わり、ビートが遅れてしまうことがないのです。

ビジュアルは各シーンごとに生成され、選んだトランジションやBGM(背景音楽)の設定で合成されてレンダリングされます。ほとんどの動画は2〜5分で完了します。

レンダリングに適したスクリプトの書き方

短く断定的な文はシーンの区切りが明確になります。複数の節を含む長文は、画面に長く留まりながら多くの説明が流れるため、テンポが遅く感じられがちです。

具体的な名詞は画像生成にとって扱いやすい材料になります。特定の場所にある具体的な物についての文は、抽象的な表現よりもはるかに良くレンダリングされます。なぜならそのシーン用に書かれるプロンプトに描写できる対象がはっきりするからです。

スクリプト内に演出メモを入れるのは避けてください。あなたが書いたものはすべてナレーションとして読み上げられます。ショットの見た目に関する自分用の注も読み上げられてしまいます。

静止画か生成された動画クリップか

画像出力は各シーンごとに静止画を生成し、カメラをゆっくり動かします。安価で、約1分あたり100クレジット残高で、言葉が動画を引っ張るナレーション主導のスクリプトに最適なデフォルトです。

アニメーション動画は各シーンごとに実際の動画クリップを生成し、動きとネイティブ音声を含みます。HDでは1秒あたり35クレジット残高なので、1分で2,100クレジット残高になり、視覚が見る理由になっている場合に価値があります。

アニメーション動画は最大1,200文字のスクリプトを受け付けます。画像動画はかなり長いスクリプトに対応できます。

音声とキャプション

プレビュー付きの音声が36種類あります。どれを選んでもその音声は動画と一緒に保存されるので、後で再コンパイルしても現在のデフォルトではなく元の音声のまま聞こえます。

キャプションは単語ごとに同期され、2種類のスタイルとハイライト色を選べます。キャプションにはナレーションが必要です。ナレーションがなければ同期するものがないためです。ナレーションなしの動画も生成できます。その場合はタイミングはあなたが設定したシーンの長さから決まります。

後で変更したくなったら

エディターでナレーションを書き直して再コンパイルできます。文が変わると、ナレーションとキャプションは揃って再生成され、一回で整合した処理が行われます。シーン境界は新しい音声に合わせて再マップされるので、ズレが生じません。

文が変わらなかった場合は既存の音声とキャプションを再利用し、レンダー代だけを支払います。単一シーンのビジュアルを再生成する場合も同様で、そのシーン分のコストだけです。

フォーマットと出力

画像動画は9:16、16:9、1:1、4:5でレンダリングされます。アニメーション動画は9:16、16:9、1:1で、Standard 480p、HD 720p、Full HD 1080pの品質が選べます。

出力はどのプランでもウォーターマークのない通常のMP4で、商用利用の権利はすべてあなたにあります。

料金

プランは月額$19からで3,000クレジットが含まれます。1分の画像動画は約100クレジットです。アニメーション動画は完成動画の1秒あたりで課金され、HDでは1秒につき35クレジットです。

どのプランでも透かしはなく、生成したものの商用権利はすべてお客様に帰属します。

よくある質問

スクリプトはどれくらい長くできますか?

アニメーション動画はナレーション最大1,200文字まで受け付けます。これはおよそ75秒のスピーチに相当します。画像動画はより長いスクリプトに対応し、その長さはナレーションに従います。スクリプトの代わりにアイデアを入力する場合は、その欄は500文字までです。

どの言語に対応していますか?

音声カタログは英語です。基盤となる音声モデルは他言語にもある程度対応しますが、こちらで提供・テストしているのは英語の音声のみなので、現時点では他言語は公式にはサポートされていないとお考えください。

ナレーションなしで動画を生成できますか?

はい。アニメーション動画はクリップの元音声だけでナレーションなしに実行できます。バイラルテンプレートはその方法で動作しています。その場合は同期するスピーチがないためキャプションはオフになります。

出力は通常のビデオファイルですか?

はい。標準的なMP4で、どこでもダウンロードして使用できます。どのプランでも透かしはなく、商用利用権も完全に付与されます。

ビジュアルスタイルは選べますか?

はい。10種類から選べます:フォトリアル、カートゥーン、コミック、アニメ、ソフトイラスト、クレイアニメ、不気味、サイバーパンク、ビンテージ、フラットなモダングラフィック。スタイルは各シーンに適用され動画に保存されるので、後で1つのシーンを再生成しても他のシーンとマッチします。

試すべきフォーマット

まずは1本作ってみましょう