フレーム抽出と動画理解

マウスを動画画面上に乗せると、下辺にコントロールバーが浮き出ます。いちばん右のボタンがフレームの切り出しです。ツールバーの抽出ドロップダウンの末尾にも同じ入口（フレーム切り出し）があり、切り出し方も同じ3つです。

カメラを押すと現在のフレーム、ホバーで開く3つ：

• 現在のフレームを切り出し — 現在再生中の場所。あらかじめシークバーを目的の位置まで動かしておきます。
• 先頭フレームを切り出し — クリップの最初のフレーム。
• 末尾フレームを切り出し — 最後のフレーム。

切り出された画面は、元のノードの右側に画像ノードとして落ちます。それ以降は普通の画像です。編集もできますし、参照画像として使えますし、先に続けて接続することもできます（第3章 を参照）。

よくある使い方は、末尾フレームを次のクリップの先頭フレームにすることです。そうすると、2本がスムーズに繋がります。

ツールバーの抽出にある解析はもう1つの機能です。クリップ全体をモデルに渡し、そのクリップの絵コンテスクリプトを書かせます —— 各ショットが何秒続くか、何が映っているか、どうカメラが動くか。

押すと右側に下書きスクリプトノードが落ち、選択状態になります。すぐ下に読み取り専用の入力バーが浮き出ます。プロンプトはシステムが与えるもので（ボックス内の「動画からスクリプトを生成」は説明文に過ぎません）、あなたが選ぶのはモデルです —— デフォルトはDoubao Seed 2.0 Lite オムニ（音声付き）で、セリフと BGM も聞き取れます。もう1つはDoubao Seed 2.1 Pro Visionで、映像はより強力ですが音は聞こえません。送信を押して初めて本当に解析が始まります：このステップはサンプリングしたフレーム数に応じて課金されるため、こちらから勝手には実行しません（クリップの長さに応じてフレームをサンプリングするため、消費予定クレジットは表示されません）。出力されたスクリプトは、絵コンテ画像、動画、ナレーションを一組でそのまま展開できます。詳しくは第6章 を参照。

その隣のフィルム分析も同じ系統の別の産出形態です。スクリプトを書く代わりに、クリップをショット / モーション / 音楽 / スクリプトの4組の参考に分解し、右側に配置します。押すとまず下書きのフィルム分析ノードが落ち、カードでどの分析項目にチェックを入れてから、分析を開始を押します —— その節は 4.8 です。

誰かの作品を研究したり、参考に撮りたいときに、この2つは最も手間が省けます。まず構造を取り出し、それを自分用に改変していきます。

同じ抽出ドロップダウンには、さらに2つあります。深度キャプチャとスマート切り抜きです。どちらも、ローカルマシン上でモデルを1フレームずつ実行します。クレジットは消費せず、元のクリップも変更しません。解像度（480P / 720P）を選ぶと、右側に動画ノードが落ち、産出物を受け取ります。

• 深度キャプチャ — グレースケールの深度映像を出力します。カメラに近いほど明るく、遠いほど暗くなります。次の生成に参考素材として接続すれば、カメラワークや人物の動き、空間関係だけを切り離して使え、元の映像の細部が結果に混入するのを抑えられます。初回使用時は約45MBのモデルをダウンロードする必要があります。
• スマート切り抜き — 映像の中のアニメ主体を背景から切り抜き、アルファチャンネル付きのクリップとして出力するので、そのまま別の画面に重ねられます。アニメキャラクター向けのセグメンテーションモデルのため、明確な主体がない場合は切り抜けません。初回使用時は約176MBのモデルをダウンロードする必要があります。