AIが映像制作の未来を変える!アドビのビデオ製品ロードマップとCreative Cloud最新アップデート Vol.05 [Adobe Day]

Adobe Creative Cloudの最新アップデート情報総括

国際放送機器展「Inter BEE 2023」において、アドビの製品・サービスやテクノロジーの最新情報を紹介するイベント「Adobe Day」が開催された。当日は5つのセッションが行われ、そのトップバッターではAdobe Creative Cloudの最新アップデート情報とAIによって変わる映像制作の将来像についてのセッションが行われた。

すぐに利用できる便利なサービスや機能も紹介された。

アドビのこれまでとこれから

セッション冒頭では、アドビの「過去」をざっくりと振り返った。これまでアドビは映像製品Premiere ProとAfter Effectsを中心に、ワークフローを効率化するためのチューニングや新しい機能、共同編集がやりやすくなるフォーマットなどを提供してきた。

そして現在では高速化・安定化を図りつつ、AIによるさらなる効率化や機能強化を実施。加えて映像制作に関わる3D領域においても、連携できる機能拡張も行っている。

そして今回はその「現在地点」と「これから」について、以下の4項目が紹介された。

  • Premiere Pro最新アップデート
  • After Effects最新アップデート
  • コラボレーションツール「Frame.io」による効率化
  • アドビの生成AI「Firefly」の未来

最新アップデートを紹介する前に、映像製品のアップデートに際して、アメリカ本社からは以下のトピックが発表されている。

  • 1,000人以上の映像編集者のご意見を開発チームがヒアリング
  • ユーザーの要望が多かった20以上の機能を実現
  • Premiere ProとFrame.ioが6つのアワードを受賞

2023年の映像作品に目を向けると、アカデミー賞で最多7部門を受賞した映画「エブリシング・エブリウェア・オール・アット・ワンス」では、Adobe Creative Cloudはもちろん、この記事の後半でご紹介するFrame.ioが使用され、アドビ製品がフル活用された。

また、アメリカで行われている映画監督の登竜門「サンダンス映画祭」においても、アドビ製品で編集するムービーメーカーが過半数を超えているという状況がレポートされていた。

そして、Premiere Proのベーシックな部分のアップデートも続いている。高速化については前バージョンと比べて5倍を実現。普段からよく使うトリミングやスクロール、ズームなど、タイムライン上で行う様々なアクションの動きがとてもスムーズになっている。内部コードの最適化と近代化を行うなど、信頼性の向上も図られたという。

Premiere ProとAfter Effectsの最新アップデート情報

同セッション前日に行われた「Adobe MAX Japan 2023」で発表されたばかりの新機能も紹介された。Premiere Proの新機能は3点、After Effectsの新機能は2点が追加されている。

Premiere Pro新機能1:スピーチを強調(Beta版)

録音状況が悪い会話のノイズ除去機能をベータ版で提供している。これまで音調整はかなり面倒な作業が必要だが、Premiere ProがAIを搭載したことで、ワンタッチでオーディオを解析して会話部分をプロスタジオ並みの音質に向上させることができるようになった。

ワークスペースのパネル「オーディオ」の「エッセンシャルサウンド」、この中に「スピーチを強調」というメニューが今回追加されている。このメニューをチェックして「拡張」を押すだけで音質が大幅に改善する。

セッション内で紹介された映像では、環境音が多く載っているサンプルを使って、埋もれてしまっている人の声を聞きやすくするデモが行われた。この「スピーチを強調」の設定値は調整できるので、環境音を演出的に残しておくことも可能。数値を最大にした場合には、ほとんど一切の背景音を排除することができたという。

また、古いマラソンのデモ映像では、応援する人々の声とナレーターの声をしっかり識別している様子を紹介。これまで手間のかかっていた音の調整が、AIの判別によって非常に高い精度で処理できるようになっている。

Premiere Pro新機能2:文字起こしベースの編集機能

Premiere Proではスピーチ音声を文字で起こすという機能が搭載されていたが、それがさらに進化して起こした文字による編集機能が搭載された。例えば文字を削除すると映像がカットされたり、コピー&ペーストすると映像もコピー&ペーストできるなど、文字ベースの操作が映像にも反映されるというワープロ感覚で編集が行える機能だ。この機能はハリウッドの業界団体、HPA(ハリウッド・プロフェッショナル・アソシエーション)アワード2023で技術賞を受賞している。

Inter BEEのセッションではデモ映像も流された。デモの中で、出演者の声にリンクした文字は再生中ハイライトで表示されている。そして動画の一部をカットしたいときには、文字起こしされたパネルを見ながら不要部分の文字を選択。このときタイムライン上では、選択した文字にリンクしたイン/アウトが自動選択され、文字を削除することでこの自動選択された動画部分も自動でカットされる仕組みだ。

まさにワープロと同じような感覚で操作が可能で、音を聞いて行っている作業が文字ベースで行えるようになり、目視によるラフ編集が簡単に行えるようになった。

Premiere Pro新機能3:「言い淀み」フィラーワード検出

文字起こしベースの編集でもっとも要望が多かった機能が追加された。話している言葉の中に出てくる「あのー」や「えー」などの「言い淀み(フィラーワード)」の検出機能だ。とくに昨今のトレンドとも言えるテンポ感の速い映像に編集したい時には、言い淀みや息継ぎの部分をつまんで短くする場合が多いことから、使用頻度が高くなる機能と考えられる。

文字起こしパネルのソートのアイコンから「語間」を選ぶと、該当するフィラーワードがオレンジや赤の表示で自動選択される。このフィラーワードを選択する度合いは、語間の秒数で調整が可能。そして削除のボタンを押すと一括で削除され、タイムライン上でも同期していた選択箇所がすべてリップル処理される。

After Effects新機能1:AI搭載進化したロトブラシ

「ロトスコープ」のための"ロトブラシ"が進化した。今まではざっくりとした選択でかなり高い精度の切り抜きが行えたが、さらにAIによってこれまで苦手としていた人の動作の重なりや髪の毛の細かい部分の切り抜きにおいて精度が向上。透明度のあるエレメントなど、高難度なロトスコーピングも改善している。

セッション中のデモでは、旧バージョンと比較し、新バージョンでは人が髪を梳かす動作でしっかり輪郭を認識して切り抜いているところを見せていた。

After Effects新機能2:モーショングラフィックス作成「True 3Dワークスペース」

今までAfter Effectsでは、3Dデータはあくまで仮想3Dのような状態で読み込んでいたが、今回は3Dデータを真の3Dとして読み込んだ上で動きなどを付けることができるようになった。

デモではボトル形状のプロダクトを読み込んだデータを使用し、立体的なモーションを付けるところを紹介した。動きだけでなく、光源もHDRIデータを参照することが可能。ライトオプションのソースを変えることで、After Effectsのデータ上で3Dワークスペースの優位性を持ったまま質感表現の調整を行うことができる。

3Dに関しては、After Effectsとの連携も可能なアドビの3D制作ソフト「Substance 3D」をVol.01でも取り上げている。

また、無料の「Adobe Substance 3D Assets」をCreative Cloudのライブラリー経由で提供している。完成された3Dのオブジェクトデータを無料で使用できる。

Adobe Stockに映像テンプレートを追加

映像製品の最新アップグレード情報に付け加えて、実制作の中で役立つトピックも紹介した。Adobe Stockでは扱う映像テンプレートの形式を追加。従来のモーショングラフィックスの形式(MOGRTs)に加えて、今回初めてPremiere ProとAfter Effectsのプロジェクト形式(.prproj、.aep)のテンプレートをリリース。現在、約370種類のラインナップだが、今後数年で10倍以上に増やしていく予定だという。

長編エピソードのワークフローガイド

これまでテレビおよび映画編集者向けに、長編やエピソード編集のためのガイドブック「ポストプロダクション編集のベストプラクティスとワークフローガイド」を英語版でリリースしていたが、2023年から日本語版の提供が始まった。

無料で一般公開しており、編集におけるハードウェアの設定やマルチカメラ編集、連携ソフトとのターンオーバーに至るまで、事細かい設定項目や実際のユースケースを紹介している。

セッションの後半では、さらに今後の拡張や強化を予定している新しいサービスを2つ紹介。1つ目が新しいクラウドコラボレーションツール「Frame.io」。そしてもう1つがクリエイティビティの進化と題しまして、生成AI「Adobe Firefly」を紹介した。

クラウドコラボレーションツール「Frame.io」

Frame.ioは021年にアドビのファミリーに加わった製品で、日本では今年から本格的にエンタープライズ向けにも提供が始まった。Frame.ioは映像制作におけるコラボレーションを全て詰め込んだ一元管理ツールだ。

Adobe Premiere ProとAfter Effectsに直接統合されており、Premiere Proから動画をアップロードしたり、素材を取り込むことが可能。Frame.ioを通じて共同作業を効率化することで、レビューや素材のやりとり、ファイル管理の作業時間を合計31%短縮できるという評価のほか、クライアント企業の満足度も36%向上したというデータも出ている。

クリエイティブツールとシームレスな連携

現在すでに他社のツールとの連携も始まっている。Adobe Premiere ProとAfter Effectsの他に、Apple Final Cut Pro、DaVinci Resolveで利用できる。これらの編集ソフトで作った動画を誰かにプレビューしてもらう時には、これまで書き出しの際に必要だったデスクトップへのファイル書き出しとストレージへのアップロードというプロセスは必要なくなり、Frame.ioの特定のディレクトリに直接書き出し(=同時にアップロード)が可能。大幅に時間を節約できるという。

セッションのデモではブラウザ上のFrame.ioの画面で、実際にレビューするときの操作方法などが披露された。レビューするメンバーはそれぞれのアカウントでログインし、任意のタイムコードの箇所を指定してコメントを入れることができる。またコメントだけではなく手書きの矢印などを書き込むことも可能。

これまでのプレビューにありがちだった、紙に書き込んだりスクリーンショットを撮ってPDFにまとめたりする煩雑なプロセスを省略できる。

直接統合されている編集ソフト(Apple Final Cut Pro、DaVinci Resolveなど)では「Frame.io」というパネルが表示され、即座にコメントやレビュー内容を確認できる。表示されたタイムコードを選択すると、シーケンス上の該当箇所にワンタッチで移動できるので、指定する秒数を間違えて修正箇所がわからないようなミスも防ぐことができる。

編集ソフトの中で確認しながら作業できるこのシステムは、編集者には待ちに待った機能だと言える。

iOSアプリも提供

Frame.ioはiOSのアプリでも提供している。非常に動作も滑らかで、ブラウザ上のFrame.ioとほぼ同じことがアプリでもできるので、外出中のディレクターやプロデューサー、クライアント、エグゼクティブの方などにレビューをお願いすることも容易になる。

セキュリティもレベルの高い機能を提供。エンタープライズ版ではウォーターマークはもちろん、特徴的な部分としては画面上に名前・日付・IPアドレスの情報を透かしで焼き込むこともできるので、万が一の漏えいや事故が起こってしまった場合にも、原因特定を即座に行うことができる。

まったく新しいワークフロー「Camera to Cloud」

クラウドプロダクションというワードに相応しい新技術「Camera to Cloud(C2C)」も紹介された。

撮影素材を即座に共有する機能で、C2Cに対応したカメラをネットワークに接続して撮影すると、RECが終わった瞬間に収録したデータがFrame.ioのデータベースにアップロードされ、エディターが即座にアクセスできる仕組み。

ワークフローの例としては、ハイレゾリューションとプロキシの動画データが同時に作成されるので、プロキシをFrame.ioのサーバーに撮影と同時にアップロード。編集者はそのプロキシでオフライン編集を行いつつ、同時にクライアント側も同じプロキシを使ってデータチェックが可能になる。フィニッシングの段階でPremiere Proの「ReLink(再リンク機能)」の機能を使ってプロキシとハイレゾリューションのデータを差し替えることで、即座に完パケに至るといったワークフローが実現できる。

このワークフローの実例は、同じInter BEE 2023のセッションで紹介された。Vol.04で詳しく記事にしている。なお、Frame.ioは以下の画像にある各種カメラ機材および周辺機器にすでに対応している。今後もパートナーを増やしていく予定だとしている。

世界中の全てのクリエイターに力を

「Frame.io」は映像だけではなく全てのクリエイターをエンパワーできるように対応する形式を拡張している。すでにその第1弾としてグラフィックが対応。スチール写真のRAW画像データのほか、Photoshop、Illustrator、InDesignのファイルにも対応している。そのデータをアップロードすると前述した映像の場合と同じようにレビューをコメントしたり、手書き入力をすることができる。PDFにも対応しており、映像に関わるあらゆる素材をこの中でコラボレーションすることも可能だ。

さらにスチールについては「Capture One」というファイル転送・画像編集ソフトもインテグレーションされている。フォトグラファーと現場を共にする制作では、Frame.ioの中で制作物を一元管理してみんなでコラボレーションできる。

Creative Cloudユーザー向け無償プラン

Frame.ioはCreative Cloudユーザー向けの無償プランを提供している。Creative CloudのコンプリートプランもしくはPremiere Pro/After Effectsの利用社は、一部機能の制限はあるが、100GBストレージが付いたFrame.ioを試せる。

そしてこのセッション最後の話題は生成AI「Firefly」についてだった。2023年のビッグニュースであった生成AIは、ChatGPTやStable Diffusionしかり、AIによるクリエイティブ制作は大きな社会問題にもなっている。

アドビのスタンスとして「生成AIはテクノロジーの次の変革の波を導いているのは間違いない」と捉えているが、アドビの会長兼CEOであるシャンタヌ・ナラヤン氏は「生成AIは人々の仕事を奪うものではなくて、人々の能力を拡張していくための副操縦士であるべきだ」と表現している。

それを踏まえた上で、Fireflyがほかの製品と差別化できるポイントが4つ紹介された。

1.安全な商用利用のための設計

FireflyではアドビのストックフォトサービスであるAdobe Stockで許諾の取れた画像やオープンライセンス画像、パブリックドメイン画像など一般的に使われても問題がないものだけを学習素材として使用。商用利用することを前提に許諾がとれたデータのみを使用。

2.アドビツールに密接に統合

Creative Cloud、Document Cloud、Experience Cloudなどに含まれるアプリを横断して搭載する構想のため、既存のワークフローを崩さずに拡張可能。

現在は、

  • ウェブブラウザ
  • PhotoshopやIllustratorなどのCreative Cloudのアプリケーション内
  • Adobe Express
  • Adobe Stock

などからFireflyの機能を利用できる(2023年11月17日時点)。

3.企業向けのサービス設計

企業が持つアセットに沿って、モデルをカスタマイズする方法の提供も計画している。

4.コンテンツ認証情報のサポート

クリエイターがコンテンツに帰属情報を添付することを可能にし、来歴によって情報の真正性と透明性を担保する仕組みもアドビが牽引して取り組んでいる。

Fireflyの概要とAIにまつわるアドビの取り組み、そしてFireflyのクリエイター事例については、同じInter BEE 2023の別のセッションでも紹介された。こちらはVol.03で詳しく説明している。

Fireflyの進化と映像製品への期待

セッションでは代表的な機能の紹介として、Photoshopにおける「生成塗りつぶし」が紹介されたほか、発表されたばかりのベクターデータによる出力モデルも紹介された。

Illustratorに「テキストからベクター生成」が搭載され、すでに利用が可能だ。そしていよいよ映像製品での対応に期待が高まるが、現時点では映像についてのコンセプトムービーが発表されている。

セッションでも上映されたこのムービーでは、プロンプトの指示によって映像編集の色味の調整や音の調整を行ったり、Bロールやテロップの提案、ストーリーボードを脚本から提案するといった機能を見ることができる。またAdobe MAX Japanでは研究開発途中の最新デモの中で、映像における「生成塗りつぶし」も発表されている。

このセッションでは過去・現在・未来へと進化し続けるアドビ製品が紹介された。最後に触れた映像製品における生成AIの機能など、今後も注目のアップデートが続いていくという。

▶︎Adobe Premiere Pro

© 株式会社プロニュース