AI とクラウドが映画やテレビの制作の境界をどのように消し去っているか

人工知能とクラウド コンピューティングについての会話が最近、希薄な技術者や投資家の間だけでなく、いたるところで行われているように思われる場合、それは本当です。 そして、エンターテインメント ビジネスほどそれが当てはまる場所はありません。そこでは、クリエイティブ クラスとビジネス クラスの両方が、自分たちが何年にもわたって磨き上げてきた技術にどのような影響を与える可能性があるかを懸念し、テクノロジーの民主化の力に興奮しています。

最近のサンダンス映画祭で、映画やテレビの制作プロセスを変革する新しい AI と cloud-to-camera 機能を使用している多数の監督、編集者、および Adob​​e の幹部と話をしました。創造性を可能にする他のツール。

今は急速に進化している注目すべき時期であり、ポジティブな予測とネガティブな予測の両方で息をのむような予測が行われていますが、XNUMX 世紀以上にわたって映画やテレビ (単にビデオベースと呼びましょう) が作成されてきた方法を作り直す絶好の機会もいくつかあります。

業界の受け入れはまだ始まったばかりです。 コムキャストCMCSA
、たとえば、受け取ったばかり AI を使用してスポーツ ビデオのハイライトを迅速に生成した技術エミー賞.

AI テクノロジーが業界の専門的なコーナーにさえ出現しているため、スターとその代表者も気づいています。

例えば芸能事務所 CAA は Metaphysic と戦略的パートナーシップを結び、 「老化防止」ツールを提供しています ここでは、 グラフィックノベルに基づくミラマックス機能. スターのトム・ハンクスとロビン・ライトは、昔の青春時代から何年にもわたって年を重ねていくキャラクターを一つの部屋で演じます。

エージェンシーにとって、このようなテクノロジーの魅力は明らかです。彼らの最大のスター/クライアントは、何十年もの間、より多くの役割で突然実行可能になります.

新技術のブレーシングの可能性

しかし、ビデオベースのプロジェクトを作成するという複雑な作業に携わる編集者、監督、その他の人々にとって、日々の可能性は活気づいています。 インディーズやドキュメンタリーのプロジェクトがサンダンス映画祭のスケジュールを埋め尽くす新進気鋭の作家たちとの会話の中で、Premiere Pro を高速なコラボレーション プラットフォームとして見ていることは明らかです。

AdobeのADBE
プロ向けビデオのプロダクト マーケティング ディレクターであるミーガン キーンは、AI について次のように述べています。 私たちは、未来はすべての人にあると考えています。」

それによって彼女は、一部の人が恐れているように、AI が人間の創造性を置き換えるのではなく、どのように増強できるかを意味しています。 AI を活用したツールは、技術的スキル、リソース、またはビデオやその他のメディアの魅力的なファッション プロジェクトとのつながりを持っていない、またはまったく持っていないクリエイターに力を与えることができます。 現在でも、プロのクリエーターにとって、AI は特定のシーンのフッテージを探し回るなどの反復作業の負担を軽減し、編集者や他のクリエーターが (文字通り) 全体像に集中できるようにしています。

Adobe のグローバル イノベーション担当シニア ディレクターであり、Adobe が所有する Frame.io でカメラからクラウドへのテクノロジーを長年擁護してきた Michael Cioni 氏は、「しかし、それはそれよりも大きい」と述べています。

すべてのデジタル資産はクラウド資産でもあります

「2031 年までに、メディアやエンターテイメントで生成されるすべての電子資産は、クラウドによって、クラウドで生成されるようになります。 それが真実です。 デバイスによって生成されるすべての電子資産が、たとえばローカルのハード ドライブ、セルロイド、ビデオテープ、またはメモリ カードではなく、クラウドで生成されるということを、私は技術的な確実性と呼んでいます。

おなじみのメディア トランスフォーメーション サイクルでは、テキスト ドキュメントが最初にクラウド (および AI) に移行しました。 現在、それらは日常的に、Google Docs、Apple Pages、Microsoft Word、Adobe の Acrobat などのクラウドベースのサービスで作成、共有、および再形成されています。 Spotify、Apple Music、Amazon Music、Tidal などのおかげで、何億人もの人々がクラウドで音楽を聴いています (そして、作成、コラボレーション、販売しています)。 現在、私たちが作成する最も複雑なメディアが変化しています。

「あなたが映画のシーンをやっているとしましょう」とCioniは言いました。 「シーンを撮影した後、実際に言語を入力できるようになります。「雨を降らせてください」。 そして、ショットに水が現れ、雨が降り始めます。 「雪を降らせてください」と、ショットに表示され始めます。 そして、それを行うためにエンジニアである必要はありません。 それは本当にサイエンス フィクションのように思えますが、完全に実行可能になります。 静止画 (写真) の非常に初期の段階で発生し、ビデオにカスケードすることがわかっています。 これは、これがクリエイティブな人々にどのように影響するかを考えなければならない、非常に重要な属性です。」

これは、動画制作の未来に多くの意味を持ちます。 レナード・コーエンが昔言ったように、30 代で詩人から小説家、そしてシンガーソングライターに転向したとき、「多くの努力の間の境界が薄れてきました」。

多くの若い映画製作者は日常的にこれらの国境を越え、プロジェクトを作成するためにあらゆることを少しずつ行い、デジタル プラットフォームで定期的にコラボレーションしています。 クラウドからカメラへの配信と AI スマートを使用して、シーンを撮影し、編集の開始場所として大まかな「アセンブリ」をすばやく生成しながら、シーンが「機能」するのに十分かどうか、またはさらに撮影が必要かどうかを判断できます。 .

また、基本的な視覚効果、色補正、さらにはサウンド デザインのラフを行ってから、専門家に微調整を依頼することもできます。 このように、Premiere は、多くのサンダンス クリエイターにとって、従来のノンリニア ビデオ編集プログラム以上のものになっています。

人と映像の新しい関係を築く

「これは私たちの最大の情熱の XNUMX つです。人間とカメラの関係、そしてそれが社会に与える影響です」と挑発的なドキュメンタリーの共同監督 (および共同編集者) である Maximilien Van Aertryck は述べています。 ファンタスティックマシーン、その クリエイティブなビジョンでサンダンス特別審査員賞を受賞. 「私たちは、楽しむのが好きな人類学者のようなものです。」

彼らのドキュメンタリーは、私たちがこれらの新しいツールで作成している世界への慎重なアプローチを穏やかに求めています。 昔の政治的なジョークにあったように、「あなたはどちらを信じるつもりですか。私か、それともあなたの嘘つきの目ですか?」 ますます、私たちは自分の目がいつなのかを理解する必要があります   Aertryck の共同ディレクター兼編集者である Axel Danielson 氏は、嘘をついており、動画を信じるべきだと述べています。

「映画には多くの答えがありません」とダニエルソンは言いました。 「それには疑問があります。 私たちが知っている唯一の答えは、社会全体として、メディア リテラシーを非常に真剣に受け止める必要があるということです。」

このプロジェクトは、ジョルジュ・メリエス (映画の名前になったものを王室の主題が叫ぶだろう) などの先駆者にさかのぼり、XNUMX 世紀以上の動画を照合します。 途中、神経質になるほど熱心なレニ・リーフェンシュタールが立ち止まり、ニュルンベルクでのナチスの集会での彼女のお気に入りのショットの実況を行い、ISIS の戦闘機がテロリスト募集ビデオのNG集リールで彼のセリフを繰り返し失敗させます。 それははるかに穏やかな部分も備えていますが、要点は、偉大なクリエイターもひどいクリエイターも、さまざまな方法で新しいツールを利用しようとしているということです.

On ファンタスティック・マシーン、 Van Aertryck と Danielson は、人間/カメラとそれらが作成する画像との複雑な関係について特徴的なクリップを何年もかけて収集しました。 映画を組み立てる段階になると、彼らは編集者のミケル・シー・カールソンとエグゼクティブ・プロデューサーのルーベン・オストルンドとリモートで作業しました。悲しみの三角形) のプラットフォーム プロダクションが映画を制作しました。

「私たちは訓練を受けた編集者ではありません。 そうしなければならないからそうするのです」と Van Aertryck 氏は言います。 「アドビは私たちにとって完璧なツールです。そこにすべてを入れて、やり取りできるからです。」

XNUMX 人は、Premiere のクラウドベースのツールを使用して、テーブルの周りに座っているかのようにクリップとシーケンスを交換しました、と Van Aertryck 氏は言いました。彼らはバルト (スウェーデンのヨーテボリ) からバレアレス (マヨルカ) まで西ヨーロッパに広がっていました。 これは、必要に応じて、または必要に応じて、クリエイターがどこからでも来て、ほぼどこででも働く自由を与える自由の特に広範囲にわたる例です。

「オンラインで共有できることで、より多くのことが可能になります。」 クリスタル・カイザ脚本・監督 休憩, 米国の短編映画部門でサンダンス映画祭の審査員賞を受賞。 「もしオクラホマに戻りたいと思ったら、もし私がショートパンツを作っていれば、そうすることができます。」

昨年、アドビは、一部の一般的なカメラやその他の制作デバイスで、ビデオをキャプチャと同時に送信する新しいダイレクト ツー クラウド機能を発表しました。 これにより、編集者、プロデューサー、エグゼクティブ、およびその他のポストプロダクションの専門家は、撮影後すぐに映像の作業を開始できます。

小規模なプロダクションでさえ、このテクノロジーを使用しています。 クラウド接続は、特に早い段階で不可欠でした。 マリアッチでバーシティに行く、サンダンス編集賞を受賞したダニエラ・T・キロスは言いました。

監督のアレハンドラ・バスケスとサム・オズボーンは、ブルックリンを拠点とするキロスがプロジェクトをつなぎ合わせ始めたとき、テキサス州リオグランデバレーで開催された高校のダンス大会に関するドキュメンタリーをまだ撮影していました。 すでにキャプチャされた素材に対する彼女の初期の新鮮な視点は、その後の撮影と焦点領域を形成するのに役立ちました。

「編集者として、私たちはカメラでこれらの人々を初めて見るというこのユニークな特権を持っています」とQuirozは言いました. 「誰と恋に落ちているのか、どの音楽に恋をしているのかを本当に知ることができます。」

ほんの数年前の「昔」のように、すぐにアクセスできるデジタル日刊紙をなくすことは、撮影の必需品でした。 時々私は死ぬことについて考える オレゴン州の海岸の僻地にある。 代わりに、毎日の映像がハード ドライブにロードされ、デジタル仲介業者に取り込まれるために夜通しニューオーリンズに発送されました。 編集者の Ryan Kendrick 氏は、テクノロジーがもたらした改善を思い起こさせるものでした。

新しい種類のコラボレーション

これにより、ナッシュビルを拠点とするケンドリックは編集を開始し、レイチェル・ランバート監督や複数の州にまたがる他の人々と協力しました。

「一緒に仕事をしたい人と一緒に仕事ができて、同じ場所に縛られていないのはなんて素晴らしいことでしょう」とケンドリックは言いました。 また、監督、撮影監督、編集者、およびその他のプロダクション間のダイナミクスも変化させます。

過去には「いつもセットから孤立していると感じていました」とケンドリックは言いました。 「今、あなたはそれにもっとつながっていると感じます。 彼らが作っているトーンからそれほど離れているとは感じません。 編集室は本当に素晴らしい場所で、たくさんの間違いを犯したり、やりたいこととは正反対のことをしたりします。 私はいつも「わからない」と言います。 それを理解しましょう。

On 時々私は死にたいと思う ケンドリック、ランバート、そして撮影監督のダスティン・レーンは、撮影が実際に始まるずっと前から毎週話し始め、潜在的な問題を早期に回避しました。

「発生する可能性のある編集の問題について話しました」とケンドリックは言いました。 「台本を手に入れたときに考えるのが最も難しいのは、映画が次のパートにどのように移行するかということです。 具体的には、映画の中で(主人公たちは)映画を見に行きます。 感情的な重みを維持するために必要な画像をどのように取得するかについて、多くのことを話しました。」

Camera-to-Cloud で可能な迅速なターンアラウンドは、コマーシャルやミュージック ビデオなどの短いプロジェクトに特に役立ちます、と Kendrick 氏は述べています。

「コマーシャルのターンアラウンドのいくつかはワイルドです」とケンドリックは言いました。 Premiere Pro、Frame.io、After Effects でプロジェクトをやり取りできるのは、クラウドベースのアーキテクチャでしか実現できませんでした。

「これは、過去 XNUMX 年間で解消された最大の (制作ワークフローの遅延) です」と Kendrick 氏は述べています。

より良いテクノロジーを構築するための基本原則

Adobe のテクノロジーに対するアプローチは、ワークフロー、メディア、コラボレーション、生産性、およびセキュリティという XNUMX つの「基本原則」に基づいている、と Keane 氏は述べています。

「私たちは AI を『生産性』に分類しています」と Keane 氏は言います。 「クリエイティブを置き換えることではありません。 それはありふれたものを置き換えることです。」

ハリウッドの労働組合は、急速に変化する AI 空間を注意深く見守っています。 パック氏は、ハリウッド最大の労働組合である SAG-AFTRA の理事会が、今後の契約交渉に AI を使用してメンバーの外見、声、その他の側面を再現するという肖像権の問題を含めることを計画していると報告しました。

今のところ、タレントの弁護士は、「俳優のパフォーマンスをシミュレートする権利を制御することを目的とした契約の文言は、『条件が組合と交渉されるまで無効であり、強制力がない』とアドバイスされている」とパックは報告した. .

複雑な新しい問題は、この春のいくつかの厳しい契約交渉につながる可能性があります. キャリアの機会を拡大したいと考えている若年および中年のパフォーマーは、テクノロジーの使用を受け入れるかもしれませんが、強力な契約保護がなければ、技術的には俳優ではないデジタル パフォーマンスへの支払いを回避する方法として、このテクノロジーを使用するアウトレットもあります。

最終的に何が起こるかの粗い例の XNUMX つは、「watchmeforever」が作成した Twitch で数週間にわたって見られる可能性があります 終わりのない AI 生成の「エピソード」 となりのサインフェルド. この「ショー」は、コンピューターで生成された声の抑揚が不十分で、単純なグラフィックスと、特に面白くないジョークが特徴でした。 このショーはまた、より高い品質レベルで最終的に何が可能になるかを示唆しています. 「ジェリー」のキャラクターのスタンドアップ ルーチンがアンチ トランス ルーチンと見なされるものに変更されたときに、シャットダウン通知によってエンドレス ループが中断されたことは注目に値します。

クリエイティブな追求に世界を切り開く

Adobe の Keane 氏は、AI とクラウドが原動力となる創造的なツールへのアクセスがはるかに広範になることを、はるかに肯定的に指摘しています。 プロセス イメージやサウンドの生成、エフェクトの生成などに大規模なレンダー ファームが不要になると同時に、ある程度野心的なビデオ プロジェクトに必要なコンピューティング パワーとセキュリティが提供されます。

「クラウドを一元化できれば、世界中からストーリーが届く可能性が開けます」とキーンは言いました。 「あらゆる段階でコラボレーションが必要です。 共有された視点は、アイデアを強化するか、さらに挑戦します。」

映画製作者にとってのセキュリティの重要性の例として、Keane 氏は次のように指摘しました。 計画C、中絶に関するサンダンスのドキュメンタリー。 その作成者は、いくつかのカメラ インタビューの顔と声の複数のぼかしを行う必要があり、ぼかしのない元のメディアに対しても厳重なセキュリティを確保する必要がありました。

ジェネレーティブ AI、ディープ フェイク、および関連する問題の爆発的な増加は、真正性がこれまで以上に重要であることも意味するとキーン氏は述べています。 Adobe は、New York Times などの他のメディア企業やテクノロジー企業とともに、Content Authenticity Initiative のメンバーです。NYT
そしてキヤノン。

象徴的なSFフランチャイズのスター、キアヌ・リーブス マトリックス、楽観的ではありません。 彼は最近 Wired に、AI 支援ビデオの悪用の XNUMX つが、 ディープフェイクは「怖い」です。 リーブスの契約には、スタジオが彼のパフォーマンスをデジタルで操作することを禁止する条項が定期的に含まれています。これは、数十年前に彼の顔に仮想の涙を挿入した作品にまでさかのぼります。

Reeves 氏は侵略的な慣行について、「何をイライラさせるかというと、エージェンシーを失うことです」と述べています。 「映画でパフォーマンスをするとき、編集されることはわかっていますが、それに参加しているのです。 ディープフェイクの土地に入ると、そこにはあなたの視点がまったくありません。 それが怖いです。 人間がこれらのテクノロジーにどのように対処するかを見るのは興味深いことです。」

次の革新的なテクノロジー

次の最先端技術は、Premiere Pro のベータ版で既に利用可能になっている、いわゆるテキストベースの編集で、AI がビデオから抽出して書き起こしたセリフのテキストを編集することでビデオを編集できるようにします。 また、AI は重要なサウンド バイトを強調表示し、最終的なプロジェクトの最初のアセンブリを構築し、キーワード ベースの検索を生成して、特定のクリップや会話をすばやく見つけることができます。 プロジェクト用に構築されたデータは、すべての映像を効率的に管理するための強力な新しい方法になります。

「あなたは、この豊富なデータすべてでメディアを潤しています」と Keane 氏は言います。

一部の中小企業は、同様のテクノロジーを採用しています。 説明と ポッドキャスト あなたの声のデジタル バージョンを作成し、さらに編集する必要なく、テキスト ベースの台本を読み上げることができます。 Descript は最近、ポッドキャストであれ他のコンテンツであれ、ビデオ用のテキストベースの編集機能を追加しました。

編集者の Kendrick 氏は、友人がアラスカを拠点とするミニ ドキュメンタリーをすばやく編集できるように、Adobe のテキストベースの編集ツールをすでに使用していると語った。 テキストベースの編集は、いわゆる「捕食者」にとっても非常に役立つ可能性が高く、プロデューサー/編集者は通常、何日にもわたる映像を苦労して、タイトなタイムラインで台本なしのショーをすばやく組み立てなければならない.

オーディオ ブック、台本、ソーシャル メディアも AI を取得

AI は、エンターテインメントの他の多くの分野にも進出しています。 りんごAAPL
打ち上げ オーディオブックのナレーションを作成するために設計された一連の AI ツール、作成者が「人間のナレーターに基づいたデジタル音声でナレーションを付けた」プロジェクトの低コストのオーディオ バージョンを作成する別のオプションを作成します。 このニュースは、人間のオーディオブックのナレーターと彼らの豊富なファンのエリート集団から大きな反対を引き起こしました.

こうした人間のナレーターの最高の作品を大切にする理由は確かにあり、AI ツールが最高の本の最高の人間の読者の説得力のある声とパフォーマンスに近づくには、長い時間がかかるかもしれません。

しかし、その才能を使用するためのコストは、毎年発行される何万冊もの本にかかる費用をはるかに超えています。 それは、Apple のツール スイートが、すでに世界で推定 1.5 億ドルの価値がある、以前は遠隔地だった市場に到達しようとしている小規模な本、著者、出版社に別の市場へのアクセスを提供できる場所です。

スタートアップ フィルムステージ AI を使用して、キャスト、小道具、衣装、使用される車両、サウンド、場所などの要素を含むスクリプト コンポーネントを分解します。

ビジネスの短い動画の側面では、TikTok、Meta の Reels、Alphabet の YouTube Shorts はすべて、機械学習と AI ツールに依存して、ユーザーが見たいと思う次の「おすすめ」動画を提供しています。よりシームレスで魅力的な方法で広告をそのエクスペリエンスに結び付けます。

LightShed Partners のアナリストである Rich Greenberg 氏が電話をかけました。 AI主導のコンテンツレコメンデーションの改善へのFacebookのシフトは非常に高価です、しかし、「最終的には、(Meta CEO Mark)Zuckerberg の(モバイルに次ぐ)XNUMX 番目に印象的なピボットが、開始以来常に進化してきたプラットフォームであることが証明される可能性があります。」

ソース: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv-ショー/