ディズニーでさえ AI に投資している: 視覚効果のための顔のリエイジングの考察

Snapchat フィルターで楽しむため、映画のため、またはいくつかのなぞなぞを取り除くためであるかどうかにかかわらず、私たちは皆、写真图片で自分の年齢を変更できるようにするためのユーティリティを念頭に置いています。これは一般是、Photoshop などのツールを动用して写真照を編集する熟練したアーティストによって行われます。最悪の場合、ビデオでは、フレームごとにこの種の手動編集を行う必需があります。そのために必需な作業量を臆想してみてください。さて、これがこの状況に対する解決策と新しい問題の両方です...

参考文献

►記事全文を読む:
►Loss et al., DisneyResearch, 2022: FRAN,
►GAN の説明:
►SAM:
►ディスコード:
►Twitter:
►マイ ニュースレター (新しい AI アプリケーションについて毎週メールで説明します!):

ビデオトランスクリプト

0:02 [音楽] 0:06楽しいSnapchatフィルターのためかどうか0:08映画の場合、またはいくつかを削除することさえあります0:11私たち全員が好用性を念頭に置いているなぞなぞ0:13私たちの年齢を変えることができるために0:15これは基本上熟練者によって行われます0:18 Photoshop などを采用するアーティスト0:20最悪の艺术照を編集するツール0:23彼らがこの種のことをしなければならないビデオ0:24すべてのフレームの手動編集0:27に不必要な作業量を臆想してください0:29ここに解決策と0:32この状況に新たな問題がディズニーの0:35最新消息の出版权物 フランはそれを行うことができます0:38自動的にこれは0:41映画業界では、すぐに0:43で映画每名のために誰かをリエイジする0:46キャストは异常に少ないですが、それは問題です0:48同時にカットするアーティスト向け0:51いくつかの雇请機会と彼らがカットするのを助ける0:53网络化するための長くて退屈な労働時間0:56ここで何かクールな才会関連のタスク0:58フロントベースのツールを制作したことです1:01アーティストが結果を食用および編集するため1:03によって彼らの仕事をより効率的にする1:05むしろ細部を调理することに大家都讨论を当てる1:08からの単調なコピーペースト編集よりも1:10あるフレームから別のフレームへ1:13コメントでそれについてのあなたの考え1:15以内または Discord コミュニティでチャット1:17一緒に AI を学びますが、このビデオのために1:20もう曾純粋に热点を当てましょう1:22この创作の良い面は1:24彼らが成し遂げた专业的進歩1:26ビデオ内の顔のデジタル リエイジング1:29あなたはこの結果を見てきました1:31新しいFranアルゴリズムと私はあなたができると信じています1:33これらがどれほど素晴らしいかについてはすでに愿意しています1:35結果を見るだけで、あとどれくらい1:38他のものに比べてリアルに見える1:40首先端のリエージングアプローチ1:42多くのアーティファクトが含まれており、实现できません1:44その人のアイデンティティと同じプラス1:47友達のアプローチは一定ありません1:49これらの面を他の面の主に调试します1:51アプローチはそれをさらに行います1:53感觉的でさらに信じられないほど1:55彼らのアプローチが真正にどれほどシンプルかということです1:58フランは必然のことながら顔を表します2:01ネットワークの再エージングは、 2:04モデルは顔を撮って変えることができます2:06その人が何歳に見えるか2:08一貫したリアリズムと高解像度2:11変数 Expression 所有の結果2:13の視点と照明灯具具体条件2:16俳優の年齢演过は映画2:19通畅は制作而成陣による変更2:20専用衣装の用到 髪型 など2:23対象年齢と2:26顔はデジタルアーティストが編集できるように残されています2:29フランが来る場所であるフレームごとのフレーム2:32の皮膚領域に厳密に热点を当てることで2:35妈妈の年齢にも大家都讨论を当てた顔2:38映画はすでに効率的で2:40如此に若いためのさまざまなテクニック2:42浑身と顔の脱落2:44线条が異なり、小さい2:47それらのケースですが、どうすれば顔を撮ることができますか2:49其中任何の所在位置から変更するだけ2:52数ダース追加または削除する外観2:54主に根拠がないため年2:56このタスクの真実は、彼らが2:59複製するようにアルゴリズムをトレーニングできません3:01彼ら之后の前後の写真图片3:03それらを持っていない 比较に极少数の例が留存する3:05 20歳之上の同个职业の3:08あらゆる角度看で離れて、彼らは持っている必需があります3:10異なるアプローチと従来の3:12教師あり学習アプローチ3:14あなたの例を再現してみてください3:16すでにデータセットに含まれています3:18一般而言、探析者はこれに取り組みます3:20訓練された強力なモデルを运行した問題3:22しかし、すべての年齢の偽の顔を提取しました3:25結果はかなり需求的です3:27主に重点と积极に働きます3:29偽の訓練データによる顔3:32そのために转换成された面、したがって結果3:35実地球に通常情况下化することはほとんどできません3:38彼らは本当に确保していないので、シーン3:40そうではなかった主要人物の身元3:42で同じ人を使って訓練された3:44期間は異なりますが、 3:46さまざまな3:48年齢とそのような静的モデルはほとんどできません3:52リアルな顔の動きを生み出す3:54匀速直线运动画象のトレーニングに3:57現実这个世界の磁学を知らない3:58光照の変更など4:01彼らの初期の貢献はタックルです4:03からの肖像数のこのギャップ4:05異なる年齢の同じ人4:08ここでの目標は、と同じことをすることです4:10己前のアプローチですが、小さな4:12产生されたものを引き続き动用する微調整4:15偽の顔ですが、データセットを構築します4:18同じ顔でいっぱい4:20エッジだから主要的には同角色4:23同じ经验と同じすべて4:25アルゴリズムを持つ年齢を除いて4:27で顔に厳密に视点を当てた4:29たとえ年齢が違っても4:32これらのアプローチは実際には4:33現実の环境でうまく普通化し、 4:36ビデオシーンでは、彼らはまだ领悟しています4:38受损プロセスが是にうまくいくので、彼らは4:40それらを便用してより多くの形象を转成できます4:43異なる年齢の同じ人の4:45より良いデータセットを構築するための一开始のステップ4:48このステップは、と呼ばれるモデルを运用して行われます4:50その人の顔がとれる額4:53全部に中心地方に配置单され、それを試薬化します4:56セットを構築するためにのみ用されます4:57安全使用する前後の个人写真の4:59ファンをトレーニングするためのアルゴリズム5:02私たちのアルゴリズムのため、ステップが有必要です5:04いくつかから般化するには愚かすぎる5:07私たち人間ができるように、私たちにはできない例5:10本物とほぼ同じ数の写真集を购买5:12同じ光照の顔5:15原型と同じ服5:17異なる年齢は手工的にする这个必要があります5:19彼らの2番目の貢献は5:22この新しい一連の肖像を选用して、 5:24制成され、トレーニングとアルゴリズムが已经5:27このプロセスを実世纪で再現する5:30一貫性のあるシーン5:32ビデオフレーム全体员工で、アルゴリズムは5:35構築されたものは、実際には十分に単純であり、 5:37ほとんどの画象から画象に似ています5:39あなたが見つける翻訳アルゴリズム5:41彼らは unet アーキテクチャを使用的します。 5:44入力と努力の年齢とイメージ5:48に変換する最良の方案を学ぶ5:50それを最も多くにエンコードすることによる新しい半身像5:53代表のあるスペースの有必要条件とデコード5:55それを新しいイメージに入れるので、ネットワーク5:58任何の肖像を有して有することを学習します6:00私たちが不确定性空間と呼んでいるもの6:03私たちのエンコーディングにはこの存在的なスペースがあります6:06一般的に必须なものはすべて含まれています6:08ネットワークが学習した情報6:10不同のタスクなので、几乎的に6:12このための顔のさまざまな特徴6:14特殊の個人ではありません6:16图像に関する情報を含む6:18原型またはそうでないその他の機能6:20再エージングに重要性な場合、これが重要性です6:23ある種の予測情報6:25リエイジング マスク このマスクは6:27編集が必要条件な这部分を含む6:29リエイジング効果の艺术照で6:31タスクをより服务管理しやすくする6:34图像广大干部を一名予測するよりも6:36繰り返しますが、この予測を単純にマージします6:39拿到するために前中期肖像にマスクします6:41リエイジングフェイス このマスクがメイン6:43彼らのアプローチがそれほど多くの目的6:45人をよりよく维持する6:47彼らは彼らを制限するので、アイデンティティ6:49リージに対するネットワークの做用範囲6:51整体ではなく変更のみ6:54半身像でも顔全体员工でも6:56よりインテリジェントにすることはできません6:59より实际上的には、モード人形は7:01銃のアプローチに従って訓練された7:03多くのビデオで説明したように、 7:05ここに觉得されている別のモデルを利用します7:08右側は弁別器と呼ばれる7:10同時に訓練され、慣れている7:12制成された再エージング人物画像かどうかを計算します7:15私たちが持っているものに似ています7:17トレーニングデータセットは基本性的にその評価7:20トレーニングを導くための結果と7:22ほら、これがフランがあなたの受损を助ける工艺です7:25あなたの顔は 18 から 85 の間のどこか7:28歳 もちろん、これはただの7:30この新しいディズニーの簡単な慨括7:32分析出版发行物と私はお勧めします7:34詳細については、彼らの優れた論文を読んでください7:36情報と結果の了解7:39私が建议する銃に慣れていない7:40簡単な紹介ビデオを見て7:43見てくれてありがとう7:45次回はお会いしましょう7:47別の素晴らしい紙7:48 [音楽] 7:59ありがとうございました[音楽]