دیپ فیک می‌تواند هنر دوبله را متحول کند + ویدئو

به تازگی با کمک تکنولوژی جدید دیپ فیک، رابرت دنیرو، تام هنکس، جک نیکلسون می‌توانند آلمانی، ژاپنی، ایتالیایی و فرانسوی حرف بزنند. دیپ فیک می‌تواند هنر دوبله را متحول کند.

کد خبر: ۶۸۱۵۱

تاریخ : ۰۲ خرداد ۱۴۰۰ - ۱۷:۲۱

نوشته

به گزارش شهرآرانیوز - به تازگی با کمک تکنولوژی جدید دیپ فیک، رابرت دنیرو، تام هنکس، جک نیکلسون می‌توانند آلمانی، ژاپنی، ایتالیایی و فرانسوی حرف بزنند. دیپ فیک می‌تواند هنر دوبله را متحول کند.

به کمک تکنولوژی جدید دیپ فیک، رابرت دنیرو جمله‌ معروف خود را در فیلم راننده تاکسی (داری با من حرف می‌زنی؟) به زبان آلمانی و با حرکات واقع‌گرایانه‌ لب و چهره ادا می‌کند. این نرم‌افزار مبتنی بر هوش مصنوعی لب‌ها و حالات چهره‌ی بازیگر را طوری دست‌کاری می‌کند تا به‌طور باورپذیری با فردی که همان جملات را به زبان دیگر ادا می‌کند، هماهنگ شوند. این تکنولوژی که می‌تواند صنعت فیلم‌سازی را دگرگون کند، هم می‌تواند تحسین‌برانگیز باشد و هم دردسرساز.

به گزارش Wired، تکنولوژی استفاده‌شده در این نرم‌افزار مرتبط با دیپ فیک است که در آن هوش مصنوعی چهره‌ یک شخص را به‌اصطلاح بر چهره‌ دیگری می‌چسباند. قرار است این تکنولوژی به کارگردانان این امکان را بدهد تا فیلم خود را به زبان‌های مختلف بسازند و آن را جایگزین دوبله‌های کنونی کنند که با حرکات لب بازیگران هماهنگ نیست. اما قدرت تغییر حالات چهره‌ بازیگر به‌طور خودکار و به این آسانی، اگر به‌درستی مورد استفاده قرار گیرد، ممکن است جنجال‌آفرین شود.

این تکنولوژی دوبله مبتنی بر هوش مصنوعی توسط شرکت بریتانیایی Flawless توسعه یافته که اسکات مان، کارگردان فیلم سرقت (Heist) با بازی دنیرو از هم‌بنیان‌گذاران آن است. مان در رابطه با انگیزه‌اش برای کار روی این پروژه می‌گوید از دیدن دوبله‌های بسیار بد و ضعیف فیلم‌هایش خسته شده بود.

به گفته‌ مان، هنگام دوبله گاهی دیالوگ به‌طور قابل توجهی تغییر می‌کند تا بتواند با حرکات لب‌های بازیگر مطابقت بیشتری داشته باشد. این اتفاق برای او واقعا ناخوشایند بود، چون «یک تغییر کوچک در یک کلمه یا اجرا می‌تواند تغییر بزرگی در شخصیت داستان و کل فیلم ایجاد کند.»

این‌گونه بود که مان پژوهش خود را درباره‌ دیپ فیک شروع کرد تا اینکه به پروژه‌ کریستین تئوبالت در آلمان برخورد که درباره‌ دوبله به کمک هوش مصنوعی بود.

این پروژه فرایند پیچیده‌تری از دیپ فیک‌های متداول دارد. در این پروژه، حالات چهره و حرکات بازیگر در یک صحنه‌ خاص و همچنین ویدئوی فردی که همان جملات را به زبان دیگری ادا می‌کند، ثبت می‌شود. اطلاعات این دو سپس با هم ترکیب می‌شود تا مدل سه‌بعدی از چهره و سر بازیگر اما با حرکات لب دوبلور ساخته شود. سرانجام، نتیجه‌ی این فرایند به‌صورت دیجیتالی روی چهره‌ی بازیگر قرار داده می‌شود.

{$sepehr_media_305561_600_400}

شرکت Flawless برای این پروژه از مطالعه‌ تئوبالت الهام گرفته است. مان می‌گوید این شرکت در حال گفت‌وگو با استودیوهای فیلم‌سازی برای ساخت نسخه‌ خارجی چندین اثر سینمایی است. در دموهای دیگر شرکت Flawless جک نیکلسون و تام کروز را می‌بینیم که در حال ادای جملات معروف فیلم چند مرد خوب به زبان فرانسوی و تام هنکس در حال صحبت کردن به زبان اسپانیایی و ژاپنی در صحنه‌هایی از فیلم فارست گامپ است.

به گفته‌ مان، به کمک این تکنولوژی مردم به‌زودی به تماشای فیلم‌هایی خواهند نشست که تشخیص زبان اصلی آن غیرممکن خواهد بود. البته مان اضافه کرد برخی از بازیگران از تماشای چهره‌ی دستکاری‌شده‌ی خود توسط هوش مصنوعی مضطرب و معذب شده‌اند. او می‌گوید واکنش افراد به این تکنولوژی یا ترس بوده است یا تحسین.

ویرجینیا گاردنر، بازیگر زن جدیدترین فیلم مان که خودش را به لطف نرم‌افزار Flawless در حال صحبت کردن به زبان اسپانیایی دیده است، از این بابت نگرانی ندارد؛ اما معتقد است فیلم‌هایی که با هوش مصنوعی دست‌کاری شده‌اند، باید بینندگان را  کامل در جریان استفاده از این تکنولوژی بگذارند.

دست‌کاری ویدئو به کمک هوش مصنوعی موضوعی جنجالی و بحث‌برانگیز است که البته دلیل موجهی هم دارد. از این تکنولوژی برای ساخت ویدئوهایی به قصد آزار و اذیت افراد استفاده شده است. کارشناسان نگران هستند این ویدئوها ممکن است باعث گسترش اطلاعات نادرست شوند یا حتی مسیر انتخابات را عوض کنند.

دست‌کاری چهره در صنعت فیلم‌سازی هم می‌تواند بحث‌برانگیز باشد. برخی از ستارگان مشهور سینما ممکن است به دست‌کاری چهره‌شان توسط هوش مصنوعی روی خوش نشان ندهند.

به‌گفته‌ دانکن کرتبری-آیرلند، مشاور عمومی انجمن صنفی بازيگران، «این تکنولوژی می‌تواند مصارف کاملا قانونی و اخلاقی داشته باشد به شرط اینکه با رضایت تمام افراد حاضر در پروژه و جبران خسارت همراه باشد.»

به‌طور معمول ساخت دیپ فیک به ساعت‌ها پردازش الگوریتمی نیاز دارد؛ اما هائو لی، هنرمند جلوه‌های بصری و متخصص استفاده از هوش مصنوعی برای دست‌کاری چهره، در حال کار روی فیلمی است که در آن نرم‌افزار پیشرفته‌تر دیپ فیک به کارگردان اجازه می‌دهد در لحظه، فرایند تغییر حالت بازیگر را تماشا کند.

به گفته‌ لی، این موقعیت شبیه زمانی است که استفاده از گرافیک کامپیوتری واقع‌گرایانه در دهه‌ی ۲۰۰۰ به‌طور گسترده در دسترس عموم قرار گرفت. حالا به لطف هوش مصنوعی، «ناگهان همه می‌خواهند روی پروژه‌ای مرتبط کار کنند.»

منبع: زومجی