به گفته مان، هنگام دوبله گاهی دیالوگ به‌طور قابل توجهی تغییر می‌کند تا بتواند با حرکات لب‌های بازیگر مطابقت بیشتری داشته باشد. این اتفاق برای او واقعا ناخوشایند بود، چون «یک تغییر کوچک در یک کلمه یا اجرا می‌تواند تغییر بزرگی در شخصیت داستان و کل فیلم ایجاد کند.»
این‌گونه بود که مان پژوهش خود را درباره دیپ فیک شروع کرد تا اینکه به پروژه کریستین تئوبالت در آلمان برخورد که درباره دوبله به کمک هوش مصنوعی بود.
این پروژه فرایند پیچیده‌تری از دیپ فیک‌های متداول دارد. در این پروژه، حالات چهره و حرکات بازیگر در یک صحنه خاص و همچنین ویدئوی فردی که همان جملات را به زبان دیگری ادا می‌کند، ثبت می‌شود. اطلاعات این دو سپس با هم ترکیب می‌شود تا مدل سه‌بعدی از چهره و سر بازیگر اما با حرکات لب دوبلور ساخته شود. سرانجام، نتیجه‌ی این فرایند به‌صورت دیجیتالی روی چهره‌ی بازیگر قرار داده می‌شود.
شرکت Flawless برای این پروژه از مطالعه تئوبالت الهام گرفته است. مان می‌گوید این شرکت در حال گفتوگو با استودیوهای فیلم‌سازی برای ساخت نسخه خارجی چندین اثر سینمایی است. در دموهای دیگر شرکت Flawless جک نیکلسون و تام کروز را می‌بینیم که در حال ادای جملات معروف فیلم چند مرد خوب به زبان فرانسوی و تام هنکس در حال صحبت کردن به زبان اسپانیایی و ژاپنی در صحنه‌هایی از فیلم فارست گامپ است.
به گفته مان، به کمک این تکنولوژی مردم به‌زودی به تماشای فیلم‌هایی خواهند نشست که تشخیص زبان اصلی آن غیرممکن خواهد بود. البته مان اضافه کرد برخی از بازیگران از تماشای چهره‌ی دستکاری‌شده‌ی خود توسط هوش مصنوعی مضطرب و معذب شده‌اند. او می‌گوید واکنش افراد به این تکنولوژی یا ترس بوده است یا تحسین.
ویرجینیا گاردنر، بازیگر زن جدیدترین فیلم مان که خودش را به لطف نرم‌افزار Flawless در حال صحبت کردن به زبان اسپانیایی دیده است، از این بابت نگرانی ندارد؛ اما معتقد است فیلم‌هایی که با هوش مصنوعی دست‌کاری شده‌اند، باید بینندگان را کامل در جریان استفاده از این تکنولوژی بگذارند.
دست‌کاری ویدئو به کمک هوش مصنوعی موضوعی جنجالی و بحث‌برانگیز است که البته دلیل موجهی هم دارد. از این تکنولوژی برای ساخت ویدئوهایی به قصد آزار و اذیت افراد استفاده شده است. کارشناسان نگران هستند این ویدئوها ممکن است باعث گسترش اطلاعات نادرست شوند یا حتی مسیر انتخابات را عوض کنند.
دست‌کاری چهره در صنعت فیلم‌سازی هم می‌تواند بحث‌برانگیز باشد. برخی از ستارگان مشهور سینما ممکن است به دست‌کاری چهره‌شان توسط هوش مصنوعی روی خوش نشان ندهند.
به‌گفته دانکن کرتبری-آیرلند، مشاور عمومی انجمن صنفی بازيگران، «این تکنولوژی می‌تواند مصارف کاملا قانونی و اخلاقی داشته باشد به شرط اینکه با رضایت تمام افراد حاضر در پروژه و جبران خسارت همراه باشد.»
به‌طور معمول ساخت دیپ فیک به ساعت‌ها پردازش الگوریتمی نیاز دارد؛ اما هائو لی، هنرمند جلوه‌های بصری و متخصص استفاده از هوش مصنوعی برای دست‌کاری چهره، در حال کار روی فیلمی است که در آن نرم‌افزار پیشرفته‌تر دیپ فیک به کارگردان اجازه می‌دهد در لحظه، فرایند تغییر حالت بازیگر را تماشا کند.
به گفته لی، این موقعیت شبیه زمانی است که استفاده از گرافیک کامپیوتری واقع‌گرایانه در دهه‌ی ۲۰۰۰ به‌طور گسترده در دسترس عموم قرار گرفت. حالا به لطف هوش مصنوعی، «ناگهان همه می‌خواهند روی پروژه‌ای مرتبط کار کنند.»
منبع: زومجی
