iClone و AI Studio؛ وقتی هنرمند، فرمان هوش مصنوعی را به دست می‌گیرد

ساخت انیمیشن معمولاً از یک تصویر زیبا شروع نمی‌شود.

از تصمیم‌های کوچک و گاهی خسته‌کننده شروع می‌شود: شخصیت کجا بایستد؟ دستش را در چه لحظه‌ای بالا ببرد؟ هنگام حرف زدن به چه کسی نگاه کند؟ دوربین با چه سرعتی نزدیک شود؟ نور از کدام جهت بتابد و این نما دقیقاً چگونه به نمای بعدی متصل شود؟

وقتی درباره تولید انیمیشن با هوش مصنوعی صحبت می‌کنیم، معمولاً این تصمیم‌های کوچک فراموش می‌شوند. یک تصویر وارد مدل می‌کنیم، چند خط توضیح می‌نویسیم و منتظر می‌مانیم تا هوش مصنوعی حرکت، بازی، دوربین و حتی بخشی از روایت را حدس بزند.

اگر نتیجه خوب باشد، همه‌چیز شگفت‌انگیز به نظر می‌رسد.

اگر خوب نباشد، دوباره تاس می‌ریزیم.

اما Reallusion در نسخه جدید iClone و به‌خصوص در AI Studio، مسیر متفاوتی را پیشنهاد می‌کند:

ابتدا انیمیشن را بسازید، صحنه را کارگردانی کنید و سپس اجازه دهید هوش مصنوعی ظاهر نهایی را تولید کند.

در این روش، هوش مصنوعی قرار نیست جای خالی کارگردانی را با حدس زدن پر کند. قرار است از تصمیم‌هایی پیروی کند که پیش‌تر در یک صحنه سه‌بعدی گرفته شده‌اند.

این تفاوت، هسته اصلی ورک‌فلوی جدید iClone است.

تماشای AI Studio Official Launc | منبع : یوتیوب

iClone دقیقاً چه نوع نرم‌افزاری است؟

iClone یک نرم‌افزار تولید انیمیشن سه‌بعدی بلادرنگ است.

کلمه «بلادرنگ» در اینجا اهمیت زیادی دارد. در بسیاری از نرم‌افزارهای سه‌بعدی، هنرمند بخشی از حرکت، نور یا دوربین را تنظیم می‌کند و برای دیدن نتیجه باید منتظر پیش‌نمایش یا رندر بماند. در iClone هدف این است که بخش بزرگی از نتیجه همان لحظه در Viewport دیده شود. در واقع آیکلون می خواهد فاصله بین تصمیمات هنری و خروجی نهایی اثر را به حداقل برساند.

شخصیت حرکت می‌کند، لباس و مو واکنش نشان می‌دهند، دوربین جابه‌جا می‌شود و نور تغییر می‌کند؛ درحالی‌که کارگردان همچنان مشغول ویرایش صحنه است.

به همین دلیل iClone بیشتر از آنکه یک ابزار مدل‌سازی باشد، یک استودیوی مجازی برای کارگردانی انیمیشن است.

مدل شخصیت می‌تواند در Character Creator ساخته و استخوان بندی شود. حرکت ممکن است از آرشیو انیمیشن، موشن‌کپچر، ویدئو یا ویرایش دستی بیاید. صدا و حرکت صورت به شخصیت اضافه می‌شوند، دوربین و نور در صحنه قرار می‌گیرند و همه‌چیز روی Timeline تنظیم می‌شود.

iClone قرار نیست جای تمام نرم‌افزارهای سه‌بعدی را بگیرد. تخصص اصلی آن، به حرکت درآوردن شخصیت‌ها و تبدیل دارایی‌های سه‌بعدی به یک اجرای قابل‌کارگردانی است.

ورک‌فلو از شخصیت شروع می‌شود

در یک پروژه معمولی، نخستین مرحله آماده کردن بازیگران دیجیتال است.

کاراکترها می‌توانند از کتابخانه iClone انتخاب شوند، در Character Creator ساخته شوند یا از منابع دیگر وارد پروژه شوند. Character Creator اجازه می‌دهد ظاهر چهره و بدن، لباس، مو، متریال و نسبت‌های شخصیت تغییر کنند و سپس شخصیت برای انیمیشن به iClone منتقل شود.

این ارتباط میان Character Creator و iClone یکی از مهم‌ترین بخش‌های اکوسیستم Reallusion است.

Character Creator بازیگر را آماده می‌کند.

iClone از او بازی می‌گیرد.

پس از ورود شخصیت به صحنه، می‌توان قد، موقعیت و جهت او را تنظیم کرد، اشیا را در محیط قرار داد و یک Layout اولیه ساخت. لازم نیست همه‌چیز از همان ابتدا زیبا و کامل باشد. حتی می‌توان از مدل‌های ساده و دارایی‌های موقت برای Previsualization استفاده کرد.

پیش‌نمایش سه‌بعدی شخصیت در iClone پیش از تولید با هوش مصنوعی
خروجی نهایی شخصیت پس از پردازش در AI Studio

این مرحله چیزی شبیه تمرین نمایش است. دکور هنوز نهایی نشده، نور کامل نیست و لباس‌ها ممکن است تغییر کنند؛ اما کارگردان می‌تواند ببیند شخصیت‌ها کجا قرار می‌گیرند، مسیر حرکتشان چیست و دوربین باید چگونه صحنه را دنبال کند.

در تولید سنتی سه‌بعدی، وسوسه زیادی وجود دارد که جزئیات بصری خیلی زود کامل شوند. iClone مسیر معکوسی را پیشنهاد می‌کند:

ابتدا اجرا و روایت را پیدا کنید. ظاهر نهایی بعداً می‌تواند ساخته شود.

حرکت آماده، حرکت زنده و حرکت اصلاح‌شده

پس از قرار دادن شخصیت‌ها، مهم‌ترین مرحله آغاز می‌شود: انیمیشن بدن.

iClone چند مسیر متفاوت برای تولید حرکت دارد و جذابیت ورک‌فلوی آن در این است که مجبور نیستیم فقط یکی را انتخاب کنیم.

می‌توان از کلیپ‌های حرکتی آماده استفاده کرد. راه رفتن، دویدن، نشستن، صحبت کردن و بسیاری از رفتارهای متداول به‌صورت انیمیشن آماده در دسترس هستند. این کلیپ‌ها می‌توانند پشت سر یکدیگر قرار بگیرند و با ابزارهای ترکیب حرکت به هم متصل شوند.

می‌توان حرکت را با Motion Director به شکل تعاملی کنترل کرد. در این حالت، هنرمند رفتار شخصیت را مانند یک بازی هدایت می‌کند و سیستم حرکت‌های لازم را با یکدیگر ترکیب می‌کند. این قابلیت برای پیدا کردن مسیر حرکت و ساخت سریع اجرای اولیه مفید است.

می‌توان از سیستم‌های موشن‌کپچر بدن، دست و صورت استفاده کرد و اجرای یک بازیگر واقعی را به شخصیت انتقال داد.

اما نکته مهم این است که هیچ‌کدام از این حرکت‌ها لزوماً آخرین مرحله نیستند.

پس از دریافت حرکت می‌توان زمان‌بندی آن را تغییر داد، بخش‌هایی را ترکیب کرد، حالت دست و پا را اصلاح کرد و با لایه‌های انیمیشن، جزئیات تازه‌ای به اجرا افزود.

موشن‌کپچر نتیجه نهایی نیست؛ ماده اولیه بازی است.

AccuPOSE؛ هوش مصنوعی پیش از AI Studio نیز وارد صحنه شده است

هنگام اصلاح یک حرکت، گاهی تنها لازم است وضعیت بدن شخصیت در یک لحظه تغییر کند.

ممکن است دست باید کمی بالاتر باشد، وزن بدن روی پای دیگر قرار بگیرد یا ستون فقرات هنگام خم شدن حالت طبیعی‌تری داشته باشد. انجام این اصلاح‌ها استخوان‌به‌استخوان زمان‌بر است و اگر هنرمند تجربه کافی نداشته باشد، بدن شخصیت خیلی زود حالتی مصنوعی پیدا می‌کند.

AccuPOSE برای ساده‌تر کردن همین مرحله ساخته شده است.

این ابزار از مدل‌های آموزش‌دیده با داده‌های حرکت انسانی استفاده می‌کند تا هنگام تغییر وضعیت بدن، حالت‌های طبیعی‌تری پیشنهاد دهد. هنرمند می‌تواند بخشی از بدن را جابه‌جا کند و سیستم کمک می‌کند زنجیره استخوان‌ها و تعادل کلی بدن منطقی‌تر باقی بماند.

اصلاح ژست و تعادل بدن شخصیت با AccuPOSE در iClone

در اینجا هوش مصنوعی مستقیماً تصویر نهایی تولید نمی‌کند. نقش آن شبیه دستیاری است که می‌داند بدن انسان معمولاً چگونه تعادل خود را حفظ می‌کند و اجازه نمی‌دهد هر اصلاح کوچک به شکستن فرم کلی بدن منجر شود.

این نوع استفاده از هوش مصنوعی شاید کمتر از تولید یک ویدئوی سینمایی هیجان‌انگیز به نظر برسد، اما در تولید واقعی بسیار مهم است؛ زیرا دقیقاً در همان بخش‌های تکراری و زمان‌بری وارد می‌شود که کیفیت حرکت را تعیین می‌کنند.

AccuFACE؛صورت شخصیت نیز باید بازی کند

یک شخصیت فقط با بدنش بازی نمی‌کند.

تنها زمان نگاه کردن، پلک زدن، مکث قبل از جمله، تغییر شکل لب‌ها و تنش عضلات صورت می‌توانند یک اجرای معمولی را به اجرایی باورپذیر تبدیل کنند.

iClone برای انیمیشن صورت چند روش دارد. می‌توان از ابزارهای ویرایش دستی حالات صورت استفاده کرد، حالت‌ها را در طول Timeline تغییر داد یا با ابزارهای Puppeteering، اجرای صورت را به‌شکل زنده کنترل کرد.

AccuFACE می‌تواند حرکت چهره را از ویدئو استخراج کند و Motion LIVE نیز امکان اتصال تجهیزات و راهکارهای مختلف موشن‌کپچر را فراهم می‌کند.

صدا هم می‌تواند به Lip-sync تبدیل شود تا حرکت لب‌ها با گفتار هماهنگ شود. سپس هنرمند نتیجه را اصلاح می‌کند و حالات احساسی را به آن می‌افزاید.

این مرحله پیش از ورود به AI Studio اهمیت زیادی دارد. زیرا هرچه اجرای سه‌بعدی دقیق‌تر باشد، مرجع بهتری برای تولید ویدئوی هوش مصنوعی خواهیم داشت. اگر حرکت بدن، صورت و دوربین از ابتدا مبهم باشند، مدل مولد مجبور می‌شود بخش بیشتری از نتیجه را حدس بزند.

و هرجا حدس بیشتر شود، کنترل کمتر خواهد شد.

صحنه‌پردازی پیش از رندر؛ جایی که کارگردانی اتفاق می‌افتد

پس از آماده شدن اجرای شخصیت‌ها، نوبت به صحنه، نور و دوربین می‌رسد.

iClone مجموعه‌ای از محیط‌ها، اشیا، نورها، دوربین‌ها و افکت‌های بلادرنگ را در اختیار کاربر قرار می‌دهد. دارایی‌های آماده نیز می‌توانند به‌سرعت وارد صحنه شوند. اما برای ورک‌فلوی AI Studio لازم نیست همیشه یک صحنه نهایی و پرجزئیات ساخته شود.

گاهی چند دیوار ساده، یک میز، چند حجم خاکستری و نورهای اولیه برای مشخص کردن ترکیب‌بندی کافی هستند. این صحنه قرار نیست لزوماً همان چیزی باشد که مخاطب در پایان می‌بیند. ممکن است فقط راهنمای هوش مصنوعی باشد.

ارزش این فضای سه‌بعدی در دقت آن است.

صحنه‌پردازی سه‌بعدی و تنظیم دوربین در iClone

کارگردان می‌تواند مشخص کند شخصیت دقیقاً کجا بایستد، فاصله او از دوربین چقدر باشد، کدام دستش را حرکت دهد و پشت سرش چه حجمی قرار بگیرد.

می‌توان دوربین را روی مسیر مشخصی حرکت داد، لنز را تغییر داد و نما را بارها تماشا کرد. اگر حرکت دوربین سریع یا گیج‌کننده است، پیش از پرداخت هزینه تولید ویدئوی هوش مصنوعی، اصلاح می‌شود.

این همان تغییری است که AI Studio می‌خواهد در تولید مولد ایجاد کند: به‌جای اینکه با کلمات از هوش مصنوعی بخواهیم جای دوربین را حدس بزند، جای دوربین را در فضای سه‌بعدی مشخص می‌کنیم.

AI Studio وارد می‌شود

پس از ساخت صحنه و انیمیشن، می‌توان AI Studio را مستقیماً از فضای iClone باز کرد.

رابط AI Studio از چند بخش اصلی تشکیل شده است:

  • ابزارهای تولید و ویرایش تصویر
  • ابزارهای تولید و ویرایش ویدئو
  • بخش 3D Guided Generation
  • ابزار Talking Actor
  • ابزار ساخت AI Actor
  • تاریخچه خروجی‌ها و امکان ادامه کار روی آن‌ها

نکته اصلی این است که AI Studio از iClone جدا نیست.

انتقال صحنه از iClone به محیط AI Studio

در نتیجه، اطلاعاتی که در مرحله انیمیشن ساخته‌ایم دور ریخته نمی‌شوند. همان دوربین، حرکت و ترکیب‌بندی، نقطه شروع تولید مولد خواهند بود.

از 3D to Image تا تصویر نهایی

ساده‌ترین مسیر استفاده از AI Studio، قابلیت 3D to Image است.

ابتدا صحنه در iClone چیده می‌شود. شخصیت‌ها، دوربین، نور و اشیای اصلی در جای خود قرار می‌گیرند. سپس یک فریم از Viewport گرفته و به AI Studio ارسال می‌شود.

حالا می‌توان با پرامپت، ظاهر موردنظر را توضیح داد:

یک خیابان بارانی با نورهای نئون، یک فضای نقاشی‌شده، یک فیلم علمی‌تخیلی، یک انیمیشن کودکانه یا هر سبک دیگری.

هوش مصنوعی تلاش می‌کند تصویر سه‌بعدی را به نتیجه‌ای با ظاهر تازه تبدیل کند، درحالی‌که ترکیب‌بندی و موقعیت عناصر اصلی را حفظ می‌کند.

تبدیل صحنه سه‌بعدی iClone به تصویر نهایی با AI Studio

بر اساس مستندات فعلی Reallusion، ابزارهای تولید تصویر AI Studio از مدل‌های زیر استفاده می‌کنند:

  • Nano Banana Pro
  • Flux 2 Max
  • GPT Image 2

هر مدل رفتار، سرعت، ظرفیت مرجع‌پذیری و ظاهر متفاوتی دارد. کاربر می‌تواند بر اساس نوع پروژه مدل مناسب را انتخاب کند و برای بعضی مدل‌ها نسبت تصویر، وضوح و حتی Seed(رندوم تولید) را کنترل کند.

اما نکته جذاب‌تر این است که اگر نتیجه مناسب نبود، لازم نیست فقط پرامپت را عوض کنیم. می‌توان به iClone بازگشت، دوربین را جابه‌جا کرد، ژست شخصیت را اصلاح کرد، نور را تغییر داد یا شیء دیگری به صحنه افزود و مرجع دقیق‌تری برای تولید بعدی ساخت.

این یعنی بخشی از آزمون‌وخطا از «توصیف کردن» به «کارگردانی کردن» منتقل می‌شود.

3D to Video؛ حرکت دیگر فقط یک پیشنهاد متنی نیست

همین منطق در تولید ویدئو نیز ادامه پیدا می‌کند.

در 3D to Video، بخشی از Timeline در iClone ضبط و به AI Studio فرستاده می‌شود. این ویدئوی سه‌بعدی شامل همان حرکت شخصیت، زمان‌بندی و حرکت دوربینی است که کارگردان در iClone ساخته است. سپس مدل هوش مصنوعی ظاهر نهایی را روی این ساختار ایجاد می‌کند.

اگر شخصیت در نسخه سه‌بعدی سه قدم راه می‌رود، مکث می‌کند و سرش را به سمت دوربین برمی‌گرداند، هوش مصنوعی مرجع مشخصی برای اجرای این حرکت دارد. دیگر لازم نیست تمام این اتفاق فقط با یک جمله توصیف شود.

تولید ویدئو با مرجع حرکت سه‌بعدی در AI Studio

این موضوع برای تولید انیمیشن اهمیت زیادی دارد.

پرامپت می‌تواند بگوید «شخصیت آرام راه می‌رود»، اما آرام بودن دقیقاً یعنی چه؟ سرعت قدم‌ها چقدر است؟ مکث در چه فریمی اتفاق می‌افتد؟ شخصیت پیش از چرخاندن سر چند لحظه صبر می‌کند؟

در iClone می‌توان به این سؤال‌ها با انیمیشن پاسخ داد. AI Studio قرار است آن پاسخ‌ها را ببیند و به ظاهر تازه‌ای تبدیل کند.

مدل‌های ویدئویی فعال در AI Studio

AI Studio در حال حاضر چند مدل اصلی را برای تولید ویدئو ارائه می‌کند:

  • Seedance 2.0
  • Kling 3.0
  • Google Veo 3.1
  • LTX 2.3

این مدل‌ها از نظر کیفیت، سرعت، ثبات شخصیت، کنترل دوربین، ساخت صدا و پشتیبانی از تصاویر و ویدئوهای مرجع رفتار یکسانی ندارند.

طبق مقایسه رسمی Reallusion، Seedance 2.0 در AI Studio بالاترین امتیاز کلی را برای کیفیت حرکت، ثبات شخصیت، ثبات سبک، تولید چندنما و گفت‌وگوی چندشخصیتی دریافت کرده است. این مدل همچنین از ترکیب AI Actor، تصویر، ویدئو و صوت به‌عنوان مرجع پشتیبانی می‌کند.

مقایسه مدل‌های تولید ویدئو در AI Studio

وجود چند مدل در یک محیط، AI Studio را به موتور مولد واحدی محدود نمی‌کند. ممکن است یک مدل برای آزمایش سریع مناسب باشد و مدل دیگری برای خروجی نهایی. شاید یک سکانس به ثبات بیشتر شخصیت نیاز داشته باشد و سکانس دیگر به حرکت سریع یا تولید صوت وابسته باشد.

اما این تنوع یک نکته مهم را نیز به همراه دارد:

شناخت مدل به بخشی از مهارت تولید تبدیل می‌شود. هنرمند باید بداند کدام مدل برای کدام نما مناسب‌تر است و چه زمانی کیفیت بیشتر، ارزش زمان و هزینه اضافی را دارد.

AI Actor؛ راه‌حل Reallusion برای ثبات شخصیت

یکی از مشکلات قدیمی تولید تصویر و ویدئو با هوش مصنوعی، حفظ هویت شخصیت است.

ممکن است چهره در نمای اول مناسب باشد، اما در نمای دوم کمی تغییر کند. لباس در یک زاویه جزئیات متفاوتی پیدا کند و نسبت‌های صورت هنگام حرکت دوربین ناپایدار شوند. برای یک تصویر مستقل، این تغییر شاید قابل‌قبول باشد، اما برای تولید انیمیشن، فاجعه است.

زیرا مخاطب باید باور کند شخصیتی که در نماهای مختلف می‌بیند همان شخصیت قبلی است.

AI Studio برای کاهش این مشکل از AI Actor یا iModel استفاده می‌کند. AI Actor نوعی مرجع ساختاریافته از ظاهر شخصیت است که می‌تواند از یک شخصیت سه‌بعدی iClone یا Character Creator ساخته شود. همچنین امکان ساخت آن از مجموعه‌ای از تصاویر مرجع وجود دارد.

سیستم نماها، زوایا، چهره، فرم بدن و ظاهر شخصیت را ثبت می‌کند تا در تولید تصاویر و ویدئوهای مختلف، هویت او پایدارتر بماند.

حفظ ثبات ظاهر شخصیت با AI Actor در AI Studio

اما جذاب‌ترین کاربرد AI Actor برای استودیوها، استفاده از شخصیت‌های اختصاصی خودشان است.

اگر یک استودیو قهرمان مشخصی برای مجموعه انیمیشنی خود طراحی کرده باشد، می‌تواند ابتدا نسخه سه‌بعدی قابل‌کنترل آن را بسازد و سپس AI Actor را از روی همان شخصیت ایجاد کند. در این حالت، طراحی شخصیت فقط یک تصویر مرجع نیست؛ بخشی از یک ورک‌فلوی پیوسته میان تولید سه‌بعدی و تولید مولد است.

چند شخصیت در یک صحنه

ثبات یک شخصیت دشوار است، اما حفظ هویت چند شخصیت در یک نما دشوارتر می‌شود.

مدل باید بفهمد هر نام به کدام چهره مربوط است، چه کسی چه لباسی دارد، کدام فرد صحبت می‌کند و حرکت هر شخصیت باید به کدام مرجع متصل شود.

در AI Studio می‌توان AI Actorها را به صحنه اضافه کرد و از برچسب نام آن‌ها در پرامپت استفاده کرد. در بعضی عملیات تصویر، چند AI Actor و تصویر مرجع می‌توانند هم‌زمان وارد پروژه شوند.

این قابلیت برای ساخت نماهای گفت‌وگومحور و سکانس‌هایی که چند شخصیت در آن‌ها حضور دارند اهمیت زیادی دارد.

اما همچنان نباید انتظار داشت یک نمای بسیار شلوغ با چندین شخصیت، حرکت پیچیده، دیالوگ، دوربین متحرک و تعامل فیزیکی در اولین تلاش بی‌نقص تولید شود. هرچه تعداد تصمیم‌ها بیشتر شود، احتمال خطا نیز افزایش پیدا می‌کند.

نقش صحنه سه‌بعدی در همین‌جا پررنگ‌تر می‌شود: تا جای ممکن، تصمیم‌ها پیش از ورود به مدل مولد گرفته می‌شوند.

شروع و پایان حرکت را مشخص کنید

گاهی تنها داشتن یک فریم ابتدایی کافی نیست.

فرض کنید شخصیت باید در ابتدای نما کنار پنجره ایستاده باشد و در پایان روی صندلی بنشیند. اگر فقط تصویر نخست را به مدل بدهیم، مسیر رسیدن به وضعیت پایانی را کاملاً به هوش مصنوعی واگذار کرده‌ایم.

تعیین فریم شروع و پایان حرکت در AI Studio

حالا AI Studio امکان تولید ویدئو با Start Frame و End Frame را نیز فراهم می‌کند. این دو تصویر می‌توانند ابتدا و انتهای حرکت را مشخص کنند و مدل باید انتقالی میان آن‌ها بسازد. این روش برای تبدیلات بصری، تغییر حالت شخصیت و حرکت‌هایی که نقطه پایان دقیقی دارند مفید است.

اما iClone می‌تواند یک گام جلوتر برود.

به‌جای مشخص کردن فقط ابتدا و انتها، می‌توان کل مسیر حرکت را در فضای سه‌بعدی ساخت. سپس ویدئوی Previz به‌عنوان مرجع حرکتی وارد AI Studio شود.

انتخاب میان این روش‌ها به نوع نما بستگی دارد:

گاهی یک فریم آغاز کافی است.

گاهی ابتدا و انتها مهم‌اند.

و گاهی هر فریم حرکت باید پیش از تولید نهایی کارگردانی شود.

Swap Actor؛ تعویض بازیگر و انتقال حرکت

AI Studio فقط ویدئو تولید نمی‌کند؛ می‌تواند ویدئوی موجود را نیز تغییر دهد.

قابلیت Swap Actor اجازه می‌دهد بازیگر حاضر در ویدئو با شخصیت دیگری جایگزین شود. حرکت ویدئوی اصلی حفظ می‌شود و ظاهر شخصیت از تصویر مرجع می‌آید.

این قابلیت برای تولید انیمیشن اهمیت ویژه‌ای دارد. می‌توان ابتدا یک اجرا را با بازیگر واقعی، یک شخصیت ساده یا یک مدل موقت ثبت کرد و بعداً ظاهر نهایی را روی آن قرار داد.

اجرای اولیه بازیگر پیش از استفاده از Swap Actor
شخصیت جایگزین‌شده با ابزار Swap Actor در AI Studio

همچنین می‌توان از یک ویدئو برای Animate کردن شخصیت موجود در یک تصویر استفاده کرد؛ یعنی حرکت از ویدئو گرفته شود و ظاهر بازیگر از تصویر بیاید.

البته چنین روش‌هایی هنوز با مشکلاتی مانند پوشیدگی بدن، تعامل دست با اشیا، حرکت سریع و تغییر زاویه شدید روبه‌رو هستند. اما به‌عنوان ابزار نمونه‌سازی و حتی تولید برخی نماهای نهایی، امکانات قابل‌توجهی ایجاد می‌کنند.

Talking Actor؛ وقتی شخصیت باید حرف بزند

انیمیشن شخصیت بدون گفت‌وگو کامل نیست.

ساخت شخصیت سخنگو با Talking Actor در AI Studio

Talking Actor در AI Studio می‌تواند یک تصویر یا ویدئو را با صدا هماهنگ و شخصیت را به یک بازیگر سخنگو تبدیل کند. صدا می‌تواند از فایل صوتی وارد شود یا با Text-to-Speech تولید شود.

امکان استفاده از صداهای آماده و Voice Cloning نیز وجود دارد. سیستم زبان ورودی را تشخیص می‌دهد و حرکت لب‌ها را با گفتار هماهنگ می‌کند.

اما در یک پروژه شخصیت‌محور حرفه‌ای، Lip-sync تنها بخشی از اجراست.

کنترل گفتار و حرکت چهره با Talking Actor در AI Studio

هنرمند هنوز باید تصمیم بگیرد شخصیت هنگام گفتن جمله چه احساسی دارد، کجا مکث می‌کند، نگاهش به کدام سمت است و بدنش چگونه به حرف شخصیت مقابل واکنش نشان می‌دهد.

اینجاست که دوباره iClone اهمیت پیدا می‌کند. AI Studio می‌تواند لب‌ها و صدا را هماهنگ کند، اما iClone می‌تواند بدن، صورت و میزانسن را به یک اجرای کامل‌تر تبدیل کند.

یک ورک‌فلوی پیشنهادی برای تولید انیمیشن

اگر بخواهیم تمام این امکانات را در یک مسیر قابل‌فهم قرار دهیم، ورک‌فلوی تولید می‌تواند به این شکل باشد:

۱. ایده را به صحنه تبدیل کنید

ابتدا شخصیت‌های موقت، محیط و اشیای اصلی را در iClone قرار دهید. در این مرحله کیفیت نهایی مهم نیست. هدف این است که روابط فضایی صحنه دیده شوند.

۲. حرکت‌های اصلی را بسازید

از کلیپ‌های آماده، Motion Director، Video Mocap یا موشن‌کپچر زنده استفاده کنید. حرکت‌ها را روی Timeline ترکیب و زمان‌بندی کنید.

۳. اجرا را اصلاح کنید

با AccuPOSE، لایه‌های انیمیشن و ابزارهای ویرایش حرکت، ژست‌ها و تماس پا با زمین را اصلاح کنید. حرکت دست‌ها، جهت نگاه و ریتم اجرا را بررسی کنید.

۴. صورت و صدا را اضافه کنید

صدا، Lip-sync و حالات چهره را وارد کنید. اگر پروژه نیاز دارد، از AccuFACE، Motion LIVE یا ابزارهای Talking Actor استفاده کنید.

۵. دوربین را کارگردانی کنید

لنز، قاب و حرکت دوربین را در iClone بسازید. نما را بارها تماشا کنید و مطمئن شوید اطلاعات روایی آن بدون ظاهر نهایی نیز قابل‌فهم است.

۶. یک Previz ساده بگیرید

پیش از مصرف اعتبار هوش مصنوعی، نسخه سه‌بعدی را بازبینی کنید. اشتباهات حرکت، تدوین و دوربین را در همان محیط کم‌هزینه‌تر اصلاح کنید.

۷. صحنه را به AI Studio بفرستید

بر اساس نیاز پروژه، یک فریم را برای 3D to Image یا بخشی از Timeline را برای 3D to Video ثبت کنید.

۸. مدل مناسب را انتخاب کنید

برای تصویر، میان Nano Banana Pro، Flux ۲ Max و GPT Image ۲ انتخاب کنید. برای ویدئو نیز سرعت، کیفیت، ثبات شخصیت، صوت و پشتیبانی از مرجع را در مدل‌های Seedance، Kling، Veo و LTX در نظر بگیرید.

۹. هویت شخصیت را تثبیت کنید

برای شخصیت‌های اصلی AI Actor بسازید. اگر چند شخصیت در یک صحنه حضور دارند، آن‌ها را با نام و مرجع دقیق به مدل معرفی کنید.

۱۰. خروجی را پایان کار ندانید

نتایج را مقایسه کنید. اگر مشکل از ترکیب‌بندی یا حرکت است، به iClone بازگردید. اگر مشکل از ظاهر است، پرامپت، مدل یا منابع تصویری را تغییر دهید.

این رفت‌وبرگشت میان iClone و AI Studio مهم‌ترین بخش ورک‌فلو است.

هوش مصنوعی نباید اتاقی باشد که پروژه وارد آن می‌شود و خروجی نامعلومی از سمت دیگر بیرون می‌آید.

باید بخشی از یک مسیر قابل‌بازگشت باشد.

هزینه همچنان بخشی از تصمیم تولید است

AI Studio یک سرویس ابری و مبتنی بر اعتبار است.

تولید تصویر، ویدئو، صدا و بعضی عملیات پردازشی از AI Points، Bonus Points یا DA Points استفاده می‌کنند. هزینه هر عملیات پیش از تولید نمایش داده می‌شود و مدل‌های قدرتمندتر معمولاً اعتبار بیشتری مصرف می‌کنند.

این مسئله تأثیر مستقیمی بر طراحی ورک‌فلو دارد. اگر قرار باشد هر تغییر کوچک با یک تولید تازه آزمایش شود، هزینه پروژه می‌تواند به‌سرعت افزایش پیدا کند. اما اگر حرکت، دوربین و ترکیب‌بندی پیش‌تر در iClone بررسی شده باشند، تعداد تولیدهای ناموفق کاهش پیدا می‌کند.

در واقع، صحنه سه‌بعدی فقط برای کنترل هنری نیست. ابزاری برای کنترل هزینه نیز هست.

به‌جای آنکه ده بار از مدل بخواهیم دوربین را کمی تغییر دهد، یک بار دوربین را در iClone تنظیم می‌کنیم و مرجع دقیق‌تری می‌فرستیم. به‌جای تولید چندین حرکت تصادفی، اجرای مناسب را روی Timeline می‌سازیم. هوش مصنوعی همچنان ممکن است نتیجه نامطلوبی تولید کند، اما تعداد متغیرهای ناشناخته کمتر شده است.

آیا این ورک‌فلو جای انیمیشن سه‌بعدی را می‌گیرد؟

احتمالاً نه؛ دست‌کم نه برای همه پروژه‌ها.

اگر یک استودیو به کنترل کامل مدل، متریال، نور، سایه، شبیه‌سازی و اصلاح هر فریم نیاز داشته باشد، رندر سه‌بعدی سنتی همچنان قابل‌اعتمادتر است.

یک شخصیت سه‌بعدی می‌تواند در صدها نما با همان طراحی باقی بماند. دوربین و نور دقیقاً قابل‌بازتولید هستند و هر اصلاح مشخصی را می‌توان بدون تولید دوباره تمام تصویر انجام داد.

ترکیب ورک‌فلوی سه‌بعدی iClone با تولید هوش مصنوعی

خروجی مولد هنوز ممکن است در جزئیات لباس، دست‌ها، اشیا و تعامل شخصیت‌ها ناپایدار باشد. حتی با AI Actor و مراجع سه‌بعدی، تضمینی وجود ندارد که تمام فریم‌ها دقیقاً مطابق انتظار باشند.

اما AI Studio قرار نیست در همه پروژه‌ها جای رندر سنتی را بگیرد. قدرت آن در ایجاد یک مسیر ترکیبی است.

ممکن است بخشی از یک فیلم با رندر سه‌بعدی معمولی ساخته شود، چند نمای رویایی یا استایلایز با AI Studio تولید شوند و برخی تصاویر نیز تنها برای Concept Art و Previz به کار بروند.

ممکن است انیمیشن سه‌بعدی فقط ساختار حرکت را فراهم کند و ظاهر نهایی کاملاً مولد باشد.

یا برعکس، خروجی AI Studio فقط برای پیدا کردن سبک استفاده شود و نسخه نهایی دوباره در موتور رندر سه‌بعدی ساخته شود.

ابزار زمانی قدرتمندتر می‌شود که مجبور نباشیم فقط یک مسیر را انتخاب کنیم.

جذابیت واقعی AI Studio کجاست؟

در نگاه اول، جذاب‌ترین بخش AI Studio خروجی‌های سینمایی آن است. اما دستاورد مهم‌تر، شاید تصویر نهایی نباشد.

دستاورد اصلی، قرار دادن هوش مصنوعی مولد در ادامه یک ورک‌فلوی انیمیشن است.

شخصیت پیش از ورود به مدل هوش مصنوعی هویت دارد. حرکتش ساخته شده، دوربینش مشخص است، در یک فضای سه‌بعدی ایستاده و رابطه‌اش با دیگر شخصیت‌ها قابل‌مشاهده است.

سپس هوش مصنوعی وارد می‌شود تا ظاهر، بافت، نور و بخشی از جزئیات سینمایی را بسازد.

در بسیاری از ابزارهای مولد، کنترل یعنی پیدا کردن کلمات دقیق‌تر؛ در iClone، کنترل می‌تواند به معنای جابه‌جا کردن واقعی دوربین، تغییر ژست شخصیت یا اصلاح زمان یک حرکت باشد.

این همان چیزی است که AI Studio را برای انیماتورها جذاب می‌کند.

نرم‌افزار از آن‌ها نمی‌خواهد تمام دانشی را که درباره حرکت، میزانسن و کارگردانی دارند کنار بگذارند و فقط پرامپت‌نویس شوند. برعکس، تلاش می‌کند همان دانش را به راهنمای هوش مصنوعی تبدیل کند.

از پرامپت‌نویسی به کارگردانی

آینده تولید انیمیشن احتمالاً تنها متعلق به افرادی نیست که بهترین پرامپت‌ها را می‌نویسند. متعلق به کسانی است که می‌دانند یک صحنه چگونه ساخته می‌شود.

می‌دانند شخصیت چه زمانی باید حرکت کند، چه زمانی باید بی‌حرکت بماند، دوربین چه چیزی را نشان دهد و هر نما چه اطلاعاتی را به مخاطب منتقل کند.

آینده هوش مصنوعی مولد متعلق به کسانی است که جادوی روایت داستان با تصویر را در دست دارند.

iClone و AI Studio این دو دنیا را کنار یکدیگر قرار می‌دهند: دنیای ساختارمند انیمیشن سه‌بعدی و دنیای سیال تولید مولد.

iClone حرکت، دوربین، بازی و صحنه را کنترل می‌کند، AI Studio ظاهرهای تازه را آزمایش می‌کند، شخصیت را به سبک‌های مختلف می‌برد، تصویر و ویدئو تولید می‌کند و در بعضی پروژه‌ها فاصله میان Previz و نتیجه قابل‌نمایش را کوتاه‌تر می‌سازد.

این ورک‌فلو هنوز بی‌نقص نیست. همچنان به آزمون‌وخطا، اعتبار پردازشی و اصلاح انسانی نیاز دارد. مدل‌ها تغییر می‌کنند و نتیجه هر تولید کاملاً قابل‌پیش‌بینی نیست.

اما مسیر پیشنهادی آن قابل‌توجه است:

ابتدا روایت را بسازید.

حرکت را طراحی کنید.

دوربین را کارگردانی کنید.

و بعد، از هوش مصنوعی بخواهید جهانی را که ساخته‌اید به شکل دیگری ببیند.

دیدگاه مخاطبان

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

اخبار و مقالات