Act-Two از فناوری موشن کپچر هوش مصنوعی خود با نام Runway پرده‌برداری کرد و ویدیویی به نمایش گذاشت

شرکت Runway به تازگی از مدل جدید خود با نام «Act-Two» پرده‌برداری کرده است. این مدل به کاربران این امکان را می‌دهد که تنها با استفاده از یک ویدیوی ساده از یک بازیگر، قادر به متحرک‌سازی هر نوع شخصیت، از انسان‌ها تا موجودات خیالی، به شکل کاملاً جزئی و واقع‌گرایانه شوند.

ابزارهای هوش مصنوعی به سرعت در حال دگرگونی صنعت ویدیو هستند و شرکت Runway با ارائه Act-Two، قدمی بزرگ در زمینه موشن کپچر برداشته است. این فناوری به جای اتکا به لباس‌های تخصصی و سنسورهای گران‌قیمت، تنها به دو ورودی نیاز دارد: یک ویدیوی معمولی از شخصی که در حال صحبت، حرکت و ابراز احساسات است و یک تصویر یا ویدیوی ثابت از شخصیتی که می‌خواهید آن را متحرک سازید. سپس، هوش مصنوعی Act-Two، به‌طور اتوماتیک تمام حرکات، حالت‌های چهره، حرکات دست و حتی طرز صحبت کردن را از ویدیوی اول به شخصیت دوم منتقل می‌کند.

آشنایی با هوش مصنوعی Act-Two از Runway

فناوری موشن کپچر سنتی غالباً فرایندی پرهزینه و پیچیده به شمار می‌رود و نیازمند استودیوهای مجهز و تجهیزات بسیار گران‌قیمت است. Act-Two این قابلیت را دارد که این پروسه را به دست همگان بسپارد و به فیلم‌سازان مستقل، استودیوهای کوچک و حتی تولیدکنندگان محتوای عادی اجازه دهد تا با کیفیتی نزدیک به تولیدات بزرگ، شخصیت‌های خود را متحرک نمایند.

مدل جدید Runway، که بر اساس مدل ویدیویی Gen-4 طراحی شده، بهبودهای برجسته‌ای را دارد:

• Act-Two توانایی ردیابی همزمان سر، صورت، بدن و حرکات دقیق دست‌ها را دارد.
• این سیستم می‌تواند نحوه اجرا را به گستره‌ای از شخصیت‌ها با سبک‌های هنری متفاوت (از واقعی تا کارتونی) منتقل کند، بدون آنکه از کیفیت و وفاداری نسبت به اجرای اصلی کاسته شود.
• با استفاده از یک تصویر ثابت به عنوان مرجع شخصیت، Act-Two نه تنها حرکات بدن و دست‌ها را از ویدیوی اصلی رصد می‌کند، بلکه به‌طور خودکار حرکات محیطی نامحسوس را نیز به صحنه افزوده تا خروجی نهایی طبیعی‌تر جلوه کند.
• در صورت استفاده از ویدیوی مرجع، این سیستم محیط و حرکات دوربین ویدیوی اصلی را حفظ می‌کند.

توانمندی‌های Act-Two هم‌اکنون برای کاربران اشتراک‌های Standard و بالاتر در پلتفرم Runway در دسترس قرار گرفته است. هزینه استفاده از این فناوری ۵ کردیت به ازای هر ثانیه خروجی است و حداقل طول ویدیو باید ۳ ثانیه باشد. این سیستم توانایی تولید ویدیوهایی تا سقف ۳۰ ثانیه با رزولوشن‌های مختلف و با نرخ ۲۴ فریم بر ثانیه را دارد.