استفاده از کاراکترهای دیجیتال تنها در توسعهی بازیها محدود نمانده و بهسرعت در زمینههایی چون انیمیشنهای تبلیغاتی و خدمات مشتری نیز گسترش یافته است. یکی از نوآوریهای کلیدی در این حوزه Nvidia Audio2Face است؛ ابزاری مبتنی بر هوش مصنوعی که فرآیند ساخت انیمیشنهای واقعگرایانهی چهره هماهنگ با صدا را سرعت میبخشد. حالا این غول دنیای پردازندههای گرافیکی اعلام کرده که این ابزار را در اختیار همگان قرار میدهد.
انویدیا مدلها و کیت توسعه نرمافزاری (SDK) Audio2Face را متنباز کرده است تا تمامی توسعهدهندگان بازی و اپلیکیشنهای سهبعدی بتوانند شخصیتهایی با انیمیشنهای پیشرفته و واقعگرایانه بسازند. این بسته شامل افزونههایی برای برخی از بهترین نرمافزارهای مدلسازی و انیمیشن سهبعدی نیز هست.
Audio2Face با بهرهگیری از هوش مصنوعی، انیمیشنهای زندهی چهره و همزمانسازی لب را از ورودی صوتی تولید میکند. این ابزار با تحلیل ویژگیهای آکوستیکی مانند فونمها و لحن صدا، دادههای انیمیشن را ایجاد کرده و سپس آنها را به حالات مختلف چهره کاراکتر تبدیل میکند. خروجی میتواند هم بهصورت آفلاین برای محتوای از پیش ضبطشده رندر شود و هم در لحظه برای شخصیتهای پویا و هوش مصنوعیمحور پخش گردد؛ با دقت بالا در هماهنگی لبها و نمایش احساسات.
این مدل در حال حاضر بهطور گسترده در صنعت بازی، سرگرمی و خدمات مشتری استفاده میشود. شرکتهایی چون Codemasters، GSC Games World، NetEase و Perfect World Games از جمله توسعهدهندگان بازی هستند که از این فناوری بهره میبرند. همچنین شرکتهایی مانند Convai، Inworld AI، Reallusion، Streamlabs، The Farm 51 و UneeQ آن را در محصولات خود ادغام کردهاند. برای نمونه، شرکت Reallusion این ابزار را در مجموعه نرمافزارهای خود همچون iClone، Character Creator و دستیار هوش مصنوعی iClone گنجانده است.
نسخه متنباز Audio2Face SDK شامل کتابخانهها و مستندات لازم برای تولید و اجرای انیمیشنهای چهره چه روی دستگاه و چه در فضای ابری است. افزونههایی برای Autodesk Maya و Unreal Engine 5 نیز ارائه شده که امکان ارسال ورودی صوتی و دریافت انیمیشن چهره برای کاراکترها را فراهم میسازد.
انویدیا همچنین چارچوب آموزش Audio2Face را متنباز کرده است تا کاربران بتوانند مدلهای از پیش آماده را برای نیازهای خاص خود بازآموزی و شخصیسازی کنند. این ابزار از طریق GitHub در دسترس است و همراه با راهنمای ساخت و استفاده ارائه میشود. اطلاعات بیشتر نیز در وبسایت توسعهدهندگان انویدیا قابل دسترسی است. البته برای اجرای روان آن نیاز به یکی از کارتهای گرافیک قدرتمند خواهید داشت.