ماه گذشته، Adobe از مدل ویدیویی جدید Firefly رونمایی کرد و مجموعه‌ای از قابلیت‌های هوش مصنوعی مولد را برای تولید ویدیو به نمایش گذاشت. امروز این مدل به‌طور رسمی در نسخه بتای عمومی عرضه شده و به عنوان اولین مدل ویدیویی مولدی که از لحاظ تجاری نیز کاملاً ایمن است، در دسترس کاربران قرار گرفته است.
از زمان انتشار اولین نسخه بتای Firefly در مارس ۲۰۲۳، کاربران توانسته‌اند بیش از ۱۳ میلیارد تصویر ایجاد کنند که ۶ میلیارد آن تنها در شش ماه اخیر تولید شده است. Firefly اکنون در برنامه‌های مختلف Adobe از جمله Photoshop، Express و Illustrator ادغام شده و با عرضه نسخه بتای مدل ویدیویی Firefly، این قابلیت به نرم‌افزار ویرایش ویدیوی قدرتمند Adobe یعنی Premiere Pro نیز اضافه شده است.
تبدیل متن به ویدیو؛ تجربه‌ای سینمایی و خلاقانه
تکنولوژی اصلی پشت مدل ویدیویی Firefly، قابلیت تبدیل متن به ویدیو است؛ مشابه همان چیزی که پیش‌تر در تبدیل متن به تصویر شاهد بودیم. کاربران می‌توانند ویدیوهایی با سبک‌های مختلف را تنها با نوشتن توصیف‌های موردنظر خود ایجاد کنند. علاوه بر این، Firefly کنترل‌های متنوعی برای تغییر زاویه دوربین، حرکت و زوم فراهم کرده است که به سازندگان امکان می‌دهد خروجی ویدیوی خود را با دقت تنظیم کنند. همچنین، کاربران می‌توانند ویدیوهای جدیدی را بر اساس تصاویر مرجع تولید کنند؛ قابلیتی که به‌ویژه برای ایجاد ویدیوهای B-roll و هماهنگی آن‌ها با پروژه‌های موجود بسیار مفید است.
کلیپ اصلی
…و این‌گونه است که ابزار Image-to-Video فیلم را “بازسازی” می‌کند. دقت کردید که چگونه کابل زرد بی‌دلیل تکان می‌خورد؟
برای مثال، با نوشتن فرمانی مثل: “نمایی از درون سنوتی زیبا با نور ملایم در مکزیک و آب شفاف و درخشان زیر نور آفتاب”، Firefly می‌تواند ویدیوهای با کیفیت بالا و سینمایی تولید کند که فضای دقیقاً توصیف‌شده را به تصویر می‌کشد.
این مدل به تولید کلیپ‌هایی حدود چهار ثانیه محدود شده است، مانند این نمونه که در آن یک اژدهای کوچک تولید شده توسط هوش مصنوعی در حال جست‌وخیز در میان گدازه‌ها است.
ادغام Firefly با Premiere Pro؛ نسل جدیدی از ویرایش ویدیو
یکی از قابلیت‌های مهم Firefly در Premiere Pro، ابزار Generative Extend است که به کاربران اجازه می‌دهد تا بخش‌هایی از ویدیوهای موجود را با استفاده از هوش مصنوعی گسترش دهند. این ویژگی به کاربران کمک می‌کند تا انتقال‌ها را نرم‌تر کرده و نماهای موجود را طولانی‌تر کنند، بدون آنکه نیاز به فیلم‌برداری مجدد داشته باشند.
ابزار جدید Generative Extend در Premiere Pro می‌تواند فواصل موجود در فیلم‌برداری را پر کند که معمولاً نیاز به فیلم‌برداری مجدد دارند، مانند اضافه کردن چند قدم به حرکت این شخص که در کنار یک خودرو راه می‌رود.
الی گرینفیلد، مدیر ارشد فناوری رسانه دیجیتال Adobe، در این‌باره می‌گوید: “استقبال گسترده از Firefly در میان جامعه خلاق بسیار الهام‌بخش بوده است. ما خوشحالیم که ابزارهای بیشتری برای ایده‌پردازی و خلق آثار به کاربران ارائه می‌کنیم که همگی با در نظر گرفتن امنیت تجاری طراحی شده‌اند.”
محتوای تجاری ایمن؛ تمرکز بر محتواهای دارای مجوز
یکی از نکات کلیدی مدل ویدیویی Firefly، امنیت تجاری آن است. این مدل فقط با محتوای دارای مجوز و منابع عمومی آموزش دیده است. علاوه بر این، محتوای تولیدشده با Firefly ممکن است شامل اعتبار محتوایی (Content Credentials) باشد که نشان می‌دهد این آثار با استفاده از هوش مصنوعی ایجاد شده‌اند.
از جمله شرکت‌های بزرگی که تاکنون از Firefly برای بهبود جریان‌های کاری خود بهره برده‌اند، می‌توان به PepsiCo/Gatorade، IBM و Mattel اشاره کرد.
مدل ویدیویی Firefly هم‌اکنون به‌صورت نسخه محدود بتای عمومی از طریق اپلیکیشن وب Firefly در دسترس است و قابلیت‌های تبدیل متن به ویدیو و تصویر به ویدیو را ارائه می‌دهد. ابزار Generative Extend نیز از طریق نسخه بتا در Premiere Pro فعال شده است.