شرکت ادوبی اعلام کرد سه ابزار جدید برای تولید ویدئو از متن به نامهای Generative Extend و Text to Video و Image to Video برای هوش مصنوعی Firefly منتشر کرده است.
به‌گزارش تکناک، ابزارهای جدید ادوبی به‌منظور تولید ویدئو از متن برای هوش مصنوعی Firefly معرفی شدند. این ابزارها به کاربران امکان می‌دهند تا با کمک Firefly ویدئوها را به‌طور خودکار و تنها ازطریق ورودی‌های متنی ایجاد کنند.
قابلیت‌های جدید با نامهای Generative Extend و Text to Video و Image to Video شناخته می‌شوند. آنها قرار است تا پیش از پایان سال ۲۰۲۴ در نسخه‌ی بتای نرم‌افزار Premiere Pro و نیز ازطریق نسخه‌ی تحت‌وب به‌رایگان در‌دسترس عموم قرار گیرند.
ادوبی ادعا می‌کند که این ابزارها قرار است تحولی بزرگ در تولید محتوای ویدئویی ایجاد کنند؛ به‌ویژه برای کاربرانی که به‌دنبال راه‌های نوآورانه‌تر برای خلق ویدئو هستند.
در پیش‌نمایش این ویژگی‌ها، ادوبی بر مدل ویدئویی در حال توسعه‌ی Firefly تأکید کرد که پیش‌تر در ماه آوریل نمایش داده شده بود. این تکنولوژی قرار است قابلیت‌های ویرایش ویدئو و صدا مبتنی‌بر هوش مصنوعی را در برنامه‌های Creative Cloud تقویت کند. بدین‌ترتیب، کاربران می‌توانند از ابزارهای پیشرفته‌تر و کارآمدتری در‌زمینه‌ی خلق و ویرایش محتوای دیجیتال بهره‌مند شوند.
فهرست مطالب
ویژگی‌های جدید
تیزر تبلیغاتی جدید ادوبی ویژگی‌های پیشرفته‌ی مدل ویدئویی Firefly را به‌نمایش گذاشته است که امکان تولید ویدئو ازطریق توضیحات متنی را فراهم می‌آورد. این ابزار به کاربران اجازه می‌دهد تا کلیپ‌های ویدئویی را بر‌اساس متن تولید و با استفاده از «کنترل‌های دوربین» مختلف، جزئیاتی مانند زاویه دوربین و حرکت و فاصله‌ی عکاسی را شخصی‌سازی کنند.
علاوه‌بر‌این، قابلیت تبدیل تصویر به ویدئو در مدل ویدئویی Firefly به‌نمایش درآمده است که امکان ساخت کلیپ‌های ویدئویی را با استفاده از تصاویر مرجع فراهم می‌آورد. ادوبی این ویژگی را به‌ویژه برای تولید محتوای B-roll اضافی یا پرکردن شکاف‌ها در جدول زمانی تولید ویدئو به‌عنوان راهکاری مفید معرفی کرده است که می‌تواند به بهبود کیفیت و دقت ویدئوها کمک کند.
کیفیت ویدئو و محدودیت‌ها
به‌نقل از ورج، اگر نمونه ویدئوها نشان‌دهنده‌ی نسخه‌ی نهایی باشند، کیفیت ویدئو تولیدشده با آنچه تاکنون از مدل Sora شرکت OpenAI دیده‌ایم، برابری می‌کند. ادوبی در حال بررسی این مدل به‌عنوان ادغام شخص ثالث برای نرم‌افزار Premiere Pro ویدئویی خود است. با‌این‌حال، مدت‌زمان محدود است. الکساندرو کوستین، معاون هوش مصنوعی ادوبی، به ورج گفت که مدت‌زمان ویدئوهای تولیدشده با ویژگی‌های متن به ویدئو و تصویر به ویدئو حداکثر پنج ثانیه است.
مزیت مدل ادوبی
یکی از مزیت‌های احتمالی مدل ادوبی دربرابر Sora این است که ادعا می‌کند هوش مصنوعی Firefly به‌دلیل آموزش روی محتوای متن‌باز و دامنه‌ی عمومی و Adobe Stock، «از‌نظر تجاری ایمن» است که می‌تواند برخی نگرانی‌ها درباره‌ی نقض حق کپی‌رایت را کاهش دهد.
ویژگی Generative Extend
ادوبی برخی از کلیپ‌های اضافی از ویژگی جدید Generative Extend برای نسخه‌ی Premiere Pro را نشان داده است که می‌تواند طول فیلم‌های ویدئویی موجود را مشابه ابزار Generative Expand برای پس‌زمینه‌های تصویر در فتوشاپ گسترش دهد. ادوبی می‌گوید که این ویژگی نیز اواخر امسال منتشر خواهد شد.
زمان انتشار
ویژگی‌های متن به ویدئو و تصویر به ویدئو هر دو در ابتدا در نسخه‌ی بتا به‌عنوان برنامه‌ای مستقل برای هوش مصنوعی Firefly اواخر امسال در‌دسترس خواهند بود. ادوبی می‌گوید که مدل ویدئویی جدید فایرفلای در‌نهایت در برنامه‌های Creative Cloud و Experience Cloud و Adobe Express ادغام خواهد شد.
