Adobe با مدل جدید Firefly Video وارد فضای ویدیویی هوش مصنوعی می شود
ادوبی Firefly Video را معرفی کرد، یک مدل جدید ایجاد ویدئو با هوش مصنوعی که توانایی ایجاد کلیپ های کوتاه از متن، تصویر یا ویدئو را ارائه می دهد.
مدل جدید در نسخه آینده پریمیر پرو ادغام خواهد شد و به عنوان یک ابزار مستقل در دسترس خواهد بود. این شبیه به رندر کننده هوش مصنوعی Firefly Adobe است، شبیه فتوشاپ و روشی که آن را به عنوان یک برنامه مستقل ارائه می دهد. باید دید که آیا به یکی از بهترین سازندگان ویدیوهای هوش مصنوعی تبدیل خواهد شد یا خیر.
Adobe با متخصصان خلاق و جامعه ویرایش ویدیو برای ایجاد مدل ویدیویی کار کرد و فقط در مورد ویدیوهای “ایمن تجاری” که مجوز آنها را داشت آموزش می داد. این همان رویکردی است که Adobe با مدل نمایشگر Firefly خود در پیش گرفت.
برخلاف سایر مدل‌های ویدیویی، Adobe بر روی افزودن محتوای ساخته شده توسط انسان، مانند پسوند کلیپ و رندر چشم‌انداز جایگزین تمرکز کرده است. همچنین قادر به تولید کلیپ های مستقل از تصاویر یا متن خواهد بود.
Adobe Firefly Video چیست؟
تماشا کنید
Firefly Video اواخر امسال در وب‌سایت Adobe و در ویژگی پسوند کلیپ سازنده Adobe Premiere Pro در دسترس خواهد بود.
با مدل متن به ویدئو، می‌توانید از دستورات توصیفی مانند آنچه در Runway یا Luma Labs Dream Machine استفاده می‌کنید، استفاده کنید. از نمونه‌های کلیپ، به نظر می‌رسد که ویدئوها در ابتدا پنج ثانیه هستند، کوتاه‌تر از Runway Gen-3.
Adobe این را به عنوان راهی برای ایجاد b-roll که «به‌طور یکپارچه شکاف‌های جدول زمانی شما را پر می‌کند» یا تصاویر واقعی را با افکت‌ها بهبود می‌بخشد. این مدل همچنین شامل کنترل های دوربین مانند زاویه، حرکت و زوم خواهد بود، همانطور که اخیراً در Dream Machine دیدیم.
موارد استفاده دیگر شامل ایجاد عناصر جوی در یک ویدیو مانند آتش، دود و ذرات گرد و غبار است. با استفاده از هوش مصنوعی، این موارد می‌توانند با استفاده از حالت‌های ترکیبی یا کلید زدن در ابزارهایی مانند Adobe’s Premiere Pro و After Effects روی محتوای موجود لایه‌بندی شوند.
ادوبی می گوید مدل تصویر-ویدئو به کاربران اجازه می دهد یک تصویر موجود را بگیرند و آن را جابجا کنند. این شامل متحرک کردن متن یا اشیاء است.
بهره گیری از خلاقیت انسان
Adobe قصد دارد از طریق مدل Firefly Video، هوش مصنوعی مولد را در Adobe Premiere Pro ادغام کند و همان کاری را که برای تصاویر در Adobe Photoshop انجام می‌دهد، برای ویدیو نیز انجام دهد.
به کاربران این امکان را می‌دهد که از هوش مصنوعی برای گسترش کلیپ‌ها برای بستن شکاف‌ها، انتقال صاف و حتی نگه‌داشتن فیلم طولانی‌تر از آنچه شما مدیریت می‌کنید برای ویرایش‌های نرم‌تر و «به‌موقع‌تر» استفاده کنند.
اشلی استیل، معاون ارشد رئیس‌جمهور می‌گوید: «با تکیه بر مدل‌های اصلی Firefly برای رندر، طراحی، و رندر برداری، مدل ویدیوی هسته Firefly ما برای کمک به جامعه ویدیویی حرفه‌ای طراحی شده است تا فرصت‌های جدید را باز کند، جریان‌های کاری را ساده‌تر کند و ایده‌های خلاقانه‌شان را تقویت کند.» او گفت: خط تولید خلاقانه Adobe.
او افزود: ما هیجان‌زده‌ایم که سطوح جدیدی از کنترل خلاقانه و کارایی را به ویرایش ویدیو با Generative Extend در پریمیر پرو ارائه دهیم.
تا زمانی که آن را به دست نیاوردم و مقایسه آن را با ابزارهای ویدئویی هوش مصنوعی نسل سوم مانند Kling، Runway Gen-3، Luma Labs Dream Machine و OpenAI’s Sora امتحان کنم، سخت است، اما ویژگی های مهمی دارد که سایر مدل ها دارند. ندارند. از نظر تجاری ایمن و قابل تأیید است و در محصولات Adobe ادغام شده است.
اطلاعات بیشتر از راهنمای تام
منبع: tomsguide