Sora را فراموش کنید — Luma Labs از مدل ویدیویی جدید Ray2 رونمایی می کند که واقع گرایی را به سطح جدیدی می رساند
Luma Labs، استارتاپی که پشت پلتفرم خلاقیت هوش مصنوعی Dream Machine محبوب است، مدل ویدیویی جدیدی را منتشر می کند. Ray2 قول می‌دهد سریعتر، واقع‌بینانه‌تر باشد و درک بهتری از فیزیک دنیای واقعی را نسبت به مدل‌های مشابه دیگر مانند Runway's Gen-3 یا حتی OpenAI's Sora ارائه دهد.
به گفته لوما، Ray2 می تواند تعاملات بین اشیاء مختلف و انواع شی را تشخیص دهد. این شامل افراد، موجودات و وسایل نقلیه می شود و به واقع گرایی می افزاید.
Ray2 قادر خواهد بود تا 10 ثانیه ویدیوی با وضوح بالا را از طریق پیام متنی یا تصویری ایجاد کند و در Dream Machine و همچنین AWS Bedrock آمازون در دسترس خواهد بود.
به گفته لوما، این مدل کلیپ هایی ایجاد می کند که فیلمبرداری پیشرفته، حرکت روان و «درام چشم نواز» را به نمایش می گذارد. این یک معماری چند وجهی بومی است که مستقیماً بر روی داده های ویدیویی آموزش داده شده است تا وفاداری کاراکترها را بهبود بخشد.
در حالی که هنوز در دسترس نیست، ده‌ها کلیپ با استفاده از Ray2 در رسانه‌های اجتماعی ساخته شده است، و من تعدادی از بهترین‌هایی را که دیده‌ام جمع‌آوری کرده‌ام.
1. یک توپ از ماده
مقیاس‌بندی پیش‌آموزش مدل ویدیویی منجر به فیزیک بسیار دقیق‌تر می‌شود! این #Ray2 است pic.twitter.com/BPoFx32VNX13 ژانویه 2025
ابتدا، ویدئویی به اشتراک گذاشته شده توسط مدیر عامل Luma، آمیت جین وجود دارد که نشان می دهد توپی از مواد مات شناور است و در جهت مخالف حرکت دوربین می چرخد. این برای صحنه های سیاره ای عالی خواهد بود. او گفت: «مقیاس‌سازی پیش‌آموزش مدل ویدیویی به فیزیک بسیار دقیق‌تری منجر می‌شود!»
2. زن سوار بر موتور سیکلت
من در 24 ساعت گذشته به @LumaLabsAI #Ray2 دسترسی داشته‌ام و از پیشرفت‌هایی که در حرکت ایجاد کرده‌اند لذت می‌برم. 🏍️ pic.twitter.com/1uiI0YayIe14 ژانویه 2025
کلیپ بعدی که توجه من را به خود جلب کرد توسط رایان جی فیلیپس (با نام مستعار هری غیرمعمول) با عنوان “استار راک هوش مصنوعی” به اشتراک گذاشته شد و فیلم های خیره کننده ای شبیه مکس دیوانه از زنی را که در حال موتور سواری در بیابان است، نشان می دهد. او گفت که “از پیشرفت هایی که آنها در جنبش ایجاد کرده اند لذت می برد.”
3. مناظر کوهستانی نفس گیر
مرز جدید این @LumaLabsAI #Ray2 است pic.twitter.com/aQbIMoTCKD14 ژانویه 2025
من عاشق این منظره کوه نفس‌گیر از تئو پاناژیوتوپولوس لوما بودم. این نشان می‌دهد که این مدل چقدر خوب حرکت دوربین را در زمین‌های پیچیده مدیریت می‌کند. مدل های دیگر در این صحنه ها سبک کمی «بازی مانند» ایجاد می کنند.
4. گربه روی کاناپه
“گربه ای که می دود و روی کاناپه می پرد” این @LumaLabsAI #Ray2 در عمل است. pic.twitter.com/p723Qi4Q3613 ژانویه 2025
حرکت آهسته اما پیچیده می‌تواند برای مدل‌های هوش مصنوعی چالش‌برانگیز باشد، به‌ویژه زمانی که یک موجود زنده را با دقت به تصویر می‌کشید، اما این ویدیو نشان می‌دهد که چگونه Ray2 ما را به ایده‌آل نزدیکتر می‌کند. تصویری که توسط ویلیام شن از لوما به اشتراک گذاشته شده است، گربه‌ای را به تصویر می‌کشد که به طور آزمایشی روی یک کاناپه حرکت می‌کند و قبل از اینکه از زمین بپرد.
5. مرد روی طناب
@LumaLabsAI به فیزیک در نسل Ray2 نگاه کنید… هولدک در راه است. #Ray2 pic.twitter.com/oesvP8t9X113 ژانویه 2025
در نهایت، این ممکن است یکی از ویدیوهای مورد علاقه من باشد که تا به حال دیده ام و توسط فیلمساز آلن تی با استفاده از Ray2 ساخته شده است. در این فیلم، مردی به طور موقت روی یک طناب محکم از دره ای عبور می کند و پای بسیار دقیقی را به نمایش می گذارد. آلن نوشت: “به فیزیک در نسل Ray2 نگاه کنید… هولدک در راه است.”
افکار نهایی
ویدیوی هوش مصنوعی تقریباً سریعتر از هر نوع دیگری از هوش مصنوعی پیشرفت می کند. قدم بزرگ بعدی در درک واقعیت است و ممکن است با Veo2 گوگل و Ray2 جدید Luma به آن نزدیکتر شویم.
Luma Ray2 رو هنوز امتحان نکردم هنوز منتشر نشده. اما با توجه به آنچه که من از کارکنان Luma و دیگرانی که به آنها دسترسی زودهنگام داده اند دیده ام، این چیزی است که باید تماشا کرد.