Meta Movie Gen: إعادة تصور إنشاء المحتوى
شاهد كيف تعيد Meta Movie Gen تعريف إنشاء الفيديو والصوت. تعرف على كيفية توفير هذا النموذج لتحرير فيديو دقيق ودعم إنشاء الوسائط المخصصة.
سواء كنت صانع أفلام طموحاً أو منشئ محتوى يستمتع بصنع مقاطع فيديو لجمهورك، فإن توفر أدوات الذكاء الاصطناعي التي توسع نطاق إبداعك يعد أمراً مفيداً دائماً. في الآونة الأخيرة، أطلقت Meta أحدث نموذج لتوليد الفيديو لديها، والمعروف باسم Meta Movie Gen.
من المرجح أن يصل حجم سوق الذكاء الاصطناعي التوليدي العالمي في قطاع الإعلام والترفيه إلى 11.57 مليار دولار بحلول عام 2033، مع ريادة شركات مثل Runway وOpenAI وMeta للابتكارات الرائدة. يعد نموذج Meta Movie Gen، على وجه الخصوص، ممتازاً لتطبيقات مثل صناعة الأفلام، وإنشاء محتوى الفيديو، والرواية الرقمية للقصص، مما يجعل إحياء الرؤى الإبداعية من خلال مقاطع فيديو عالية الجودة ومولدة بالذكاء الاصطناعي أسهل من أي وقت مضى. في هذه المقالة، سنستكشف Meta Movie Gen وكيفية عمله. سنلقي أيضاً نظرة أقرب على بعض تطبيقاته. لنبدأ الآن!
الشكل 1. إطار لمقطع فيديو تم توليده باستخدام Meta Movie Gen.
ما هو Meta Movie Gen؟#
قبل أن نناقش ماهية Meta Movie Gen، دعونا نلقي نظرة على كيفية ظهوره.
Meta’s research efforts related to generative AI started with their Make-A-Scene series of models. This research focuses on a multimodal generative AI method that helps artists and visionaries bring their imagination to life. Artists can input images, audio, videos, or 3D animations to get the image output that they desire. The next leap in innovation came with diffusion models like the Llama Image Foundation models (Emu), which made it possible to generate images and videos of much higher quality and enabled image editing.
الشكل 2. مثال على استخدام الرسم ومدخلات النصوص لـ Make-A-Scene للحصول على صورة مولدة.
يُعد Movie Gen أحدث إسهام من Meta في أبحاث الذكاء الاصطناعي التوليدي. فهو يجمع بين جميع الوسائط المذكورة سابقاً ويسمح بمزيد من التحكم الدقيق لكي يتمكن الأفراد من استخدام النماذج بطرق أكثر إبداعاً. يُعد Meta Movie Gen مجموعة من النماذج الأساسية لتوليد أنواع مختلفة من الوسائط، بما في ذلك تحويل النص إلى فيديو، وتحويل النص إلى صوت، وتحويل النص إلى صورة. وهو يتكون من أربعة نماذج، تم تدريبها على مجموعة من مجموعات البيانات المرخصة والمتاحة للعامة.
إليك نظرة عامة سريعة على هذه النماذج:
- نموذج Movie Gen Video: نموذج يحتوي على 30 مليار معلمة (parameter) يقوم بإنشاء مقاطع فيديو عالية الجودة من نصوص وصفية.
- نموذج Movie Gen Audio: نموذج يحتوي على 13 مليار معلمة يمكنه إنشاء مسارات صوتية تتزامن مع محتوى الفيديو.
- نموذج Personalized Movie Gen Video: يقوم بإنشاء مقاطع فيديو لأفراد محددين بناءً على نص وصفي وصورة واحدة، مع الحفاظ على ملامحهم.
- نموذج Movie Gen Edit: يسمح هذا النموذج بإجراء تعديلات دقيقة على الفيديو تعتمد على النص، سواء لمقاطع الفيديو الحقيقية أو الخيالية.
تدريب نموذج Meta Movie Gen للفيديو#
تضمنت عملية إنشاء وتدريب نموذج Movie Gen Video عدة عمليات رئيسية. تضمنت الخطوة الأولى جمع وإعداد البيانات المرئية، بما في ذلك الصور ومقاطع الفيديو، وتحديداً للأنشطة البشرية التي تم تصفيتها بناءً على الجودة والحركة والصلة. بعد ذلك، تم إقران البيانات بتعليقات توضيحية نصية تشرح ما كان يحدث داخل كل مشهد. قدمت التعليقات التوضيحية، التي تم توليدها باستخدام نموذج Meta’s LLaMa3-Video، تفاصيل غنية حول محتوى كل مشهد، مما عزز قدرات السرد القصصي البصري للنموذج.
الشكل 3. نظرة عامة على خط أنابيب تنظيم بيانات التدريب المسبق لنموذج Movie Gen Video.
بدأت عملية التعليم بتعلم النموذج كيفية تحويل النص إلى صور منخفضة الدقة. ثم تطورت إلى إنشاء مقاطع فيديو كاملة من خلال مزيج من تدريب تحويل النص إلى صورة وتحويل النص إلى فيديو، باستخدام مرئيات عالية الجودة بشكل متزايد.
قامت أداة تُسمى التشفير التلقائي الزمني (TAE) بضغط مقاطع الفيديو لإدارة أحجام البيانات الكبيرة بكفاءة. أدى الضبط الدقيق إلى زيادة دقة الفيديو، وضمان طريقة تُعرف بموسطة النماذج (حيث تجمع بين مخرجات نماذج متعددة للحصول على نتائج أكثر سلاسة واتساقاً) اتساقاً أكبر في المخرجات. أخيراً، تم رفع دقة الفيديو، الذي كان في البداية بدقة 768p، إلى دقة 1080p حادة باستخدام تقنية التكبير المكاني، والتي تزيد من دقة الصورة عن طريق إضافة بيانات البكسل للحصول على مرئيات أكثر وضوحاً. وكانت النتيجة مخرجات فيديو عالية الجودة ومفصلة.
استكشاف قدرات Meta Movie Gen#
تدعم نماذج Meta Movie Gen بشكل أساسي أربع قدرات مختلفة. دعونا نلقي نظرة فاحصة على كل منها.
توليد الفيديو والصوت#
يمكن لـ Meta Movie Gen توليد مقاطع فيديو عالية الجودة. يمكن أن تصل مدة مقاطع الفيديو هذه إلى 16 ثانية وتعمل بمعدل 16 إطاراً في الثانية (fps)، مما يخلق مرئيات واقعية تلتقط الحركة والتفاعلات وزوايا الكاميرا من المطالبات النصية. وبالاقتران مع نموذج الصوت ذي الـ 13 مليار معلمة، يمكنه إنتاج صوت متزامن، بما في ذلك الأصوات المحيطية، وتأثيرات فولي (Foley)، والموسيقى، لتتناسب مع المرئيات.
يضمن هذا الإعداد تجربة سلسة ونابضة بالحياة، حيث تظل كل من المرئيات والصوت متناسقة وواقعية عبر مختلف المشاهد والمطالبات. على سبيل المثال، تم استخدام هذه النماذج لإنشاء مقاطع فيديو لفرس النهر القزم الفيروسي في تايلاند، والذي يدعى Moo Deng.
الشكل 4. إطار لمقطع فيديو لـ Moo Deng تم إنشاؤه باستخدام Meta Movie Gen.
توليد الفيديو المخصص#
من القدرات الأخرى المثيرة للاهتمام لنموذج Meta Movie Gen هي توليد الفيديو المخصص. يمكن للمستخدمين توفير صورة شخصية ومطالبة نصية تصف كيف يجب توليد مقطع الفيديو، مما ينتج عنه فيديو يتضمن الشخص المرجعي ويدمج التفاصيل المرئية الغنية المحددة في المطالبة النصية. يستخدم النموذج كلا المدخلين (الصورة والنص) للحفاظ على المظهر الفريد للشخص وحركات الجسم الطبيعية، مع اتباع المشهد الموصوف بدقة في المطالبة.
الشكل 5. مثال على قدرة توليد الفيديو المخصص للنموذج.
تحرير الفيديو بدقة#
باستخدام نموذج Movie Gen Edit، يمكن للمستخدمين تقديم مقطع فيديو ونص وصفي كمدخلات لتحرير الفيديو بطرق إبداعية. يجمع النموذج بين توليد الفيديو وتحرير الصور المتقدم لإجراء تعديلات محددة للغاية، مثل إضافة أو إزالة أو استبدال العناصر. يمكنه أيضاً إجراء تغييرات شاملة مثل تعديل خلفية مقطع الفيديو أو النمط العام. ولكن ما يجعل النموذج فريداً حقاً هو دقته: فهو يمكنه استهداف البكسلات المحددة فقط التي تتطلب تحريراً وترك الباقي دون تغيير. وهذا يحافظ على المحتوى الأصلي قدر الإمكان.
الشكل 6. أمثلة متنوعة لقدرات تحرير الفيديو لنموذج Movie Gen Edit.
أدوات قياس الأداء لـ Meta Movie Gen#
إلى جانب نماذج الذكاء الاصطناعي التوليدي، قدمت Meta أيضاً Movie Gen Bench، وهي مجموعة من أدوات القياس المعياري لاختبار أداء نماذج الذكاء الاصطناعي التوليدي. وهي تأتي مع أداتين رئيسيتين: Movie Gen Video Bench وMovie Gen Audio Bench. وكلاهما مصمم لاختبار جوانب مختلفة من توليد الفيديو والصوت.
إليك لمحة عن كلتا الأداتين:
- Movie Gen Video Bench: تتكون من 1003 مطالبة تغطي مجموعة واسعة من فئات الاختبار مثل الأنشطة البشرية، والحيوانات، والمناظر الطبيعية، والفيزياء، فضلاً عن الموضوعات والأنشطة غير العادية. ما يجعل تقييم المعيار هذا قيماً بشكل خاص هو تغطيته لمستويات الحركة، مما يضمن اختبار نموذج توليد الفيديو لكل من التسلسلات السريعة والبطيئة.
- Movie Gen Audio Bench: مصمم لاختبار قدرات توليد الصوت عبر 527 نصاً وصفياً. يتم إقران هذه النصوص بمقاطع فيديو تم إنشاؤها لتقييم مدى قدرة النموذج على مزامنة المؤثرات الصوتية والموسيقى مع المحتوى المرئي.
الشكل 7. يوضح الرسم التخطيطي تفصيلاً لمطالبات التقييم، مع قائمة بالمفاهيم على اليسار وسحابة كلمات للأسماء والأفعال المستخدمة بكثرة على اليمين.
تطبيق عملي لـ Meta Movie Gen#
الآن بعد أن غطينا ماهية نماذج Meta Movie Gen وكيفية عملها، دعونا نستكشف أحد تطبيقاتها العملية.
ابتكارات Movie Gen للذكاء الاصطناعي في صناعة الأفلام#
أحد أكثر استخدامات Meta Movie Gen إثارة هو كيف يمكنها تحويل صناعة الأفلام من خلال إنشاء الفيديو والصوت المدعوم بالذكاء الاصطناعي. باستخدام Movie Gen، يمكن للمبدعين توليد مرئيات وأصوات عالية الجودة من مطالبات نصية بسيطة، مما يفتح آفاقاً جديدة لسرد القصص.
في الواقع، تعاونت Meta مع Blumhouse ومجموعة من صانعي الأفلام، حيث جمعت آرائهم حول كيف يمكن لـ Movie Gen دعم العملية الإبداعية بشكل أفضل. قام صانعو أفلام مثل Aneesh Chaganty وSpurlock Sisters وCasey Affleck باختبار قدرة الأداة على التقاط المزاج، والنبرة، والتوجيه البصري. لقد اكتشفوا أن النماذج ساعدت في إشعال أفكار جديدة.
أظهر هذا البرنامج التجريبي أنه على الرغم من أن Movie Gen لا يحل محل صناعة الأفلام التقليدية، إلا أنه يقدم للمخرجين طريقة جديدة لتجربة العناصر المرئية والصوتية بسرعة وإبداع. كما قدر صناع الأفلام كيف سمحت لهم ميزات التحرير في الأداة باللعب بالأصوات الخلفية والتأثيرات والأنماط المرئية بحرية أكبر.
الشكل 8. إطار من فيلم قصير تم إنشاؤه باستخدام Meta Movie Gen.
أبرز النقاط#
يعد Meta Movie Gen خطوة إلى الأمام في استخدام الذكاء الاصطناعي التوليدي لإنشاء مقاطع فيديو وأصوات عالية الجودة من أوصاف نصية بسيطة. تساعد الأداة المستخدمين على إنشاء مقاطع فيديو واقعية ومخصصة بسهولة. مع قدرات مثل تحرير الفيديو الدقيق وتوليد الوسائط المخصصة، يقدم Meta Movie Gen مجموعة أدوات مرنة تفتح احتمالات جديدة لسرد القصص وصناعة الأفلام وما بعدها. من خلال تسهيل إنشاء مرئيات مفصلة ومفيدة، يعمل Meta Movie Gen على تحويل كيفية صنع مقاطع الفيديو واستخدامها عبر مجالات مختلفة ووضع معيار جديد لإنشاء المحتوى المدعوم بالذكاء الاصطناعي.
لمعرفة المزيد، تفضل بزيارة مستودع GitHub، وتفاعل مع مجتمعنا. استكشف تطبيقات الذكاء الاصطناعي في السيارات ذاتية القيادة والزراعة على صفحات الحلول الخاصة بنا. 🚀
