Meta Movie Gen: إعادة تصور إنشاء المحتوى

سواء كنت صانع أفلام طموحًا أو منشئ محتوى يستمتع بإعداد مقاطع الفيديو لجمهوره، فإن امتلاك أدوات ذكاء اصطناعي توسّع نطاق إبداعك يكون مفيدًا دائمًا. مؤخرًا، أطلقت Meta أحدث نماذجها التوليدية للفيديو، المعروف باسم Meta Movie Gen.

من المتوقع أن يصل سوق الذكاء الاصطناعي التوليدي العالمي في قطاعي الإعلام والترفيه إلى 11.57 مليار دولار بحلول عام 2033، مع تصدّر شركات مثل Runway وOpenAI وMeta لمسيرة الابتكارات الرائدة. ويُعد Meta Movie Gen، على وجه الخصوص، مناسبًا لتطبيقات مثل صناعة الأفلام وإنشاء محتوى الفيديو والسرد الرقمي، إذ يجعل تحويل الرؤى الإبداعية إلى واقع من خلال مقاطع فيديو عالية الجودة مولّدة بالذكاء الاصطناعي أسهل من أي وقت مضى. في هذه المقالة، سنستكشف Meta Movie Gen وكيفية عمله. كما سنلقي نظرة فاحصة على بعض تطبيقاته. فلنبدأ!

الشكل 1. إطار من مقطع فيديو مولّد باستخدام Meta Movie Gen.

ما هو Meta Movie Gen؟#

قبل أن نناقش ماهية Meta Movie Gen، دعونا نلقِ نظرة على كيفية ظهوره.

بدأت جهود Meta البحثية المتعلقة بـالذكاء الاصطناعي التوليدي بسلسلة نماذج Make-A-Scene. ويركّز هذا البحث على أسلوب متعدد الوسائط للذكاء الاصطناعي التوليدي يساعد الفنانين وأصحاب الرؤى على تحويل خيالهم إلى واقع. ويمكن للفنانين إدخال صور أو أصوات أو مقاطع فيديو أو رسوم متحركة ثلاثية الأبعاد للحصول على مخرجات الصور التي يرغبون فيها. وجاءت القفزة الابتكارية التالية مع نماذج الانتشار مثل نماذج Llama Image Foundation (Emu)، التي أتاحت توليد صور ومقاطع فيديو بجودة أعلى بكثير، ومكّنت من تحرير الصور.

الشكل 2. مثال على استخدام الرسم التخطيطي والإدخال النصي في Make-A-Scene للحصول على صورة مولّدة.

يمثّل Movie Gen أحدث إسهامات Meta في أبحاث الذكاء الاصطناعي التوليدي. فهو يجمع بين جميع الوسائط المذكورة سابقًا، ويتيح تحكمًا أدق، بحيث يمكن للناس استخدام النماذج بطرق أكثر إبداعًا. وMeta Movie Gen عبارة عن مجموعة من النماذج الأساسية لتوليد أنواع مختلفة من الوسائط، بما في ذلك تحويل النص إلى فيديو، وتحويل النص إلى صوت، وتحويل النص إلى صورة. وتتكوّن المجموعة من أربعة نماذج دُرّبت على مزيج من مجموعات البيانات المرخّصة والمتاحة للعامة.

إليك لمحة سريعة عن هذه النماذج:

• نموذج Movie Gen Video: نموذج يضم 30 مليار معلمة ويولّد مقاطع فيديو عالية الجودة انطلاقًا من مطالبات نصية.
• نموذج Movie Gen Audio: نموذج يضم 13 مليار معلمة ويمكنه إنشاء مقاطع صوتية متزامنة مع محتوى الفيديو.
• نموذج Personalized Movie Gen Video: يولّد مقاطع فيديو لأفراد محددين استنادًا إلى مطالبة نصية وصورة واحدة، مع الحفاظ على ملامحهم.
• نموذج Movie Gen Edit: يتيح النموذج إجراء تعديلات تفصيلية على مقاطع الفيديو الحقيقية والخيالية بالاعتماد على النص.

تدريب نموذج Meta Movie Gen للفيديو#

تضمّن إنشاء نموذج Movie Gen Video وتدريبه عدة عمليات أساسية. تمثلت الخطوة الأولى في جمع البيانات المرئية وإعدادها، بما في ذلك الصور ومقاطع الفيديو، التي تُظهر أنشطة بشرية في المقام الأول، مع ترشيحها وفقًا للجودة والحركة ومدى الصلة. ثم اقترنت البيانات بتعليقات نصية تشرح ما يحدث في كل مشهد. وقدّمت التعليقات، التي أُنشئت باستخدام نموذج LLaMa3 من Meta-Video، تفاصيل غنية عن محتوى كل مشهد، مما عزّز قدرات النموذج على السرد المرئي.

الشكل 3. نظرة عامة على خط أنابيب تنسيق بيانات ما قبل تدريب نموذج Movie Gen Video.

بدأت عملية التدريب بتعلّم النموذج تحويل النص إلى صور منخفضة الدقة. ثم انتقلت العملية إلى إنشاء مقاطع فيديو كاملة من خلال الجمع بين التدريب على تحويل النص إلى صورة والتدريب على تحويل النص إلى فيديو، باستخدام مرئيات تتزايد جودتها تدريجيًا.

ضغطت أداة تُسمّى المشفّر التلقائي الزمني (TAE) مقاطع الفيديو لإدارة كميات كبيرة من البيانات بكفاءة. وأسهم الضبط الدقيق في زيادة حدة جودة الفيديو، بينما ضمنت طريقة تُسمّى متوسط النماذج (تجمع بين مخرجات نماذج متعددة للحصول على نتائج أكثر سلاسة واتساقًا) اتساقًا أكبر للمخرجات. وأخيرًا، رُفعت دقة الفيديو، الذي كان في البداية بدقة 768p، إلى دقة 1080p واضحة باستخدام تقنية رفع الدقة المكاني، التي تزيد دقة الصورة بإضافة بيانات بكسلات للحصول على مرئيات أوضح. وكانت النتيجة مخرجات فيديو عالية الجودة وغنية بالتفاصيل.

استكشاف إمكانات Meta Movie Gen#

تدعم نماذج Meta Movie Gen أربع قدرات مختلفة أساسية. دعونا نلقِ نظرة فاحصة على كل منها.

توليد الفيديو والصوت#

يمكن لـ Meta Movie Gen توليد مقاطع فيديو عالية الجودة. ويمكن أن تصل مدة مقاطع الفيديو هذه إلى 16 ثانية، وأن تعمل بمعدل 16 fps (إطارًا في الثانية)، لتنشئ مرئيات واقعية تلتقط الحركة والتفاعلات وزوايا الكاميرا انطلاقًا من المطالبات النصية. وبالاقتران مع نموذج الصوت ذي 13 مليار معلمة، يمكنه إنتاج صوت متزامن، بما في ذلك الأصوات المحيطة ومؤثرات Foley والموسيقى، بما يتوافق مع المرئيات.

يضمن هذا الإعداد تجربة سلسة وواقعية، تظل فيها المرئيات والصوت متوافقين وواقعيين عبر مختلف المشاهد والمطالبات. فعلى سبيل المثال، استُخدمت هذه النماذج لإنشاء مقاطع فيديو لفرس النهر القزم التايلاندي واسع الانتشار، الذي يُسمّى Moo Deng.

الشكل 4. إطار من مقطع فيديو لـ Moo Deng أُنشئ باستخدام Movie Gen من Meta.

توليد الفيديو المخصص#

من القدرات الأخرى المثيرة للاهتمام في نموذج Meta Movie Gen توليد الفيديو المخصص. ويمكن للمستخدمين تقديم صورة لشخص ومطالبة نصية تصف كيفية إنشاء مقطع الفيديو، لينتج عن ذلك فيديو يتضمن الشخص المرجعي ويضم التفاصيل المرئية الغنية المحددة في المطالبة النصية. ويستخدم النموذج كلا المدخلين (الصورة والنص) للحفاظ على مظهر الشخص الفريد وحركات جسمه الطبيعية، مع اتباع المشهد الموصوف في المطالبة بدقة.

الشكل 5. مثال على قدرة النموذج على توليد فيديو مخصص.

تحرير الفيديو بدقة#

باستخدام نموذج Movie Gen Edit، يمكن للمستخدمين تقديم مقطع فيديو ومطالبة نصية معًا كمدخلين لتحرير الفيديو بطرق إبداعية. ويجمع النموذج بين توليد الفيديو وتحرير الصور المتقدم لإجراء تعديلات محددة للغاية، مثل إضافة العناصر أو إزالتها أو استبدالها. كما يمكنه إجراء تغييرات شاملة، مثل تعديل خلفية مقطع الفيديو أو أسلوبه العام. لكن ما يجعل النموذج فريدًا حقًا هو دقته؛ إذ يمكنه استهداف وحدات البكسل المحددة التي تتطلب التحرير فقط وترك الباقي دون تغيير. ويحافظ ذلك على المحتوى الأصلي قدر الإمكان.

الشكل 6. أمثلة متنوعة على قدرات نموذج Movie Gen Edit في تحرير الفيديو.

أدوات قياس أداء Meta Movie Gen#

إلى جانب نماذج الذكاء الاصطناعي التوليدي، قدّمت Meta أيضًا Movie Gen Bench، وهي حزمة من أدوات قياس الأداء لاختبار أداء نماذج الذكاء الاصطناعي التوليدي. وتتضمن أداتين رئيسيتين: Movie Gen Video Bench وMovie Gen Audio Bench. وقد صُممت كلتاهما لاختبار جوانب مختلفة من توليد الفيديو والصوت.

إليك لمحة عن الأداتين:

• Movie Gen Video Bench: يتكوّن من 1003 مطالبات تغطي مجموعة واسعة من فئات الاختبار، مثل الأنشطة البشرية والحيوانات والمشاهد الطبيعية والفيزياء، إضافةً إلى الموضوعات والأنشطة غير المألوفة. وتكمن قيمة معيار التقييم هذا بصورة خاصة في تغطيته لمستويات الحركة، مما يضمن اختبار نموذج توليد الفيديو على المقاطع السريعة والمتسلسلات الأبطأ على حد سواء.
• Movie Gen Audio Bench: صُمم لاختبار قدرات توليد الصوت عبر 527 مطالبة. وتقترن هذه المطالبات بمقاطع فيديو مولّدة لتقييم مدى قدرة النموذج على مزامنة المؤثرات الصوتية والموسيقى مع المحتوى المرئي.

الشكل 7. يوضّح الرسم التخطيطي تفصيل مطالبات التقييم، مع قائمة بالمفاهيم على اليسار وسحابة كلامية للأسماء والأفعال الشائعة الاستخدام على اليمين.

تطبيق عملي لـ Meta Movie Gen#

بعد أن استعرضنا ماهية نماذج Meta Movie Gen وكيفية عملها، دعونا نستكشف أحد تطبيقاتها العملية.

ابتكارات Movie Gen في الذكاء الاصطناعي لصناعة الأفلام#

من أكثر استخدامات Movie Gen من Meta إثارةً قدرته على تحويل صناعة الأفلام من خلال إنشاء الفيديو والصوت المدعوم بالذكاء الاصطناعي. وباستخدام Movie Gen، يمكن للمبدعين توليد مرئيات وأصوات عالية الجودة انطلاقًا من مطالبات نصية بسيطة، مما يفتح آفاقًا جديدة لسرد القصص.

في الواقع، تعاونت Meta مع Blumhouse ومجموعة من صانعي الأفلام، وجمعت ملاحظاتهم حول أفضل السبل التي يمكن لـ Movie Gen من خلالها دعم العملية الإبداعية. واختبر صانعو أفلام مثل Aneesh Chaganty وSpurlock Sisters وCasey Affleck قدرة الأداة على التقاط الحالة المزاجية والنبرة والتوجيه المرئي. واكتشفوا أن النماذج ساعدت على إطلاق أفكار جديدة.

أظهر هذا البرنامج التجريبي أنه رغم أن Movie Gen لا يحل محل صناعة الأفلام التقليدية، فإنه يمنح المخرجين طريقة جديدة للتجريب بالعناصر المرئية والصوتية بسرعة وإبداع. كما قدّر صانعو الأفلام كيف تتيح لهم ميزات التحرير في الأداة التلاعب بأصوات الخلفية والمؤثرات والأساليب المرئية بحرية أكبر.

الشكل 8. إطار من فيلم قصير أُنشئ باستخدام Meta Movie Gen.

أهم النقاط المستخلصة#

يمثّل Meta Movie Gen خطوة إلى الأمام في استخدام الذكاء الاصطناعي التوليدي لإنشاء مقاطع فيديو وأصوات عالية الجودة من أوصاف نصية بسيطة. وتساعد الأداة المستخدمين على إنشاء مقاطع فيديو واقعية ومخصصة بسهولة. وبفضل قدرات مثل تحرير الفيديو بدقة وتوليد الوسائط المخصصة، يقدّم Meta Movie Gen مجموعة أدوات مرنة تفتح إمكانات جديدة لسرد القصص وصناعة الأفلام وما يتجاوزهما. ومن خلال تسهيل إنشاء مرئيات مفصلة ومفيدة، يغيّر Meta Movie Gen طريقة إنشاء مقاطع الفيديو واستخدامها في مختلف المجالات، ويرسي معيارًا جديدًا لإنشاء المحتوى المدعوم بالذكاء الاصطناعي.

لمعرفة المزيد، تفضل بزيارة مستودع GitHub الخاص بنا، وتفاعل مع مجتمعنا. واستكشف تطبيقات الذكاء الاصطناعي في السيارات ذاتية القيادة والزراعة على صفحات حلولنا. 🚀