Luma Dream Machine اسم على مسمى لإنشاء الفيديوهات من النصوص Ai
سأغوص في LumaLabs Dream Machine وهو تطبيق مدفوع بالذكاء الاصطناعي مصمم لتحويل الطريقة التي ننشئ بها مقاطع الفيديو الفنية. لقد أمضيت بعض الوقت في اختبار ميزاته، وأنا هنا لأشارك مراجعة صادقة لقدراته وسهولة استخدامه والجودة الإجمالية لمقاطع الفيديو التي ينتجها. في وقت الوعود وتواريخ الإصدار التي تم تأجيلها، كنت مهتمًا حقًا بتجربة ما يمكن أن يفعله Dream Machine. وعندما قلت مراجعة صادقة، كنت أعني صادقة حقاً.
تعتبر دريم ماشين من لوما لابز خطوة رائعة في مجال فيديو الذكاء الاصطناعي التوليدي. من المحتمل أنهم استخدموا الخبرة في النمذجة ثلاثية الأبعاد التوليدية لتحسين فهم الحركة في الفيديو - لكنها لا تزال تبدو وكأنها فجوة مؤقتة لفيديو الذكاء الاصطناعي الحقيقي. على مدار العامين الماضيين، تحول إنشاء صور الذكاء الاصطناعي من تمثيل غريب منخفض الدقة للبشر بأصابع ووجوه متعددة تبدو أشبه بشيء قد يرسمه إدوارد مونش أكثر من كونها صورة فوتوغرافية إلى أن تصبح غير قابلة للتمييز عن الواقع تقريبًا.
فيديو الذكاء الاصطناعي أكثر تعقيدًا. لا يحتاج فقط إلى تكرار واقعية الصورة الفوتوغرافية، بل يحتاج أيضًا إلى فهم الفيزياء في العالم الحقيقي وكيف يؤثر ذلك على الحركة - عبر المشاهد والأشخاص والحيوانات والمركبات والأشياء. في الوقت الحالي، أعتقد أن أفضل أدوات الفيديو التي تعمل بالذكاء الاصطناعي من المفترض استخدامها جنبًا إلى جنب مع صناعة الأفلام التقليدية بدلاً من استبدالها - لكننا نقترب مما يتوقعه آشتون كوتشر بأنه عصر حيث يمكن للجميع صنع أفلامهم الطويلة الخاصة بهم. لقد أنشأت Luma Labs واحدة من أقرب أدوات الحركة إلى الواقع لقد رأيت الكثير من الأدوات حتى الآن ولكنها لا تزال أقل من المطلوب. لا أعتقد أنها بمستوى Sora، لكن لا يمكنني مقارنتها بمقاطع الفيديو التي صنعتها بنفسي باستخدام Sora - فقط ما رأيته من صناع الأفلام و OpenAI أنفسهم ومن المرجح أن تكون مختارة بعناية من مئات الإخفاقات.
قام Abel Art، وهو فنان ذكاء اصطناعي متعطش كان لديه وصول مبكر إلى Dream Machine، بإنشاء بعض الأعمال المثيرة للإعجاب. لكنه قال إنه يحتاج إلى إنشاء مئات الأجيال فقط لمدة دقيقة واحدة من الفيديو لجعله متماسكًا وبمجرد التخلص من المقاطع غير القابلة للاستخدام. تبلغ نسبته حوالي 500 مقطع لدقيقة واحدة من الفيديو، مع كل مقطع يبلغ حوالي 5 ثوانٍ، فإنه يتخلص من 98٪ من اللقطات لإنشاء المشهد المثالي. أظن أن النسبة بالنسبة لـ Pika Labs و Runway أعلى وتشير التقارير إلى أن Sora لديه معدل تجاهل مماثل، على الأقل من صناع الأفلام الذين استخدموه. في الوقت الحالي، أعتقد أن أفضل أدوات الذكاء الاصطناعي للفيديو من المفترض استخدامها جنبًا إلى جنب مع صناعة الأفلام التقليدية بدلاً من استبدالها - لكننا نقترب من ما يتوقعه آشتون كوتشر وهو عصر حيث يمكن للجميع صنع أفلامهم الطويلة الخاصة بهم.
لقد خاضت Luma Labs، شركة الذكاء الاصطناعي المعروفة بنموذجها الثلاثي الأبعاد التوليدي Genie، مجال الفيديو بالذكاء الاصطناعي باستخدام Dream Machine، وكانت النتائج مبهرة. لقد أدى الطلب المرتفع لتجربة Dream Machine إلى زيادة تحميل خوادم Luma، مما استلزم وجود نظام انتظار. لقد قضيت الليل كله في انتظار معالجة مطالباتي وتحويلها إلى مقاطع فيديو، ولكن بمجرد وصولي إلى مقدمة قائمة الانتظار، تستغرق عملية "الحلم" الفعلية حوالي دقيقتين.
شارك مستخدمو الوصول المبكر مقاطع فيديو على وسائل التواصل الاجتماعي بدت جيدة للغاية لدرجة يصعب تصديقها، مما يشير إلى انتقاء أفضل ما يمكن. ومع ذلك، بعد تجربتها بنفسي، يمكنني تأكيد قدراتها المذهلة. في حين أنها قد لا تنافس Sora أو Kling بعد، إلا أنها تبرز كواحدة من الأفضل من حيث الالتزام الفوري وفهم الحركة. على عكس Sora، فإن Dream Machine متاح للجميع اليوم. يستمر كل مقطع فيديو تم إنشاؤه حوالي خمس ثوانٍ، وهو ما يقرب من ضعف طول مقاطع Runway أو Pika Labs بدون ملحقات، وحتى أن بعض مقاطع الفيديو تتضمن لقطات متعددة. لقد أنشأت عدة مقاطع أثناء اختباراتي. كان أحدها جاهزًا في حوالي ثلاث ساعات، بينما استغرقت المقاطع الأخرى معظم الليل. أظهرت بعض المقاطع مزجًا أو تشويشًا مشكوكًا فيه، ولكن بشكل عام، التقطت الحركة بشكل أفضل من أي نموذج آخر جربته.
تضمنت مطالباتي تسلسلات المشي والرقص والجري. غالبًا ما كانت النماذج القديمة تقدم كائنات تتحرك للخلف أو تتعامل بشكل غير صحيح مع حركات معينة مثل تكبير العربة. ومع ذلك، التقطت Dream Machine مفاهيم الحركة بدقة دون الحاجة إلى مواصفات مفصلة لمنطقة الحركة. تم تنفيذ تسلسلات الجري بشكل جيد بشكل خاص. التحكم الدقيق ضئيل، ويعتمد بشكل أساسي على المطالبة. قد يكون هذا الاعتماد على المطالبات بسبب حالة النموذج الجديد، مع تعزيز الذكاء الاصطناعي للمطالبة باستخدام نموذج اللغة الخاص به. يساعد هذا النهج، الذي يستخدمه أيضًا Ideogram وLeonardo لتوليد الصور، في توفير تصور أكثر وصفًا للنتيجة المرجوة. تعمل نماذج الفيديو القائمة على تقنية انتشار المحول، مثل Haiper، بشكل أفضل أيضًا عندما يكون المطالبة هي التركيز الرئيسي. يُقال أيضًا أن Sora تعمل بمطالبات نصية بسيطة وضوابط إضافية بسيطة.
Dream Machine هو فرع من الذكاء الاصطناعي للنمذجة ثلاثية الأبعاد من Luma Labs، وهو مولد فيديو قوي قائم على الويب. على عكس Sora الذي تم الترويج له بشدة من OpenAI، فهو متاح الآن للجمهور بعد اختبار تجريبي مكثف. تعد واجهة النص والصور المألوفة بمقاطع فيديو عالية الجودة وواقعية، على الرغم من عدم تضمين صوت أو موسيقى خلفية. لا يدعم المحتوى غير الآمن للعمل. في حين أن بعض الإبداعات التي صنعها الآخرون مثيرة للإعجاب بالتأكيد، فما مدى عمليتها للمستخدم العادي؟ لقد تعاملت بشكل عملي مع أحدث طراز لمعرفة كيفية عمله، وما يمكن إنجازه، وما إذا كان يفي بمعايير أدوات الذكاء الاصطناعي العامة الأخرى مثل Runaway وKling وLucas.
تعتبر دريم ماشين من لوما لابز خطوة رائعة في مجال فيديو الذكاء الاصطناعي التوليدي. من المحتمل أنهم استخدموا الخبرة في النمذجة ثلاثية الأبعاد التوليدية لتحسين فهم الحركة في الفيديو - لكنها لا تزال تبدو وكأنها فجوة مؤقتة لفيديو الذكاء الاصطناعي الحقيقي. على مدار العامين الماضيين، تحول إنشاء صور الذكاء الاصطناعي من تمثيل غريب منخفض الدقة للبشر بأصابع ووجوه متعددة تبدو أشبه بشيء قد يرسمه إدوارد مونش أكثر من كونها صورة فوتوغرافية إلى أن تصبح غير قابلة للتمييز عن الواقع تقريبًا.
فيديو الذكاء الاصطناعي أكثر تعقيدًا. لا يحتاج فقط إلى تكرار واقعية الصورة الفوتوغرافية، بل يحتاج أيضًا إلى فهم الفيزياء في العالم الحقيقي وكيف يؤثر ذلك على الحركة - عبر المشاهد والأشخاص والحيوانات والمركبات والأشياء. في الوقت الحالي، أعتقد أن أفضل أدوات الفيديو التي تعمل بالذكاء الاصطناعي من المفترض استخدامها جنبًا إلى جنب مع صناعة الأفلام التقليدية بدلاً من استبدالها - لكننا نقترب مما يتوقعه آشتون كوتشر بأنه عصر حيث يمكن للجميع صنع أفلامهم الطويلة الخاصة بهم. لقد أنشأت Luma Labs واحدة من أقرب أدوات الحركة إلى الواقع لقد رأيت الكثير من الأدوات حتى الآن ولكنها لا تزال أقل من المطلوب. لا أعتقد أنها بمستوى Sora، لكن لا يمكنني مقارنتها بمقاطع الفيديو التي صنعتها بنفسي باستخدام Sora - فقط ما رأيته من صناع الأفلام و OpenAI أنفسهم ومن المرجح أن تكون مختارة بعناية من مئات الإخفاقات.
قام Abel Art، وهو فنان ذكاء اصطناعي متعطش كان لديه وصول مبكر إلى Dream Machine، بإنشاء بعض الأعمال المثيرة للإعجاب. لكنه قال إنه يحتاج إلى إنشاء مئات الأجيال فقط لمدة دقيقة واحدة من الفيديو لجعله متماسكًا وبمجرد التخلص من المقاطع غير القابلة للاستخدام. تبلغ نسبته حوالي 500 مقطع لدقيقة واحدة من الفيديو، مع كل مقطع يبلغ حوالي 5 ثوانٍ، فإنه يتخلص من 98٪ من اللقطات لإنشاء المشهد المثالي. أظن أن النسبة بالنسبة لـ Pika Labs و Runway أعلى وتشير التقارير إلى أن Sora لديه معدل تجاهل مماثل، على الأقل من صناع الأفلام الذين استخدموه. في الوقت الحالي، أعتقد أن أفضل أدوات الذكاء الاصطناعي للفيديو من المفترض استخدامها جنبًا إلى جنب مع صناعة الأفلام التقليدية بدلاً من استبدالها - لكننا نقترب من ما يتوقعه آشتون كوتشر وهو عصر حيث يمكن للجميع صنع أفلامهم الطويلة الخاصة بهم.
لقد خاضت Luma Labs، شركة الذكاء الاصطناعي المعروفة بنموذجها الثلاثي الأبعاد التوليدي Genie، مجال الفيديو بالذكاء الاصطناعي باستخدام Dream Machine، وكانت النتائج مبهرة. لقد أدى الطلب المرتفع لتجربة Dream Machine إلى زيادة تحميل خوادم Luma، مما استلزم وجود نظام انتظار. لقد قضيت الليل كله في انتظار معالجة مطالباتي وتحويلها إلى مقاطع فيديو، ولكن بمجرد وصولي إلى مقدمة قائمة الانتظار، تستغرق عملية "الحلم" الفعلية حوالي دقيقتين.
شارك مستخدمو الوصول المبكر مقاطع فيديو على وسائل التواصل الاجتماعي بدت جيدة للغاية لدرجة يصعب تصديقها، مما يشير إلى انتقاء أفضل ما يمكن. ومع ذلك، بعد تجربتها بنفسي، يمكنني تأكيد قدراتها المذهلة. في حين أنها قد لا تنافس Sora أو Kling بعد، إلا أنها تبرز كواحدة من الأفضل من حيث الالتزام الفوري وفهم الحركة. على عكس Sora، فإن Dream Machine متاح للجميع اليوم. يستمر كل مقطع فيديو تم إنشاؤه حوالي خمس ثوانٍ، وهو ما يقرب من ضعف طول مقاطع Runway أو Pika Labs بدون ملحقات، وحتى أن بعض مقاطع الفيديو تتضمن لقطات متعددة. لقد أنشأت عدة مقاطع أثناء اختباراتي. كان أحدها جاهزًا في حوالي ثلاث ساعات، بينما استغرقت المقاطع الأخرى معظم الليل. أظهرت بعض المقاطع مزجًا أو تشويشًا مشكوكًا فيه، ولكن بشكل عام، التقطت الحركة بشكل أفضل من أي نموذج آخر جربته.
تضمنت مطالباتي تسلسلات المشي والرقص والجري. غالبًا ما كانت النماذج القديمة تقدم كائنات تتحرك للخلف أو تتعامل بشكل غير صحيح مع حركات معينة مثل تكبير العربة. ومع ذلك، التقطت Dream Machine مفاهيم الحركة بدقة دون الحاجة إلى مواصفات مفصلة لمنطقة الحركة. تم تنفيذ تسلسلات الجري بشكل جيد بشكل خاص. التحكم الدقيق ضئيل، ويعتمد بشكل أساسي على المطالبة. قد يكون هذا الاعتماد على المطالبات بسبب حالة النموذج الجديد، مع تعزيز الذكاء الاصطناعي للمطالبة باستخدام نموذج اللغة الخاص به. يساعد هذا النهج، الذي يستخدمه أيضًا Ideogram وLeonardo لتوليد الصور، في توفير تصور أكثر وصفًا للنتيجة المرجوة. تعمل نماذج الفيديو القائمة على تقنية انتشار المحول، مثل Haiper، بشكل أفضل أيضًا عندما يكون المطالبة هي التركيز الرئيسي. يُقال أيضًا أن Sora تعمل بمطالبات نصية بسيطة وضوابط إضافية بسيطة.
ما هو Dream Machine؟
Dream Machine هو نموذج ذكاء اصطناعي مصمم لإنشاء مقاطع فيديو عالية الجودة وواقعية بسرعة من النصوص والصور. تم وضع Dream Machine كنموذج محول عالي الكفاءة وقابل للتطوير، ويتم تدريبه مباشرة على مقاطع الفيديو، مما يسمح له من المفترض بإنشاء لقطات دقيقة ومتسقة ومليئة بالأحداث، مما يؤدي إلى إنشاء مقطع فيديو مدته 5 ثوانٍ. تم وصف Dream Machine بأنها الخطوة الأولى نحو بناء محرك خيال عالمي، وهي الآن متاحة للجميع، بهدف إحداث ثورة في الطريقة التي نتعامل بها مع إنشاء الفيديو باستخدام الذكاء الاصطناعي.Dream Machine هو فرع من الذكاء الاصطناعي للنمذجة ثلاثية الأبعاد من Luma Labs، وهو مولد فيديو قوي قائم على الويب. على عكس Sora الذي تم الترويج له بشدة من OpenAI، فهو متاح الآن للجمهور بعد اختبار تجريبي مكثف. تعد واجهة النص والصور المألوفة بمقاطع فيديو عالية الجودة وواقعية، على الرغم من عدم تضمين صوت أو موسيقى خلفية. لا يدعم المحتوى غير الآمن للعمل. في حين أن بعض الإبداعات التي صنعها الآخرون مثيرة للإعجاب بالتأكيد، فما مدى عمليتها للمستخدم العادي؟ لقد تعاملت بشكل عملي مع أحدث طراز لمعرفة كيفية عمله، وما يمكن إنجازه، وما إذا كان يفي بمعايير أدوات الذكاء الاصطناعي العامة الأخرى مثل Runaway وKling وLucas.
نظام التسعير Luma Dream Machine
1- الخطة المجانية:
هذه الطبقة التمهيدية مثالية لأولئك الذين بدأوا للتو أو يجربون إنشاء فيديو الذكاء الاصطناعي. وهي تشمل ما يصل إلى 30 جيلاً شهريًا بدون تكلفة، مما يسمح للمستخدمين باستكشاف الميزات الأساسية.
2- الخطة القياسية:
بسعر 29.99$ شهرياً، تزيد هذه الخطة عدد الأجيال المتاحة إلى 120.
3- الخطة الاحترافية:
بالنسبة للمبدعين المحترفين الذين يحتاجون إلى قدرات أكثر قوة، تقدم الخطة الاحترافية 400 جيل شهريًا مقابل 99.99$.
4- الخطة المميزة:
بسعر 499.99$ شهريًا، تعد هذه الخطة الأكثر تقدمًا، حيث تقدم زيادة كبيرة إلى 2000 جيل شهريًا.
في الممارسة العملية، نظرًا لزيادة عدد الفنانين المتحمسين الذين يختبرون حدود الاعتمادات المجانية الخاصة بهم، يبدو النظام مثقلًا بعض الشيء. والنتيجة؟ وقت انتظار يشبه فيلم الإثارة والتشويق، ويبقيك في حيرة من أمرك باستمرار. في تجربتي الخاصة، قرر مقطع فيديو تم وعده بمرح أن يكون في 9 دقائق أن يسلك مسارًا خلابًا، مما أدى إلى تمديد تلك الدقائق التسع إلى ساعتين مريحتين. وعندما تعتقد أنك قد أتقنت التوقيت، فإن الأمر يشبه لعبة الأفعوانية لإدارة التوقعات - القفز من 10 دقائق إلى ساعتين، ثم ربما العودة إلى الأسفل.
يقدم التطبيق أداءً قويًا، حيث ينشئ مقاطع فيديو تُظهر في الغالب دقة وتماسكًا أعلى مما يُرى عادةً من الأدوات التي تعمل بالذكاء الاصطناعي حاليًا. تتماسك القوام والألوان وديناميكيات مقاطع الفيديو معًا بشكل جيد في ظل مجموعة متنوعة من الاتجاهات الفنية، ولكنها تعمل بشكل أفضل في الإعدادات الواقعية.
بعد ذلك، حاولت إنشاء بعض الرسوم المتحركة، ويجب أن أقول إنني مندهش. هناك الكثير من الألوان، والكثير من الحركة، وهي متماسكة حقًا. ما لا يعجبني حقًا هو الافتقار إلى التشريح البشري؛ تحدث التغييرات بسرعة كبيرة والأجسام متحولة حقًا. مشكلة أخرى رأيتها هي تشريح اليدين، المشكلة الدائمة للذكاء الاصطناعي. حصلت على بعض الأصابع المتعددة وبعض الأيدي ذات الشكل الغريب، ولكن بصرف النظر عن ذلك، كان تماسك المقطع جيدًا جدًا.
سأظل دائمًا أحب لقطات المناظر الطبيعية، لذا يمكنك رؤية مثال واحد على ذلك. تضمنت المشكلات لقطة طائرة بدون طيار، وأنا أحب حقًا الطريقة التي تسير بها الأمور، ولكنني لا أحب ذلك في بعض الأجزاء، حيث تكون الصورة مفرطة التعرض للضوء بينما تبدو الصخور والمنحدرات مظلمة للغاية وتفتقر إلى أي نوع من الملمس، وخاصة في المسافة، حيث يبدو أن كل شيء يندمج في ضبابية كبيرة.
أحد العناصر التي أحب دمجها في صوري، والآن مقاطع الفيديو، هو استخدام المنظور. أنا من محبي كوبريك، وخاصة كيف يتدفق عبر كل تلك اللقطات المنظورية ويمنحك شعورًا عاطفيًا. هنا لدينا محاولتي لصنع الرعب مع شخص يركض ثم يصطدم بعالم موازٍ. كنت أتساءل عما إذا كانت لوما قادرة على مواكبة الشخص الذي يركض في خط مستقيم ومنظور واحد لجعله يبدو أكثر غرابة. لا أستطيع أن أقول إنني راضٍ حقًا عن النتيجة لأنها متقطعة، والأشخاص يندمجون، ولكن بشكل عام، فإن الشعور والأجواء حدودية للغاية، وهو التأثير الذي أردت تحقيقه.
لقد استخدمت إحدى الصور المفضلة لدي وأدرجتها في Luma، وقد أذهلتني هذه الصورة حقًا. لم أستثمر في المطالبة، لذلك لم تكن وصفية للغاية. أنا حقًا أحب الطريقة التي تتحرك بها الانعكاسات، واللحظة التي تلخص فيها القصة في 5 ثوانٍ. ربما تكون هذه الصورة هي الأكثر فخرًا بها. لقد حاولت أن أجعل شبحًا فيكتوريًا ينزل الدرج، وكان ذلك جيدًا حقًا لأنه حافظ على نغمة الصورة والجو. ومع ذلك، يمكنك رؤية الحركة المتقطعة للشبح وهو ينزل الدرج. في نهاية الفيديو، يتغير تعبير وجه الشبح، وهو أمر لم أدفعه إلى ذلك. وقد أثر هذا علي في التفكير في كيفية تأثيره على القصص المستقبلية الأخرى.
بشكل عام، أعتقد أن Luma أداة رائعة قيد التطوير ولديها الكثير من الإمكانات. في المستقبل القريب، من المؤكد أنها ستتوسع كثيرًا، ويمكننا توقع العديد من التحسينات لأنها تستمع إلى احتياجات المستخدمين. ومع ذلك، لا أعتقد أن مقاطع الفيديو التي يتم إنتاجها باستخدام الذكاء الاصطناعي ستحل محل التصوير السينمائي تمامًا في المستقبل القريب لأننا ما زلنا غير قادرين على التحكم في كل حركة وكل جانب منطقي وكل التفاصيل التي نريدها. طالما أننا بشر ونريد التحكم في كل التفاصيل، فلن يمنحنا الذكاء الاصطناعي النتائج التي نريدها. ومع ذلك، أعتقد أن لوما والأدوات المماثلة ستعمل على خفض تكلفة الإنتاج بشكل كبير وتوفر المزيد من الفرص الإبداعية، مما يتيح إنشاء أشياء لم نكن لنتخيل أبدًا أنها ستصبح حقيقة.
Luma Dream Machine هي نموذج نص إلى فيديو تم إنشاؤه بواسطة Luma Labs. تتضمن بعض الأمثلة على المشاهد الخيالية والرائعة الموجودة على موقعهم على الويب دبًا قطبيًا واقعيًا يتجول عبر منظر طبيعي شتوي هادئ، وفراشات بأجنحة نابضة بالحياة ترفرف حول جهاز تلفزيون عتيق في غابة مسحورة، ورجل يمشي على طول شاطئ من عالم آخر بينما تغرب الشمس في مجموعة مذهلة من الألوان.
مثل Sora من OpenAI، يتيح Dream Machine للمستخدمين إدخال مطالبة نصية لإنشاء مقطع فيديو يطابق الإدخال. ماذا يحدث خلف الكواليس؟ لسنا متأكدين تمامًا، حيث أن تفاصيل بيانات تدريب النموذج ليست عامة. لكن يمكن لأي شخص تجربته مجانًا حاليًا، لذلك بصفتي أحد خبراء الفيديو المقيمين لدينا، قررت تجربته لمعرفة ما يمكنه فعله. يمكن للمستخدمين المجانيين إنشاء ما يصل إلى 30 جيلًا شهريًا ولكن ليس أكثر من 5 في اليوم. سيكون كل مقطع فيديو تم إنشاؤه 5 ثوانٍ، ولكن يمكنك تمديد الفيديو مقابل رصيد إضافي. في وقت الاختبار (يونيو 2024)، استغرق النموذج ما بين 10 و45 دقيقة لتوليد مقطع فيديو واحد.
تمثل Dream Machine من Luma Labs تقدمًا رائعًا في فيديو الذكاء الاصطناعي التوليدي. يبدو أنهم استفادوا من خبرتهم في النمذجة ثلاثية الأبعاد التوليدية لتعزيز فهم الحركة في الفيديو. ومع ذلك، لا يزال يبدو وكأنه حل مؤقت على الطريق إلى فيديو الذكاء الاصطناعي المتطور حقًا. على مدار العامين الماضيين، تطور إنشاء الصور بالذكاء الاصطناعي بشكل ملحوظ. لقد انتقلت من إنتاج تمثيلات بشرية غريبة ومنخفضة الدقة بأصابع متعددة ووجوه سريالية، تذكرنا بعمل إدوارد مونش، إلى إنشاء صور لا يمكن تمييزها تقريبًا عن الواقع.
ومع ذلك، فإن فيديو الذكاء الاصطناعي أكثر تعقيدًا بشكل كبير. لا يجب أن يكرر الواقعية الفوتوغرافية فحسب، بل يجب أن يفهم أيضًا الفيزياء في العالم الحقيقي وكيف تؤثر على الحركة عبر المشاهد، بما في ذلك الأشخاص والحيوانات والمركبات والأشياء. طورت Luma Labs واحدة من أكثر أدوات الحركة واقعية التي واجهتها، لكنها لا تزال أقل مما هو مطلوب. في حين أنها قد لا تصل إلى مستوى Sora، لا يمكنني مقارنتها مباشرة بمقاطع الفيديو التي أنشأتها باستخدام Sora - فقط بتلك التي شاركها صناع الأفلام و OpenAI، والتي من المحتمل أن تكون أفضل الاختيارات من العديد من المحاولات. أنتج Abel Art، وهو فنان ذكاء اصطناعي متحمس كان لديه وصول مبكر إلى Dream Machine، بعض الأعمال المثيرة للإعجاب. ومع ذلك، ذكر أنه يحتاج إلى إنشاء مئات التكرارات لإنتاج فيديو متماسك لمدة دقيقة واحدة بعد التخلص من المقاطع غير القابلة للاستخدام.
منذ الضجة الهائلة التي أحاطت بجهاز Sora من OpenAI، لا يمر شهر دون الإعلان عن مولد فيديو جديد للذكاء الاصطناعي. هذه المرة، نلقي نظرة على Dream Machine من Luma AI. وفقًا لصفحة المنتج، فإن النموذج الذي تم إطلاقه حديثًا يصنع مقاطع فيديو عالية الجودة وواقعية من النص ويفعل ذلك بسرعة. لكن الأمر الأكثر إثارة للاهتمام حول هذا المولد، هو أنه يمكن لأي شخص تجربته الآن مجانًا. دعنا نجربه، أليس كذلك؟
هذه ليست المرة الأولى التي نكتب فيها عن Luma AI. أنا من المعجبين الكبار بعمليات المسح الضوئي ثلاثية الأبعاد الآلية، والتي يمكن للمستخدمين إنشاؤها من مقاطع فيديو بسيطة للهواتف الذكية. في رأيي، هذه الميزة مفيدة بشكل خاص لاستكشاف الموقع (يمكنك مشاهدة سير العمل بالكامل موضحًا في منشور الفيديو هذا). حتى أن المطورين يطلقون على أنفسهم اسم "شركة الذكاء الاصطناعي ثلاثي الأبعاد"، لذلك كان من غير المتوقع أن نراهم ينضمون إلى سباق إنشاء الفيديو. ولكن مرة أخرى، ربما يمكنهم نقل معرفتهم وأطنان من اللقطات الممسوحة ضوئيًا إلى نموذج عمل. لا يمكنك معرفة ذلك إلا إذا حاولت.
الافتقار الحالي إلى المرونة. لا يمكنك إنشاء مقاطع أطول من 5 ثوانٍ من البداية، أو إضافة مطالبات سلبية، أو تغيير نسبة العرض إلى الارتفاع. على الأقل في الوقت الحالي. يذكر المطورون في قسم الأسئلة الشائعة أنهم يعملون على عناصر تحكم إضافية للإصدارات القادمة من Dream Machine وأنهم منفتحون على التعليقات على قناة Discord الخاصة بهم.
ما هي انطباعاتك الأولى عن برنامج Dream Machine من Luma AI؟ هل جربته بالفعل؟ نحن ندرك أن هناك مناقشة ضخمة حول برامج توليد الفيديو التي تعتمد على الذكاء الاصطناعي في صناعتنا. ما رأيك فيه؟ دعنا نتحدث في التعليقات أدناه ومشاركة المقال بأي مكان.
نظرة عامة على ميزات Luma Dream Machine
يحتوي التطبيق على واجهة سهلة الاستخدام حقًا. يمكن للمبتدئين التنقل عبر ميزاته بسهولة. ما عليك سوى كتابة مطالبتك أو إدراج صورة مرجعية للبدء بها. هذا كل شيء. يمكنك عرض معرض الفيديو وخطة الحساب. في معرض الفيديو، يمكنك مشاهدة مقاطع الفيديو المنتهية والموجودة في قائمة الانتظار. ما طول قائمة الانتظار؟ وفقًا للموقع الإلكتروني، 120 إطارًا في 120 ثانية. ومع ذلك، إذا كنت تخطط لاستراحة الفشار حول هذا التقدير، فقد ينتهي بك الأمر جائعًا.في الممارسة العملية، نظرًا لزيادة عدد الفنانين المتحمسين الذين يختبرون حدود الاعتمادات المجانية الخاصة بهم، يبدو النظام مثقلًا بعض الشيء. والنتيجة؟ وقت انتظار يشبه فيلم الإثارة والتشويق، ويبقيك في حيرة من أمرك باستمرار. في تجربتي الخاصة، قرر مقطع فيديو تم وعده بمرح أن يكون في 9 دقائق أن يسلك مسارًا خلابًا، مما أدى إلى تمديد تلك الدقائق التسع إلى ساعتين مريحتين. وعندما تعتقد أنك قد أتقنت التوقيت، فإن الأمر يشبه لعبة الأفعوانية لإدارة التوقعات - القفز من 10 دقائق إلى ساعتين، ثم ربما العودة إلى الأسفل.
1- جودة Luma Dream Machine
عند تقييم جودة مخرجات Dream Machine، من الواضح أن أداة الذكاء الاصطناعي هذه تقف فوق العديد من الأدوات الأخرى في مجال إنشاء الفيديو. مقاطع الفيديو المنتجة مثيرة للإعجاب، خاصة عندما تفكر في الطفولة النسبية لهذه التكنولوجيا. في حين أن النتائج قد لا تكون جاهزة لملء دقة شاشة السينما (حتى الآن)، إلا أنها بلا شك تحويلية لهذا المجال.يقدم التطبيق أداءً قويًا، حيث ينشئ مقاطع فيديو تُظهر في الغالب دقة وتماسكًا أعلى مما يُرى عادةً من الأدوات التي تعمل بالذكاء الاصطناعي حاليًا. تتماسك القوام والألوان وديناميكيات مقاطع الفيديو معًا بشكل جيد في ظل مجموعة متنوعة من الاتجاهات الفنية، ولكنها تعمل بشكل أفضل في الإعدادات الواقعية.
2- تحويل النص إلى فيديو Luma Dream Machine
لنبدأ بإعدادات تحويل النص إلى مطالبة. كان هذا أحد أجيالي الأولى، وأردت تصوير شخص يدخل غرفة بعد حريق. أنا حقًا أحب حركة الكاميرا لأنك تستطيع الحصول على شعور بالاهتزاز وكأن شخصًا ما يدخل الغرفة ويشعر بالخطوات. أنا أحب لقطة الكاميرا السريعة التي تجعل الأدرينالين يرتفع. بشكل عام، إنه لطيف، ولكن هناك الكثير من القطع الأثرية التي لا تتناسب، خاصة في نهاية اللقطة.بعد ذلك، حاولت إنشاء بعض الرسوم المتحركة، ويجب أن أقول إنني مندهش. هناك الكثير من الألوان، والكثير من الحركة، وهي متماسكة حقًا. ما لا يعجبني حقًا هو الافتقار إلى التشريح البشري؛ تحدث التغييرات بسرعة كبيرة والأجسام متحولة حقًا. مشكلة أخرى رأيتها هي تشريح اليدين، المشكلة الدائمة للذكاء الاصطناعي. حصلت على بعض الأصابع المتعددة وبعض الأيدي ذات الشكل الغريب، ولكن بصرف النظر عن ذلك، كان تماسك المقطع جيدًا جدًا.
سأظل دائمًا أحب لقطات المناظر الطبيعية، لذا يمكنك رؤية مثال واحد على ذلك. تضمنت المشكلات لقطة طائرة بدون طيار، وأنا أحب حقًا الطريقة التي تسير بها الأمور، ولكنني لا أحب ذلك في بعض الأجزاء، حيث تكون الصورة مفرطة التعرض للضوء بينما تبدو الصخور والمنحدرات مظلمة للغاية وتفتقر إلى أي نوع من الملمس، وخاصة في المسافة، حيث يبدو أن كل شيء يندمج في ضبابية كبيرة.
أحد العناصر التي أحب دمجها في صوري، والآن مقاطع الفيديو، هو استخدام المنظور. أنا من محبي كوبريك، وخاصة كيف يتدفق عبر كل تلك اللقطات المنظورية ويمنحك شعورًا عاطفيًا. هنا لدينا محاولتي لصنع الرعب مع شخص يركض ثم يصطدم بعالم موازٍ. كنت أتساءل عما إذا كانت لوما قادرة على مواكبة الشخص الذي يركض في خط مستقيم ومنظور واحد لجعله يبدو أكثر غرابة. لا أستطيع أن أقول إنني راضٍ حقًا عن النتيجة لأنها متقطعة، والأشخاص يندمجون، ولكن بشكل عام، فإن الشعور والأجواء حدودية للغاية، وهو التأثير الذي أردت تحقيقه.
3- تحويل الصورة إلى فيديو Luma Dream Machine
لقد رأيت الكثير من المستخدمين على X وInstagram يستخدمون صورهم، ويدرجونها في Luma للحصول على نتائج وموضوعات وصور أفضل يريدونها. لذا، قمت بوضع بعض صور Midjourney في Luma، ولنرى كيف سارت الأمور. بالنسبة للشيء الأول، قمت بإدراج صورة لمنظر طبيعي غريب، وأنا حقًا أحب الطريقة التي تبدأ بها الحركة كما لو كان شخص ما يختبئ خلف الصخور ويراقب. يمنحني ذلك القليل من أجواء حرب النجوم، وهو ما لم يكن قصدي حقًا. ومع ذلك، فأنا حقًا أحب التفاصيل - كيف احتفظت Luma بالتفاصيل وملمس الأحجار والمباني والفضاء البعيد.لقد استخدمت إحدى الصور المفضلة لدي وأدرجتها في Luma، وقد أذهلتني هذه الصورة حقًا. لم أستثمر في المطالبة، لذلك لم تكن وصفية للغاية. أنا حقًا أحب الطريقة التي تتحرك بها الانعكاسات، واللحظة التي تلخص فيها القصة في 5 ثوانٍ. ربما تكون هذه الصورة هي الأكثر فخرًا بها. لقد حاولت أن أجعل شبحًا فيكتوريًا ينزل الدرج، وكان ذلك جيدًا حقًا لأنه حافظ على نغمة الصورة والجو. ومع ذلك، يمكنك رؤية الحركة المتقطعة للشبح وهو ينزل الدرج. في نهاية الفيديو، يتغير تعبير وجه الشبح، وهو أمر لم أدفعه إلى ذلك. وقد أثر هذا علي في التفكير في كيفية تأثيره على القصص المستقبلية الأخرى.
بشكل عام، أعتقد أن Luma أداة رائعة قيد التطوير ولديها الكثير من الإمكانات. في المستقبل القريب، من المؤكد أنها ستتوسع كثيرًا، ويمكننا توقع العديد من التحسينات لأنها تستمع إلى احتياجات المستخدمين. ومع ذلك، لا أعتقد أن مقاطع الفيديو التي يتم إنتاجها باستخدام الذكاء الاصطناعي ستحل محل التصوير السينمائي تمامًا في المستقبل القريب لأننا ما زلنا غير قادرين على التحكم في كل حركة وكل جانب منطقي وكل التفاصيل التي نريدها. طالما أننا بشر ونريد التحكم في كل التفاصيل، فلن يمنحنا الذكاء الاصطناعي النتائج التي نريدها. ومع ذلك، أعتقد أن لوما والأدوات المماثلة ستعمل على خفض تكلفة الإنتاج بشكل كبير وتوفر المزيد من الفرص الإبداعية، مما يتيح إنشاء أشياء لم نكن لنتخيل أبدًا أنها ستصبح حقيقة.
Luma Dream Machine هي نموذج نص إلى فيديو تم إنشاؤه بواسطة Luma Labs. تتضمن بعض الأمثلة على المشاهد الخيالية والرائعة الموجودة على موقعهم على الويب دبًا قطبيًا واقعيًا يتجول عبر منظر طبيعي شتوي هادئ، وفراشات بأجنحة نابضة بالحياة ترفرف حول جهاز تلفزيون عتيق في غابة مسحورة، ورجل يمشي على طول شاطئ من عالم آخر بينما تغرب الشمس في مجموعة مذهلة من الألوان.
مثل Sora من OpenAI، يتيح Dream Machine للمستخدمين إدخال مطالبة نصية لإنشاء مقطع فيديو يطابق الإدخال. ماذا يحدث خلف الكواليس؟ لسنا متأكدين تمامًا، حيث أن تفاصيل بيانات تدريب النموذج ليست عامة. لكن يمكن لأي شخص تجربته مجانًا حاليًا، لذلك بصفتي أحد خبراء الفيديو المقيمين لدينا، قررت تجربته لمعرفة ما يمكنه فعله. يمكن للمستخدمين المجانيين إنشاء ما يصل إلى 30 جيلًا شهريًا ولكن ليس أكثر من 5 في اليوم. سيكون كل مقطع فيديو تم إنشاؤه 5 ثوانٍ، ولكن يمكنك تمديد الفيديو مقابل رصيد إضافي. في وقت الاختبار (يونيو 2024)، استغرق النموذج ما بين 10 و45 دقيقة لتوليد مقطع فيديو واحد.
تمثل Dream Machine من Luma Labs تقدمًا رائعًا في فيديو الذكاء الاصطناعي التوليدي. يبدو أنهم استفادوا من خبرتهم في النمذجة ثلاثية الأبعاد التوليدية لتعزيز فهم الحركة في الفيديو. ومع ذلك، لا يزال يبدو وكأنه حل مؤقت على الطريق إلى فيديو الذكاء الاصطناعي المتطور حقًا. على مدار العامين الماضيين، تطور إنشاء الصور بالذكاء الاصطناعي بشكل ملحوظ. لقد انتقلت من إنتاج تمثيلات بشرية غريبة ومنخفضة الدقة بأصابع متعددة ووجوه سريالية، تذكرنا بعمل إدوارد مونش، إلى إنشاء صور لا يمكن تمييزها تقريبًا عن الواقع.
ومع ذلك، فإن فيديو الذكاء الاصطناعي أكثر تعقيدًا بشكل كبير. لا يجب أن يكرر الواقعية الفوتوغرافية فحسب، بل يجب أن يفهم أيضًا الفيزياء في العالم الحقيقي وكيف تؤثر على الحركة عبر المشاهد، بما في ذلك الأشخاص والحيوانات والمركبات والأشياء. طورت Luma Labs واحدة من أكثر أدوات الحركة واقعية التي واجهتها، لكنها لا تزال أقل مما هو مطلوب. في حين أنها قد لا تصل إلى مستوى Sora، لا يمكنني مقارنتها مباشرة بمقاطع الفيديو التي أنشأتها باستخدام Sora - فقط بتلك التي شاركها صناع الأفلام و OpenAI، والتي من المحتمل أن تكون أفضل الاختيارات من العديد من المحاولات. أنتج Abel Art، وهو فنان ذكاء اصطناعي متحمس كان لديه وصول مبكر إلى Dream Machine، بعض الأعمال المثيرة للإعجاب. ومع ذلك، ذكر أنه يحتاج إلى إنشاء مئات التكرارات لإنتاج فيديو متماسك لمدة دقيقة واحدة بعد التخلص من المقاطع غير القابلة للاستخدام.
منذ الضجة الهائلة التي أحاطت بجهاز Sora من OpenAI، لا يمر شهر دون الإعلان عن مولد فيديو جديد للذكاء الاصطناعي. هذه المرة، نلقي نظرة على Dream Machine من Luma AI. وفقًا لصفحة المنتج، فإن النموذج الذي تم إطلاقه حديثًا يصنع مقاطع فيديو عالية الجودة وواقعية من النص ويفعل ذلك بسرعة. لكن الأمر الأكثر إثارة للاهتمام حول هذا المولد، هو أنه يمكن لأي شخص تجربته الآن مجانًا. دعنا نجربه، أليس كذلك؟
هذه ليست المرة الأولى التي نكتب فيها عن Luma AI. أنا من المعجبين الكبار بعمليات المسح الضوئي ثلاثية الأبعاد الآلية، والتي يمكن للمستخدمين إنشاؤها من مقاطع فيديو بسيطة للهواتف الذكية. في رأيي، هذه الميزة مفيدة بشكل خاص لاستكشاف الموقع (يمكنك مشاهدة سير العمل بالكامل موضحًا في منشور الفيديو هذا). حتى أن المطورين يطلقون على أنفسهم اسم "شركة الذكاء الاصطناعي ثلاثي الأبعاد"، لذلك كان من غير المتوقع أن نراهم ينضمون إلى سباق إنشاء الفيديو. ولكن مرة أخرى، ربما يمكنهم نقل معرفتهم وأطنان من اللقطات الممسوحة ضوئيًا إلى نموذج عمل. لا يمكنك معرفة ذلك إلا إذا حاولت.
ما تعد به أداة Dream Machine من Luma AI
في الوصف، تقدم Luma AI أداة Dream Machine باعتبارها نموذجًا عالي الجودة لتحويل النص إلى فيديو (وتحويل الصورة إلى فيديو) قادر على توليد لقطات دقيقة ومتسقة ومليئة بالأحداث. كما أشادوا بسرعتها المذهلة: حيث يُزعم أن الشبكة العصبية يمكنها توليد 120 إطارًا في 120 ثانية (ملحوظة: أظهرت اختباراتي أن هذا ليس هو الحال دائمًا لأن بعض الأجيال استغرقت ما يصل إلى 7 دقائق). ميزة أخرى بارزة لهذه الأداة هي اتساقها حيث تفهم أداة Dream Machine كيفية تفاعل الأشخاص والحيوانات والأشياء مع العالم المادي. يتيح لك هذا إنشاء مقاطع فيديو ذات اتساق رائع للشخصيات وفيزياء دقيقة.القيود الحالية لـ Dream Machine من Luma AI
قد يواجه مولد الفيديو AI هذا (مثل غيره من المولدات المتاحة بالفعل في السوق) صعوبة كبيرة في التعامل مع حركة البشر أو الحيوانات. حاول إنشاء كلب يركض، وستلاحظ أنه لا يحرك أقدامه على الإطلاق. في الإصدار الحالي، لا يمكن لـ Dream Machine من Luma AI إدراج أو إنشاء أي نص متماسك و/أو ذي معنى. التحول هو أيضًا مشكلة ويمكن أن يحدث بانتظام. وهذا يعني أن الأشياء الخاصة بك يمكن أن تغير أشكالها أثناء الحركات أو الأفعال المعقدة.الافتقار الحالي إلى المرونة. لا يمكنك إنشاء مقاطع أطول من 5 ثوانٍ من البداية، أو إضافة مطالبات سلبية، أو تغيير نسبة العرض إلى الارتفاع. على الأقل في الوقت الحالي. يذكر المطورون في قسم الأسئلة الشائعة أنهم يعملون على عناصر تحكم إضافية للإصدارات القادمة من Dream Machine وأنهم منفتحون على التعليقات على قناة Discord الخاصة بهم.
أصبح برنامج Dream Machine من Luma AI متاحاً للتجربة
بشكل عام، يبدو برنامج Dream Machine من Luma AI أكثر تقدمًا من برامج توليد الفيديو الأخرى التي تعتمد على الذكاء الاصطناعي والتي اختبرتها حتى الآن. حيث أن اتساق النتائج أعلى، وتبدو وجوه الأشخاص أكثر واقعية، والحركة ليست سيئة للغاية أيضًا. ومع ذلك، فهو لا يزال بعيدًا كل البعد عن ما يعد به برنامج Sora من OpenAI ويعرضه. ولكن طالما أننا لا نستطيع وضع أيدينا عليه، فإن الوعود تظل وعودًا. يمكنك تجربة Dream Machine هنا. حاليًا، يحصل المستخدمون على 5 أجيال مجانية يوميًا. وهناك أيضًا خطط مدفوعة ستمنحك تنزيلات خالية من العلامات المائية وحقوق تجارية و30 جيلًا مجانيًا + 120 جيلًا مدفوعًا. يمكنك الذهاب للأداة عبر الرابط https://lumalabs.ai/dream-machine.ما هي انطباعاتك الأولى عن برنامج Dream Machine من Luma AI؟ هل جربته بالفعل؟ نحن ندرك أن هناك مناقشة ضخمة حول برامج توليد الفيديو التي تعتمد على الذكاء الاصطناعي في صناعتنا. ما رأيك فيه؟ دعنا نتحدث في التعليقات أدناه ومشاركة المقال بأي مكان.
