تقول شركة Adobe إنها تبني نموذجًا للذكاء الاصطناعي لإنشاء الفيديو. لكن هذا لا يكشف بالضبط متى سيتم إطلاق هذا النموذج، أو الكثير عنه بخلاف حقيقة وجوده.
تم اقتراحه كنوع من الإجابة على مشاكل OpenAI سوراأن جوجل الصورة 2 ونماذج منها نمو رقم ل الشركات الناشئة في مساحة فيديو الذكاء الاصطناعي التوليدي الناشئ، نموذج Adobe – جزء من توسيع عائلة Firefly لمنتجات الذكاء الاصطناعي التوليدية – سوف تشق طريقها إلى Premiere Pro، مجموعة تحرير الفيديو الرائدة من Adobe، في وقت لاحق من هذا العام، حسبما أعلنت Adobe.
مثل العديد من أدوات فيديو الذكاء الاصطناعي التوليدية اليوم، يقوم نموذج Adobe بإنشاء تسلسلات من البداية (إما إطارات موجهة أو مرجعية) – ويعمل على تشغيل ثلاث ميزات جديدة في Premiere Pro: إضافة الكائنات وحذف الكائنات والتوسيع التوليدي.
إنهم واضحون بذاتهم.
تتيح إضافة الكائنات للمستخدمين تحديد جزء من مقطع الفيديو (الثلث العلوي، على سبيل المثال، أو الزاوية اليسرى السفلية) وإدخال مطالبة لإدراج كائنات في هذا المقطع. خلال مؤتمر صحفي مع TechCrunch، أظهر متحدث باسم Adobe صورة لحقيبة فعلية مليئة بالماس الذي تم إنشاؤه بواسطة نموذج Adobe.
اعتمادات الصورة: الماس الناتج عن الذكاء الاصطناعي، من Adobe.
يؤدي حذف الكائنات إلى إزالة الكائنات من المقاطع، مثل الميكروفونات ذات الذراع أو فناجين القهوة في خلفية اللقطة.
حذف الكائنات باستخدام الذكاء الاصطناعي. لاحظ أن النتائج ليست مثالية تمامًا. اعتمادات الصورة: أدوبي
أما بالنسبة للامتداد التوليدي، فهو يضيف بضعة إطارات في بداية المقطع أو نهايته (للأسف، لم تحدد Adobe عدد الإطارات). لا يهدف التمديد التوليدي إلى إنشاء مشاهد كاملة، بل إلى إضافة إطارات عازلة لمزامنتها مع الموسيقى التصويرية أو الاحتفاظ بلقطة لإيقاع إضافي، على سبيل المثال لإضافة وزن عاطفي.
اعتمادات الصورة: أدوبي
ولمعالجة الخوف من التزييف العميق الذي ينشأ حتمًا حول أدوات الذكاء الاصطناعي التوليدية مثل هذه، تقول Adobe إنها تقدم بيانات اعتماد المحتوى (البيانات الوصفية لتحديد الوسائط التي تم إنشاؤها بواسطة الذكاء الاصطناعي) في Premiere. إن بيانات اعتماد المحتوى، وهي معيار مصدر الوسائط الذي تدعمه Adobe من خلال مبادرة مصادقة المحتوى الخاصة بها، كانت كذلك بالفعل في برنامج فوتوشوب ومكونًا من قوالب Firefly لإنشاء الصور من Adobe. في Premiere، لن يشيروا فقط إلى المحتوى الذي تم إنشاؤه بواسطة الذكاء الاصطناعي، ولكن أيضًا إلى نموذج الذكاء الاصطناعي الذي تم استخدامه لإنشائه.
سألت Adobe عن البيانات (الصور ومقاطع الفيديو وما إلى ذلك) التي تم استخدامها لتدريب النموذج. لن توضح الشركة كيف (أو إذا) ستقوم بتعويض المساهمين في مجموعة البيانات.
وفي الأسبوع الماضي، نقلت بلومبرج عن مصادر مطلعة على الأمر، ذكرت أن Adobe تدفع للمصورين والفنانين على منصة الوسائط Adobe Stock ما يصل إلى 120 دولارًا مقابل إرسال مقاطع فيديو قصيرة لتدريب نموذج إنشاء الفيديو الخاص بها. من المتوقع أن يتراوح الدفع من حوالي 2.62 دولارًا أمريكيًا لكل دقيقة من الفيديو إلى حوالي 7.25 دولارًا أمريكيًا للدقيقة اعتمادًا على الإرسال، مع لقطات ذات جودة أعلى تتطلب معدلات أعلى نسبيًا.
سيكون هذا تغييرًا عن اتفاقية Adobe الحالية مع فناني ومصوري Adobe Stock الذين تستخدم أعمالهم لتدريب نماذج توليد الصور الخاصة بها. تدفع الشركة لهؤلاء المساهمين مكافأة سنوية، وليس رسومًا لمرة واحدة، بناءً على حجم المحتوى الموجود لديهم في المخزون وكيفية استخدامه – على الرغم من أن هذه مكافأة تخضع لـ “أ” صيغة مبهمة وغير مضمونة من سنة إلى أخرى.
تصف تقارير بلومبرج، إذا كانت دقيقة، نهجًا يتناقض بشكل صارخ مع نهج منافسي الفيديو المولد للذكاء الاصطناعي مثل OpenAI، والذي قال بعد أن قامت بجمع بيانات الويب المتاحة للجمهور – بما في ذلك مقاطع الفيديو من موقع يوتيوب – لتدريب نماذجها. قال الرئيس التنفيذي لموقع YouTube، نيل موهان، مؤخرًا إن استخدام مقاطع فيديو YouTube لتدريب مولد تحويل النص إلى فيديو الخاص بـ OpenAI من شأنه أن ينتهك شروط خدمة النظام الأساسي، مما يسلط الضوء على الهشاشة القانونية لحجة الاستخدام العادل من OpenAI وغيرها.
الشركات، بما في ذلك OpenAI، هي كذلك يكون للمتابعة بعد مزاعم بأنهم ينتهكون قانون الملكية الفكرية من خلال تدريب الذكاء الاصطناعي الخاص بهم على محتوى محمي بحقوق الطبع والنشر دون تقديم ائتمان أو دفع للمالكين. يبدو أن شركة Adobe عازمة على تجنب هذه الغاية، حيث أن منافستها للذكاء الاصطناعي Shutterstock وGetty Images (التي لديها أيضًا صفقات لترخيص بيانات التدريب النموذجية) و- مع تعويضات الملكية الفكرية السياسة – وضع نفسها كخيار “آمن” يمكن التحقق منه لعملاء الشركات.
أما بالنسبة للدفع، فلم تذكر Adobe كم سيكلف العملاء استخدام ميزات إنشاء الفيديو القادمة في Premiere؛ ويمكن الافتراض أن الأسعار لا تزال قيد التحديد. لكن الشركة فعل تكشف أن نظام الدفع سيتبع نظام الاعتمادات التوليدية الذي تم إنشاؤه مع نماذج Firefly الأولى.
بالنسبة للعملاء الذين لديهم اشتراك مدفوع في Adobe Creative Cloud، يتم تجديد الاعتمادات التوليدية شهريًا، مع تخصيصات تتراوح من 25 إلى 1000 شهريًا حسب الخطة. عادةً ما تتطلب أحمال العمل الأكثر تعقيدًا (على سبيل المثال، الصور التي تم إنشاؤها بدقة أعلى أو إنشاء صور متعددة) المزيد من الاعتمادات.
السؤال الكبير الذي يدور في ذهني هو: هل ستتوفر ميزات الفيديو المدعومة بالذكاء الاصطناعي من Adobe؟ قيمة مهما كانت تكلفتها النهائية؟
حتى الآن، كانت نماذج توليد الصور اليراع على نطاق واسع سخر باعتبارها مخيبة للآمال ومعيبة مقارنة بـ Midjourney و OpenAI’s DALL-E 3 والأدوات المنافسة الأخرى. عدم وجود تأخير في الخروج على نموذج الفيديو لا يدفع المرء إلى الاعتقاد بأنه سيتجنب المصير نفسه. لا يهم أيضًا أن Adobe رفضت أن تعرض لي عروضًا توضيحية حية لإضافة كائنات، وإزالة كائنات، والتوسع التوليدي، وأصرت بدلاً من ذلك على شريط مثير تم تسجيله مسبقًا.
ربما للتحوط في رهاناتها، تقول Adobe إنها تجري أيضًا محادثات مع بائعي الطرف الثالث حول دمج نماذج إنشاء الفيديو الخاصة بهم في Premiere، لتشغيل أدوات مثل Geneative Extension والمزيد.
أحد هؤلاء المزودين هو OpenAI.
تقول Adobe إنها تعمل مع OpenAI على طرق دمج Sora في سير عمل Premiere. (إن الارتباط مع OpenAI أمر منطقي نظرًا لأهمية بدء تشغيل الذكاء الاصطناعي. الافتتاحيات في هوليوود مؤخرا; (ومن الجدير بالذكر أن ميرا موراتي، مديرة التكنولوجيا في OpenAI، ستكون حاضرة في مهرجان كان السينمائي لهذا العام.) ومن بين الشركاء الأوائل الآخرين بيكاشركة ناشئة تعمل على إنشاء أدوات الذكاء الاصطناعي لإنشاء مقاطع الفيديو وتحريرها مساروالتي كانت واحدة من أوائل الشركات المصنعة في السوق التي قدمت نموذج فيديو توليدي.
وقال متحدث باسم Adobe إن الشركة ستكون منفتحة للعمل مع الآخرين في المستقبل.
الآن، لكي نكون واضحين، تعتبر عمليات التكامل هذه حاليًا بمثابة تجربة فكرية أكثر من كونها منتجًا عمليًا. أكدت لي Adobe مرارًا وتكرارًا أنها كانت في “معاينة مبكرة” و”بحث” بدلاً من شيء يمكن للعملاء توقع اللعب به في المستقبل القريب.
وأعتقد أن هذا يعكس النغمة العامة لأداة ضغط الفيديو التوليدية من Adobe.
ومن الواضح أن شركة Adobe تحاول من خلال هذه الإعلانات الإشارة إلى أنها تفكر في إنشاء مقاطع فيديو، ولو على أساس أولي فقط. سيكون من الحماقة عدم القيام بذلك: فالوقوع على حين غرة في سباق الذكاء الاصطناعي التوليدي يعني خسارة تدفق إيرادات محتمل جديد وقيم، على افتراض أن الاقتصاد يعمل في نهاية المطاف لصالح أدوبي. (على أية حال، فإن تدريب نماذج الذكاء الاصطناعي وتشغيلها وصيانتها باهظ التكلفة).
لكن ما يظهره -المفاهيم- ليس مقنعًا جدًا بصراحة. مع وجود Sora في البرية وبالتأكيد المزيد من الابتكارات القادمة، فإن الشركة لديها الكثير لتثبته.
Source link
