مجموعة من الباحثين في شركة أدوبي نشرنا مؤخرًا ورقة بحثية حول نموذج ذكاء اصطناعي جديد يسمى VideoGigaGAN ونعتقد أنه قد يتم إطلاقه على منتج مستقبلي. ما تفعله هو ترقية مقاطع الفيديو منخفضة الجودة بما يصل إلى ثمانية أضعاف دقتها الأصلية دون التضحية بالاستقرار أو الجوانب المهمة للمادة المصدر. يمكن العثور على العديد من المقاطع التجريبية على الموقع الإلكتروني للمشروع وإظهار قدراته. يمكنه تحويل مقطع فيديو ضبابي بدقة 128 × 128 بكسل لشلال إلى لقطات يتم تشغيلها بدقة 1024 × 1024 بكسل.
مشاركة بواسطة @luokai
عرض على المواضيع
ما هو جدير بالملاحظة في الذكاء الاصطناعي هو أنه لا يبخل بالتفاصيل الدقيقة. نسيج الجلد، والتجاعيد، وخيوط الشعر، وأكثر من ذلك تظهر على وجوه البشر. تتميز العروض التوضيحية الأخرى أيضًا بمستوى مماثل من الجودة. يمكنك رؤية البجعة تسبح في البركة والزهرة على الشجرة بشكل أفضل بفضل هذه التقنية. قد يبدو من الغريب التركيز كثيرًا على تجاعيد الجلد أو الريش. ومع ذلك، فإن هذا المستوى من التفاصيل هو ما تفضله الشركات أدوبي يجب أن يثبتوا إذا كانوا يهدفون إلى تطبيق الذكاء الاصطناعي المعزز للصور على نطاق واسع.
تحسين الذكاء الاصطناعي
ربما لديك بعض الأسئلة حول أحدث مشروع للمنصة مثل كيف يعمل؟ حسنًا، الأمر معقد.
يشير مصطلح “GAN” في VideoGigaGAN إلى شبكة الخصومة التوليدية، وهو نوع من الذكاء الاصطناعي قادر على إنشاء صور واقعية. أدوبييعتمد إصدار جيجاغان والتي تتخصص في رفع مستوى المحتوى الذي تم إنشاؤه بالإضافة إلى الصور الحقيقية. المشكلة مع هذه التكنولوجيا، كما الحافة يشير إلى أنه لا يمكن تحسين جودة مقاطع الفيديو دون ظهور مشكلات متعددة مثل القطع الأثرية الغريبة. لحل هذه المشكلة، استخدم باحثو Adobe مجموعة متنوعة من التقنيات.
تشرح ورقة البحث العملية برمتها. يمكنك قراءتها بنفسك لتحصل على الصورة كاملة رغم أنها مادة كثيفة. بشكل أساسي، قدموا “وحدة نشر موجهة بالتدفق” لضمان الاتساق بين إطارات الفيديو، ومكافحة التعرج لتقليل الشوائب، و”مكوك الميزات عالي التردد” للتعويض عن الانخفاض المفاجئ في التفاصيل. هناك ما هو أكثر في VideoGigaGAN مما وصفناه للتو، ولكن هذا هو جوهره.
الإدراج المحتمل
هل سنرى ذلك في أحد منتجات Adobe القادمة أم سنطرحه كتطبيق مستقل؟ على الأرجح – على الأقل نعتقد ذلك.
في العام الماضي، ركزت الشركة بشكل كبير على تطبيق الذكاء الاصطناعي في برامجها منذ إطلاقها يراعة ل مساعد أكروبات الجديد. قبل بضعة أشهر خلال Adobe MAX 2023، تم الإشارة إلى أداة ترقية الفيديو باسم مشروع الدقة يصل تمت معاينته في الحدث وأدائه يشبه ما نراه في عروض VideoGigaGAN التجريبية. ينتقل فيلم قديم من أربعينيات القرن العشرين من العرض بدقة صورة تبلغ 480 × 360 إلى دقة واضحة تصل إلى 1280 × 960. وتصبح اللقطات الباهتة لفيل في النهر واضحة تمامًا. حتى أن المقدم يذكر كيف يمكن للبرنامج رفع مستوى المقطع إلى أربعة أضعاف الجودة الأصلية.
من المسلم به أن هذا مجرد تخمين، لكن من الممكن تمامًا أن يكون VideoGigaGAN هو المحرك وراء Res-Up. يمكن لمنتج Adobe المستقبلي أن يمنح الأشخاص طريقة لترقية مقاطع الفيديو العائلية القديمة أو اللقطات منخفضة الجودة إلى الفيلم الذي نتصوره في أذهاننا. ربما تكون المعاينة الأخيرة بمثابة إشارة إلى إصدار وشيك.
لا يزال VideoGigaGAN في طور التطوير، لذا من غير المعروف متى سيتم إصداره أو ما إذا كان سيتم إصداره. هناك عدة عقبات في الطريق. لا يستطيع الذكاء الاصطناعي معالجة مقاطع الفيديو التي تتجاوز 200 إطار بشكل صحيح أو عرض كائنات صغيرة، ولكننا سنراقب ذلك بالتأكيد.
في غضون ذلك، تحقق من قائمة TechRadar لـ أفضل أدوات ترقية الصور بالذكاء الاصطناعي لعام 2024.
قد يعجبك ايضا
- يبدو أحدث نموذج للصور من Adobe Firefly بمثابة قفزة أجيال ولا أستطيع الانتظار لتجربته
- فيديو Sora الجديد من OpenAI عبارة عن رحلة بطائرة بدون طيار FPV عبر أغرب محادثة TED رأيتها على الإطلاق – وأحتاج إلى الاستلقاء
- شاهد هذا: توضح Adobe كيف سيغير Sora من OpenAI برنامج Premiere Pro وتحرير الفيديو إلى الأبد