أخبرناك منذ فترة عن 10 مواقع لإنشاء مقاطع فيديو احترافية في دقائق قليلة باستخدام الذكاء الاصطناعي . نقدم لك هذه المرة معلومات حول مشروع غوغل الجديد، VideoPoet AI، البرنامج الذي يستخدم LLM لتحويل أي نص إلى فيديو.
ليست هذه هي المرة الأولى التي نسمع فيها هذا، حيث قامت شركات أخرى بالفعل بمشاركة معلومات حول المشاريع التي تعد بهذه الخدمة نفسها، كما فعلت ميتا مع Make-A-Video. حتى غوغل نفسها تقوم بتمويل وقدمت مشروعين للذكاء الاصطناعي لإنشاء الفيديو يسمى Imagen Video وPhenaki. ومع ذلك، يختلف VideoPoet AI، بمعنى أن هذا الذكاء الاصطناعي يتم إنشاؤه مباشرة بواسطة فريق غوغل ويعد بأن يكون متفوقًا.VideoPoet هو نموذج لغة تجريبي كبير، أو LLM، يمكنه إنشاء مقاطع فيديو بناءً على مطالبة نصية. يعد هؤلاء من غوغل في ورقة العرض التقديمي VideoPoet أنه بفضلLLM في هذا البرنامج، يمكن إنشاء أي مشهد خيالي يمكنك التفكير فيه وكتابته في ثوانٍ. إنه مثل استخدام DALL-E 3، ولكن بدلاً من إنشاء الصور، سيتم إنشاء مقاطع فيديو كاملة.
بالإضافة إلى إنشاء مقاطع الفيديو، يتيح لك VideoPoet AI إمكانية تحرير مقاطع الفيديو الموجودة بالفعل، على سبيل المثال، إذا كان لديك مقطع فيديو مقطوع به مشهد مفقود، يمكنك أن تطلب من Google AI ملء المساحة المفقودة بأي شيء تريد إضافته. كما يسمح لك بإنشاء مقاطع فيديو من صورة، على سبيل المثال، يمكنك إدخال صورة للموناليزا وتطلب من VideoPoet عمل فيديو لامرأة تتثاءب. وستكون النتيجة مقطع فيديو للموناليزا وهي تتثاءب في نفس بيئة الصورة التي أدخلتها.
هناك فرق رئيسي بين الذكاء الاصطناعي لإنشاء الفيديو الذي تم الإعلان عنه بالفعل من قبل شركات أخرى و VideoPoet AI. يعتمد هذا الاختلاف على طريقة العمل، نظرًا لأن الخيارات الأكثر إثارة للاهتمام الموجودة لإنشاء مقاطع فيديو باستخدام الذكاء الاصطناعي تعتمد على نموذج نشر مستقر لإنشاء المحتوى الذي تطلبه، كما يفعل Stable Video Diffusion، على سبيل المثال. بينما يستخدم VideoPoet برنامج LLM الخاص به لتحويل الصور ومقاطع الفيديو والصوت إلى رموز مميزة، ثم يقوم بتحليلها وتجميعها بناءً على توافقها.
لتسهيل فهم المقارنة، فكر في مولدات الفيديو الأخرى كفنان يستمد من الصور الموجودة لإنشاء الفيديو الذي تطلبه إطارًا بإطار. بينما يقوم VideoPoet AI بتحويل كل معلومات الوسائط المتعددة هذه إلى لغته الخاصة ثم يشكل مقاطع فيديو كما لو كان يقوم بتكوين جمل.ومن أجل تحقيق ذلك، قامت غوغل بشكل أساسي بتزويد VideoPoet AI بكمية كبيرة من المعلومات لفهم العلاقة بين النصوص والصور المختلفة. كما زودته أيضًا كمية كبيرة من المواد السمعية والبصرية لاستخدامها عند إنشاء ما تطلبه منه. وهذا لا يسمح لك فقط بإنشاء أي شيء يمكن أن يبتكره خيالك، بل يمكنك أيضًا تعديله بسهولة بحيث يتناسب الفيديو مع رؤيتك الأصلية.
from حوحو للمعلوميات https://ift.tt/ejGhO4i
via IFTTT