وان 2.2

الوصف

وان 2.2 هو نموذج مفتوح المصدر لتوليد الفيديو يُعتبر الأول الذي يقدم بنية مختلط الخبراء (MoE) في انتشار الفيديو. تم تطويره بواسطة مختبر تونغ يي التابع لشركة علي بابا، ويتيح للمستخدمين إنشاء مقاطع فيديو سينمائية من النصوص أو الصور بدقة 480 بكسل و720 بكسل، مع توفر أوزان النموذج الكاملة للتنزيل على GitHub.

يؤكد النموذج على التحكم في الرؤية السينمائية من خلال إتقان عميق للغة اللقطات، مما يوفر تحكمًا دقيقًا في الإضاءة، واللون، والتكوين لأساليب متنوعة. يقدم نموذج I2V-A14B لتحويل الصور إلى فيديو توليد فيديو مستقر مع فيزياء واقعية، وحركة طبيعية، وتقليل الحركات غير الواقعية للكاميرا، بينما يعيد فهم الحركة المتقدم إنشاء حركات معقدة مثل الرقص، والباركور، والتزلج على الجليد مع سلاسة محسنة. تزيد بنية MoE من سعة النموذج مع الحفاظ على الكفاءة الحسابية.

يتضمن وان 2.2 أيضًا خط أنابيب إنشاء بصري محسّن ينتج صورًا مُحسّنة للتكامل مع الفيديو في المراحل التالية، تم ضبطها باستخدام بيانات جمالية مختارة للإضاءة، والتكوين، واللون. تم تدريبه على 65.6% من الصور أكثر من الإصدارات السابقة، مما يحسن التعميم عبر الحركة، والدلالات، والجماليات. كونه مفتوح المصدر بالكامل، يمكن للمطورين والمبدعين تنزيله وتشغيله بأنفسهم، وتشارك مجتمع عالمي أعمالهم المبنية على النموذج.

الميزات الأساسية لـ وان 2.2

• نموذج مفتوح المصدر مع أوزان قابلة للتنزيل بالكامل على GitHub

• بنية مختلط الخبراء (MoE) لزيادة السعة مع الكفاءة

• توليد الفيديو من النصوص والصور بدقة 480 بكسل و720 بكسل

• نموذج I2V-A14B لتوليد مستقر مع فيزياء واقعية

• فهم متقدم للحركة لحركات معقدة وسلسة

• تحكم سينمائي في الإضاءة، واللون، والتكوين

• خط أنابيب توليد صور محسّن للفيديو مع ضبط جمالي

• إخراج بدقة 720 بكسل بمعدل 24 إطارًا في الثانية مع أداء محسّن

كيفية استخدام وان 2.2؟

1. 1

   قم بتنزيل النموذج: احصل على وان 2.2 مع أوزانه الكاملة من GitHub.

2. 2

   اختر وضعًا: استخدم توليد الفيديو من النصوص أو الصور.

3. 3

   قدم المدخلات: اكتب نصًا أو قدم صورة بداية، يمكن إعدادها اختياريًا باستخدام خط الأنابيب البصري.

4. 4

   قم بضبط التحكم السينمائي: حدد الإضاءة، واللون، والتكوين، والحركة لأسلوبك المطلوب.

5. 5

   قم بالتوليد: أنتج مقطع سينمائي بدقة 480 بكسل أو 720 بكسل.

حالات استخدام وان 2.2

• توليد فيديو سينمائي من النصوص
• إنشاء فيديو من الصور
• توليد مستضاف ذاتيًا
• محتوى كثيف الحركة

الأسئلة الشائعة من وان 2.2

• ما هو وان 2.2؟

  يُعتبر وان 2.2 أول نموذج مفتوح المصدر لتوليد الفيديو من مختلط الخبراء في العالم، تم تطويره بواسطة مختبر تونغ يي التابع لشركة علي بابا لإنشاء الفيديو من النصوص والصور بدقة تصل إلى 720 بكسل.

• هل وان 2.2 مفتوح المصدر حقًا؟

  نعم. إنه مفتوح المصدر بالكامل مع أوزان نموذج كاملة، ويمكنك تنزيله من GitHub وتشغيله بنفسك.

• ما هي الدقات التي يدعمها؟

  يدعم كل من دقتي 480 بكسل و720 بكسل، مع إخراج بدقة 720 بكسل بمعدل 24 إطارًا في الثانية.

• ما هي بنية MoE؟

  تزيد بنية مختلط الخبراء من سعة النموذج مع الحفاظ على الكفاءة الحسابية لتوليد فيديو عالي الجودة.

• كيف هو التعامل مع الحركة؟

  يعيد وان 2.2 إنشاء حركات معقدة مثل الرقص الهيب هوب، والباركور، والتزلج على الجليد مع سلاسة محسنة، ويقلل نموذج I2V-A14B من الحركات غير الواقعية للكاميرا.

• هل يساعد أيضًا في توليد الصور؟

  نعم. يتضمن خط أنابيب إنشاء بصري ينتج صورًا مُحسّنة باستخدام بيانات جمالية للإضاءة، والتكوين، واللون، مُحسّنة لتوليد الفيديو في المراحل التالية.