Seedance 2.0 - مولد فيديو بالذكاء الاصطناعي الثوري

تم تطوير Seedance 2 بواسطة فريق البحث Seed التابع لـ ByteDance ويمثل أحدث التقدم في إنشاء فيديو الذكاء الاصطناعي. بناءً على نموذج Seedance الأول، يقدم Seedance 2 تحسينات كبيرة في تماسك الحركة والواقعية المادية وقدرة توليد الوسائط المتعددة. ويستخدم بنية محولات نشر جديدة مصممة خصيصًا لتحقيق الاتساق الزمني بين إطارات الفيديو.

بالمقارنة مع المنافسين مثل Sora، وKling، وHailuo، وRunway، يتميز Seedance 2 بنهجه المتكامل لتوليد الصوت والفيديو. يمكن للإصدار Seedance 2 Pro إنشاء فيديو وصوت متزامن بشكل مشترك في تمريرة أمامية واحدة، بما في ذلك المؤثرات الصوتية الواقعية وموسيقى الخلفية وتركيب الكلام ومزامنة الشفاه متعددة اللغات. يؤدي هذا إلى إزالة خطوات ما بعد الإنتاج الصوتية المنفصلة وتبسيط سير عمل الإنشاء بشكل كبير.

Seedance 2 يتفوق أيضًا في فهم الديناميكيات الفيزيائية: بدءًا من رفرفة القماش في مهب الريح إلى فيزياء دفقة الماء، ومن النيران الواقعية والدخان إلى تأثيرات الجسيمات المعقدة. تحافظ وحدة تناسق الشخصية الخاصة بها على ثبات مظهر الموضوع ونسبه عبر المقاطع التي تم إنشاؤها، مما يتيح تسلسلات سردية متماسكة كان من الصعب تحقيقها في السابق باستخدام إنشاء فيديو الذكاء الاصطناعي.

تحت الغطاء، يتعلم محول الانتشار تقليل الضوضاء لسلسلة من الإطارات الكامنة أثناء الحضور عبر الزمن. بدلاً من التعامل مع كل إطار بشكل مستقل، يتيح الاهتمام الزمني للنموذج إعادة استخدام إشارات الحركة، والحفاظ على الهوية، والحفاظ على اتساق الإضاءة والهندسة من لحظة إلى أخرى. من الناحية العملية، يعني هذا عددًا أقل من الومضات، وانتقالات أكثر سلاسة، وحركة الكاميرا التي تبدو مقصودة. عندما تقدم مطالبة، أو صورة مرجعية، أو نصًا برمجيًا بسيطًا، فإن Seedance 2 يشروط عملية الإنشاء بناءً على هذا التوجيه ويحسن المقطع من خلال خطوات تقليل الضوضاء التكرارية. يركز هدف النموذج على الاستقرار الزمني، لذا يمكن للتعديلات الصغيرة أن تنتج اختلافات خاضعة للرقابة دون انهيار النمط. هذه البنية هي السبب في أن Seedance 2 مناسب تمامًا لسير العمل القابل للتكرار حيث تقوم بالتكرار على السرعة والتأطير والنظر مع الحفاظ على تماسك المشهد الأساسي.