اكتشف تكنولوجيا التحكم الفيديوية المبتكرة من قبل بايت دانس، بوكسيماتور (Boximator)، وهو أداة تتيح لك تحديد مسار وأبعاد عناصر الفيديو بدقة غير مسبوقة من خلال قيود الصندوق المزدوج.
كيف يعمل بوكسيماتور:
-
قيود الصندوق المزدوجة: استخدم صناديق صلبة لتحديد بدقة المواقع والأحجام البداية والنهائية للكائنات، وتأسيس إطار تكوين واضح. قم بتطبيق صناديق مرنة لاقتراح حدود الحركة المرنة، مما يوجه الكائنات بسلاسة بين نقاط الصناديق الصلبة المحددة.
-
نهج التعلم الذاتي: تسمح قدرات تتبع النظام لبوكسيماتور بمتابعة حركة الكائن بشكل بديهي، مما يضمن تفسير الحركات المحددة مسبقًا بسلاسة، بدون الحاجة إلى إدخال المستخدم إطارًا بإطار.
-
توليد الفيديو 101: إن تكامل إدخالات المستخدم وخبرة بوكسيماتور التنبؤية يؤدي إلى أشرطة فيديو تظهر انتقالات كائن طبيعية وفقًا لتعريف المستخدم وتحقيق أهداف السرد المرئي.
التطبيق العملي:
للتوضيح، تخيل صنع فيديو حيث يقفز كلب صغير عبر طاولة:
- استخدم صندوقًا صلبًا لوضع بداية الكلب الهادئة على أحد طرفي الطاولة.
- ضع صندوقًا صلبًا على الطرف الآخر لتحديد وجهة القفزة.
- استخدم صناديق مرنة لوصف قوس القفزة، مع ضمان مسار طبيعي.
- دع بوكسيماتور يحرك القفزة، وقم بتعديلها باستخدام صناديق مرنة إضافية إذا لزم الأمر لتعزيز واقعية الفيديو.
ببساطة، من خلال مزج الصناديق الصلبة و المرنة، يحصل المستخدمون على تحكم قوي في حركة عناصر الفيديو، قابلة للتكيف مع التعقيدات التي تتراوح بين القفزة البسيطة والمشاهد المعقدة.
إمكانيات الطراز الأساسي المحسنة:
من خلال الحفاظ على وزن الطراز الأساسي للفيديو، يعمل بوكسيماتور على تعزيز التحكم في حركة الكائنات مع الحفاظ على الجودة الأصلية والمعرفة، وهو تكامل يمنح المزيد من التحكم والتنوع في التطبيق.
تكامل واسع النطاق:
مصمم كإضافة برمجية، يتكيف بوكسيماتور بسلاسة مع طرز الانتشار المتنوعة للفيديو، مما يوسع فائدته في مواجهة التحديات الإبداعية المتنوعة.
انظر البحث الكامل هنا. ترقب إصدار GitHub!
Boximator: Bring Fine-grained Motion Controllability to Video Synthesis | Bytedance Research