تصویر و ویدیو
@guocheng_qian
بچههای تیم گوردون چیان و همکاراش اومدن یه حرکتی زدن به اسم «Code Video Model» که قشنگ بازیِ تولید ویدیوی هوش مصنوعی رو وارد مرحله جدیدی میکنه
بچههای تیم گوردون چیان و همکاراش اومدن یه حرکتی زدن به اسم «Code Video Model» که قشنگ بازیِ تولید ویدیوی هوش مصنوعی رو وارد مرحله جدیدی میکنه. داستان از این قراره که یه ایجنت برنامهنویس، پرامپت متنی شما رو مستقیم تبدیل به کدهای اجرایی میکنه تا اول یه ویدیوی اولیه با فیزیک و مسیرِ دوربین کاملاً مشخص و حسابشده بسازه. بعدش هم بدون اینکه نیازی به آموزش دوبارهی مدل باشه، مدلهای ویدیویی میان روی همون ساختار کد سوار میشن و با یه عکس مرجع، ویدیوی نهایی رو با بالاترین کیفیت خلق میکنن. خلاصه از افکتهای ماتریکسی و بازسازیهای سهبعدی گرفته تا شبیهسازیهای رباتیک، فرمونِ تمام جزئیات و حرکات صحنه رو با ادیت کردن همون کدها میدن دست خودت.
منبع
Gordon (Guocheng) Qian@guocheng_qian
Introducing Code Video Model 🎬
Amazing work led by @raywzy1 and the team!
Agentic coding as the engine for controllable video generation.
Scene layout, motion, timing, camera trajectories, and physical dynamics, all in editable code.
A coding agent turns prompts into executable programs that render proxy videos. Our training-free early-step conditioning lets a pretrained video model follow the proxy’s structure while adopting a reference image’s appearance.
From physics-grounded motion and bullet time to 3D/4D reconstruction and robotics simulation, it all starts with code.
Watch the demo and explore more visual results 👇
Project page: https://code-video-model.github.io/
Paper: https://code-video-model.github.io/tech_report.pdf
Code: https://github.com/code-video-model/CodeVideoModel
Data: https://huggingface.co/datasets/code-video-model/CodeVideoBench
Youtube: https://www.youtube.com/watch?v=dTtiVkSRQfc&t=1s
۲۰ مهر ۱۴۰۵مشاهده در X
code-video-model.github.io
Code Video Model — Conditioning Video Generation on Code
Code Video Model — Conditioning Video Generation on Code.
خواندن در سایت منبع
نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.