ReShoot 4D: ویدیوی ضبطشده رو از یه زاویهٔ دیگه دوباره بگیر
خلاصهٔ کاملتر
ReShoot 4D یه ابزار رایگان و متنبازه که یه ویدیوی ضبطشده رو میگیره و بهت اجازه میده یه دوربین مجازی رو توی همون صحنه جابهجا کنی. مثلاً دور سوژه بچرخی (orbit)، روی صورت زوم کنی، دوربین رو مثل جرثقیل ببری بالا یا یه حرکت bullet-time (یعنی صحنه یخ میزنه و دوربین دورش میچرخه) بسازی. فرقش با ابزارهای تولید ویدیو اینه که از متن صحنهٔ جدید نمیسازه و فقط هندسهٔ سهبعدی همون فیلم رو بازسازی میکنه. سازندهش یه نفره و خودش گفته موقع ساختنش از Claude Code و Codex کمک گرفته.
کار تو چهار مرحله انجام میشه. اول یه بازسازی چهاربعدی از صحنه ساخته میشه، یعنی مدل سهبعدیای که حرکت در طول زمان رو هم در نظر میگیره و میفهمه دوربین اصلی کجا بوده و سوژه چطور حرکت کرده. بعد تو مسیر، لنز و فوکوس دوربین مجازی رو تعیین میکنی یا از پریستهایی مثل orbit و crane استفاده میکنی. مرحلهٔ سوم رندر صحنه از زاویهٔ جدیده که معمولاً لبهها و پسزمینهش تار و پر از artifact درمیاد. آخر سر یه مدل ویدیویی متنباز به اسم LTX این ایرادها رو صاف میکنه تا خروجی بیشتر شبیه فیلم واقعی بشه.
برای اجرا به کارت گرافیک Nvidia و ComfyUI نیاز داری. ComfyUI یه محیط نودمحوره که برای اجرای لوکال مدلهای diffusion و ویدیو استفاده میشه. یعنی خبری از یه دکمهٔ آپلود ساده نیست و باید با فایلهای workflow و دانلود مدلها سر و کله بزنی. مقدار VRAM و مدل دقیق GPU هم اعلام نشده، پس قبل از نصب باید مستندات خود پروژه رو چک کنی.
محدودیتهاش هم مهمه. ابزار چیزی که دوربین ندیده رو نمیتونه درست بسازه. پس اگه زاویهٔ جدید بخشی بیرون از کادر اصلی رو نشون بده، اون بخش حدسیه و ممکنه بین زاویههای مختلف یکسان نمونه. حرکت سریع هم باعث میشه صورتها چند فریم کشیده و تار بشن. یعنی فعلاً برای نماهای آروم و کنترلشده بهتر جواب میده تا فیلمهای اکشن یا دوربین روی دست. دموی عمومی هم فعلاً فقط با کلیپهای آماده کار میکنه و نمیشه ویدیوی خودت رو آپلود کنی.
به گفتهٔ نویسنده، این ابزار برای previsualization (یعنی برنامهریزی نماها قبل از فیلمبرداری اصلی) و آزمایش زبان دوربین تو مرحلهٔ پستولید خیلی بهدردبخوره، ولی برای کار نهایی مشتری هنوز آماده نیست. نویسنده اشاره میکنه که ByteDance هم قبلاً ایدهٔ مشابهی رو روی یه صحنهٔ فیلم قدیمی نشون داده بود، ولی اون قابل دانلود نبود. این ابزار با world modelهایی مثل Hunyuan World Model شرکت Tencent هم فرق داره. اونا از صفر یه دنیای سهبعدی میسازن، ولی ReShoot 4D از فیلم واقعی شروع میکنه و سعی میکنه همون اتفاق رو از یه زاویهٔ دیگه نشون بده.
نکات کلیدی:
- ReShoot 4D رایگان و متنبازه و سازندهش فقط یه نفره.
- پایپلاین چهار مرحله داره: بازسازی چهاربعدی، تعیین دوربین مجازی، رندر دوباره و پاکسازی با مدل LTX.
- برای اجرا کارت گرافیک Nvidia و ComfyUI لازمه و مقدار VRAM مشخص نشده.
- بخشهایی که بیرون کادر اصلی بودن حدسی ساخته میشن و ممکنه بین زاویهها فرق کنن.
- حرکت سریع باعث میشه صورتها چند فریم تار بشن.
- دموی عمومی فعلاً آپلود ویدیوی شخصی رو پشتیبانی نمیکنه.




