ПАИ-исполнитель: замена синематических многокарманных двигателей в динамических сценах

arXiv: 2609,05918v1 Annuate Type: новый резюме: мы представляем PAI-actor — кинематографическую многохарактерную анимацию для замены персонажей в динамических кино сценах. В отличие от обычных анимационных систем, которые в основном ведут одно статическое изображение или один объект, наша цель - заменить и анимационировать несколько символов в реальных видеоклипах при сохранении оригинальной динамики сцены, движения камеры и фонового контента. Это особенно сложно, поскольку генерируемые символы должны оставаться совместимыми с движущимися и взаимодействующими характеристиками источника, а также с окружающим фоном в освещении, тени, композиции и общем кинематографическом виде. Для решения этой проблемы мы формулируем мультихарактерную анимацию как проблему восстановления человека, ориентированную на его структуру, и строим на основе высококачественных данных о кинопродукции тренировочный трубопровод. Кроме того, в целях поддержки практического кинематографического производства мы внедряем двухнаправленно-ауторегрессивную систему дистилляции: w