WorldMirror: Agentic Real-to Sim Generation of Interactive Worlds from the Wild Robot Demotions

arXiv: 261 030,31834v1 Annuales Type: Cross Резюме: Существующие подходы к обучению роботов в области моделирования часто требуют значительных усилий вручную для построения сцен и определения задач, ограничения масштабируемости подготовки и разнообразия данных. Между тем, самодельные демонстрации роботов естественно обеспечивают разнообразные и реалистичные наблюдения за реальными взаимодействиями. Использование этих демонстраций для имитации требует как высокой степени достоверности визуального восстановления, так и физически последовательного взаимодействия. Агенты общего назначения обеспечивают гибкую адаптацию к различным сценариям и убедительные доводы в отношении трехмерных пространственных связей, а специализированные модели регенерации позволяют обеспечить высокую степень достоверности восстановления внешнего вида сцен и геометрии. Мы представляем WorldMirror, агентскую реальную систему, которая создает интерактивные цифровые близнецы из волшебных роботов-демонстраций. Наша главная идея состоит в том, чтобы сформулировать реальное строительство как итеративное совершенствование реализуемой мировой программы. Агент кодирования Dec