3D Реконструкция, снабдившая движение и гравитацию
arXiv:2610.221777v1 Annuate Type: кросс-бюллетень: модели трансформаторов с кормом недавно достигли высоких результатов в многовидной 3D реконструкции, но они попрежнему зависят главным образом от внешнего внимания и часто борются в динамических сценах со слабыми геометрическими сигналами. В этой работе мы введем систему, которая бы позволяла следить за движением и гравитацией в рамках парадигмы обучения с использованием привилизованной информации (LUPI). В ходе обучения остаточные оптические потоки и гравитационные параметры передаются в качестве привилегированных сигналов, позволяющих направлять обучение геометрическому представительству; во время вывода модель использует только стандартные визуальные данные. Мы интегрируем эти приводы в позвонки трансформаторов с незначительными архитектурными изменениями, сохраняя эффективность питания. Эксперименты по стандартным контрольным показателям свидетельствуют о последовательном повышении точности и надежности реконструкции, особенно в сценах с динамическими объектами, двусмысленной структурой и сложным движением камер. Наш анализ далее показывает, что оптимальный уровень впрыска b