Data Mining | Анализ данных🚀

Mundo превращает фотографии помещения в виртуальную сцену, где можно перемещаться и взаимодействовать с предметами. Система сначала собирает упрощённую 3D-схему помещения. Затем AI-агент в коде уточняет расположение объектов и задаёт их физические свойства: массу, трение и др. Дальше физический движок рассчитывает движение и столкновения, а видеомодель превращает результат в ролик, сохраняя облик исходной комнаты. Например, можно смоделировать, как робот достаёт сумку из шкафа и кладёт её на кровать. За счёт такой связки Mundo не просто генерирует красивое видео, а опирается на физическую симуляцию. Выглядит как заготовка для Real-to-Sim: сфотографировал помещение, получил цифровой полигон, где робота можно погонять до выхода в реальный мир. Пока это лишь исследовательский прототип, причём довольно медленный. Сборка одной сцены занимает 10-20 минут, а видео генерируется со скоростью около 1,5 кадра в секунду на восьми A800. Мелкие предметы могут зависать или меняться между кадрами. Насколько такая симуляция помогает роботам справляться с задачами в реальных помещениях, авторы пока в цифрах не показали.