Митя об интересном

Сделал выступление про Evolution of 3D Reconstruction! В итоге вышло как коллекция фан фактов из истории фотограмметрии, плюс много контекста того как появились 3D Gaussian Splatting и почему они так хороши Впервые выступление было на <20 мин, а не на полтора часа 😅 А еще в чуть более официальной обстановке Слайды: https://docs.google.com/presentation/d/1BpHDvKWIsHquDWGzvlswP5lqqHPwptQiY2SZCR-5U6U/edit?usp=sharing

TIL что p в 1080p / 720p / etc значит progressive scan, т.е. буквально количество линий сверху вниз которые надо отрисовать А еще когда говорят 2K, могут иметь ввиду 1080p, потому что по факту это 1920x1080, и 2K ~= 1920 - - - В комментах добавили!! Что суффикс p добавляли потому что был 1080i / 720i , которые interlaced scan. Телики были старые, пиксели отрисовывались буквально по линиям — и можно было сделать видео приятнее, отрисовывая сначала линии 0,2,4,6, ... , а потом линии 1,3,5,...

Готовлюсь к небольшому выступлению на нашей компанийской мини-конфе, буду рассказывать что-то разное про Фотограмметрию / NeRF'ы / Gaussian Splat'ы, впервые за долгое время что-то читал про них Сборка интересностей: - Один из авторов NeRFа, Ben Mildenhall, соосновал The World Labs и месяц назад они выпустили вроде дажу неплохую модельку Marble для Environment Generation. Хвастались как это можно использовать для генерации 3D миров для симуляций для роботов. - Adobe раскрыли свой проект Project New Depths для редактора Gaussian Splatting сцен - Apple раскрыли что их "Personas" из Apple Vision Pro таки реализованы с Gaussian Splatting - На какой-то конференции показывали что Google Maps делают Gausssian-Splatting-based реконструкции интерьеров заведений которые можно даже смотреть в VR

TIL про Assisted-GPS: https://en.wikipedia.org/wiki/Assisted_GNSS У любой GPS-системы по сути есть два куска данных нужных для определения позиции устройства: а) Данные о движении спутников — их точные позиции и скорости/направления движения по орбите (Ephemeris) — чтобы подсчитать их позицию относительно Земли в любой момент времени б) Расстояние до каждого спутника — заполучается тривиально в real-time, и уже непосредственно используется для подсчета координат самого устройства В куске (а) прям много данных — но их можно скачать один раз в начале, и дальше автоматом высчитывать состояние спутника в каждый момент времени. А дальше трюк — чтобы не качать эти данные со спутников с скоростью 50 bit/s (ждать ~10 мин), телефон качает эти закешированные данные по сотовой связи / с спец-серверов. (Пришлось разбираться потому что чинил GPS на старом телефоне)

Meta выпустила yet another 3D Foundation Model — MapAnything — по произвольному набору картинок + optional параметры камер + optional частичные depthmaps, дает все что можно Имхо побился рекорд по количеству железа и VRAM используемого для обучения computer vision модели, смеюсь с того насколько абсурдно звучит 64 H200-140GB И мы в рабочем чате такие "хммм а можем ли такие обучить с одной H100"