В Google разработали технологию превращения фото в объёмные 3D-сцены
Специалисты Google представили технологию NeRF-W , которая позволяет создавать объёмные 3D-сцены, используя 2D-фотографии.
Помимо этого, система удаляет со снимков случайных прохожих, выравнивает экспозицию, тон и цвета. Это позволяет быстро создать 3D-рендеры, где можно выбрать точки обзора, отрегулировать свет и так далее.
Уже воссозданы 3D-модели Бранденбургских ворот в Берлине, базилики Сакре-Кёр в Париже и Фонтана Треви в Риме. Для обработки данных используется комбинация нейросетей и прямого 3D-рендеринга.
Как отмечается, в первой версии системы есть ограничения. Там могла быть засветка изображения, посторонние объекты в кадре и тому подобные артефакты. Из-за этого она не могла обрабатывать случайные изображения из сети. Вторая версия это уже умеет.
Выглядит это примерно так: