Facebook придумала продвинутый способ создания 3D-снимков

Новинка на базе машинного обучения позволяет избавиться от размытий и прочих дефектов, которые возникают при использовании менее совершенных технологий. Она поддерживает два вида изображений: сделанные на камеру с датчиком глубины (например iPhone Х) и обычные 2D-фотографии — в этом случае применяется предобученная модель для измерения глубины кадра.

Разработка Facebook задействует технологию image inpainting для восстановления недостающих пикселей фотографий на уровне цвета и глубины при помощи искусственного интеллекта. Ещё одна особенность нового метода генерации объёмных фото в том, что он более адаптивен и не требует предопределения количества слоёв исходных снимков.

Возможности технологии продемонстрированы на изображениях из датасета RealEstate10K, примеры и сравнения можно посмотреть здесь и здесь. Подробности о том, как устроена новая система, опубликованы в научной работе на arXiv.