Новая модель Stability AI превращает фотографии в 3D-видео

Stable Virtual Camera — генеративная модель, которая способна создавать новые виды сцены на основе одного или нескольких изображений (до 32) под углами, заданными пользователем.

Модель может генерировать видео, использующие как заданные пользователем, так и предустановленные динамические траектории камеры, включая «Спираль», «Dolly Zoom», «Перемещение» и «Панорамирование».

Stability AI стремилась объединить возможности генеративного ИИ с традиционными инструментами виртуальных камер, которые часто используются в цифровом кинематографе и 3D-анимации для навигации по сценам в реальном времени.

Текущая версия Stable Virtual Camera является предварительной и способна генерировать видео в квадратном (1:1), портретном (9:16) и альбомном (16:9) соотношениях сторон длиной до 1000 кадров.

Stability AI предупреждает, что в определенных сценариях качество генерируемых видео может быть ниже, особенно при работе с изображениями людей, животных или динамических текстур, таких как вода.

Компания также отмечает, что сложные траектории движения камеры, пересекающие объекты или поверхности, а также объекты неправильной формы могут вызывать визуальные искажения, особенно когда целевые точки обзора значительно отличаются от исходных изображений.