Компания Stability AI выпустила новый программный инструмент под названием Stable Video 3D, который превращает обычные 2D-картинки в трёхмерные объекты. По словам разработчиков, ИИ-модель может похвастаться значительными улучшениями в сравнении с предшественниками.
Первая версия модели под названием SV3D_u генерирует «орбитальные» объекты, которые в кадре вращаются вокруг своей оси. Для генерации модель берёт обычное изображение, анализирует представленный на нём объект и, дорисовывает недостающие части, создавая его 3D-визуализацию. Вторая версия (SV3D_p) учитывает как «плоский» исходник, так и «орбитальную» модель для создания более реалистичного трёхмерного видео по заданной траектории камеры.
Создатели Stable Video 3D отмечают, что ИИ-алгоритм в своей работе использует технологию оптимизации объёмных объектов Neural Radiance Fields, позволяющую повысить качество картинки в тех областях, которые изначально невидимы в предсказанных ракурсах. Дополнительно улучшение качества сгенерированного объекта обеспечивает новая модель освещения.
Уже сейчас Stable Video 3D доступна для коммерческого использования при наличии подписки Stability AI, а частные пользователи могут ознакомиться с ней на портале Hugging Face.
