Sora



Анонс модели для генерации видео от OpenAI.



+ Универсальность: возможность генерировать видео разных разрешений, соотношений сторон и длительности.

+ Понимание: короткий промпт, написанный на разных языках, будет дополнен деталями, точно описывающими сцену (как это было в Далли3).

+ Редактирование: можно создавать зацикленные видео, продлевать их, менять окружение и объекты, делать плавный переход между двумя видео, а так же анимировать статичные изображения (которыми уже никого не удивишь).

+ Когерентность: невероятная согласованность кадров, от чего объекты сохраняют свою позицию в пространстве. Это особенно чувствуется, когда камера вращается вокруг какого-нибудь места или объекта.

+ Взаимодействие: модель способна симулировать действия, которые влияют на состояние мира в сцене. Например, художник наносит мазки на холст. С появлением новых мазков старый сохраняются.

- Из минусов выделяют просадки с точным моделированием физики основных взаимодействий и поддержанием согласованности в длительных сценах



По мере развития Sora обещает стать еще более мощным симулятором физического и цифрового миров.



Дополнительно почитать и посмотреть можно тут: https://openai.com/research/video-generation-models-as-world-simulators



#news