Nvidia научила ИИ генерировать видео по текстовому описанию с высоким разрешением
ИИ-модель VideoLDM, разработанную в сотрудничестве с Корнельским университетом, американская компания представила на конференции IEEE по компьютерному зрению и распознаванию образов.
Видео генерируется в разрешении до 1280x2048 и состоит из 113 кадров, длина которых чуть менее пяти секунд. Главные ее преимущества – создание разнообразных и согласованных во времени видео высокого разрешения с высоким качеством.
На демонстрационных роликах можно увидеть, например, как играет на гитаре лягушка по текстовому запросу: «лягушка, играющая на гитаре в группе». Или кадры волн, разбивающихся о маяк, в ответ на запрос: «волны разбиваются об одинокий маяк, зловещее освещение».
Кроме того, модель способна генерировать видео сцен вождения – с различными сценариями и окружающей обстановкой. Но пока разработка является лишь исследовательским проектом – NVIDIA не анонсирует, когда модель появится в открытом доступе.
#Nvidia #ИИ #генерация
https://research.nvidia.com/labs/toronto-ai/VideoLDM/
ИИ-модель VideoLDM, разработанную в сотрудничестве с Корнельским университетом, американская компания представила на конференции IEEE по компьютерному зрению и распознаванию образов.
Видео генерируется в разрешении до 1280x2048 и состоит из 113 кадров, длина которых чуть менее пяти секунд. Главные ее преимущества – создание разнообразных и согласованных во времени видео высокого разрешения с высоким качеством.
На демонстрационных роликах можно увидеть, например, как играет на гитаре лягушка по текстовому запросу: «лягушка, играющая на гитаре в группе». Или кадры волн, разбивающихся о маяк, в ответ на запрос: «волны разбиваются об одинокий маяк, зловещее освещение».
Кроме того, модель способна генерировать видео сцен вождения – с различными сценариями и окружающей обстановкой. Но пока разработка является лишь исследовательским проектом – NVIDIA не анонсирует, когда модель появится в открытом доступе.
#Nvidia #ИИ #генерация
https://research.nvidia.com/labs/toronto-ai/VideoLDM/