MetaAI* показала генерацию видео с людьми по аудиозаписи разговора



Модель была обучена на движениях актеров. С ее помощью можно генерировать фотореалистичных аватаров с мимикой, жестикуляцией и позами. За основу для генерации берется аудиозапись разговора людей.



Описание, код и демо: https://people.eecs.berkeley.edu/~evonne_ng/projects/audio2photoreal/



*Meta признана экстремистской в РФ и запрещена