Еще один шаг в сторону генерации видео по тексту.
Google выпускает Phenaki - генерация видео на основе описания. Основных отличия от предыдущих попыток два:
1) модель может генерировать более длинные и стабильные ролики.
2) описание может содержать последовательность сцен (аля сценарий) которая будет управлять ходом видео
Думаю время, когда мы будем смотреть персонализированные сгенерированные фильмы не за горами.
Подробнее https://phenaki.video/
Paper: https://openreview.net/pdf?id=vOEXS39nOF
P.S. Интересно, что в мире Generative Video и Generative AI аналогом “Hello world” стала генерация видео и изображение космонавта сидящего на лошади.