«Сбер» научил свою нейросеть создавать анимационные видеоролики по текстовому описанию

Нейросеть «Сбербанка» Kandinsky 2.2 научилась генерировать анимационные видеоролики по текстовому описанию, сообщает пресс-служба компании.

На данный момент генерация анимационных видеороликов работает в тестовом режиме и пока доступна лишь тем пользователям, которые получат приглашение в ближайшее время. Пользователи, которые хотят попробовать новые возможности модели уже сейчас, могут оставить заявку на получение доступа в Telegram-боте.

По одному текстовому описанию генерируется 4-секундное видео c выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640×640 пикселей, а синтез одной секунды видео в среднем занимает около 20 секунд.

Как следует из сообщения «Сбера», для генерации видео в режиме анимации пользователю нужно описать текстом то, что он хочет получить в итоге. Далее бот предложит на выбор 16 вариантов анимации сцены, а после этого нейросеть сгенерирует анимированный видеоролик. Также доступна генерация составных сцен: пользователь может ввести до трех текстовых описаний, затем выбрать для каждого свою механику анимации, а после этого модель создаст «мини-фильм».

Напомним, ранее «Сбербанк» запатентовал голосового бота с нейросетью для анализа аудио- и видеовызовов в смартфонах, который может прослушивать и анализировать аудио- и видеовызовы, включая сделанные через мессенджеры, для борьбы с мошенниками.

Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.