«Сбер» представил нейросеть Kandinsky Video

«Сбер» представил Kandinsky Video – это модель, которая позволяет создать полноценный видеоролик по текстовому описанию. Новинка представлена в рамках конференции AI Journey первым заместителем председателя правления компании Александром Ведяхиным.

Видеоролики, созданные при помощи данной модели, длятся не больше восьми секунд, а частота составляет 30 кадров в секунду, разрешение — 512 х 512 пикселей.

Генерация такого видео составит около трех минут.Kandinsky Video состоит из двух блоков: создание ключевых кадров и генерация интерполяционных кадров. Первый блок отвечает за структуру сюжета, второй за плавность движений.

Главное отличие данной модели от анимационных видеороликов заключается в том, что на протяжении всего видео идет непрерывное движение как объекта, так и заднего плана.

Основное обучение Kandinsky Video проходило на основе более чем 300 тыс. пар «текст — видео». 

В апреле «Сбер» представил новую версию генеративной модели Kandinsky 2.1, спустя всего 48 часов после запуска пользователи создали более 1,3 млн изображений. Самыми популярными запросами были «кошка», «любовь» и «космос».

Ранее российский разработчик аналога Microsoft Office добавил в свой пакет офисных программ GigaChat от Сбера. Также было показано, как данный продукт работает вместе с корпоративной почтой нового поколения Mailion и цифровым рабочим пространством Squadus. Такое сотрудничество должно привести к ускорению внедрения ИИ в работу.