«Сбер» представил новую ИИ-модель Kandinsky 6.0 для создания видео со звуком
«Сбер» представил новую ИИ-модель Kandinsky 6.0 Video, с помощью которой пользователи «ГигаЧата» могут создавать видео с речью, музыкой и звуками окружения. Как заявили в компании, Kandinsky стала первой отечественной нейросетью, способной создавать ролики с синхронным звуком. Она доступна разработчикам в опенсорсе
«Сбер» создал новую ИИ-модель Kandinsky 6.0 Video, с помощью которой пользователи «ГигаЧата» могут создавать видео в Full HD с речью, музыкой и звуками окружения. Об этом Forbes сообщили в пресс-службе банка.
Там отметили, что Kandinsky стал первой российской нейросетью, которая может генерировать ролики с синхронным звуком. Для их создания нужно описать сцену текстом или загрузить первый кадр, а также добавить описание звукового ряда. Максимальная длительность видео со звуком пока составляет пять секунд, в дальнейшем планируется ее увеличить. При этом можно выбрать нужное качество — SD, HD ил Full HD.
Новая модель создает звук в 44 кГц, стандартном качестве для большинства стриминговых сервисов, указывает «Сбер». А если звук не нужен, можно попросить нейросеть создать видео без него. Помимо этого, Kandinsky 6.0 Video умеет искать референсы, если не имеет информации о том, как выглядит объект из запроса.
Как сообщили в пресс-службе «Сбера», эта ИИ-модель точнее передает физику реального мира. По данным банка, она оказалась лучше Kandinsky 5.0 в среднем в 71% случаев по всем критериям.
Kandinsky 6.0 доступна разработчикам в опенсорсе под лицензией MIT — они могут бесплатно интегрировать ее в свои продукты. По мнению «Сбера», обновление будет полезно всем, кто создает видео, включая авторов контента для соцсетей, маркетологов и дизайнеров.
Ранее, в начале июля, «Сбер» представил новую флагманскую модель GigaChat 3.5 Ultra, которая точнее, чем предыдущие модели, решает математические задачи, проводит финансовые расчеты, анализирует контракты, а также может автономно написать и выполнить код. В ее основе лежит российская архитектура с технологией линейного внимания, отмечали в банке.
