Categories: Технологии

Сбер представил Kandinsky 4.1 Video — качественный скачок в генерации видео по тексту

В основе новой модели лежит продвинутая архитектура диффузионного трансформера

Сбер активно развивает свою генеративную нейросеть Kandinsky и в самое ближайшее время выпустит новую версию для генерации видео Kandinsky 4.1 Video. Первые доступы к Kandinsky 4.1 Video уже получили участники GigaConf, а также некоторые художники и дизайнеры. В ближайшем будущем она будет доступна всем пользователям. Об этом заявил старший вице-президент, руководитель блока «Технологическое развитие» Сбербанка Андрей Белевцев в рамках технологической конференции GigaConf.

«Kandinsky 4.1 Video обеспечивает качественно новый уровень генеративного видео. Модель стала в разы лучше по всем параметрам: по соответствию промпту, визуальному качеству, качеству генерации движений, а также способности моделировать физику мира. Такие разработки открывают беспрецедентные возможности как для дизайнеров, маркетологов, так и для представителей любых других креативных индустрий, работающих над созданием высококачественного видеоконтента», — сказал Андрей Белевцев, старший вице-президент, руководитель блока «Технологическое развитие» Сбербанка.

Модель Kandinsky 4.1 Video генерирует видеоряд продолжительностью до 10 секунд в разрешении SD (720 x 576) или HD (1280 x 720) по любому текстовому описанию или произвольному стартовому кадру. С помощью модели можно создавать качественные видео с произвольным соотношением сторон под любые пользовательские и продуктовые потребности.

В основе новой модели лежит продвинутая архитектура диффузионного трансформера. Одним из ключевых факторов, позволивших значительно улучшить качество модели, стало её дообучение (Supervised Fine-Tuning, SFT) на тщательно отобранных данных, подготовленных более, чем 100 экспертами — дизайнерами, фотографами и художниками с профильным образованием. Этот этап обучения позволил значительно повысить уровень художественной выразительности, композиции видео и кинематографичности визуального ряда.

Переход к новой большой архитектуре заметно увеличил потребность в вычислительных ресурсах, поэтому при разработке уделялось особое внимание оптимизации. В результате применения методов дистилляции и ускорения, время генерации видео сократилось более чем в три раза по сравнению с исходным вариантом, при этом в ряде сценариев качество генерации сохранилось или даже улучшилось.

Напомним, что первая в России модель генерации видео Kandinsky Video была представлена 22 ноября 2023 года на конференции AI Journey.

Recent Posts

  • Главное
  • Общество

Айсен Николаев: «Ысыах Олонхо стал праздником всех, кто живет в Якутии»

На Ысыах Олонхо в Нерюнгринском районе прибыли гости практически со всех районов республики

04.07.2025
  • Общество

Дети из Докучаевска приняли участие во всероссийском флешмобе в Якутске

Делегация посетила главные достопримечательности республики

04.07.2025
  • Культура

Изделия ручной работы представили мастера на Ысыахе Олонхо

Выставка-ярмарка проходит на площадке «Город мастеров» 4 и 5 июля

04.07.2025
  • Культура

Каким будет Арктический центр эпоса и искусств, рассказал Андрей Борисов

Руководитель культурного кластера выделил его новизну и уникальность

04.07.2025
  • Образование

В СВФУ вручили дипломы выпускникам Института зарубежной филологии и регионоведения

В этом году из института выпустилось 176 человек

04.07.2025
  • Общество

Ысыах Олонхо начался в Нерюнгринском районе

Ысыах Олонхо — 2025 посвящен 80-летию Великой Победы и 50-летию со дня основания города Нерюнгри

04.07.2025
OSZAR »