Перейти к содержимому
Digital Business BY · БЕЛАРУСЬ
НБ РБUSD2.9921EUR3.3424RUB0.0366PLN0.7608CNY0.4487Конвертер →
IT и стартапы

Сбер открыл Kandinsky WM 1.0: генерация видео для обучения роботов и беспилотников

Три нейросети семейства моделируют аварии, действия роборуки и физические процессы — код и веса доступны бесплатно по лицензии MIT.

Казакевич Алексей
3 мин
Сбер открыл Kandinsky WM 1.0: генерация видео для обучения роботов и беспилотников

Сбер представил семейство генеративных моделей Kandinsky WM 1.0, способных создавать физически достоверное синтетическое видео для обучения систем Physical AI. В семейство вошли три специализированные нейросети: одна генерирует дорожные сценарии, вторая симулирует движения роборуки, третья воспроизводит сложные физические процессы.

Ключевая идея — снизить зависимость разработчиков от реальных данных. Сбор видео с камер беспилотников или промышленных роботов дорог, долог и небезопасен, особенно когда нужны редкие аварийные ситуации.

Как устроены модели

Основой для Kandinsky WM 1.0 послужила модель Kandinsky 5.0 Video Lite, которую дообучили на нескольких миллионах видеозаписей с камер роботов, беспилотных автомобилей и промышленных объектов. Разработчики уделили особое внимание физической корректности: следили за тем, чтобы автомобили не меняли форму в движении, предметы не исчезали из кадра, а траектории оставались реалистичными.

Модели умеют генерировать сценарии, которые сложно или опасно воспроизвести в реальности: ДТП, экстремальные погодные условия, нештатные ситуации на производстве. Именно такие кейсы наиболее ценны при обучении автономных систем, которые должны уверенно действовать в непредсказуемых условиях.

Кому это нужно и как получить доступ

Целевая аудитория Kandinsky WM 1.0 — команды, разрабатывающие беспилотный транспорт, производители промышленных и сервисных роботов, специалисты по компьютерному зрению, а также университеты и исследовательские центры. Среди первых пользователей — собственный Центр робототехники Сбера и институт AIRI, который применяет модели для создания дорожного симулятора.

Код и веса опубликованы под лицензией MIT: любой разработчик может использовать их бесплатно и без ограничений на коммерческое применение. Для белорусских команд, работающих в сфере робототехники и автономных систем в рамках ПВТ, это прямой доступ к инструменту, который иначе потребовал бы значительных затрат на сбор и разметку данных.

ПоделитьсяVK

Свежие новости

Все новости
Концептуальная иллюстрация: Google открыла TPU Sync: библиотека для управления KV-кэшем и весами моделей на TPU
IT и стартапы

Google открыла TPU Sync: библиотека для управления KV-кэшем и весами моделей на TPU

Google выпустила TPU Sync — открытую C++-библиотеку, которая организует передачу тензоров между HBM, оперативной памятью хоста, локальными SSD и сетевым хранилищем как единой иерархией памяти. Для MoE-моделей от 235B до 480B параметров библиотека сокращает задержку передачи KV-кэша и время до первого токена в среднем на 90% по сравнению с работой без TPU Sync.

Редакция
2 мин
Концептуальная иллюстрация: Cloud Pathways для GKE перешёл в статус GA
IT и стартапы

Cloud Pathways для GKE перешёл в статус GA

Google Cloud объявил об общей доступности Cloud Pathways на Google Kubernetes Engine. Среда выполнения, созданная в Google DeepMind для обучения и инференса фронтирных моделей, включая Gemini, теперь открыта для всех клиентов платформы.

Редакция
2 мин
Концептуальная иллюстрация: NVIDIA Dynamo получил рецепты развёртывания для ведущих корейских открытых моделей
IT и стартапы

NVIDIA Dynamo получил рецепты развёртывания для ведущих корейских открытых моделей

NVIDIA выпустила оптимизированные рецепты развёртывания на базе Dynamo для четырёх корейских открытых моделей. Конфигурации рассчитаны на GPU NVIDIA B200 и заявляют до двукратного прироста производительности из коробки.

Редакция
1 мин
Концептуальная иллюстрация: AWS Elemental MediaConvert получил встроенную генерацию субтитров на базе ИИ
IT и стартапы

AWS Elemental MediaConvert получил встроенную генерацию субтитров на базе ИИ

AWS Elemental MediaConvert интегрировал Smart Subtitles — решение на основе ИИ и современных моделей распознавания речи. Функция автоматически транскрибирует аудио и встраивается непосредственно в VOD-пайплайны без внешних сервисов субтитрования.

Редакция
1 мин
Концептуальная иллюстрация: Vercel AI Gateway получил инструменты DeepSeek Search и DeepSeek Fetch
IT и стартапы

Vercel AI Gateway получил инструменты DeepSeek Search и DeepSeek Fetch

Vercel добавил в AI Gateway два инструмента DeepSeek: Search для поиска релевантных страниц и Fetch для получения их содержимого в формате Markdown. Оба работают с любой моделью, поддерживающей вызов инструментов.

Редакция
1 мин
Концептуальная иллюстрация: Google Cloud перевёл серверы Z4M в общую доступность
IT и стартапы

Google Cloud перевёл серверы Z4M в общую доступность

Google Cloud объявил об общей доступности серии Z4M — машин с оптимизированным хранилищем, доступных как виртуальные машины и bare-metal инстансы. Серия предлагает до 192 vCPU, 1 536 GiB памяти и 400 Gbps RDMA-сети с поддержкой GPUDirect и TPUDirect Storage.

Редакция
1 мин