Банк ВТБ исследует возможность разработки первой в России платформы, которая объединит цифровых ИИ-агентов и физических роботов в единой среде управления. Это один из проектов Центра компетенций по искусственному интеллекту (ИИ) в Китае, который ВТБ развивает вместе со своим технологическим партнером – компанией Т1.

В основе идеи лежит создание коммуникационного интерфейса для взаимодействия между ИИ-агентами и физическими роботами на базе платформы ИИ-агентов, которая уже работает в ВТБ. Роботы и цифровые помощники будут представлены как унифицированные «кубики», которые не ограничатся одними задачами и могут быть комбинированы между собой в различных вариациях. Например, такие роботы могут обслуживать клиентов в банковских отделениях, выполнять услуги инкассации или безопасности и т.п., а настройки их функционала могут постоянно меняться в зависимости от потребностей пользователей.

Управление роботом будет осуществляться через VLA-модели (Vision-Language-Action). VLA – это мультимодальная генеративная нейронная сеть, которая воспринимает разные модальности (голос, текст, видео, сенсоры), а на выходе генерирует действия робота в реальном мире.

Также ИИ-агенты и роботы смогут обмениваться данными в реальном времени, обучая и дополняя друг друга: цифровой помощник может предоставить роботу аналитику, а робот — передать в систему данные о физическом мире со встроенных в него датчиков.

На текущий момент ВТБ завершил разработку базовой версии проекта.
Следующим шагом станет закупка роботов в Китае через Центр компетенций по ИИ.