ВТБ в рамках форума представил визуализированный образ будущего цифрового банковского помощника. В качестве 3D-аватара был выбран женский образ с именем Тамара. На стенде банка впервые состоялась демонстрация CБП-переводов, совершенных с помощью Тамары, которая объединила в себе голос, визуальный образ и навык финансового помощника.
Прототип будущего помощника был представлен на стенде форума. Когда пользователь обращается к умной колонке, чтобы запустить чат с ВТБ, как это происходит в случае запуска голосового банковского помощника, на экране появляется визуальный образ. Общение происходит в режиме реального времени: Тамара реагирует на вопросы, а ее речь синхронизирована с изображением на экране — движением губ и мимикой. Визуальный образ Тамары был создан нейросетью, совместившей портреты 50 выдающихся женщин, которые в разное время внесли значимый вклад в развитие ИТ-сферы.
В настоящее время клиентам банка уже доступен голосовой ассистент Лео в мобильном приложении банка, на умных устройствах с Алисой от Яндекса и в Яндекс.Станциях. В перспективе банк не исключает возможности использования нескольких персонажей, чтобы у клиентов была возможность выбора.
В августе этого года в рамках пилотного проекта банк ВТБ уже внедрил видеоаватар, который на специализированном информационном ресурсе консультирует глухих и слабослышащих клиентов по банковским продуктам и услугам. Клиент вводит свой запрос в чат-боте и получает консультацию от реалистичной модели 3D-переводчика в образе сотрудника ВТБ на русском жестовом языке. Сервис помогает обеспечить все онлайн-коммуникации для клиентов с нарушением слуха.
Платформа использует технологии машинного перевода, дополненной реальности и обработки естественного языка (NLP), которые дают компьютерам возможность интерпретировать и понимать человеческий язык. Траектории движения тела и рук, а также мимика и жесты, характерные для РЖЯ, записаны с помощью видеокамер и motion capture-датчиков, необходимых для оцифровки движений реального объекта.
