Виртуальный помощник Vocamate AI был интегрирован в арт-объект “Красный конь” – туристический символ Ростовской области, который демонстрировал технологические достижения региона на форуме.
Около полугода конь работал на стенде Ростовской области и общался с посетителями выставки, рассказывал об интересных местах, знаменитых людях и традициях региона. За все время работы выставки с ним поговорило более 1100 человек, которые получили ответы более чем на 80 000 вопросов.
Ассистент создавался на платформе Vocamate AI, и при его разработке были использованы технологии машинного обучения и компьютерного зрения. Благодаря компьютерному зрению он видел стоящего впереди человека и начинал с ним диалог. Синтез и распознавание речи SaluteSpeech помогали ассистенту воспринимать смысл сказанного гостем и генерировать речь в ответ. NLU-модель обеспечивала точную трактовку запросов и корректность ответов.
Красный конь получил уникальный синтез на основе технологий SaluteSpeech YourVoice. Качественный синтез, правильно расставленные паузы и интонации сделали голос ассистента максимально естественным и неотличимым от голоса человека.
Гид-конь мог поддержать беседу по 250 тематикам из базы знаний, а благодаря интеграции с генеративной нейросетевой моделью Сбера GigaChat, он говорил на любые темы за пределами заложенного сценария в режиме свободного диалога.
Видео с места проведения мероприятия можно посмотреть по ссылке.