С ноября 2023 года по июль 2024 в Москве на ВДНХ проходило крупнейшее мероприятие года — выставка-форум “Россия”, где каждый регион показывал главные достижения в науке, промышленности, технологиях, рассказывал о своей культуре, традициях и обычаях. За время работы выставки ее посетило около 15 млн человек. 

Стенд Ростовской области был представлен в виде интерактивной площадки с возможностью виртуального погружения в жизнь и историю области. Инновационное развитие региона было решено продемонстрировать с помощью виртуального ассистента, встроенного в арт-объект “Красный конь” — туристический символ Ростовской области, символ свободы и широты южной души.  

Для выставки “Россия” наша компания разработала виртуального ассистента на основе искусственного интеллекта и интегрировала его в скульптуру коня на стенде. Конь должен был общаться с посетителями выставки и рассказывать о Ростовской области.  

Мы разработали ассистента на платформе Vocamate AI, использовав машинное обучение, компьютерное зрение, синтез и распознавание речи, LLM-модели. Благодаря компьютерному зрению конь видел подошедшего к нему человека и начинал с ним диалог. Технологии синтеза и распознавания речи позволяли распознавать запросы и озвучивать ответы, а NLU-модель собственной разработки Vocamate AI помогала точно понимать смысл сказанного человеком и давать корректные ответы. 

Чтобы голос звучал по-настоящему живо и выразительно, мы использовали технологию SaluteSpeech YourVoice от нашего партнёра SberDevices — благодаря этому у коня была максимально естесственная речь и собственный характер, с интонацией, эмоциями и паузами.
 
А чтобы разговор не ограничивался только темами из базы знаний, мы подключили LLM-модель GigaChat от Сбера. Благодаря этому конь мог поддержать беседу практически на любую тему и удивить гостей нестандартными ответами.

Красный конь на стенде Ростовской области стал не просто арт-объектом, а полноценным интерактивным гидом — дружелюбным и остроумным. Он знал более 250 тем: от достопримечательностей и знаменитых земляков до традиций и местной кухни. В течение восьми месяцев конь встречал гостей, рассказывал о регионе и легко поддерживал беседу даже в шуме многолюдной выставки — общался естественно, будто настоящий собеседник и мог даже пошутить.

Это стало возможным благодаря использованию больших языковых моделей. Такой подход дал ассистенту способность понимать широкий круг запросов, гибко вести диалог, отвечать не только по заданным сценариям, но и на любые спонтанные вопросы. LLM сделали общение живым и непринуждённым — именно таким, каким и должно быть взаимодействие с современными виртуальными помощниками.