Новый программный комплекс, получивший имя Cognitive Voice Assistant, предназначен для голосового взаимодействия с оператором без временных разрывов. Основу системы составляет нейросеть генеративного типа «Ипполит», созданная внутри компании. Обработка запросов, поступающих на обычном языке, осуществляется в защищённой облачной инфраструктуре, при этом сама архитектура размещена на изолированных внутренних мощностях предприятия. Подобное построение обеспечивает автономность от внешних поставщиков и минимизирует поверхность для киберугроз извне.

Изображение: cognitivepilot.com

Ключевая особенность решения — анализ смысла высказывания по мере его произнесения. Системе не требуется дожидаться окончания фразы: распознавание и осмысление идут синхронно с речью оператора. Это устраняет паузы, сохраняет непрерывность коммуникации и приближает диалог к естественному формату.

Функционально ассистент интегрирован с роботизированным комплексом и способен управлять его возможностями напрямую. Архитектура адаптирована под прикладные индустриальные сценарии, а база знаний охватывает терминологию аграрного сектора и смежных направлений, связанных с эксплуатацией минитрактора. Оператору доступны сведения о техническом состоянии машины, устойчивости канала связи, параметрах текущих миссий и стадии выполнения производственного задания.

Помимо этого, помощник формирует отчётность и озвучивает сведения о рабочих процессах в актуальном режиме. В частности, он может сообщить: «Не смог обработать участок, поскольку там было препятствие». Предусмотрено и прямое директивное управление — команды «Остановиться», «Продолжить движение», «Просигнализировать фарами», «Подать звуковой сигнал» отрабатываются системой.

С точки зрения безопасности алгоритмы ориентированы на исключение риска травмирования персонала и повреждения техники. Причём как при поступлении ошибочных команд от оператора, так и при попытке несанкционированного вмешательства извне.