RPA робот - голосовой ассистент в изучении ПО, на примере MS Word.

Голосовой ассистент помогает пользователю разобраться со сценариями работы с целевым ПО, отвечая на вопросы о работе с целевым ПО голосом и параллельно демонстрируя процесс работы с пользовательским интерфейсом визуально. Кроме того, робот позволяет выполнять повседневные задачи в целевом ПО, отдавая короткие голосовые команды.
В проекте используются три нейросети, выполняющие задачи: распознавания голоса (speech to text), классификации команд и исправления ошибок распознавания голоса (большая лингвистическая модель "Сайга" - русскоязычный аналог ChatGPT) и синтеза речи (text to speech). Платформа PIX выполняет роль связующего звена и выполняет функции визуальной демонстрации и практического применения сценариев работы.
Все нейросетевые модели работают локально на центральном процессоре домашнего ПК, без требования доступа к сети интернет или наличия дорогих видеокарт. Головкин Денис Сергеевич
corunethron@gmail.com
+7-999-616-03-66

---