Как реализовать keyword spotting на node.js в оффлайне?

Question

[bellerofonte]

Вот Яндекс выпустил недавно Яндекс.Станцию. Она, подобно Alexa, HomePod, etc, активируется ключевым словом "Алиса".
В обзоре Яндекса сказано, что это ключевое слово распознается оффлайн, за что отвечает нейросеть.
Как этот функционал может быть реализован на node.js? Какую библиотеку лучше использовать: TensorFlow.js, Synaptic или что-то другое?
Сталкивался кто-нибудь с подобной задачей? Есть ли пример? Или хотя бы хороший мануал?

Comments

[askhat]

2 минуты в минуты в гугле

[Роман]

bellerofonte, не стоит это делать в node.js. Все таки непрерывная обработка потока данных с микрофона достаточно затратная операция.
Для решения данного вопроса предлагаю следующий алгоритм:
1. Распознавание голосовых команд возложить на sphinx, которому прописать выполнение скрипта при распознавании каждой из необходимых вам команд с передачей ему парамета указывающего на то какая именно команда распознана (скрипта на bash, node.js, perl или другом ЯП поддерживаемом системой)
2. Сам скрипт отправляет данные о команде вашему node.js приложению (например с помощью curl если ваше приложение является по совместительству вебсервером на express или чемто подобном). Реализовать такую передачу данных можно и другими способами, например по websocket или pipe и т.д.)
3. Ваше nide.js приложение получив в роутер (в случае использования express) данные о команде выполняет необходимый набор действий по отработке команды.
ПРОФИТ