ESP-Skainet. Новая среда разработки от компании Espressif для создания голосовых приложений

16.10.20193019

Компания Espressif, мировой лидер в сегменте беспроводных решений IoT ближнего радиуса действия на базе технологий Wi-Fi и Wi-Fi + Bluetooth, представляет вниманию разработчиков – ESP-Skainet – новую среду разработки голосовых взаимодействий, основанную на использовании флагманского чипа Espressif ESP32. С помощью ESP-Skainet пользователи могут легко создавать приложения, выполняющие обнаружение и распознавание пробуждающего слова и последующую обработку команд на основе алгоритмов распознавания речи. Новая среда разработки уже изначально, в её стартовом виде, поддерживает активацию голосом и несколько автономных команд распознавания речи.

gamma

Структура разработческой среды основана на приложениях WakeNet и MultiNet от Espressif.

WakeNet – это голосовой механизм пробуждения, обеспечивающий экономное использование памяти модулей (всего около 20 КБ) и высокую скорость вычислений, необходимых для реализации этого механизма. WakeNet специально разработан для встроенных микроконтроллеров с низким энергопотреблением, обеспечивая пользователям отличную производительность в ближней и дальней зонах.

При использовании миниатюрной, но в то же время достаточно универсальной и мощной отладочной платы LyraT-Mini в качестве основы для разработки, достигнута вероятность пробуждения в тихой обстановке порядка 97% на расстоянии одного метра между платой и пользователем. В тех же условиях, получена вероятность пробуждения порядка 95% при трёхметровом расстоянии между платой и пользователем.

MultiNet – это облегченная модель, позволяющая ESP32 выполнять распознавание уже нескольких команд в автономном режиме. Дизайн MultiNet опирается на сверточные рекуррентные нейронные сети (CRNN) и временную классификацию соединений (CTC). В качестве входных данных MultiNet использует Mel-Frequency Cepstral Coefficients (MFCC) аудиоклипа, а в качестве выходных данных – фонемы этого аудиоклипа. Сравнивая фонемы выходных данных, MultiNet может определить соответствующую команду.

Пользователи могут легко добавлять свои собственные голосовые команды, без необходимости повторного обучения модели, при этом подключения к сети не требуется.

Новая разработческая среда Espressif поддерживает сравнительно несложную настройку клиентских слов для пробуждения ваших устройств на основе ESP32. Для получения более подробной информации о процессе настройки собственного пробуждающего слова, используйте «ESP Wake Words Customization».

Компания Espressif. Обзор продукции
Компания Espressif - 2019. Основные продуктовые линейки. Материалы обучающего семинара MASTER`S

Видеоверсия презентации «Компания Espressif. Основные продуктовые линейки и решения для IoT и AI IoT»

Компания Espressif Systems предлагает длительный жизненный цикл своих продуктов, что является важным атрибутом развертывания решений IoT.

В настоящее время решения Espressif положительно оценили более чем 5000 компаний, разрабатывающих и производящих свою продукцию на основе чипов и модулей этого вендора.

Модельный ряд беспроводных решений Компании Espressif - Wi-Fi, Wi-Fi+Bluetooth.

ООО «ГАММА ИНЖИНИРИНГ» - официальный дистрибьютор Espressif.

Поделиться: telegram whatsapp vk

Новости

04.10.20233499
Книга ESP32-C3

Книга ESP32-C3

В июне 2023 компания Espressif выпустила в электронном виде книгу «ESP32-C3 Wireless Adventure: A Comprehensive Guide to IoT». В октябре 2023г издательство «ДМК Пресс» выпускает в печать перевод...
Читать подробнее...
11.01.20232124
Espressif объявил о начале массового производства SoC ESP32-C6 c поддержкой Wi-Fi 6

Espressif объявил о начале массового производства SoC ESP32-C6 c поддержкой Wi-Fi 6

  Компания Espressif объявила о запуске массового производства системы на кристалле (SoC) ESP32-C6, с поддержкой беспроводной связи по протоколам 2.4 ГГц Wi-Fi 6, Bluetooth 5 (LE) и...
Читать подробнее...
11.01.20233391
Espressif анонсирует ESP32-P4: высокопроизводительный RISC-V микроконтроллер с различными коммуникационными возможностями

Espressif анонсирует ESP32-P4: высокопроизводительный RISC-V микроконтроллер с различными коммуникационными возможностями

  Компания Espressif расширяет свое текущее портфолио для удовлетворения потребностей в высокопроизводительных вычислениях для приложений интернета вещей,...
Читать подробнее...