Комплект разработчика Raspberry Pi на базе DSP с микрофонным массивом и поддержкой искусственного интеллекта

«Комплект разработчика Knowles AISonic IA8201 Raspberry Pi» основан на цифровом сигнальном процессоре IA8201 с функцией «пробуждение по голосу» для голосового пользовательского интерфейса с малой задержкой и логического вывода машинного обучения. В комплекте предлагается плата микрофонных массивов с 2 или 3 микрофонами, на выбор.

Компания Knowles, специализирующаяся на микрофонах, громкоговорителях и решениях для обработки звука, выпустила комплект средств разработки для Raspberry Pi для создания прототипов продуктов на основе своего нового IA8201 DSP-процессора. Комплект разработчика Knowles AISonic IA8201 Raspberry Pi поддерживает обработку голосового пробуждения для голосового пользовательского интерфейса с малой задержкой, шумоподавлением, распознаванием контекста и ускоренным логическим выводом машинного обучения.

Комплект разработчика AISonic IA8201 Raspberry Pi с Raspberry Pi и микрофонным массивом с двумя микрофонами

По словам Ноулза, платформа поддерживает «высокопроизводительную обработку расширенных, постоянно включенных контекстно-зависимых сценариев использования машинного обучения и память для нескольких алгоритмов». Приложения включают в себя умный дом и голосовые концентраторы в зданиях, домашние развлекательные системы, системы обнаружения приближения, системы безопасности с датчиками разбития стекла, беспроводные наушники и механизмы логического вывода для различных промышленных и коммерческих приложений.

Нет информации о цене и немного подробностей о комплекте, но много о DSP-процессоре, о котором было объявлено в июне. В комплект входит плата адаптера, которая подходит для Raspberry Pi, плата обработки с процессором IA8201 DSP и, на выбор, один из двух микрофонных массивов с 2 или 3 микрофонами, соответственно.

Комплект разработчика AISonic IA8201 Raspberry Pi следует за стандартным пакетом решений AISonic White Goods, о котором было объявлено 27 мая, и который так же включает в себя IA8201 DSP. Решение, нацеленное на голосовые интерфейсы, встроенные в бытовую технику, используется компанией Samsung для своих концентраторов умных устройств FamilyHub.

В комплект White Goods входит большая плата для разработки «Kona Board», и он доступен в двух версиях: одна с поддержкой MCU, а другая – для устройств более высокого класса под управлением Android. По какой-то причине Raspberry Pi появляется на изображении выше, но поскольку Pi не упоминается, это, вероятно, тизер для нового комплекта разработчика на основе Pi.

 
IA8201 DSP

Пограничный аудиопроцессор Knowles AISonic IA8201 OpenDSP является братом 28-нм IA8508, так же производимого компанией, но нацеленного на обработку искусственного интеллекта с низким энергопотреблением. DSP включает в себя чип Cortex-M4 вместе с двумя ядрами DSP на базе Tensilica с общей тактовой частотой 175 МГц. Ядро «DeltaMax» Tensilica Xtensa LX5 с 128-битным 4-полосным SIMD с плавающей запятой обеспечивает высокую мощность вычислений и AI/ML, в то время как 64-битное 2-полосное ядро ​​«HemiDelta» Xtensa LX5 обеспечивает очень малую мощность при постоянной обработке входов датчиков.

IA8201 дополнительно оснащен 1,44 МБ оперативной памяти на кристалле, из которых пользователю доступно 1 МБ. DSP поддерживает до 4х цифровых микрофонов PDM, 2х выхода PDM и до 3х портов I2S/TDM, поддерживающих 8х 32-битных аудиоканалов. Периферийная поддержка включает несколько интерфейсов SPI, I2C, UART и GPIO.

Архитектура ЦОС IA8201. Источник: AudioExpress

Для сравнения: более ранний IA8508 имеет третье ядро ​​«SSP», но тактовая частота DSP ниже 150 МГц. IA8508 имеет 4 МБ пользовательской оперативной памяти и поддерживает 8х микрофонов PDM и 6х интерфейсов I2S/TDM.

Как и IA8508, IA8201 называется «открытым» DSP (или OpenDSP), поскольку он предоставляет открытый, совместимый с Linux SDK, который позволяет разрабатывать подключаемые модули. Продукт поставляется с библиотекой звуковых алгоритмов и библиотеками AI/ML, которые поддерживают звуковые приложения дальнего поля с ультранизким энергопотреблением голосового пробуждения, формированием луча, настраиваемыми ключевыми словами и технологией устранения фонового шума.

SDK IA8201 поддерживает голосовые платформы Amazon Alexa, Sensory, Retune и Alango. Он также включает в себя TensorFlow Lite-Micro SDK для прототипирования приложений AI/ML, который позволяет переносить модели, разработанные в более крупных облачных фреймворках Tensor Flow, на встроенную платформу. Комплект Raspberry Pi обеспечивает доступ к порталу решений Knowles для инструментов конфигурации, прошивки и алгоритмов IA8201.

 
Дополнительная информация

Комплект разработчика Knowles AISonic IA8201 Raspberry Pi доступен для заказа, но цена остается неизвестной цене. Дополнительную информацию можно найти на странице продукта RPi Kit и в таблице данных DSP IA8201 (PDF).

Выражаем свою благодарность источнику из которого взята и переведена статья, сайту linuxgizmos.com

Оригинал статьи вы можете прочитать здесь.


5 1 vote
Article Rating
Подписаться
Уведомление о
guest

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.

0 Комментарий
Inline Feedbacks
View all comments