Модуль Grove Vision AI V2 от Seeed Studio основан на двухъядерном микроконтроллере HiMax WiseEye2 HX6538 Cortex-M55 AI с микропроцессором Arm Ethos-U55 и оснащен разъемом MIPI CSI для камеры OV5647. Он разработан для приложений компьютерного зрения с искусственным интеллектом, использующих фреймворки TensorFlow и PyTorch, и подключается к таким хостам, как Raspberry Pi SBC, платы ESP32 IoT, Arduino и платам других производителей, через I2C.
Мы протестировали модуль искусственного интеллекта Grove Vision предыдущего поколения на базе ускорителя искусственного интеллекта на базе DSP с частотой 400 МГц HX6537-A с использованием комплекта прототипа датчика SenseCAP K1100 с возможностью подключения LoRaWAN, и нам удалось заставить этот комплект выполнять распознавание лиц и отправлять данные через LoRaWAN. Grove Vision AI V2 основан на этом, но с современным ядром Arm MCU и более мощным ускорителем искусственного интеллекта, который может запускать такие модели, как Mobilenet V1/V2, Efficientnet-lite и Yolo v5 и v8, используя платформу SenseCraft с низким кодом/без кода.
Grove Vision AI V2 оснащен платой XIAO ESP32-C3 и подключен к модулю камеры OV5647.
Технические характеристики Grove Vision AI V2:
- Микроконтроллер — Himax WiseEye2 HX6538
- Ядра микроконтроллера
- Arm Cortex-M55 @ 400 МГц
- Arm Cortex-M55 @ 150 МГц
- AI-ускоритель — Arm Ethos-U55 microNPU @ 400 МГц
- Память — до 2432 КБ SRAM
- Хранилище — загрузочный диск объемом 64 КБ
- Ядра микроконтроллера
- Хранилище
- Флеш-память 16Мб для прошивки
- Слот для карты MicroSD с поддержкой режима DS до 25 МГц
- Интерфейс камеры — разъем MIPI CSI для камер OV5647 (в будущем будут поддерживаться другие датчики)
- USB — 1х порт USB Type-C для питания и прошивки (через CH343)
- Датчик – микрофон PDM
- Расширение
- Разъем Grove I2C
- 2х 7-контактных разъема с I2C, UART и SPI, совместимые с платами Seeed Studio XIAO
- Разное — кнопка сброса, кнопка загрузки/пользователя.
- Источник питания — 5 В через порт USB Type-C, соединение Grove или разъем ввода-вывода.
Схема подключения Grove Vision AI V2 с камерой и хост-контроллером
Представители компании Himax утверждают, что чип WiseEye2 H6538 обеспечивает в 32 раза большую скорость вывода, чем чип WiseEye1 (H6537), а энергоэффективность в 50 раз выше. Это также позволяет выполнять более сложные модели и получать более точные результаты вывода при сохранении того же энергопотребления, что и у предыдущего поколения.
Seeed Studio предоставляет инструкции по началу работы с программированием Arduino и платформой SenseCraft AI без кода для развертывания моделей, руководство по интеграции с платформой домашней автоматизации с открытым исходным кодом Home Assistant и руководство пользователя Himax SDK для более опытных пользователей. Все эти ресурсы вы найдете в Wiki.
Интеграция Grove Vision AI V2 с Home Assistant
Типичные области применения включают промышленную автоматизацию (например, профилактическое обслуживание), «умные» города, транспорт (например, отслеживание активов), «умное» сельское хозяйство и IoT-устройства с батарейным питанием, такие как носимые и портативные устройства.
Модуль Grove Vision AI V2 продается на Seeed Studio за 15,99 долларов США , но это только за плату, и большинство людей, вероятно, купят комплект, добавляющий модуль камеры и плату разработки XIAO ESP32C3 или XIAO ESP32S3 по цене от 28,88 долларов США.
Выражаем свою благодарность источнику из которого взята и переведена статья, сайту cnx-software.com.
Оригинал статьи вы можете прочитать здесь.