Недавно компания Seeed Studio выпустила XIAO Vision AI Camera — компактную интеллектуальную AI-камеру ESP32-C3 с открытым исходным кодом, которая объединяет в себе модуль Grove Vision AI Module V2, модуль XIAO ESP32C3 и 5-мегапиксельную камеру OV5647 в специальном корпусе из PLA, напечатанном на 3D-принтере.
Одним из ключевых компонентов модуля камеры является чип WiseEye2 HX6538, который оснащен двухъядерными процессорами Arm Cortex-M55 и NPU Ethos-U55 для вычислений на периферии ИИ. Он также оснащен подключением по Wi-Fi, что превращает его в интеллектуальную IP-камеру, которая легко интегрируется с Home Assistant для автоматизации замкнутого цикла (например, при обнаружении объектов включается подсветка или оповещения). Его 5-мегапиксельная камера OV5647 может записывать видео 1080p@30fps и имеет регулируемый фокус. Эти функции делают эту камеру полезной для промышленной автоматизации, умных городов, мониторинга транспорта, интеллектуального сельского хозяйства и мобильных устройств IoT.
Технические характеристики камеры XIAO Vision AI
- Основной модуль микроконтроллера – XIAO ESP32C3
- SoC — Expressif Systems ESP32-C3
- CPU – Одноядерный микроконтроллер RISC-V @ 160 МГц
- Память – 400 КБ SRAM
- Хранилище – 384 КБ ПЗУ
- Беспроводное подключение Wi-Fi 4 и Bluetooth LE 5.0
- Память – 4 МБ флэш-памяти
- USB – 1х порт USB Type-C для питания и прошивки (через CH343)
- Антенна – Внешняя антенна u.FL
- SoC — Expressif Systems ESP32-C3
- Процессор Vision AI – Модуль Grove Vision AI V2
- Himax WiseEye2 HX6538 SoC
- Arm Cortex-M55 @ 400 МГц
- Arm Cortex-M55 @ 150 МГц
- Ускоритель искусственного интеллекта – Arm Ethos-U55 microNPU @ 400 МГц
- Память – до 2432 КБ SRAM
- Хранилище – загрузочное ПЗУ объемом 64 КБ
- Разъем для камеры CSI
- Интерфейсы Grove: I²C, UART, SPI
- Микрофон PDM
- Himax WiseEye2 HX6538 SoC
- Хранилище
- 16 МБ флэш-памяти для прошивки
- Слот для карты MicroSD с поддержкой режима DS до 25 МГц (на модуле Grove Vision AI Module V2)
- Модуль камеры – OV5647
- 5-мегапиксельная КМОП-матрица
- Разрешение – 2592 × 1944
- Видеовыход
- 1080p при 30 кадрах в секунду
- 720p при 60 кадрах в секунду
- Поле зрения – 62°
- Размер пикселя – 1,4 мкм × 1,4 мкм
- Фокусное расстояние – 3,4 мм (регулируемое)
- Диафрагма – f/2.8
- Размер КМОП-матрицы – 1/4″
- Расширение – разъем Grove I2C
- Питание – 5 В через порты USB Type-C на XIAO ESP32C3
- Размеры – 49 x 32 x 31 мм (корпус, напечатанный на 3D-принтере)
- Рабочая температура – от -20°С до +70°С
Для упрощения разработки модели ИИ этот модуль камеры поддерживает развертывание модели ИИ без кода/с малым кодом через платформу ИИ SenseCraft, так что пользователи могут быстро и легко обучать и развертывать модели, не написав ни одной строки кода. Пользователи могут выбирать из широкого спектра встроенных моделей, включая MobileNet V1/V2, EfficientNet-Lite и YOLO v5/v8, или загружать свои наборы данных для обучения с использованием методов «Быстрое обучение» или «Обучение с помощью сбора изображений». После обучения модели можно развертывать на устройстве одним щелчком мыши, а результаты вывода визуализируются в режиме реального времени через веб-интерфейс.
У вас также есть возможность интегрировать эту камеру с Home Assistant для создания решений автоматизации Smart Home. После прошивки ESPHome на XIAO ESP32C3 и развертывания модели через SenseCraft AI вы можете связать камеру с Home Assistant. В редакторе автоматизации можно запрограммировать различные действия, такие как запуск интеллектуальных устройств или отправка оповещений, на основе событий обнаружения, таких как распознавание объектов или обнаружение падения, что позволяет создать полностью локальную замкнутую интеллектуальную систему.
Изучая документацию, мы также заметили поддержку TensorFlow Lite и PyTorch, что обеспечивает совместимость с более широким спектром фреймворков машинного обучения, а также поддержку Arduino IDE для большей гибкости.
Программное обеспечение имеет полностью открытый исходный код, весь код, схемы и файлы дизайна доступны в репозитории GitHub компании. Дополнительная документация, такая как складной держатель, напечатанный на 3D-принтере , и технический паспорт для HX6538, также доступны на странице продуктов.
Модуль Grove Vision AI V2 в сравнении с модулем Grove Vision AI предыдущего поколения и XIAO ESP32S3 Sense
Ранее мы писали о различных платах камер Edge AI класса MCU, включая платы камер OpenMV N6 и AE3 AI со сверхнизким энергопотреблением, которые могут работать от батареи в течение многих лет, наружные камеры Edge AI на базе Modbus Vision RS485 и SenseCAP A1102 (с LoRaWAN) от Seeed Studio, построенные на базе микроконтроллера Himax WiseEye2 HX6538, а также комплект для разработки камер AI MaixCAM-Pro от Sipeed, оснащенный SoC SOPHGO SG2002 RISC-V с нейронным процессором 1 TOPS.
На момент написания статьи камера XIAO Vision AI доступна для предварительного заказа в магазине Seeed Studio за 24,90$ со скидкой 23,50$ за 10 единиц и более. Ожидается, что отправка с китайского склада начнется с 3 июня 2025 года. Вскоре она также должна появиться в магазине AliExpress компании .
Выражаем свою благодарность источнику из которого взята и переведена статья, сайту cnx-software.com.
Оригинал статьи вы можете прочитать здесь.