Seeed Studio запустила кампанию Kickstarter для SenseCAP Watcher, физического агента ИИ, способного контролировать пространство и предпринимать действия на основе событий в этой области. Описанный как «первый в мире агент LLM в физической среде для создания более умных пространств», SenseCAP Watcher использует бортовые и облачные технологии для «преодоления разрыва между цифровым интеллектом и физическими приложениями».
SenseCAP Watcher работает на базе микроконтроллера ESP32-S3 в сочетании с чипом Himax WiseEye2 HX6538 (Cortex-M55 и Ethos-U55 microNPU) для обработки изображений и векторных данных. Он построен на модуле Grove Vision AI V2 и имеет форм-фактор, составляющий примерно треть размера iPhone. Встроенные функции включают камеру, сенсорный экран, микрофон и динамик, поддерживающие распознавание голосовых команд и расширение многомодальных датчиков.
Устройство запускает программный пакет SenseCraft, который интегрирует модели tinyML на устройстве с мощными большими языковыми моделями, работающими либо на удаленном облачном сервере, либо на локальном компьютере, таком как серия reComputer на базе Nvidia Jetson или любой стандартный ПК. SenseCraft — это платформа с открытым исходным кодом, не требующая кода, которая позволяет пользователям обучать и развертывать модели ИИ. Модель на устройстве определяет цель, а LLM использует эту информацию для получения точных и действенных идей.
Технические характеристики SenseCAP Watcher:
- Беспроводной микроконтроллер – двухъядерный микроконтроллер ESP32-S3 @ 240 МГц, 8 МБ PSRAM
- Процессор искусственного интеллекта – Himax HX6538 (ARM Cortex-M55 + Ethos-U55 NPU)
- Хранилище
- Флэш-память – 32 МБ флэш-памяти для ESP32-S3, 16 МБ флэш-памяти для Himax HX6538
- Слот для карты microSD (до 32 ГБ)
- Дисплей – сенсорный экран 1,45 дюйма, разрешение 412×412
- Камера – модуль камеры OmniVision OV5647 5 МП, поле зрения 120°
- Аудио – выход динамика 1 Вт, моно микрофон
- Сетевые возможности – Wi-Fi 2,4 ГГц, Bluetooth 5 (LE) через ESP32-S3
- USB – 1x USB-C (только питание), 1x USB-C (питание и программирование)
- Расширение – 1x интерфейс Grove I2C, 2x 4 разъема типа «мама» (1xI²C, 2x GPIO, 2x GND, 1x 3.3V_OUT, 1x 5V_IN)
- Разное – встроенная антенна Wi-Fi и BLE, колесо прокрутки, 1х светодиод RGB для индикации, кнопка сброса
- Питание
- Питание 5 В постоянного тока
- Литий-ионный аккумулятор 3,7 В 400 мАч
- Размеры – будут объявлены позже
- Рабочая температура – от 0 до 45°C
SenseCAP Watcher может получать команды через Push to Talk (колесо/кнопка прокрутки) и мобильное приложение SenseCraft. Устройство хорошо работает с другими системами и может быть подключено к потокам Home Assistant и Node-Red. Устройство совместимо с платами Raspberry Pi и Arduino, модулями и платами серии ESP32 и оснащено разъемом Grove для расширения более чем 100 датчиками.
Кампания SenseCAP Watcher в настоящее время находится на Kickstarter и уже превзошла поставленную цель финансирования за несколько дней до старта. Само устройство в настоящее время стоит 89$, с месячной бесплатной пробной версией сервиса SenseCraft AI (стоимостью 6.9$) для пользователей, которые выбирают удаленный вариант LLM. Более подробную информацию о продукте можно найти на странице Wiki.
Несмотря на некоторые сходства с Rabbit R1 , получившим неоднозначные отзывы, SenseCAP Watcher более доступен по цене и в целом выглядит более многообещающе.
Выражаем свою благодарность источнику из которого взята и переведена статья, сайту cnx-software.com.
Оригинал статьи вы можете прочитать здесь.