HUSKYLENS 2 – 6 TOPS LLM и AI-видеокамера с возможностями самообучения

DFRobot HUSKYLENS 2 — это камера с LLM и искусственным интеллектом для компьютерного зрения, работающая на двухъядерном RISC-V SoC Kendryte K230 с ускорителем ИИ производительностью 6 TOPS, разработанная для простоты использования разработчиками, преподавателями, соревновательными командами и энтузиастами ИИ. Она представляет собой обновление камеры HUSKYLENS AI представленной в 2019 году на SoC Kendryte K210.

Она оснащена 1 ГБ LPDDR4, 8 ГБ eMMC-памяти, слотом для microSD-карты, 2-мегапиксельным сенсором камеры, 4-контактным разъемом расширения Gravity и портом USB-C для питания и программирования. Компания сообщает, что HUSKYLENS 2 поставляется с предустановленными более чем 20 моделями ИИ, включая отслеживание объектов, распознавание рук и сегментацию экземпляров, но пользователи также могут обучать и развертывать собственные модели ИИ с использованием функций, таких как самообучающийся классификатор.

Huskylens 2 6 TOPS Edge AI camera

Характеристики HUSKYLENS 2:

  • SoC – Kendryte K230
    • ЦП
      • 64-битный процессор RISC-V @ 1,6 ГГц с поддержкой RVV 1.0
      • 64-битный процессор RISC-V @ 800 МГц
    • Ускоритель ИИ – до 6 TOPS
    • DPU с использованием 3D-структурированного света для расчета глубины до 1280×800 @ 30 кадр/с
    • VPU – Кодирование/декодирование видео для H.264/H.265/JPEG/MJPEG до 4Kp40/4Kp20
  • Системная память – 1 ГБ LPDDR4
  • Хранилище
    • 8 ГБ eMMC-памяти
    • Слот для microSD-карты
  • Дисплей – 2,4-дюймовый IPS-сенсорный дисплей с разрешением 640×480
  • Камера – 2-мегапиксельный сенсор изображения GC2093 (1/2,9″); сменный объектив, также доступен дополнительный микроскопный объектив
  • Аудио – Емкостный кремниевый микрофон и динамик мощностью 1 Вт
  • Сетевые возможности – Опциональный модуль WiFi 6 на 2,4 ГГц с установкой в слот
  • USB – Порт USB 2.0 Type-C
  • Расширение – 4-контактный разъем Gravity (I2C или UART)
  • Разное
    • Функциональная кнопка
    • 2 светодиода
    • 1 RGB-светодиод
  • Питание – 3,3–5 В
  • Потребляемая мощность – 1,5–3 Вт
  • Габариты – 70 × 58 × 19 мм

Huskylens 2 Grove and USB-C connectors С 4-контактным разъемом Gravity с интерфейсами UART и I2C и примерами кода DFRobot заявляет, что HUSKYLENS 2 полностью совместим с Arduino, BBC micro:bit, ESP32, Raspberry Pi, UNIHIKER , и другими устройствами, используемыми в робототехнике, автоматизации и STEM-образовании.

На программной стороне, помимо 20 предустановленных моделей, служба Model Context Protocol (MCP) позволяет HUSKYLENS 2 подключать локальное распознавание образов к большим языковым моделям. Например, камера может обработать изображение вашего обеда и предоставить информацию о питательной ценности и персональные диетические рекомендации. Пользовательские модели компьютерного зрения можно обучать с использованием YOLO, а видео в реальном времени может передаваться через USB-C или опциональный модуль WiFi. Более подробную информацию для начала работы можно найти в довольно подробной вики .

Kendryte K230 Edge AI camera 20 preloaded models
20 предустановленных моделей ИИ

Face recognition with person name
Распознавание лиц с именем человека

Это не первое устройство на Kendryte K230, так как мы рассматривали плату разработки CanMV-K230 Edge AI в октябре 2023 года и Banana Pi BPI-CanMV-K230D-Zero в 2024 году. Тем не менее, HUSKYLENS 2 является законченным устройством и может быть проще в использовании, поскольку компания, по-видимому, проделала большую работу на программной стороне.

Лучший способ понять возможности камеры HUSKYLENS 2 Edge AI — это, вероятно, посмотреть короткое видео, встроенное ниже, демонстрирующее основные функции с несколькими демонстрациями.

Камеру HUSKYLENS 2 LLM и AI vision можно приобрести на DFRobot за $74,90 . DFRobot также управляет магазином на Amazon , но новая модель пока не представлена там.

Выражаем свою благодарность источнику, с которого взята и переведена статья, сайту cnx-software.com.

Оригинал статьи вы можете прочитать здесь.

0 0 votes
Article Rating
Подписаться
Уведомление о
guest

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.

0 Комментарий
Oldest
Newest Most Voted
Inline Feedbacks
View all comments