Интеграция моделей Ultralytics YOLO в reCamera от Seeed Studio

Мы рады начать год партнерством с Seeed Studio, в рамках которого представлена новая инновация в области компьютерного зрения — reCamera. Это AI-камера с открытым исходным кодом, предназначенная для задач компьютерного зрения в реальном времени. Благодаря встроенной поддержке моделей Ultralytics YOLO, reCamera компактна и легко адаптируется, что делает реализацию твоих проектов в области AI еще проще.

Впервые reCamera была представлена AI-сообществу на YOLO Vision 2024 (YV24) — ежегодном гибридном мероприятии Ultralytics, на котором демонстрируются передовые инновации и создается платформа для совместной работы в сфере AI-зрения.

На этом мероприятии мы были рады видеть Элейн Ву, руководителя направления AI-робототехники в Seeed Studio, которая выступила с вдохновляющей презентацией о потенциале reCamera. Она описала устройство как созданное с заботой и вниманием, отметив: «Мы продумали для тебя все возможности».

Рис. 1. Элейн Ву выступает на YV24 удаленно.

В этой статье мы вернемся к выступлению Элейн Ву на YOLO Vision 2024, уделив особое внимание инновационной reCamera — впечатляющему результату сотрудничества Seeed Studio и Ultralytics — а также ее уникальным функциям и практическому применению.

Link to this sectionИнновации Seeed Studio в области AI-зрения#

Элейн начала свое выступление с представления Seeed Studio, компании, специализирующейся на оборудовании для Интернета вещей (IoT) и AI с 2008 года. Она пояснила, что Seeed Studio предоставляет разработчикам инструменты для любых задач — от создания небольших прототипов до высокопроизводительных систем, таких как NVIDIA Jetson, помогая воплощать идеи в жизнь.

За годы работы Seeed Studio помогла более чем 200 000 разработчиков создать решения, органично объединяющие AI и IoT. Элейн также рассказала, как Seeed сотрудничает с производителями процессоров, софтверными компаниями и сообществом разработчиков для создания гибких, настраиваемых решений.

Рис. 2. Элейн Ву рассказывает о背景 и опыте Seeed Studio.

Link to this sectionПредставляем reCamera#

После представления Seeed Studio Элейн Ву продемонстрировала новейшую разработку компании — reCamera, созданную в сотрудничестве с Ultralytics. Официально анонсированная на YV24, reCamera представляет собой гибкую, модульную и доступную AI-камеру с нативной поддержкой YOLO. Лицензия Ultralytics дает Seeed Studio право интегрировать модели Ultralytics YOLO в reCamera, обеспечивая конечным пользователям удобную и легальную работу AI прямо на устройстве. Камера разработана для удовлетворения растущего спроса на инструменты компьютерного зрения реального времени в самых разных отраслях.

Элейн показала, что reCamera — это не просто устройство, а платформа, которую разработчики, мейкеры и бизнес могут настраивать и расширять. Сделав ее открытой, Seeed Studio поощряет AI-сообщество создавать решения, адаптированные под конкретные нужды — будь то IoT, робототехника или промышленное применение.

Рис. 3. reCamera — это крошечная AI-камера с открытым исходным кодом.

«Мы определяем ее как гибкую платформу Vision AI, на базе которой каждый может спроектировать собственную камеру», — отметила Элейн, подчеркнув, что модульность и доступность reCamera делают AI-зрение доступным для всех, открывая путь к инновациям в самых разных отраслях.

Link to this sectionКлючевые особенности reCamera от Seeed Studio#

Итак, что же на самом деле означает, что reCamera — это первая программируемая AI-камера с открытым исходным кодом? Продукт обладает открытым дизайном и предлагает модульное аппаратное обеспечение: сенсорную плату, основную плату и базовую плату для кастомизации. Устройство создано так, чтобы дать разработчикам возможность легко адаптировать его под свои нужды. Оно также поставляется со встроенной поддержкой моделей Ultralytics YOLO, что позволяет использовать передовые возможности компьютерного зрения YOLO прямо из коробки.

Благодаря нативной поддержке reCamera полностью оптимизирована для запуска таких моделей, как Ultralytics YOLOv8 и Ultralytics YOLO11, без каких-либо проблем с настройкой или совместимостью. Поскольку модели Ultralytics уже предустановлены и готовы к развертыванию, необходимость в дополнительных этапах настройки, интеграции софта или лишних расходах отпадает, позволяя тебе сосредоточиться на создании своих приложений.

Разрабатываешь ли ты AIoT-решения, работаешь с робототехникой или занимаешься любым другим проектом в сфере компьютерного зрения, reCamera создана для того, чтобы помочь тебе начать работу быстро и легко.

Link to this sectionЧем reCamera отличается от традиционных IP-камер#

Элейн Ву также подробно рассказала о технических преимуществах reCamera и о том, как она преодолевает ограничения традиционных IP (Internet Protocol) камер.

В отличие от обычных камер, которым часто требуются внешние устройства, такие как мини-ПК или серверы для обработки видео и запуска AI-моделей, reCamera объединяет все в одном компактном корпусе.

Такая автономная конструкция упрощает развертывание и избавляет от необходимости в дополнительных устройствах. Кроме того, камера полностью программируема: ты можешь запускать AI-модели прямо на устройстве, не полагаясь на сторонний хост, что делает решение более эффективным и универсальным.

Link to this sectionТехнические подробности об AI-камере reCamera#

Сердцем reCamera является процессор SG200X, построенный на архитектуре RISC-V. Этот процессор специально разработан для edge AI-приложений, обеспечивая высокую производительность при минимальном энергопотреблении.

Он поддерживает такие видеотехнологии, как H.264 и H.265, которые сжимают видеофайлы для экономии места и пропускной способности без потери качества. Дополнительные функции, такие как HDR (High Dynamic Range), трехмерное шумоподавление и коррекция линз, обеспечивают четкое и профессиональное изображение даже в сложных условиях.

Обладая мощностью 1 триллион операций в секунду (1 TOPS), процессор способен справляться с требовательными задачами, такими как обнаружение объектов в реальном времени, а небольшой 8-битный микроконтроллер берет на себя выполнение более простых задач для экономии энергии.

reCamera также выделяется своей модульной конструкцией, которая включает три основные части: основную плату, сенсорную плату и базовую плату. Разработчики могут легко менять компоненты и проводить апгрейд.

Рис. 4. Здесь представлены три сменные платы: основная, сенсорная и базовая.

Например, ты можешь заменить сенсор камеры для получения более высокого разрешения или добавить дополнительное оборудование, такое как микрофоны или дисплеи. Базовая плата предлагает гибкие варианты связи, включая USB, Ethernet и более продвинутые интерфейсы, такие как Power over Ethernet (PoE) и RS-485, что делает камеру пригодной для самых разных сценариев использования.

Link to this sectionПрименение reCamera в компьютерном зрении#

reCamera — это надежный инструмент для широкого спектра реальных задач. Ее продвинутые возможности компьютерного зрения и адаптивность делают ее отличным выбором для разработчиков и компаний, стремящихся внедрить AI-решения в свои проекты.

Рис. 5. reCamera может использоваться для различных AI-приложений.

Вот некоторые из ключевых областей применения:

• Робототехника: Камера легко интегрируется с робоманипуляторами, дронами и подвесами для таких задач, как навигация, отслеживание объектов и автоматизация, обеспечивая более умную и эффективную работу.
• Промышленность: reCamera может помочь в мониторинге производственных линий, сортировке объектов и выявлении аномалий, становясь ценным инструментом для повышения эффективности производства и логистики.
• Умный дом: Камера может управлять такими устройствами, как видеодомофоны, умные замки и системы домашней безопасности, обеспечивая обнаружение объектов и распознавание лиц в реальном времени для повышения безопасности и удобства.
• Безопасность: Эта инновация может улучшить системы видеонаблюдения за счет качественных видеопотоков и надежного AI-мониторинга, что подходит как для жилых, так и для коммерческих помещений.

Благодаря своей гибкости, компактности и простоте интеграции, reCamera помогает создавать эффективные AI-решения для самых разных нужд компьютерного зрения.

Link to this sectionЗахватывающая живая демонстрация reCamera#

Элейн Ву завладела вниманием аудитории живой демонстрацией reCamera, показав, насколько легко ее настроить и использовать. С помощью визуального инструмента программирования Node-RED она продемонстрировала простой процесс развертывания: задать разрешение, загрузить модель YOLO и запустить. Через несколько мгновений reCamera заработала, точно выполняя обнаружение объектов в реальном времени.

Во время демонстрации reCamera быстро распознала обычные предметы, такие как бутылка, чашка и пульт, лежавшие на ее столе. Элейн пояснила, что органичная интеграция с моделями Ultralytics YOLO позволяет получать быстрые и надежные результаты, что делает камеру отличным выбором для разработчиков, желающих внедрить AI-зрение без написания сложного кода.

Она также отметила гибкость reCamera в плане качества видео и кастомизации. Устройство поддерживает запись в разрешении до 2K, а также апгрейд сенсоров для дальнейшего повышения производительности.

Link to this sectionВозможности для AI-разработчиков, открытые с помощью reCamera#

Завершая выступление на YV24, Элейн Ву призвала сообщество разработчиков изучить платформу reCamera с открытым исходным кодом. На GitHub уже доступны схемы оборудования и ОС reCamera, а в будущем планируется публикация дизайнов приложений.

Рис. 6. Это сотрудничество открывает новые возможности для разработчиков.

reCamera — это важный шаг к упрощению развертывания AI-моделей с предустановленными решениями Ultralytics YOLO. Она дает разработчикам свободу кастомизации без необходимости обладать навыками глубокого программирования. Идея, стоящая за reCamera, — создание экосистемы для совместной работы, вдохновляющей на инновации и новые открытия в области AI-зрения.

Link to this sectionОсновные выводы#

reCamera, разработанная Seeed Studio в партнерстве с Ultralytics, представляет собой революционное аппаратное решение с нативной поддержкой моделей YOLO. Она упрощает развертывание предустановленных моделей в производственных средах и предлагает разработчикам четыре универсальные версии для различных задач. Это сотрудничество знаменует собой важный шаг вперед в том, чтобы сделать продвинутые технологии компьютерного зрения доступнее и применимее для самого широкого круга задач.

Чтобы узнать больше об AI и его применении, загляни в наш репозиторий на GitHub и присоединяйся к нашему сообществу. Ты также можешь ознакомиться с нашими страницами решений, где описаны инновации в таких секторах, как AI в самоуправляемых автомобилях и сельское хозяйство. 🚀