Интеграция моделей Ultralytics YOLO в reCamera от Seeed Studio

Мы рады начать год с партнерства с Seeed Studio, в рамках которого выпускается новая инновация в области компьютерного зрения — reCamera. Это камера с открытым исходным кодом, созданная для задач компьютерного зрения в реальном времени. Благодаря встроенной поддержке моделей Ultralytics YOLO устройство reCamera отличается компактностью и настраиваемостью, что позволяет разработчикам и создателям воплощать в жизнь проекты в сфере визуального ИИ проще, чем когда-либо.

Камера reCamera была впервые представлена ​​сообществу ИИ на конференции YOLO Vision 2024 (YV24), ежегодном гибридном мероприятии Ultralytics, демонстрирующем передовые инновации и предоставляющем платформу для сотрудничества в области визуального ИИ.

Мы были очень рады тому, что на мероприятии выступила Elaine Wu, руководитель группы ИИ-робототехники в Seeed Studio, с содержательным основным докладом о захватывающем потенциале reCamera. Она описала устройство как созданное с заботой и вниманием, сказав: «Мы продумали для вас каждую возможность».

Рис. 1. Элейн Ву выступает на YV24 удаленно.

В этой статье мы вернемся к основному докладу Elaine Wu на YOLO Vision 2024, сосредоточив внимание на инновационной reCamera — замечательном результате сотрудничества между Seeed Studio и Ultralytics — а также на ее уникальных функциях и практических применениях.

Инновации Seeed Studio в области AI-зрения#

Элейн начала свое выступление с представления Seeed Studio, компании, специализирующейся на оборудовании для Интернета вещей (IoT) и AI с 2008 года. Она пояснила, что Seeed Studio предоставляет разработчикам инструменты для любых задач — от создания небольших прототипов до высокопроизводительных систем, таких как NVIDIA Jetson, помогая воплощать идеи в жизнь.

За годы работы Seeed Studio помогла более чем 200 000 разработчиков создать решения, органично объединяющие AI и IoT. Элейн также рассказала, как Seeed сотрудничает с производителями процессоров, софтверными компаниями и сообществом разработчиков для создания гибких, настраиваемых решений.

Рис. 2. Элейн Ву рассказывает о背景 и опыте Seeed Studio.

Представляем reCamera#

Представив Seeed Studio, Elaine Wu продемонстрировала новейшую разработку компании — reCamera, выпущенную в сотрудничестве с Ultralytics. Официально анонсированная на YV24, reCamera представляет собой гибкую, модульную и доступную камеру на базе ИИ с нативной поддержкой YOLO. Лицензия Ultralytics предоставляет Seeed Studio права на интеграцию моделей Ultralytics YOLO в reCamera, обеспечивая конечным пользователям бесперебойную и надежную работу ИИ прямо на устройстве. Она создана для удовлетворения растущего спроса на инструменты компьютерного зрения в реальном времени в самых разных сферах.

Элейн показала, что reCamera — это не просто устройство, а платформа, которую разработчики, мейкеры и бизнес могут настраивать и расширять. Сделав ее открытой, Seeed Studio поощряет AI-сообщество создавать решения, адаптированные под конкретные нужды — будь то IoT, робототехника или промышленное применение.

Рис. 3. reCamera — это крошечная AI-камера с открытым исходным кодом.

«Мы определяем ее как гибкую платформу Vision AI, на базе которой каждый может спроектировать собственную камеру», — отметила Элейн, подчеркнув, что модульность и доступность reCamera делают AI-зрение доступным для всех, открывая путь к инновациям в самых разных отраслях.

Ключевые особенности reCamera от Seeed Studio#

Итак, что на самом деле означает утверждение, что reCamera — это первая программируемая ИИ-камера с открытым исходным кодом? У reCamera дизайн продукта с открытым исходным кодом, она предоставляет модульное аппаратное обеспечение, состоящее из платы датчиков, основной платы и базовой платы для настройки. Устройство создано для того, чтобы дать разработчикам гибкость и позволить легко адаптировать его под свои нужды. Оно также поставляется со встроенной поддержкой моделей Ultralytics YOLO, что обеспечивает беспрепятственное использование передовых возможностей YOLO в компьютерном зрении «из коробки».

Встроенная поддержка позволяет полностью оптимизировать reCamera для запуска таких моделей YOLO, как Ultralytics YOLOv8 и Ultralytics YOLO11, без каких-либо хлопот с настройкой или проблем совместимости. Поскольку модели Ultralytics уже предварительно установлены и готовы к развертыванию, отпадает необходимость в дополнительных шагах по настройке, таких как интеграция программного обеспечения или дополнительные затраты, поэтому разработчики могут сосредоточиться на создании своих приложений.

Разрабатываешь ли ты AIoT-решения, работаешь с робототехникой или занимаешься любым проектом в области computer vision, reCamera создана для того, чтобы помочь тебе начать работу быстро и без усилий.

Чем reCamera отличается от традиционных IP-камер#

Элейн Ву также подробно рассказала о технических преимуществах reCamera и о том, как она преодолевает ограничения традиционных IP (Internet Protocol) камер.

В отличие от обычных камер, которым часто требуются внешние устройства, такие как мини-ПК или серверы для обработки видео и запуска AI-моделей, reCamera объединяет все в одном компактном корпусе.

Такая автономная конструкция упрощает развертывание и избавляет от необходимости в дополнительных устройствах. Кроме того, камера полностью программируема: ты можешь запускать AI-модели прямо на устройстве, не полагаясь на сторонний хост, что делает решение более эффективным и универсальным.

Технические подробности об AI-камере reCamera#

В основе reCamera лежит процессор SG200X, созданный на базе архитектуры RISC-V. Этот процессор специально разработан для краевых ИИ-приложений, обеспечивая высокую производительность при минимальном энергопотреблении.

Он поддерживает такие видеотехнологии, как H.264 и H.265, которые сжимают видеофайлы для экономии места и пропускной способности без потери качества. Дополнительные функции, такие как HDR (High Dynamic Range), трехмерное шумоподавление и коррекция линз, обеспечивают четкое и профессиональное изображение даже в сложных условиях.

Обладая способностью выполнять 1 триллион операций в секунду (1 TOPS), процессор может справляться со сложными задачами, такими как обнаружение объектов в реальном времени, а меньший 8-битный микроконтроллер управляет более простыми операциями для экономии энергии.

reCamera также выделяется своей модульной конструкцией, которая включает три основные части: основную плату, сенсорную плату и базовую плату. Разработчики могут легко менять компоненты и проводить апгрейд.

Рис. 4. Здесь представлены три сменные платы: основная, сенсорная и базовая.

Например, ты можешь заменить сенсор камеры для получения более высокого разрешения или добавить дополнительное оборудование, такое как микрофоны или дисплеи. Базовая плата предлагает гибкие варианты связи, включая USB, Ethernet и более продвинутые интерфейсы, такие как Power over Ethernet (PoE) и RS-485, что делает камеру пригодной для самых разных сценариев использования.

Применение reCamera в компьютерном зрении#

reCamera — это надежный инструмент для широкого спектра реальных задач. Ее продвинутые возможности компьютерного зрения и адаптивность делают ее отличным выбором для разработчиков и компаний, стремящихся внедрить AI-решения в свои проекты.

Рис. 5. reCamera может использоваться для различных приложений визуального ИИ.

Вот некоторые из ключевых областей применения:

• Робототехника: камера может легко интегрироваться в робототехнические руки, дроны и подвесы для таких задач, как навигация, отслеживание объектов и автоматизация, обеспечивая более умную и эффективную работу.
• Промышленность: reCamera может помочь в мониторинге производственных линий, сортировке объектов и выявлении аномалий, становясь ценным инструментом для повышения эффективности производства и логистики.
• Умный дом: Камера может управлять такими устройствами, как видеодомофоны, умные замки и системы домашней безопасности, обеспечивая обнаружение объектов и распознавание лиц в реальном времени для повышения безопасности и удобства.
• Безопасность: Эта инновация может улучшить системы видеонаблюдения за счет качественных видеопотоков и надежного AI-мониторинга, что подходит как для жилых, так и для коммерческих помещений.

Благодаря своей гибкости, компактности и простоте интеграции, reCamera помогает создавать эффективные AI-решения для самых разных нужд компьютерного зрения.

Захватывающая живая демонстрация reCamera#

Elaine Wu привлекла внимание аудитории живой демонстрацией reCamera, показав, насколько просто ее настроить и использовать. Используя Node-RED, инструмент визуального программирования, она продемонстрировала простой процесс развертывания reCamera: установить разрешение, загрузить модель YOLO и выполнить развертывание. Всего за несколько мгновений reCamera заработала и начала точно выполнять обнаружение объектов в реальном времени.

Во время демонстрации reCamera быстро распознала обычные предметы, такие как бутылка, чашка и пульт, лежавшие на ее столе. Элейн пояснила, что органичная интеграция с моделями Ultralytics YOLO позволяет получать быстрые и надежные результаты, что делает камеру отличным выбором для разработчиков, желающих внедрить AI-зрение без написания сложного кода.

Она также отметила гибкость reCamera в плане качества видео и кастомизации. Устройство поддерживает запись в разрешении до 2K, а также апгрейд сенсоров для дальнейшего повышения производительности.

Возможности для AI-разработчиков, открытые с помощью reCamera#

Завершая свое выступление на YV24, Elaine Wu призвала сообщество разработчиков изучить платформу reCamera с открытым исходным кодом: аппаратные схемы и reCamera OS уже доступны на GitHub, а в будущем планируется выпуск проектов приложений.

Рис. 6. Это сотрудничество открывает новые возможности для разработчиков.

reCamera — это важный шаг к упрощению развертывания AI-моделей с предустановленными решениями Ultralytics YOLO. Она дает разработчикам свободу кастомизации без необходимости обладать навыками глубокого программирования. Идея, стоящая за reCamera, — создание экосистемы для совместной работы, вдохновляющей на инновации и новые открытия в области AI-зрения.

Основные выводы#

reCamera, разработанная Seeed Studio в партнерстве с Ultralytics, представляет собой революционное аппаратное решение с нативной поддержкой моделей YOLO. Она упрощает развертывание предустановленных моделей в производственных средах и предлагает разработчикам четыре универсальные версии для различных задач. Это сотрудничество знаменует собой важный шаг вперед в том, чтобы сделать продвинутые технологии компьютерного зрения доступнее и применимее для самого широкого круга задач.

Для получения дополнительной информации об искусственном интеллекте и его применениях посети наш репозиторий на GitHub и присоединяйся к нашему сообществу. Ты также можешь ознакомиться с нашими страницами решений, посвященными инновациям в таких секторах, как ИИ в беспилотных автомобилях и сельское хозяйство. 🚀