Интеграция моделей Ultralytics YOLO в камеру reCamera от Seeed Studio

Абирами Вина

4 мин. чтения

10 января 2025 г.

Узнайте, как Ultralytics и Seeed Studio совместно запустили камеру reCamera на выставке YOLO Vision 2024, интегрировав модели YOLO в инновационные приложения Vision AI.

Мы рады начать этот год с сотрудничества со студией Seeed, которая представила новую инновацию в области компьютерного зрения - камеру reCamera. Это камера с открытым исходным кодом, разработанная для задач компьютерного зрения в реальном времени. Благодаря встроенной поддержке моделей Ultralytics YOLO, reCamera компактна и настраиваема, что позволяет разработчикам и создателям воплощать в жизнь свои проекты в области искусственного зрения как никогда легко.

Камера reCamera была впервые представлена сообществу ИИ на YOLO Vision 2024 (YV24), ежегодном гибридном мероприятии Ultralytics, демонстрирующем передовые инновации и обеспечивающем платформу для сотрудничества в области Vision AI. 

На мероприятии Элейн Ву, руководитель группы робототехники искусственного интеллекта Seeed Studio, выступила с проникновенным докладом о захватывающем потенциале камеры reCamera. Она описала это устройство как устройство, созданное с заботой и вниманием, сказав: "Мы продумали все возможности для вас".

__wf_reserved_inherit
Рис. 1. Элейн Ву вышла на сцену YV24 в удаленном режиме.

В этой статье мы вновь обратимся к выступлению Элейн Ву на YOLO Vision 2024, сосредоточившись на инновационной камере reCamera - замечательном результате сотрудничества между Seeed Studio и Ultralytics - и ее уникальных возможностях и реальных применениях.

Инновации Seeed Studio в области искусственного интеллекта

Элейн начала свое выступление с представления Seeed Studio, компании, которая с 2008 года специализируется на аппаратном обеспечении для Интернета вещей (IoT) и ИИ. Она объяснила, что Seeed Studio предоставляет разработчикам инструменты для всего - от небольших прототипов до высокопроизводительных систем вроде NVIDIA Jetson, помогая им воплощать свои идеи в жизнь. 

За годы работы Seeed Studio оказала поддержку более чем 200 000 разработчиков в создании решений, в которых органично сочетаются ИИ и IoT. Элейн также рассказала о том, как Seeed сотрудничает с поставщиками кремния, компаниями-разработчиками и сообществом разработчиков в целом для создания индивидуальных решений.

__wf_reserved_inherit
Рис. 2. Элейн Ву рассказала об истории и опыте Seeed Studio.

Представляем камеру reCamera

Представив Seeed Studio, Элейн Ву рассказала о последнем достижении Seeed Studio - камере reCamera, выпущенной в сотрудничестве с Ultralytics. Официально анонсированная на YV24, reCamera представляет собой гибкую, модульную и доступную камеру с искусственным интеллектом и встроенной поддержкой YOLO. Лицензия Ultralytics предоставляет Seeed Studio права на интеграцию моделей Ultralytics YOLO в reCamera, обеспечивая совместимость и беспрепятственное использование функций искусственного интеллекта на устройстве для конечных пользователей. Это решение призвано удовлетворить растущую потребность в инструментах компьютерного зрения в реальном времени в широком спектре приложений.

Элейн продемонстрировал, что reCamera - это не просто устройство, а платформа, которую разработчики, производители и предприятия могут настраивать и создавать на ее основе. Предоставив открытый исходный код, Seeed Studio поощряет сообщество разработчиков ИИ к созданию решений, отвечающих их потребностям, будь то IoT, робототехника или промышленные приложения.

__wf_reserved_inherit
Рис. 3. reCamera - это ИИ-камера с открытым исходным кодом и миниатюрными размерами.

"Мы определяем ее как гибкую платформу Vision AI, позволяющую любому человеку создать свою собственную камеру", - отметил Элейн, подчеркнув, что модульная конструкция и доступность reCamera делают Vision AI доступной для всех, открывая двери для инноваций в различных отраслях.

Ключевые особенности камеры reCamera от Seeed Studio 

Итак, что же на самом деле означает, когда мы говорим, что reCamera - это первая программируемая камера с открытым исходным кодом и искусственным интеллектом? reCamera имеет открытый исходный код и предоставляет модульное аппаратное обеспечение, состоящее из сенсорной платы, основной платы и базовой платы для настройки. Устройство создано таким образом, чтобы разработчики могли легко адаптировать его под свои нужды. Кроме того, в нем реализована встроенная поддержка моделей Ultralytics YOLO, что позволяет без проблем использовать передовые возможности компьютерного зрения YOLO прямо из коробки.

Благодаря нативной поддержке reCamera может быть полностью оптимизирована для работы с моделями YOLO, такими как Ultralytics YOLOv8 и Ultralytics YOLO11, без каких-либо проблем с настройкой или совместимостью. Поскольку модели Ultralytics уже предустановлены и готовы к развертыванию, отпадает необходимость в дополнительных шагах по настройке, таких как интеграция программного обеспечения или дополнительные расходы, поэтому разработчики могут сосредоточиться на создании своих приложений.

Если вы разрабатываете решения AIoT, работаете с робототехникой или занимаетесь любым проектом в области компьютерного зрения, камера reCamera поможет вам быстро и без усилий приступить к работе.

Чем reCamera отличается от традиционных IP-камер

Элейн Ву также подробно рассказала о технических преимуществах камеры reCamera и о том, как она преодолевает ограничения традиционных IP-камер (протокол Интернета). 

В отличие от обычных камер, которые часто требуют внешнего оборудования, например мини-ПК или серверов, для обработки видео и запуска моделей искусственного интеллекта, reCamera объединяет все в одном компактном устройстве. 

Такая автономная конструкция упрощает развертывание и устраняет необходимость в дополнительных устройствах. Кроме того, он полностью программируемый, поэтому пользователи могут запускать модели искусственного интеллекта непосредственно на устройстве, не прибегая к помощи отдельной хост-машины, что делает его более эффективным и универсальным решением.

Технические подробности о камере reCamera с искусственным интеллектом

Сердцем reCamera является процессор SG200X, построенный на архитектуре RISC-V. Этот процессор специально разработан для краевых приложений искусственного интеллекта, обеспечивая мощную производительность при минимальном потреблении энергии.

Она поддерживает такие видеотехнологии, как H.264 и H.265, которые сжимают видеофайлы для экономии места и полосы пропускания без потери качества. Дополнительные функции, такие как обработка изображений в высоком динамическом диапазоне (HDR), 3D-шумоподавление и коррекция линз, обеспечивают четкое и профессиональное изображение даже в сложных условиях. 

Процессор, способный выполнять 1 триллион операций в секунду (1 TOPS), справляется с такими сложными задачами, как обнаружение объектов в режиме реального времени, а более компактный 8-битный микроконтроллер выполняет более простые операции для экономии энергии.

ReCamera также отличается модульной конструкцией, которая включает в себя три основные части: основную плату, плату датчиков и базовую плату. Разработчики могут легко заменять и модернизировать компоненты.

__wf_reserved_inherit
Рис. 4. Имеется три сменные платы: основная, сенсорная и базовая.

Например, вы можете заменить сенсор камеры на более высокое разрешение или добавить дополнительные устройства, такие как микрофоны или дисплеи. Базовая плата предлагает гибкие варианты связи, включая USB, Ethernet и более продвинутые интерфейсы, такие как Power over Ethernet (PoE) и RS-485, что делает ее адаптируемой к различным условиям использования.

Приложения reCamera для компьютерного зрения

Камера reCamera - это надежный инструмент для решения целого ряда реальных задач. Благодаря расширенным возможностям компьютерного зрения и адаптивности она отлично подходит для разработчиков и компаний, стремящихся интегрировать в свои проекты решения на основе искусственного интеллекта.

__wf_reserved_inherit
Рис. 5. Камера reCamera может быть использована для различных приложений искусственного интеллекта.

Некоторые из его основных применений включают:

  • Робототехника: Он может легко интегрироваться с роботизированными руками, дронами и гимбальными устройствами для решения таких задач, как навигация, отслеживание объектов и автоматизация, обеспечивая более интеллектуальные и эффективные операции.
  • Промышленное применение: Камера reCamera может помочь в мониторинге производственных линий, сортировке объектов и обнаружении аномалий, что делает ее бесценным инструментом для повышения эффективности производства и логистики.
  • Умные дома: Он может питать такие устройства, как видеозвонки, интеллектуальные замки и домашние системы безопасности, обеспечивая обнаружение объектов в реальном времени и распознавание лиц для повышения безопасности и удобства.
  • Безопасность: Эта новинка может улучшить системы видеонаблюдения за счет высококачественных видеопотоков и надежного мониторинга на основе искусственного интеллекта, подходящего для жилых и коммерческих помещений.

Благодаря своей гибкости, компактным размерам и простоте интеграции reCamera может помочь в создании эффективных решений в области искусственного интеллекта для различных задач компьютерного зрения.

Увлекательная демонстрация работы камеры reCamera в реальном времени

Элейн Ву привлекла внимание аудитории живой демонстрацией работы камеры reCamera, показав, как легко ее настроить и использовать. Используя Node-RED, инструмент визуального программирования, она провела слушателей через простой процесс развертывания reCamera: установила разрешение, загрузила модель YOLO и развернула. Всего через несколько мгновений камера reCamera была запущена и точно выполняла обнаружение объектов в режиме реального времени.

Во время демонстрации reCamera быстро распознала такие повседневные предметы, как бутылка, чашка и пульт дистанционного управления на ее столе. Элейн объяснила, что бесшовная интеграция с моделями Ultralytics YOLO позволяет ей получать быстрые и надежные результаты, что делает ее отличным вариантом для разработчиков, которые хотят получить простой способ реализации Vision AI без кодирования.

Она также отметила гибкость reCamera в отношении качества видео и настройки. Устройство поддерживает запись в разрешении до 2K, а обновление сенсоров еще больше повышает производительность. 

Возможности для разработчиков ИИ, открываемые камерой reCamera

Завершая свое выступление на YV24, Элейн Ву призвала сообщество разработчиков изучить платформу reCamera с открытым исходным кодом: схемы оборудования и ОС reCamera уже доступны на GitHub, а в будущем планируется выпустить проекты приложений.

__wf_reserved_inherit
Рис. 6. Это сотрудничество открывает новые двери для разработчиков.

reCamera - это важный шаг на пути к упрощению развертывания моделей ИИ с предустановленными моделями Ultralytics YOLO, и она дает разработчикам свободу в настройке своих решений без необходимости знания кодирования. Концепция reCamera заключается в создании совместной экосистемы, которая вдохновляет на инновации и новые возможности в области Vision AI.

Основные выводы

Камера reCamera, разработанная Seeed Studio в партнерстве с Ultralytics, - это принципиально новое аппаратное решение с встроенной интеграцией с моделями YOLO. Оно упрощает развертывание предустановленных моделей в производственных средах, предлагая разработчикам четыре универсальные версии для удовлетворения различных потребностей. Это сотрудничество знаменует собой важный шаг вперед на пути к тому, чтобы сделать передовые технологии компьютерного зрения более доступными и адаптируемыми для широкого круга приложений.

Для получения дополнительной информации об искусственном интеллекте и его применении посетите наш репозиторий GitHub и присоединитесь к нашему сообществу. Вы также можете ознакомиться с нашими страницами решений для инноваций в таких секторах, как искусственный интеллект в самодвижущихся автомобилях и сельском хозяйстве. 🚀

Давайте вместе построим будущее
искусственного интеллекта!

Начните свое путешествие в будущее машинного обучения

Начните бесплатно
Ссылка копируется в буфер обмена