Yolo Vision Shenzhen
Шэньчжэнь
Присоединиться сейчас

Интеграция моделей Ultralytics YOLO в камеру reCamera от Seeed Studio

Абирами Вина

4 мин чтения

10 января 2025 г.

Узнайте, как Ultralytics и Seeed Studio совместно запустили камеру reCamera на выставке YOLO Vision 2024, интегрировав модели YOLO в инновационные приложения Vision AI.

Мы рады начать этот год с сотрудничества со студией Seeed, которая представила новую инновацию в области компьютерного зрения - камеру reCamera. Это камера с открытым исходным кодом, разработанная для задач компьютерного зрения в реальном времени. Благодаря встроенной поддержке моделей Ultralytics YOLO , reCamera компактна и настраиваема, что позволяет разработчикам и создателям воплощать в жизнь свои проекты в области искусственного зрения как никогда легко.

Камера reCamera была впервые представлена сообществу ИИ на YOLO Vision 2024 (YV24), ежегодном гибридном мероприятии Ultralytics, демонстрирующем передовые инновации и обеспечивающем платформу для сотрудничества в области Vision AI. 

На мероприятии мы были рады, что Элейн Ву, руководитель группы AI Robotics в Seeed Studio, выступила с содержательным докладом о захватывающем потенциале reCamera. Она описала его как устройство, созданное с заботой и вниманием, сказав: «Мы продумали все возможности для вас».

__wf_reserved_inherit
Рис. 1. Элейн Ву выступила на YV24 удаленно.

В этой статье мы вновь обратимся к выступлению Элейн Ву на YOLO Vision 2024, сосредоточившись на инновационной камере reCamera - замечательном результате сотрудничества между Seeed Studio и Ultralytics - и ее уникальных возможностях и реальных применениях.

Инновации Seeed Studio в области машинного зрения

Элейн начала свое выступление с представления Seeed Studio, компании, которая с 2008 года специализируется на аппаратном обеспечении для Интернета вещей (IoT) и ИИ. Она объяснила, что Seeed Studio предоставляет разработчикам инструменты для всего - от небольших прототипов до высокопроизводительных систем вроде NVIDIA Jetson, помогая им воплощать свои идеи в жизнь. 

На протяжении многих лет Seeed Studio поддержала более 200 000 разработчиков в создании решений, которые органично интегрируют ИИ и IoT. Элейн также поделилась информацией о том, как Seeed сотрудничает с поставщиками кремниевых решений, компаниями-разработчиками программного обеспечения и сообществом разработчиков в целом для создания настраиваемых решений.

__wf_reserved_inherit
Рис. 2. Элейн Ву рассказала об опыте и достижениях Seeed Studio.

Представляем reCamera

Представив Seeed Studio, Элейн Ву рассказала о последнем достижении Seeed Studio - камере reCamera, выпущенной в сотрудничестве с Ultralytics. Официально анонсированная на YV24, reCamera представляет собой гибкую, модульную и доступную камеру с искусственным интеллектом и встроенной поддержкой YOLO . Лицензия Ultralyticsпредоставляет Seeed Studio права на интеграцию моделей Ultralytics YOLO в reCamera, обеспечивая совместимость и беспрепятственное использование функций искусственного интеллекта на устройстве для конечных пользователей. Это решение призвано удовлетворить растущую потребность в инструментах компьютерного зрения в реальном времени в широком спектре приложений.

Элейн представила reCamera как нечто большее, чем просто устройство — это платформа, которую разработчики, мейкеры и предприятия могут настраивать и развивать. Сделав ее открытой, Seeed Studio призывает AI-сообщество создавать решения, адаптированные к их потребностям, будь то IoT, робототехника или промышленные приложения.

__wf_reserved_inherit
Рис. 3. reCamera — это AI-камера с открытым исходным кодом и крошечным размером.

“Мы определяем это как гибкую платформу Vision AI, позволяющую любому разрабатывать свою собственную камеру,” - отметила Элейн, подчеркнув, что модульная конструкция и доступность reCamera делают Vision AI доступной для всех, открывая двери для инноваций в различных отраслях.

Ключевые особенности reCamera от Seeed Studio 

Итак, что же на самом деле означает, когда мы говорим, что reCamera - это первая программируемая камера с открытым исходным кодом и искусственным интеллектом? reCamera имеет открытый исходный код и предоставляет модульное аппаратное обеспечение, состоящее из сенсорной платы, основной платы и базовой платы для настройки. Устройство создано таким образом, чтобы разработчики могли легко адаптировать его под свои нужды. Кроме того, в нем реализована встроенная поддержка моделейUltralytics YOLO , что позволяет без проблем использовать передовые возможности компьютерного зрения YOLOпрямо из коробки.

Встроенная поддержка позволяет полностью оптимизировать камеру reCamera для работы с такими моделями YOLO , как Ultralytics YOLOv8 и Ultralytics YOLO11 без каких-либо проблем с настройкой или совместимостью. Поскольку модели Ultralytics уже предустановлены и готовы к развертыванию, необходимость в дополнительных шагах по настройке, таких как интеграция программного обеспечения или дополнительные расходы, отпадает, и разработчики могут сосредоточиться на создании своих приложений.

Независимо от того, разрабатываете ли вы решения AIoT, работаете с робототехникой или занимаетесь любым проектом в области компьютерного зрения, reCamera призвана помочь вам быстро начать и без особых усилий.

Чем reCamera отличается от традиционных IP-камер

Элейн Ву также подробно рассказала о технических преимуществах reCamera и о том, как она преодолевает ограничения традиционных IP-камер (Internet Protocol). 

В отличие от обычных камер, которым часто требуется внешнее оборудование, такое как мини-ПК или серверы, для обработки видео и запуска моделей ИИ, reCamera объединяет все в одном компактном блоке. 

Эта автономная конструкция упрощает развертывание и устраняет необходимость в дополнительных устройствах. Она также полностью программируется, поэтому пользователи могут запускать модели AI непосредственно на устройстве, не полагаясь на отдельную хост-машину, что делает его более эффективным и универсальным решением.

Технический взгляд на reCamera с поддержкой AI

В основе reCamera лежит процессор SG200X, построенный с использованием архитектуры RISC-V. Этот процессор специально разработан для периферийных AI-приложений, обеспечивая высокую производительность при минимальном потреблении энергии.

Он поддерживает видеотехнологии, такие как H.264 и H.265, которые сжимают видеофайлы для экономии места и пропускной способности без потери качества. Дополнительные функции, такие как HDR (High Dynamic Range), 3D-шумоподавление и коррекция объектива, гарантируют четкость и профессионализм визуальных эффектов даже в сложных условиях. 

Благодаря способности выполнять 1 триллион операций в секунду (1 TOPS), процессор может справляться с ресурсоемкими задачами, такими как обнаружение объектов в реальном времени, а меньший 8-битный микроконтроллер выполняет более простые операции для экономии энергии.

reCamera также выделяется своей модульной конструкцией, которая включает в себя три основных компонента: основную плату, плату датчика и базовую плату. Разработчики могут легко заменять и модернизировать компоненты.

__wf_reserved_inherit
Рис. 4. Три взаимозаменяемые платы: основная плата, датчик и база.

Например, вы можете заменить датчик камеры на датчик с более высоким разрешением или добавить дополнительное оборудование, такое как микрофоны или дисплеи. Базовая плата предлагает гибкие возможности связи, включая USB, Ethernet и более продвинутые интерфейсы, такие как Power over Ethernet (PoE) и RS-485, что делает ее адаптируемой к различным вариантам использования.

Применение компьютерного зрения reCamera

reCamera — это надежный инструмент для широкого спектра реальных задач. Ее передовые возможности компьютерного зрения и адаптивность делают ее отличным выбором для разработчиков и предприятий, стремящихся интегрировать решения на основе ИИ в свои проекты.

__wf_reserved_inherit
Рис. 5. reCamera может использоваться для различных приложений Vision AI.

Некоторые из ключевых областей применения включают:

  • Робототехника: Он может легко интегрироваться с роботизированными руками, дронами и подвесами для таких задач, как навигация, отслеживание объектов и автоматизация, обеспечивая более интеллектуальные и эффективные операции.
  • Промышленное использование: reCamera может помочь в мониторинге производственных линий, сортировке объектов и обнаружении аномалий, что делает ее бесценным инструментом для повышения эффективности производства и логистики.
  • Умные дома: Он может управлять такими устройствами, как видеодомофоны, умные замки и системы домашней безопасности, обеспечивая обнаружение объектов и распознавание лиц в реальном времени для повышения безопасности и удобства.
  • Безопасность: Это нововведение может улучшить системы наблюдения благодаря высококачественным видеопотокам и надежному мониторингу на основе искусственного интеллекта, подходящему для жилого и коммерческого использования.

Благодаря своей гибкости, компактному размеру и простоте интеграции, reCamera может помочь в создании эффективных AI-решений для различных задач компьютерного зрения.

Захватывающая живая демонстрация reCamera

Элейн Ву привлекла внимание аудитории живой демонстрацией работы камеры reCamera, показав, как легко ее настроить и использовать. Используя Node-RED, инструмент визуального программирования, она провела слушателей через простой процесс развертывания reCamera: установила разрешение, загрузила модель YOLO и развернула. Всего через несколько мгновений камера reCamera была запущена и точно выполняла обнаружение объектов в режиме реального времени.

Во время демонстрации reCamera быстро распознала такие повседневные предметы, как бутылка, чашка и пульт дистанционного управления на ее столе. Элейн объяснила, что бесшовная интеграция с моделями Ultralytics YOLO позволяет ей получать быстрые и надежные результаты, что делает ее отличным вариантом для разработчиков, которые хотят получить простой способ реализации Vision AI без кодирования.

Она также отметила гибкость reCamera в отношении качества видео и возможностей настройки. Устройство поддерживает запись с разрешением до 2K и модернизацию сенсоров для дальнейшего повышения производительности. 

Возможности для разработчиков ИИ, открываемые reCamera

Завершая свое выступление на YV24, Элейн Ву призвала сообщество разработчиков изучить платформу reCamera с открытым исходным кодом, с аппаратными схемами и reCamera OS, уже доступными на GitHub, и планами по выпуску проектов приложений в будущем.

__wf_reserved_inherit
Рис. 6. Это сотрудничество открывает новые возможности для разработчиков.

reCamera - это важный шаг на пути к упрощению развертывания моделей ИИ с предустановленными моделями Ultralytics YOLO , и она дает разработчикам свободу в настройке своих решений без необходимости знания кодирования. Концепция reCamera заключается в создании совместной экосистемы, которая вдохновляет на инновации и новые возможности в области Vision AI.

Основные выводы

Камера reCamera, разработанная Seeed Studio в партнерстве с Ultralytics, - это принципиально новое аппаратное решение с встроенной интеграцией с моделями YOLO . Оно упрощает развертывание предустановленных моделей в производственных средах, предлагая разработчикам четыре универсальные версии для удовлетворения различных потребностей. Это сотрудничество знаменует собой важный шаг вперед на пути к тому, чтобы сделать передовые технологии компьютерного зрения более доступными и адаптируемыми для широкого круга приложений.

Для получения дополнительной информации об ИИ и его приложениях посетите наш репозиторий GitHub и присоединяйтесь к нашему сообществу. Вы также можете ознакомиться с нашими страницами решений для инноваций в таких секторах, как ИИ в самоуправляемых автомобилях и сельское хозяйство. 🚀

Давайте строить будущее
ИИ вместе!

Начните свой путь в будущее машинного обучения

Начать бесплатно