Integrar modelos Ultralytics YOLO na reCamera da Seeed Studio

Estamos entusiasmados por começar o ano em parceria com a Seeed Studio, que lança uma nova inovação em visão computacional: a reCamera. Trata-se de uma câmara de IA de código aberto, concebida para tarefas de visão computacional em tempo real. Com suporte nativo para os modelos Ultralytics YOLO, a reCamera é compacta e personalizável, facilitando a concretização de projetos de IA visual por desenvolvedores e criadores.

A reCamera foi apresentada pela primeira vez à comunidade de IA no YOLO Vision 2024 (YV24), o evento híbrido anual da Ultralytics que apresenta novas inovações e oferece uma plataforma para a colaboração em IA visual.

No evento, tivemos o prazer de contar com Elaine Wu, líder da equipe de robótica de IA da Seeed Studio, que fez uma palestra esclarecedora sobre o potencial empolgante da reCamera. Ela descreveu o dispositivo como algo criado com cuidado e consideração e disse: “Pensamos em todas as possibilidades para você.”

Fig. 1. Elaine Wu subiu ao palco remotamente no YV24.

Neste artigo, vamos revisitar a palestra principal de Elaine Wu no YOLO Vision 2024, com foco na reCamera, resultado de uma colaboração entre a Seeed Studio e a Ultralytics, e nos seus recursos e aplicações reais.

Inovações da Seeed Studio em IA visual#

Elaine começou a sua apresentação apresentando a Seeed Studio, uma empresa especializada em hardware para Internet das Coisas (IoT) e IA desde 2008. Ela explicou que a Seeed Studio oferece aos programadores ferramentas para tudo, desde protótipos de pequena escala até sistemas de alto desempenho, como o NVIDIA Jetson, ajudando-os a dar vida às suas ideias.

Ao longo dos anos, a Seeed Studio apoiou mais de 200.000 desenvolvedores na criação de soluções que integram IA e IoT. Elaine também explicou como a Seeed colabora com fornecedores de semicondutores, empresas de software e a comunidade de desenvolvedores em geral para criar soluções personalizáveis.

Fig. 2. Elaine Wu falou sobre a trajetória e a experiência da Seeed Studio.

Apresentação da reCamera#

Depois de apresentar a Seeed Studio, Elaine Wu revelou o produto mais recente da Seeed Studio, a reCamera, lançada em colaboração com a Ultralytics. Anunciada oficialmente no YV24, a reCamera é uma câmara com IA flexível, modular e acessível, com suporte nativo para YOLO. A licença da Ultralytics concede à Seeed Studio os direitos de integrar os modelos Ultralytics YOLO na reCamera, garantindo funcionalidades de IA no dispositivo em conformidade para os usuários finais. Foi concebida para responder à crescente necessidade de ferramentas de visão computacional em tempo real numa ampla variedade de aplicações.

Elaine apresentou a reCamera como mais do que um simples dispositivo: é uma plataforma que desenvolvedores, criadores e empresas podem personalizar e expandir. Ao disponibilizar o código aberto, a Seeed Studio incentiva a comunidade de IA a criar soluções adaptadas às suas necessidades, seja para IoT, robótica ou aplicações industriais.

Fig. 3. A reCamera é uma câmara de IA pequena e de código aberto.

“Definimos a reCamera como uma plataforma flexível de IA visual para qualquer pessoa criar a sua própria câmara”, observou Elaine, mostrando como o design modular e o preço acessível da reCamera tornam a IA visual acessível a todos e abrem caminho à inovação em vários setores.

Principais recursos da reCamera da Seeed Studio#

Então, o que significa realmente dizer que a reCamera é a primeira câmara de IA programável de código aberto? A reCamera tem um design de produto de código aberto e oferece hardware modular, com placa de sensor, placa principal e placa base personalizáveis. O dispositivo foi concebido para dar aos desenvolvedores flexibilidade para o adaptar facilmente às suas necessidades. Também oferece suporte nativo para os modelos Ultralytics YOLO, para que os recursos de visão computacional do YOLO funcionem imediatamente.

O suporte nativo permite otimizar totalmente a reCamera para executar modelos YOLO como o Ultralytics YOLOv8 e o Ultralytics YOLO11, sem problemas de configuração ou compatibilidade. Como os modelos Ultralytics já vêm pré-instalados e prontos para implementação, deixa de ser necessário executar etapas adicionais de configuração, como integrar software ou lidar com custos extra, para que os programadores se possam concentrar na criação das suas aplicações.

Quer estejas a desenvolver soluções de AIoT, a trabalhar com robótica ou a lidar com qualquer projeto de visão computacional, a reCamera foi concebida para te ajudar a começar rapidamente.

O que distingue a reCamera das câmaras IP tradicionais#

Elaine Wu também explicou os pontos fortes técnicos da reCamera e como esta supera as limitações das câmaras IP (Protocolo de Internet) tradicionais.

Ao contrário das câmaras convencionais, que muitas vezes precisam de hardware externo, como mini PCs ou servidores, para processar vídeo e executar modelos de IA, a reCamera integra tudo numa única unidade compacta.

Este design autónomo facilita a implementação e elimina a necessidade de dispositivos adicionais. Também é totalmente programável, permitindo que os utilizadores executem modelos de IA diretamente no dispositivo sem depender de uma máquina anfitriã separada, o que a torna uma solução mais eficiente e versátil.

Informações técnicas sobre a reCamera com tecnologia de IA#

No centro da reCamera está o processador SG200X, construído com a arquitetura RISC-V. Este processador foi concebido especificamente para aplicações de IA na periferia da rede, oferecendo um desempenho poderoso com um consumo mínimo de energia.

Ele oferece suporte a tecnologias de vídeo como H.264 e H.265, que comprimem arquivos de vídeo para economizar espaço de armazenamento e largura de banda. Recursos adicionais, como imagens HDR (grande alcance dinâmico), redução de ruído 3D e correção de lente, garantem imagens nítidas e profissionais, mesmo em condições desafiadoras.

Com capacidade para executar 1 bilião de operações por segundo (1 TOPS), o processador consegue lidar com tarefas exigentes, como a deteção de objetos em tempo real, enquanto um microcontrolador menor de 8 bits trata das operações mais simples para poupar energia.

A reCamera também se destaca pelo design modular, composto por três partes principais: a placa principal, a placa de sensor e a placa de base. Os programadores podem trocar e atualizar componentes facilmente.

Fig. 4. Existem três placas intercambiáveis: a placa principal, o sensor e a base.

Por exemplo, podes substituir o sensor da câmara por um de maior resolução ou adicionar hardware, como microfones ou ecrãs. A placa de base oferece opções de comunicação flexíveis, incluindo USB, Ethernet e interfaces mais avançadas, como Power over Ethernet (PoE) e RS-485, tornando-a adaptável a vários casos de uso.

Aplicações de visão computacional da reCamera#

A reCamera é uma ferramenta fiável para uma variedade de aplicações práticas. Os seus recursos avançados de visão computacional e a sua adaptabilidade tornam-na uma ótima opção para programadores e empresas que procuram integrar soluções com IA nos seus projetos.

Fig. 5. A reCamera pode ser usada em várias aplicações de IA visual.

Algumas das principais aplicações incluem:

• Robótica: pode ser integrada em braços robóticos, drones e estabilizadores para tarefas como navegação, rastreamento de objetos e automação, permitindo operações mais inteligentes e eficientes.
• Uso industrial: a reCamera pode ajudar a monitorizar linhas de produção, separar objetos e detetar anomalias, sendo uma ferramenta útil para aumentar a eficiência na indústria e na logística.
• Casas inteligentes: Pode ser usada em dispositivos como videoporteiros, fechaduras inteligentes e sistemas de segurança doméstica, proporcionando deteção de objetos e reconhecimento facial em tempo real para maior segurança e comodidade.
• Segurança: Esta inovação pode melhorar os sistemas de vigilância com transmissões de vídeo de alta qualidade e monitorização fiável baseada em IA, adequada para uso residencial e comercial.

Graças à sua flexibilidade, ao tamanho compacto e à facilidade de integração, a reCamera pode ajudar a criar soluções de IA eficazes para várias necessidades de visão computacional.

Uma demonstração ao vivo empolgante da reCamera#

Elaine Wu captou a atenção do público com uma demonstração ao vivo da reCamera, mostrando como é fácil configurá-la e utilizá-la. Com o Node-RED, uma ferramenta de programação visual, explicou o processo simples de implementação da reCamera: definir a resolução, carregar um modelo YOLO e implementá-lo. Em poucos instantes, a reCamera estava em funcionamento e a realizar a deteção de objetos em tempo real com precisão.

Durante a demonstração, a reCamera identificou rapidamente objetos do dia a dia, como uma garrafa, uma chávena e um comando na secretária de Elaine. Ela explicou que a integração nativa com os modelos Ultralytics YOLO permite obter resultados rápidos e confiáveis, tornando-a uma ótima opção para desenvolvedores que querem implementar IA visual de forma simples, sem programar.

Ela também destacou a flexibilidade da reCamera em relação à qualidade de vídeo e à personalização. O dispositivo suporta gravação com resolução até 2K e atualizações do sensor para melhorar ainda mais o desempenho.

As oportunidades que a reCamera abre para os programadores de IA#

Ao terminar a sua palestra no YV24, Elaine Wu incentivou a comunidade de programadores a explorar a plataforma de código aberto da reCamera. Os esquemas de hardware e o sistema operativo da reCamera já estão disponíveis no GitHub, e há planos para lançar designs de aplicações no futuro.

Fig. 6. Esta colaboração abre novas possibilidades para os programadores.

A reCamera representa um grande passo para simplificar a implementação de modelos de IA com modelos Ultralytics YOLO pré-instalados e dá aos programadores liberdade para personalizar as suas soluções sem precisarem de saber programar. A visão por detrás da reCamera é criar um ecossistema colaborativo que inspire inovação e novas possibilidades em IA visual.

Principais conclusões#

A reCamera, desenvolvida pela Seeed Studio em parceria com a Ultralytics, é uma solução de hardware com integração nativa de modelos YOLO. Simplifica a implementação de modelos pré-instalados em ambientes de produção e oferece aos desenvolvedores quatro versões versáteis para diferentes necessidades. Esta colaboração representa um passo importante para tornar a tecnologia avançada de visão computacional mais acessível e adaptável a uma ampla variedade de aplicações.

Para saber mais sobre IA e as suas aplicações, visita o nosso repositório do GitHub e junta-te à nossa comunidade. Também podes consultar as nossas páginas de soluções para conhecer inovações em setores como a IA em veículos autônomos e a agricultura.