Integrando modelos Ultralytics YOLO na reCamera da Seeed Studio

Estamos animados em começar o ano com uma parceria com a Seeed Studio, que marca o lançamento de uma nova inovação em visão computacional: a reCamera. É uma câmera de IA de código aberto projetada para tarefas de visão computacional em tempo real. Com suporte nativo para modelos Ultralytics YOLO, a reCamera é compacta e personalizável, tornando mais fácil do que nunca para desenvolvedores e criadores darem vida aos seus projetos de IA de visão.

A reCamera foi apresentada pela primeira vez à comunidade de IA no YOLO Vision 2024 (YV24), o evento híbrido anual da Ultralytics que destaca inovações de ponta e oferece uma plataforma para colaboração em IA de visão.

No evento, ficamos entusiasmados em ter Elaine Wu, líder de equipe de robótica de IA da Seeed Studio, apresentando uma palestra esclarecedora sobre o potencial empolgante da reCamera. Ela a descreveu como um dispositivo criado com cuidado e consideração, dizendo: “Pensamos em todas as possibilidades para você”.

Fig 1. Elaine Wu subiu ao palco na YV24 remotamente.

Neste artigo, vamos revisitar a palestra de Elaine Wu na YOLO Vision 2024, focando na inovadora reCamera - um resultado notável da colaboração entre a Seeed Studio e a Ultralytics - bem como em seus recursos exclusivos e aplicações no mundo real.

Link to this sectionAs inovações da Seeed Studio em IA de visão#

Elaine começou sua fala apresentando a Seeed Studio, uma empresa que se especializou em Internet das Coisas (IoT) e hardware de IA desde 2008. Ela explicou que a Seeed Studio fornece aos desenvolvedores ferramentas para tudo, desde protótipos em pequena escala até sistemas de alto desempenho como o NVIDIA Jetson, ajudando-os a transformar suas ideias em realidade.

Ao longo dos anos, a Seeed Studio apoiou mais de 200.000 desenvolvedores na criação de soluções que integram perfeitamente IA e IoT. Elaine também compartilhou como a Seeed colabora com provedores de silício, empresas de software e a comunidade de desenvolvedores em geral para criar soluções personalizáveis.

Fig 2. Elaine Wu falou sobre o histórico e a experiência da Seeed Studio.

Link to this sectionApresentando a reCamera#

Após apresentar a Seeed Studio, Elaine Wu revelou o mais recente avanço da empresa, a reCamera, lançada em colaboração com a Ultralytics. Oficialmente anunciada na YV24, a reCamera é uma câmera com IA flexível, modular e acessível com suporte nativo a YOLO. A licença da Ultralytics concede à Seeed Studio os direitos de integrar modelos Ultralytics YOLO na reCamera, garantindo uma funcionalidade de IA no dispositivo compatível e integrada para os usuários finais. Ela foi projetada para atender à crescente necessidade de ferramentas de visão computacional em tempo real em uma ampla gama de aplicações.

Elaine apresentou a reCamera como algo mais do que apenas um dispositivo - é uma plataforma que desenvolvedores, makers e empresas podem personalizar e sobre a qual podem construir. Ao torná-la de código aberto, a Seeed Studio incentiva a comunidade de IA a criar soluções adaptadas às suas necessidades, seja para IoT, robótica ou aplicações industriais.

Fig 3. A reCamera é uma câmera de IA minúscula e de código aberto.

“Nós a definimos como uma plataforma flexível de IA de Visão para qualquer pessoa projetar sua própria câmera”, observou Elaine, destacando que o design modular e a acessibilidade da reCamera tornam a IA de visão acessível a todos, abrindo portas para a inovação em vários setores.

Link to this sectionPrincipais recursos da reCamera da Seeed Studio#

Então, o que realmente significa dizer que a reCamera é a primeira câmera de IA programável de código aberto? A reCamera tem um design de produto de código aberto e fornece hardware modular composto por placa de sensor, placa central e placa base para personalização. O dispositivo foi construído para dar aos desenvolvedores a flexibilidade de adaptá-lo às suas necessidades com facilidade. Ele também vem com suporte nativo aos modelos Ultralytics YOLO, permitindo o uso contínuo dos recursos avançados de visão computacional do YOLO logo após retirá-lo da caixa.

O suporte nativo possibilita que a reCamera seja totalmente otimizada para executar modelos YOLO como Ultralytics YOLOv8 e Ultralytics YOLO11 sem qualquer configuração ou problemas de compatibilidade. Com os modelos Ultralytics já pré-instalados e prontos para implantação, a necessidade de etapas adicionais de configuração, como integrar software ou lidar com custos extras, é eliminada, para que os desenvolvedores possam se concentrar na construção de suas aplicações.

Seja desenvolvendo soluções de AIoT, trabalhando com robótica ou lidando com qualquer projeto de visão computacional, a reCamera foi criada para te ajudar a começar rapidamente e sem esforço.

Link to this sectionComo a reCamera se destaca das câmeras IP tradicionais#

Elaine Wu também elaborou sobre os pontos fortes técnicos da reCamera e como ela supera as limitações das câmeras IP (Internet Protocol) tradicionais.

Ao contrário das câmeras convencionais, que geralmente exigem hardware externo como mini PCs ou servidores para processar vídeo e executar modelos de IA, a reCamera integra tudo em uma única unidade compacta.

Este design independente facilita a implantação e elimina a necessidade de dispositivos adicionais. Ela também é totalmente programável, então os usuários podem executar modelos de IA diretamente no dispositivo sem depender de uma máquina host separada, tornando-a uma solução mais eficiente e versátil.

Link to this sectionInsights técnicos sobre a reCamera alimentada por IA#

No coração da reCamera está o processador SG200X, construído usando a arquitetura RISC-V. Este processador foi projetado especificamente para aplicações de edge AI, oferecendo um desempenho poderoso enquanto consome o mínimo de energia.

Ele suporta tecnologias de vídeo como H.264 e H.265, que comprimem arquivos de vídeo para economizar armazenamento e largura de banda sem perder qualidade. Recursos adicionais como imagem HDR (High Dynamic Range), redução de ruído 3D e correção de lente garantem que os visuais sejam nítidos e profissionais, mesmo em condições desafiadoras.

Com a capacidade de realizar 1 trilhão de operações por segundo (1 TOPS), o processador pode lidar com tarefas exigentes como detecção de objetos em tempo real, e um microcontrolador de 8 bits menor lida com operações mais simples para economizar energia.

A reCamera também se destaca pelo seu design modular, que inclui três partes principais: a placa central, a placa do sensor e a placa base. Os desenvolvedores podem trocar e atualizar componentes facilmente.

Fig 4. Existem três placas intercambiáveis: a placa central, o sensor e a base.

Por exemplo, você pode substituir o sensor da câmera para obter uma resolução maior ou adicionar hardware extra, como microfones ou telas. A placa base oferece opções flexíveis de comunicação, incluindo USB, Ethernet e interfaces mais avançadas como Power over Ethernet (PoE) e RS-485, tornando-a adaptável a vários casos de uso.

Link to this sectionAplicações de visão computacional da reCamera#

A reCamera é uma ferramenta confiável para uma variedade de aplicações no mundo real. Seus recursos avançados de visão computacional e adaptabilidade a tornam uma ótima opção para desenvolvedores e empresas que buscam integrar soluções habilitadas por IA em seus projetos.

Fig 5. A reCamera pode ser usada para várias aplicações de IA de visão.

Algumas de suas principais aplicações incluem:

• Robótica: Ela pode ser integrada perfeitamente com braços robóticos, drones e gimbals para tarefas como navegação, rastreamento de objetos e automação, permitindo operações mais inteligentes e eficientes.
• Uso industrial: A reCamera pode ajudar no monitoramento de linhas de produção, classificação de objetos e detecção de anomalias, tornando-a uma ferramenta inestimável para melhorar a eficiência na fabricação e na logística.
• Casas inteligentes: Ela pode alimentar dispositivos como campainhas de vídeo, fechaduras inteligentes e sistemas de segurança residencial, fornecendo detecção de objetos em tempo real e reconhecimento facial para maior segurança e conveniência.
• Segurança: Esta inovação pode aprimorar sistemas de vigilância com fluxos de vídeo de alta qualidade e monitoramento confiável orientado por IA, adequados para uso residencial e comercial.

Com sua flexibilidade, tamanho compacto e facilidade de integração, a reCamera pode ajudar a entregar soluções de IA impactantes para uma variedade de necessidades de visão computacional.

Link to this sectionUma demonstração ao vivo empolgante da reCamera#

Elaine Wu capturou a atenção do público com uma demonstração ao vivo da reCamera, mostrando o quão fácil é configurá-la e usá-la. Usando o Node-RED, uma ferramenta de programação visual, ela percorreu o processo simples de implantação da reCamera: definir a resolução, carregar um modelo YOLO e implantar. Em apenas alguns momentos, a reCamera estava funcionando e realizando detecção de objetos em tempo real com precisão.

Durante a demonstração, a reCamera identificou rapidamente objetos do dia a dia, como uma garrafa, um copo e um controle remoto em sua mesa. Elaine explicou que sua integração perfeita com modelos Ultralytics YOLO permite que ela entregue resultados rápidos e confiáveis, tornando-a uma ótima opção para desenvolvedores que desejam uma maneira direta de implementar IA de visão sem precisar programar.

Ela também destacou a flexibilidade da reCamera em relação à qualidade de vídeo e personalização. O dispositivo suporta gravação em resolução de até 2K e atualizações de sensor para melhorar o desempenho ainda mais.

Link to this sectionAs possibilidades para desenvolvedores de IA abertas pela reCamera#

Encerrando sua fala na YV24, Elaine Wu incentivou a comunidade de desenvolvedores a explorar a plataforma de código aberto da reCamera, com esquemas de hardware e o SO da reCamera já disponíveis no GitHub, e planos para lançar designs de aplicação no futuro.

Fig 6. Esta colaboração abre novas portas para desenvolvedores.

A reCamera é um grande passo em direção à simplificação da implantação de modelos de IA com modelos Ultralytics YOLO pré-instalados, e ela dá aos desenvolvedores a liberdade de personalizar suas soluções sem precisar de conhecimento em programação. A visão por trás da reCamera é criar um ecossistema colaborativo que inspire inovação e novas possibilidades em IA de visão.

Link to this sectionPrincipais pontos#

A reCamera, desenvolvida pela Seeed Studio em parceria com a Ultralytics, é uma solução de hardware revolucionária com integração nativa com modelos YOLO. Ela simplifica a implantação de modelos pré-instalados em ambientes de produção, oferecendo aos desenvolvedores quatro versões versáteis para atender a várias necessidades. Esta colaboração marca um passo importante para tornar a tecnologia avançada de visão computacional mais acessível e adaptável para uma ampla gama de aplicações.

Para mais informações sobre IA e suas aplicações, visite nosso repositório no GitHub e junte-se à nossa comunidade. Você também pode conferir nossas páginas de soluções para inovações em setores como IA em carros autônomos e agricultura. 🚀