Integrando modelos Ultralytics YOLO na reCamera da Seeed Studio

Estamos entusiasmados por começar o ano fazendo parceria com a Seeed Studio, que marca o lançamento de uma nova inovação em visão computacional, a reCamera. É uma câmara de IA de código aberto concebida para tarefas de visão computacional em tempo real. Com suporte nativo para modelos Ultralytics YOLO, a reCamera é compacta e personalizável, tornando mais fácil do que nunca para criadores e programadores darem vida aos seus projetos de IA de visão.

A reCamera foi apresentada pela primeira vez à comunidade de IA no YOLO Vision 2024 (YV24), o evento híbrido anual da Ultralytics que exibe inovações de ponta e fornece uma plataforma para colaboração em IA de visão.

No evento, foi com enorme entusiasmo que tivemos Elaine Wu, líder de equipa de Robótica de IA da Seeed Studio, a apresentar uma palestra esclarecedora sobre o potencial entusiasmante da reCamera. Ela descreveu-a como um dispositivo criado com cuidado e atenção, afirmando: “Pensámos em todas as possibilidades para ti.”

Fig 1. Elaine Wu subiu ao palco na YV24 remotamente.

Neste artigo, vamos revisitar a palestra da Elaine Wu no YOLO Vision 2024, focando-nos na inovadora reCamera — um resultado notável da colaboração entre a Seeed Studio e a Ultralytics — bem como nas suas funcionalidades únicas e aplicações no mundo real.

As inovações da Seeed Studio em IA de visão#

Elaine começou sua fala apresentando a Seeed Studio, uma empresa que se especializou em Internet das Coisas (IoT) e hardware de IA desde 2008. Ela explicou que a Seeed Studio fornece aos desenvolvedores ferramentas para tudo, desde protótipos em pequena escala até sistemas de alto desempenho como o NVIDIA Jetson, ajudando-os a transformar suas ideias em realidade.

Ao longo dos anos, a Seeed Studio apoiou mais de 200.000 desenvolvedores na criação de soluções que integram perfeitamente IA e IoT. Elaine também compartilhou como a Seeed colabora com provedores de silício, empresas de software e a comunidade de desenvolvedores em geral para criar soluções personalizáveis.

Fig 2. Elaine Wu falou sobre o histórico e a experiência da Seeed Studio.

Apresentando a reCamera#

Após apresentar a Seeed Studio, Elaine Wu revelou a mais recente inovação da Seeed Studio, a reCamera, lançada em colaboração com a Ultralytics. Anunciada oficialmente no YV24, a reCamera é uma câmara potenciada por IA flexível, modular e acessível, com suporte nativo para YOLO. A licença da Ultralytics concede à Seeed Studio os direitos de integrar modelos Ultralytics YOLO na reCamera, garantindo uma funcionalidade de IA no dispositivo compatível e integrada para os utilizadores finais. Foi concebida para responder à crescente necessidade de ferramentas de visão computacional em tempo real numa vasta gama de aplicações.

Elaine apresentou a reCamera como algo mais do que apenas um dispositivo - é uma plataforma que desenvolvedores, makers e empresas podem personalizar e sobre a qual podem construir. Ao torná-la de código aberto, a Seeed Studio incentiva a comunidade de IA a criar soluções adaptadas às suas necessidades, seja para IoT, robótica ou aplicações industriais.

Fig 3. A reCamera é uma câmera de IA minúscula e de código aberto.

“Nós a definimos como uma plataforma flexível de IA de Visão para qualquer pessoa projetar sua própria câmera”, observou Elaine, destacando que o design modular e a acessibilidade da reCamera tornam a IA de visão acessível a todos, abrindo portas para a inovação em vários setores.

Principais recursos da reCamera da Seeed Studio#

Portanto, o que significa realmente quando dizemos que a reCamera é a primeira câmara de IA programável de código aberto? A reCamera tem um design de produto de código aberto e fornece hardware modular de placa de sensores, placa central e placa de base para personalização. O dispositivo foi construído para dar aos programadores a flexibilidade de o adaptar facilmente às suas necessidades. Também inclui suporte nativo para modelos Ultralytics YOLO, permitindo a utilização imediata e sem problemas das capacidades avançadas de visão computacional do YOLO.

O suporte nativo permite que a reCamera seja totalmente otimizada para executar modelos YOLO como o Ultralytics YOLOv8 e o Ultralytics YOLO11 sem quaisquer problemas de configuração ou compatibilidade. Com os modelos da Ultralytics já pré-instalados e prontos a implementar, elimina-se a necessidade de passos de configuração adicionais, como integrar software ou lidar com custos extras, para que os programadores se possam focar na construção das suas aplicações.

Se estivesses a desenvolver soluções AIoT, a trabalhar com robótica ou a enfrentar qualquer projeto de visão computacional, a reCamera serve para te ajudar a começar de forma rápida e sem esforço.

Como a reCamera se destaca das câmeras IP tradicionais#

Elaine Wu também elaborou sobre os pontos fortes técnicos da reCamera e como ela supera as limitações das câmeras IP (Internet Protocol) tradicionais.

Ao contrário das câmeras convencionais, que geralmente exigem hardware externo como mini PCs ou servidores para processar vídeo e executar modelos de IA, a reCamera integra tudo em uma única unidade compacta.

Este design independente facilita a implantação e elimina a necessidade de dispositivos adicionais. Ela também é totalmente programável, então os usuários podem executar modelos de IA diretamente no dispositivo sem depender de uma máquina host separada, tornando-a uma solução mais eficiente e versátil.

Insights técnicos sobre a reCamera alimentada por IA#

No coração da reCamera está o processador SG200X, construído com arquitetura RISC-V. Este processador foi especificamente desenhado para aplicações de IA de edge, oferecendo um desempenho potente com um consumo de energia mínimo.

Ele suporta tecnologias de vídeo como H.264 e H.265, que comprimem arquivos de vídeo para economizar armazenamento e largura de banda sem perder qualidade. Recursos adicionais como imagem HDR (High Dynamic Range), redução de ruído 3D e correção de lente garantem que os visuais sejam nítidos e profissionais, mesmo em condições desafiadoras.

Com a capacidade de realizar 1 bilião de operações por segundo (1 TOPS), o processador consegue lidar com tarefas exigentes como deteção de objetos em tempo real, enquanto um microcontrolador de 8 bits mais pequeno gere operações mais simples para poupar energia.

A reCamera também se destaca pelo seu design modular, que inclui três partes principais: a placa central, a placa do sensor e a placa base. Os desenvolvedores podem trocar e atualizar componentes facilmente.

Fig 4. Existem três placas intercambiáveis: a placa central, o sensor e a base.

Por exemplo, você pode substituir o sensor da câmera para obter uma resolução maior ou adicionar hardware extra, como microfones ou telas. A placa base oferece opções flexíveis de comunicação, incluindo USB, Ethernet e interfaces mais avançadas como Power over Ethernet (PoE) e RS-485, tornando-a adaptável a vários casos de uso.

Aplicações de visão computacional da reCamera#

A reCamera é uma ferramenta confiável para uma variedade de aplicações no mundo real. Seus recursos avançados de visão computacional e adaptabilidade a tornam uma ótima opção para desenvolvedores e empresas que buscam integrar soluções habilitadas por IA em seus projetos.

Fig. 5 A reCamera pode ser utilizada para várias aplicações de IA de visão.

Algumas de suas principais aplicações incluem:

• Robótica: Pode integrar-se perfeitamente com braços robóticos, drones e gimbals para tarefas como navegação, seguimento de objetos e automação, permitindo operações mais inteligentes e eficientes.
• Uso industrial: A reCamera pode ajudar no monitoramento de linhas de produção, classificação de objetos e detecção de anomalias, tornando-a uma ferramenta inestimável para melhorar a eficiência na fabricação e na logística.
• Casas inteligentes: Ela pode alimentar dispositivos como campainhas de vídeo, fechaduras inteligentes e sistemas de segurança residencial, fornecendo detecção de objetos em tempo real e reconhecimento facial para maior segurança e conveniência.
• Segurança: Esta inovação pode aprimorar sistemas de vigilância com fluxos de vídeo de alta qualidade e monitoramento confiável orientado por IA, adequados para uso residencial e comercial.

Com sua flexibilidade, tamanho compacto e facilidade de integração, a reCamera pode ajudar a entregar soluções de IA impactantes para uma variedade de necessidades de visão computacional.

Uma demonstração ao vivo empolgante da reCamera#

Elaine Wu captou a atenção da audiência com uma demonstração ao vivo da reCamera, mostrando quão fácil é configurá-la e utilizá-la. Usando o Node-RED, uma ferramenta de programação visual, ela percorreu o processo simples de implementar a reCamera: definir a resolução, carregar um modelo YOLO e implementar. Em poucos instantes, a reCamera estava online e a realizar com precisão a deteção de objetos em tempo real.

Durante a demonstração, a reCamera identificou rapidamente objetos do dia a dia, como uma garrafa, um copo e um controle remoto em sua mesa. Elaine explicou que sua integração perfeita com modelos Ultralytics YOLO permite que ela entregue resultados rápidos e confiáveis, tornando-a uma ótima opção para desenvolvedores que desejam uma maneira direta de implementar IA de visão sem precisar programar.

Ela também destacou a flexibilidade da reCamera em relação à qualidade de vídeo e personalização. O dispositivo suporta gravação em resolução de até 2K e atualizações de sensor para melhorar o desempenho ainda mais.

As possibilidades para desenvolvedores de IA abertas pela reCamera#

Para encerrar a sua apresentação no YV24, Elaine Wu encorajou a comunidade de programadores a explorar a plataforma de código aberto da reCamera, com esquemas de hardware e o reCamera OS já disponíveis no GitHub, e com planos para lançar designs de aplicações no futuro.

Fig 6. Esta colaboração abre novas portas para desenvolvedores.

A reCamera é um grande passo em direção à simplificação da implantação de modelos de IA com modelos Ultralytics YOLO pré-instalados, e ela dá aos desenvolvedores a liberdade de personalizar suas soluções sem precisar de conhecimento em programação. A visão por trás da reCamera é criar um ecossistema colaborativo que inspire inovação e novas possibilidades em IA de visão.

Principais pontos#

A reCamera, desenvolvida pela Seeed Studio em parceria com a Ultralytics, é uma solução de hardware revolucionária com integração nativa com modelos YOLO. Ela simplifica a implantação de modelos pré-instalados em ambientes de produção, oferecendo aos desenvolvedores quatro versões versáteis para atender a várias necessidades. Esta colaboração marca um passo importante para tornar a tecnologia avançada de visão computacional mais acessível e adaptável para uma ampla gama de aplicações.

Para mais informações sobre IA e as suas aplicações, visita o nosso repositório do GitHub e junta-te à nossa comunidade. Também podes consultar as nossas páginas de soluções para inovações em setores como IA na condução autónoma e agricultura. 🚀