Integrar modelos YOLO da Ultralytics na reCamera da Seeed Studio

Estamos entusiasmados por começar o ano em parceria com a Seeed Studio, que anuncia o lançamento de uma nova inovação em visão computacional, a reCamera. Trata-se de uma câmara de IA de código aberto concebida para tarefas de visão computacional em tempo real. Com suporte nativo para modelos Ultralytics YOLO, a reCamera é compacta e personalizável, tornando mais fácil do que nunca para programadores e criadores dar vida aos seus projetos de IA para visão.

A reCamera foi apresentada pela primeira vez à comunidade de IA no YOLO Vision 2024 (YV24), o evento híbrido anual da Ultralytics que apresenta inovações de ponta e oferece uma plataforma para a colaboração em IA para visão.

No evento, tivemos o prazer de contar com Elaine Wu, Team Lead de Robótica de IA da Seeed Studio, que apresentou uma palestra esclarecedora sobre o potencial entusiasmante da reCamera. Ela descreveu-a como um dispositivo criado com cuidado e consideração, dizendo: “Pensámos em todas as possibilidades para ti.”

Fig. 1. Elaine Wu subiu ao palco do YV24 remotamente.

Neste artigo, vamos revisitar a palestra de Elaine Wu no YOLO Vision 2024, com foco na inovadora reCamera — um resultado notável da colaboração entre a Seeed Studio e a Ultralytics — e nas suas funcionalidades únicas e aplicações no mundo real.

As inovações da Seeed Studio em IA para visão#

Elaine começou a sua apresentação por introduzir a Seeed Studio, uma empresa especializada em Internet das Coisas (IoT) e hardware de IA desde 2008. Explicou que a Seeed Studio fornece aos programadores ferramentas para tudo, desde protótipos de pequena escala até sistemas de alto desempenho como o NVIDIA Jetson, ajudando-os a dar vida às suas ideias.

Ao longo dos anos, a Seeed Studio apoiou mais de 200 000 programadores na criação de soluções que integram IA e IoT de forma contínua. Elaine também partilhou como a Seeed colabora com fornecedores de silício, empresas de software e a comunidade de programadores em geral para criar soluções personalizáveis.

Fig. 2. Elaine Wu falou sobre a experiência e o percurso da Seeed Studio.

Apresentação da reCamera#

Depois de apresentar a Seeed Studio, Elaine Wu revelou o mais recente avanço da Seeed Studio, a reCamera, lançada em colaboração com a Ultralytics. Anunciada oficialmente no YV24, a reCamera é uma câmara com IA flexível, modular e acessível, com suporte nativo para YOLO. A licença da Ultralytics concede à Seeed Studio os direitos de integrar modelos Ultralytics YOLO na reCamera, garantindo uma funcionalidade de IA no dispositivo contínua e em conformidade para os utilizadores finais. Foi concebida para responder à crescente necessidade de ferramentas de visão computacional em tempo real numa vasta gama de aplicações.

Elaine apresentou a reCamera como algo mais do que um simples dispositivo — é uma plataforma que programadores, makers e empresas podem personalizar e desenvolver. Ao torná-la de código aberto, a Seeed Studio incentiva a comunidade de IA a criar soluções adaptadas às suas necessidades, seja para IoT, robótica ou aplicações industriais.

Fig. 3. A reCamera é uma pequena câmara de IA de código aberto.

“Definimo-la como uma plataforma flexível de IA para visão, para que qualquer pessoa possa conceber a sua própria câmara”, observou Elaine, demonstrando que o design modular e o preço acessível da reCamera tornam a IA para visão acessível a todos, abrindo caminho à inovação em vários setores.

Principais funcionalidades da reCamera da Seeed Studio#

Então, o que significa realmente dizer que a reCamera é a primeira câmara de IA programável de código aberto? A reCamera tem um design de produto de código aberto e disponibiliza hardware modular composto por placa de sensores, placa principal e placa base, que pode ser personalizado. O dispositivo foi concebido para dar aos programadores flexibilidade para o adaptar facilmente às suas necessidades. Também inclui suporte nativo para modelos Ultralytics YOLO, permitindo utilizar sem problemas as capacidades avançadas de visão computacional do YOLO logo após a instalação.

O suporte nativo permite otimizar totalmente a reCamera para executar modelos YOLO como o Ultralytics YOLOv8 e o Ultralytics YOLO11, sem problemas de configuração ou compatibilidade. Com os modelos Ultralytics já pré-instalados e prontos para implementação, elimina-se a necessidade de passos adicionais de configuração, como integrar software ou lidar com custos extra, para que os programadores se possam concentrar na criação das suas aplicações.

Quer estejas a desenvolver soluções de AIoT, a trabalhar com robótica ou a lidar com qualquer projeto de visão computacional, a reCamera foi concebida para te ajudar a começar de forma rápida e simples.

Como a reCamera se distingue das câmaras IP tradicionais#

Elaine Wu também explicou as vantagens técnicas da reCamera e como esta ultrapassa as limitações das câmaras IP tradicionais (Protocolo de Internet (IP)).

Ao contrário das câmaras convencionais, que muitas vezes necessitam de hardware externo, como mini PCs ou servidores, para processar vídeo e executar modelos de IA, a reCamera integra tudo numa única unidade compacta.

Este design autónomo facilita a implementação e elimina a necessidade de dispositivos adicionais. Também é totalmente programável, permitindo aos utilizadores executar modelos de IA diretamente no dispositivo sem depender de uma máquina anfitriã separada, tornando-a uma solução mais eficiente e versátil.

Informações técnicas sobre a reCamera com IA#

No centro da reCamera está o processador SG200X, desenvolvido com base na arquitetura RISC-V. Este processador foi especificamente concebido para aplicações de IA de periferia, proporcionando um desempenho potente com um consumo mínimo de energia.

Suporta tecnologias de vídeo como H.264 e H.265, que comprimem ficheiros de vídeo para poupar armazenamento e largura de banda sem perder qualidade. Funcionalidades adicionais, como imagens HDR (alto alcance dinâmico), redução de ruído 3D e correção da lente, garantem imagens nítidas e profissionais, mesmo em condições desafiantes.

Com a capacidade de executar 1 bilião de operações por segundo (1 TOPS), o processador consegue lidar com tarefas exigentes, como a deteção de objetos em tempo real, enquanto um microcontrolador de 8 bits mais pequeno trata de operações simples para poupar energia.

A reCamera também se destaca pelo seu design modular, que inclui três componentes principais: a placa principal, a placa de sensores e a placa base. Os programadores podem trocar e atualizar componentes facilmente.

Fig. 4. Existem três placas permutáveis: a placa principal, a placa de sensores e a placa base.

Por exemplo, podes substituir o sensor da câmara por um de maior resolução ou adicionar hardware extra, como microfones ou ecrãs. A placa base oferece opções de comunicação flexíveis, incluindo USB, Ethernet e interfaces mais avançadas, como alimentação através de Ethernet (PoE) e RS-485, tornando-a adaptável a vários casos de utilização.

Aplicações de visão computacional da reCamera#

A reCamera é uma ferramenta fiável para uma série de aplicações no mundo real. As suas capacidades avançadas de visão computacional e adaptabilidade tornam-na uma excelente opção para programadores e empresas que pretendam integrar soluções com IA nos seus projetos.

Fig. 5. A reCamera pode ser utilizada em várias aplicações de IA para visão.

Algumas das suas principais aplicações incluem:

• Robótica: Pode integrar-se facilmente com braços robóticos, drones e gimbals para tarefas como navegação, seguimento de objetos e automação, permitindo operações mais inteligentes e eficientes.
• Utilização industrial: A reCamera pode ajudar a monitorizar linhas de produção, separar objetos e detetar anomalias, tornando-se uma ferramenta inestimável para melhorar a eficiência na indústria transformadora e na logística.
• Casas inteligentes: Pode alimentar dispositivos como videoporteiros, fechaduras inteligentes e sistemas de segurança doméstica, fornecendo deteção de objetos e reconhecimento facial em tempo real para maior segurança e comodidade.
• Segurança: Esta inovação pode melhorar os sistemas de vigilância com transmissões de vídeo de alta qualidade e monitorização fiável orientada por IA, adequada para utilização residencial e comercial.

Com a sua flexibilidade, tamanho compacto e facilidade de integração, a reCamera pode ajudar a fornecer soluções de IA impactantes para uma variedade de necessidades de visão computacional.

Uma demonstração ao vivo entusiasmante da reCamera#

Elaine Wu captou a atenção do público com uma demonstração ao vivo da reCamera, mostrando como é fácil configurá-la e utilizá-la. Utilizando o Node-RED, uma ferramenta de programação visual, apresentou o processo simples de implementação da reCamera: definir a resolução, carregar um modelo YOLO e implementar. Em poucos momentos, a reCamera estava ativa e a realizar deteção de objetos em tempo real com precisão.

Durante a demonstração, a reCamera identificou rapidamente objetos do dia a dia, como uma garrafa, um copo e um comando em cima da secretária. Elaine explicou que a sua integração contínua com os modelos Ultralytics YOLO permite fornecer resultados rápidos e fiáveis, tornando-a uma excelente opção para programadores que pretendam implementar IA para visão de forma simples e sem programação.

Ela também destacou a flexibilidade da reCamera relativamente à qualidade de vídeo e à personalização. O dispositivo suporta gravação com resolução até 2K e atualizações do sensor para melhorar ainda mais o desempenho.

As possibilidades abertas pela reCamera para os programadores de IA#

Ao concluir a sua apresentação no YV24, Elaine Wu incentivou a comunidade de programadores a explorar a plataforma de código aberto da reCamera, com os esquemas de hardware e o reCamera OS já disponíveis no GitHub, e planos para lançar designs de aplicações no futuro.

Fig. 6. Esta colaboração abre novas portas para os programadores.

A reCamera representa um passo importante para simplificar a implementação de modelos de IA com modelos Ultralytics YOLO pré-instalados e dá aos programadores liberdade para personalizarem as suas soluções sem necessitarem de conhecimentos de programação. A visão subjacente à reCamera é criar um ecossistema colaborativo que inspire inovação e novas possibilidades na IA para visão.

Principais conclusões#

A reCamera, desenvolvida pela Seeed Studio em parceria com a Ultralytics, é uma solução de hardware revolucionária com integração nativa de modelos YOLO. Simplifica a implementação de modelos pré-instalados em ambientes de produção, oferecendo aos programadores quatro versões versáteis para responder a diferentes necessidades. Esta colaboração representa um passo importante para tornar a tecnologia avançada de visão computacional mais acessível e adaptável a uma vasta gama de aplicações.

Para obteres mais informações sobre IA e as suas aplicações, visita o nosso repositório no GitHub e junta-te à nossa comunidade. Também podes consultar as nossas páginas de soluções para conhecer inovações em áreas como IA em condução autónoma e agricultura. 🚀