Conheça o YOLO26: IA de visão de próxima geração.
Ultralytics
IA de visão

Compreender a integração da visão computacional na robótica

Explora como a integração da visão computacional na robótica está a mudar a forma como as máquinas percebem e reagem ao que as rodeia em várias indústrias.

ABAbirami Vina
5 min read
Visão computacional integrada num sistema robótico

A IA na robótica está avançando a um ritmo incrível, e robôs estão sendo construídos para realizar tarefas mais complexas com menos intervenção humana. Por exemplo, o DeepMind's RoboCat é um robô impulsionado por IA que consegue aprender novas tarefas com apenas 100 demonstrações. O RoboCat pode então usar esses inputs para gerar mais dados de treinamento e aprimorar suas habilidades, aumentando sua taxa de sucesso de 36% para 74% após treinamento adicional. Inovações como o Robocat mostram um grande passo em direção à criação de robôs que podem lidar com uma ampla gama de tarefas com o mínimo de entrada humana.

Diagrama de como funciona o RoboCat da DeepMind

Fig 1. Como o RoboCat da DeepMind funciona.

Robôs impulsionados por IA já estão causando impacto em várias aplicações práticas, como o uso de robôs pela Amazon para otimizar operações de armazém e robôs com IA que estão otimizando práticas agrícolas na agricultura. Anteriormente, exploramos o papel geral da IA na robótica e vimos como ela está remodelando indústrias desde a logística até a saúde. Neste artigo, vamos mergulhar mais fundo em por que a visão computacional na robótica é tão crucial e como ela ajuda os robôs a perceber e interpretar seus arredores.

Link to this sectionA importância dos sistemas de visão na robótica#

Sistemas de visão na robótica atuam como os olhos de um robô e o ajudam a reconhecer e entender seu ambiente. Esses sistemas normalmente usam câmeras e sensores para capturar dados visuais. Algoritmos de visão computacional então processam os vídeos e imagens capturados. Por meio de detecção de objetos, percepção de profundidade e reconhecimento de padrões, robôs podem identificar objetos, avaliar seus arredores e tomar decisões em tempo real.

Um robô habilitado com visão computacional

Fig 2. Um robô habilitado com visão computacional (fonte: roboticstomorrow.com).

IA de visão ou visão computacional é essencial para robôs operarem autonomamente em ambientes dinâmicos e não estruturados. Se um robô precisa pegar um objeto, ele deve ser capaz de localizá-lo usando visão computacional. Esse é um exemplo muito simples. A mesma base fundamental de um sistema de visão computacional é necessária para construir aplicações onde robôs podem inspecionar produtos na fabricação ou auxiliar em cirurgias médicas com precisão e exatidão. Ao fornecer o input sensorial necessário para a tomada de decisão em tempo real, sistemas de visão tornam possível para robôs interagirem de forma mais natural com seus arredores e expandirem a gama de tarefas que podem realizar em diversas indústrias.

Link to this sectionAvanços recentes em visão computacional para robôs autônomos#

Recentemente, houve um aumento mundial no uso de visão computacional na robótica. De fato, o mercado global de visão robótica está prestes a atingir US$ 4 bilhões até 2028. Vamos analisar alguns estudos de caso que mostram como a IA de visão está sendo aplicada em aplicações robóticas do mundo real para impulsionar a eficiência e resolver problemas complexos.

Link to this sectionMelhorando inspeções subaquáticas usando IA de visão e robótica#

Inspeções subaquáticas são vitais para manter estruturas como oleodutos, plataformas offshore e cabos submarinos em boas condições. Essas inspeções ajudam a garantir que tudo esteja seguro e funcionando corretamente para evitar reparos custosos ou problemas ambientais. No entanto, inspecionar ambientes subaquáticos pode ser difícil devido à baixa visibilidade e áreas de difícil acesso.

Robôs com visão computacional podem capturar dados visuais nítidos e de alta qualidade que podem ser analisados no local ou usados para criar modelos 3D detalhados das áreas que estão sendo inspecionadas. Ao combinar a experiência humana com essa tecnologia, as inspeções tornam-se mais seguras, mais eficientes e fornecem melhores insights para manutenção e planejamento de longo prazo.

Por exemplo, a NMS, uma empresa líder em mergulho comercial, usou os Veículos Operados Remotamente (ROVs) Sentinus da Blue Atlas Robotics para uma inspeção subaquática desafiadora de tubulação com um ponto de entrada turvo. O ROV Sentinus, equipado com visão computacional, iluminou a área com seus quatorze faróis e capturou imagens de alta resolução de diferentes ângulos. Essas imagens foram então usadas para criar modelos 3D precisos do interior da tubulação para ajudar a NMS a avaliar minuciosamente sua condição e tomar decisões informadas de manutenção e gerenciamento de risco.

Como funcionam os ROVs Sentinus da Blue Atlas Robotics

Fig 3. Como os Sentinus (ROVs) da Blue Atlas Robotics funcionam.

Link to this sectionConstruindo casas com IA de visão e precisão robótica#

Na indústria da construção, manter uma qualidade consistente enquanto se lida com a escassez de mão de obra pode ser um desafio. Automatizar a construção com robôs industriais oferece uma maneira de otimizar o processo de construção, reduzir a necessidade de trabalho manual e garantir um trabalho preciso e de alta qualidade. A tecnologia de visão computacional pode ser integrada a essa automação ao tornar possível para os robôs realizarem monitoramento e inspeções em tempo real. Especificamente, sistemas de visão computacional podem ajudar robôs a detectar desalinhamentos ou defeitos em materiais para verificar se tudo está posicionado corretamente e atende aos padrões de qualidade.

Um excelente exemplo disso é a parceria entre a ABB Robotics e a startup AUAR, sediada no Reino Unido. Juntas, elas estão usando microfábricas robóticas equipadas com IA de visão para construir casas acessíveis e sustentáveis a partir de madeira laminada. A visão computacional permite que os robôs cortem e montem materiais com precisão. O processo automatizado ajuda com a escassez de mão de obra e simplifica a cadeia de suprimentos ao focar em um único material. Além disso, essas microfábricas podem ser escaladas para atender às necessidades locais e apoiar empregos próximos, tornando a construção mais eficiente e adaptável.

Microfábricas robóticas impulsionadas por Visão AI

Fig 4. Microfábricas Robóticas impulsionadas por IA de Visão.

Link to this sectionAutomatizando o carregamento de VEs com IA de visão 3D#

O carregamento de VEs é outro caso de uso interessante da IA de visão na robótica. Usando visão 3D e IA, robôs agora podem localizar e conectar-se automaticamente a portas de carregamento de VEs, mesmo em ambientes desafiadores como estacionamentos ao ar livre. A IA de visão funciona capturando imagens 3D de alta resolução do veículo e seus arredores, permitindo que o robô identifique com precisão a localização da porta de carregamento. Ele pode então calcular a posição e orientação exatas necessárias para conectar o carregador. A IA habilitada por visão não apenas acelera o processo de carregamento, mas também o torna mais confiável e reduz a necessidade de intervenção humana.

Um exemplo disso é o trabalho da Mech-Mind com uma grande empresa de energia. Eles desenvolveram um robô guiado por visão 3D que consegue encontrar e conectar-se com precisão à porta de carregamento de um VE, mesmo em condições de iluminação complicadas. O carregamento automatizado de VEs melhora a eficiência e o carregamento em espaços comerciais como prédios de escritórios e shoppings.

Carregamento de veículos elétricos guiado por visão 3D

Fig 5. Carregamento de VE Guiado por Visão 3D.

Link to this sectionBenefícios da IA de visão para aplicações robóticas#

A visão computacional oferece diversos benefícios na robótica e ajuda as máquinas a realizarem tarefas com maior autonomia, precisão e adaptabilidade. Aqui estão alguns benefícios únicos da IA de visão na robótica:

  • Eficiência de custos: Ao automatizar tarefas que exigem alta precisão e consistência, a IA de visão reduz a necessidade de trabalho manual, diminui as taxas de erro e aumenta a produtividade, levando a economias de custo a longo prazo.
  • Aprendizado adaptativo: Por meio da análise contínua de dados visuais, robôs podem melhorar seu desempenho ao longo do tempo, aprender com suas interações e adaptar-se a novas tarefas ou mudanças em seu ambiente.
  • Segurança e conformidade: A IA de visão aumenta a segurança de robôs que trabalham ao lado de humanos ao permitir que eles detectem e evitem obstáculos, reconheçam condições inseguras e cumpram padrões regulatórios.
  • Multitarefa: A análise de imagens permite que robôs lidem com múltiplas tarefas simultaneamente, como classificar objetos enquanto os inspecionam, aumentando a eficiência geral.

Link to this sectionDesafios da visão computacional na robótica#

Embora a IA de Visão ofereça muitas vantagens para a robótica, também existem desafios relacionados à implementação da visão computacional na robótica. Esses desafios podem afetar o quão bem os robôs desempenham suas funções em diferentes ambientes e o quão confiavelmente eles operam, portanto, é importante tê-los em mente ao planejar o desenvolvimento e a implantação de sistemas robóticos. Aqui estão alguns desafios-chave no uso da visão computacional para robótica:

  • Integração com outros sensores: Sistemas de visão muitas vezes precisam trabalhar ao lado de outros sensores como LiDAR ou sensores ultrassônicos. Garantir que esses diferentes sensores trabalhem juntos suavemente para fornecer um entendimento completo do ambiente é uma tarefa complexa.
  • Custo de implementação: Desenvolver e implantar sistemas de visão avançados pode ser caro. Equilibrar os custos de implementar a IA de visão com os benefícios esperados é um desafio que muitas organizações enfrentam.
  • Qualidade e disponibilidade de dados: Sistemas de visão computacional dependem de grandes datasets para treinamento, mas obter dados rotulados de alta qualidade que representem com precisão as várias situações de um robô pode ser difícil. Se os dados forem ruins ou incompletos, isso pode levar a modelos menos precisos e baixo desempenho nos robôs.
  • Confiabilidade entre condições: Sistemas de visão computacional precisam ser confiáveis e ter um desempenho consistente em diversos cenários, como ambientes internos e externos. No entanto, garantir esse tipo de durabilidade sem ajustes frequentes ou intervenção manual pode ser difícil.

Link to this sectionA IA de visão está moldando a próxima geração de robôs#

A IA de visão está mudando a forma como os robôs interagem com seus ambientes ao dar a eles um nível de entendimento e precisão que antes era inimaginável. Já estamos vendo a visão computacional causar um grande impacto em áreas como fabricação e saúde, onde robôs estão lidando com tarefas cada vez mais complexas. À medida que a IA continua a se desenvolver e os sistemas de visão computacional melhoram, as possibilidades para o que os robôs podem fazer continuam crescendo. O progresso na robótica não é apenas sobre tecnologia avançada - é sobre criar robôs que podem trabalhar conosco. À medida que os robôs se tornam mais capazes, eles provavelmente desempenharão um papel ainda maior em nossas vidas diárias, abrindo novas oportunidades e tornando nosso mundo mais eficiente e conectado.

Junte-se à nossa comunidade e explore nosso repositório GitHub para aprender sobre vários casos de uso de IA de visão. Você também pode descobrir mais sobre aplicações de visão computacional em direção autônoma e fabricação em nossas páginas de soluções.

Explore solutions

Real-time AI that works with your team

IA em robótica

Potencialize máquinas mais inteligentes com modelos Ultralytics YOLO. A IA de visão em robótica impulsiona a navegação autônoma, percepção, rastreamento de objetos e controle em tempo real.

Sabe mais
Real-time AI that works with your team

IA na Logística

Otimize a logística com modelos Ultralytics YOLO. A IA de visão permite a inspeção de pacotes, triagem, rastreamento de veículos e monitoramento de segurança em armazéns em tempo real.

Sabe mais
Real-time AI that works with your team

IA no varejo

Reinvente o varejo com modelos Ultralytics YOLO. A IA de visão impulsiona o rastreamento de inventário, monitoramento de prateleiras, gerenciamento de filas e percepções mais inteligentes sobre o cliente.

Sabe mais
Real-time AI that works with your team

IA na Saúde

Constrói soluções de saúde com modelos Ultralytics YOLO. A visão AI na saúde impulsiona imagens médicas mais rápidas, diagnósticos mais inteligentes e monitorização do paciente.

Sabe mais
Real-time AI that works with your team

IA na Fabricação

Otimize a fabricação com modelos Ultralytics YOLO. A IA de visão impulsiona o controle de qualidade, detecção de defeitos, conformidade com EPI e automação de linhas de montagem.

Sabe mais
Real-time AI that works with your operation

IA no Setor Automóvel

Aplica visão computacional no setor automóvel com modelos Ultralytics YOLO. A visão AI eleva a segurança rodoviária, a assistência ao condutor e a automação de veículos para estradas mais inteligentes.

Sabe mais
Real-time AI tailored to your operation

IA na Agricultura

Leva a visão AI para a agricultura inteligente com os modelos Ultralytics YOLO. Potencia a monitorização de culturas, o seguimento de gado e a agricultura de precisão para colheitas maiores e mais inteligentes.

Sabe mais
Real-time AI that works with your team

IA em robótica

Potencialize máquinas mais inteligentes com modelos Ultralytics YOLO. A IA de visão em robótica impulsiona a navegação autônoma, percepção, rastreamento de objetos e controle em tempo real.

Sabe mais
Real-time AI that works with your team

IA na Logística

Otimize a logística com modelos Ultralytics YOLO. A IA de visão permite a inspeção de pacotes, triagem, rastreamento de veículos e monitoramento de segurança em armazéns em tempo real.

Sabe mais
Real-time AI that works with your team

IA no varejo

Reinvente o varejo com modelos Ultralytics YOLO. A IA de visão impulsiona o rastreamento de inventário, monitoramento de prateleiras, gerenciamento de filas e percepções mais inteligentes sobre o cliente.

Sabe mais
Real-time AI that works with your team

IA na Saúde

Constrói soluções de saúde com modelos Ultralytics YOLO. A visão AI na saúde impulsiona imagens médicas mais rápidas, diagnósticos mais inteligentes e monitorização do paciente.

Sabe mais
Real-time AI that works with your team

IA na Fabricação

Otimize a fabricação com modelos Ultralytics YOLO. A IA de visão impulsiona o controle de qualidade, detecção de defeitos, conformidade com EPI e automação de linhas de montagem.

Sabe mais
Real-time AI that works with your operation

IA no Setor Automóvel

Aplica visão computacional no setor automóvel com modelos Ultralytics YOLO. A visão AI eleva a segurança rodoviária, a assistência ao condutor e a automação de veículos para estradas mais inteligentes.

Sabe mais
Real-time AI tailored to your operation

IA na Agricultura

Leva a visão AI para a agricultura inteligente com os modelos Ultralytics YOLO. Potencia a monitorização de culturas, o seguimento de gado e a agricultura de precisão para colheitas maiores e mais inteligentes.

Sabe mais
Real-time AI that works with your team

IA em robótica

Potencialize máquinas mais inteligentes com modelos Ultralytics YOLO. A IA de visão em robótica impulsiona a navegação autônoma, percepção, rastreamento de objetos e controle em tempo real.

Sabe mais
Real-time AI that works with your team

IA na Logística

Otimize a logística com modelos Ultralytics YOLO. A IA de visão permite a inspeção de pacotes, triagem, rastreamento de veículos e monitoramento de segurança em armazéns em tempo real.

Sabe mais
Real-time AI that works with your team

IA no varejo

Reinvente o varejo com modelos Ultralytics YOLO. A IA de visão impulsiona o rastreamento de inventário, monitoramento de prateleiras, gerenciamento de filas e percepções mais inteligentes sobre o cliente.

Sabe mais
Real-time AI that works with your team

IA na Saúde

Constrói soluções de saúde com modelos Ultralytics YOLO. A visão AI na saúde impulsiona imagens médicas mais rápidas, diagnósticos mais inteligentes e monitorização do paciente.

Sabe mais
Real-time AI that works with your team

IA na Fabricação

Otimize a fabricação com modelos Ultralytics YOLO. A IA de visão impulsiona o controle de qualidade, detecção de defeitos, conformidade com EPI e automação de linhas de montagem.

Sabe mais
Real-time AI that works with your operation

IA no Setor Automóvel

Aplica visão computacional no setor automóvel com modelos Ultralytics YOLO. A visão AI eleva a segurança rodoviária, a assistência ao condutor e a automação de veículos para estradas mais inteligentes.

Sabe mais
Real-time AI tailored to your operation

IA na Agricultura

Leva a visão AI para a agricultura inteligente com os modelos Ultralytics YOLO. Potencia a monitorização de culturas, o seguimento de gado e a agricultura de precisão para colheitas maiores e mais inteligentes.

Sabe mais

Vamos construir o futuro da IA juntos!

Começa a tua jornada com o futuro da aprendizagem automática