Integrare la computer vision nella robotica con Ultralytics YOLO11

I robot hanno fatto molta strada dai tempi di Unimate, il primo robot industriale, inventato negli anni Cinquanta. Quelle che erano macchine preprogrammate e basate su regole si sono evolute in sistemi intelligenti capaci di svolgere attività complesse e interagire con il mondo reale.

Oggi i robot sono impiegati in diversi settori, dalla produzione alla sanità e all’agricoltura, per automatizzare vari processi. Un fattore chiave nell’evoluzione della robotica è l’IA e la visione artificiale, un ramo dell’IA che aiuta le macchine a comprendere e interpretare le informazioni visive.

Per esempio, i modelli di visione artificiale come Ultralytics YOLO11 stanno migliorando l'intelligenza dei sistemi robotici. Integrata in questi sistemi, l'IA visiva consente ai robot di riconoscere oggetti, orientarsi negli ambienti e prendere decisioni in tempo reale.

In questo articolo vedremo come Ultralytics YOLO11 può potenziare i robot con funzionalità avanzate di visione artificiale ed esploreremo le sue applicazioni in diversi settori.

Panoramica sull'IA e la visione artificiale nella robotica#

Le funzionalità principali di un robot dipendono dalla sua capacità di comprendere l'ambiente circostante. Questa consapevolezza collega l'hardware fisico alle decisioni intelligenti. Senza di essa, i robot possono solo seguire istruzioni predefinite e faticano ad adattarsi ai cambiamenti dell'ambiente o a gestire attività complesse. Proprio come gli esseri umani si affidano alla vista per orientarsi, i robot usano la visione artificiale per interpretare l'ambiente, capire la situazione e agire di conseguenza.

Fig. 1. Un robot gioca a tris usando la visione artificiale per interpretare la griglia e fare mosse strategiche.

In effetti, la visione artificiale è fondamentale per la maggior parte delle attività robotiche. Aiuta i robot a rilevare gli oggetti ed evitare gli ostacoli mentre si spostano. Ma per riuscirci non basta vedere il mondo: i robot devono anche poter reagire rapidamente. Nelle situazioni reali, anche un lieve ritardo può causare errori costosi. Modelli come Ultralytics YOLO11 consentono ai robot di ottenere informazioni in tempo reale e rispondere immediatamente, anche in situazioni complesse o sconosciute.

Scopriamo Ultralytics YOLO11#

Prima di approfondire come integrare Ultralytics YOLO11 nei sistemi robotici, esploriamo le funzionalità principali di YOLO11.

I modelli Ultralytics YOLO supportano diverse attività di visione artificiale che forniscono informazioni rapide e in tempo reale. In particolare, Ultralytics YOLO11 offre prestazioni più rapide, costi computazionali inferiori e maggiore precisione. Per esempio, può rilevare oggetti in immagini e video con grande precisione, rendendolo adatto ad applicazioni in ambiti come robotica, sanità e produzione.

Ecco alcune funzionalità di grande impatto che rendono Ultralytics YOLO11 un'ottima scelta per la robotica:

• Facilità di implementazione: è facile da implementare e si integra con un’ampia gamma di piattaforme software e hardware, tra cui ROS.
• Adattabilità: Ultralytics YOLO11 funziona bene in ambienti e configurazioni hardware diversi, offrendo prestazioni costanti anche in condizioni dinamiche.
• Facile da usare: la documentazione e l'interfaccia intuitive di Ultralytics YOLO11 riducono i tempi di apprendimento e ne semplificano l'integrazione nei sistemi robotici.

Fig. 2. Esempio di analisi della posa delle persone in un'immagine con YOLO11.

Esplorazione delle attività di visione artificiale supportate da Ultralytics YOLO11#

Ecco una panoramica più approfondita di alcune attività di visione artificiale supportate da Ultralytics YOLO11:

• Rilevamento degli oggetti: la capacità di Ultralytics YOLO11 di rilevare oggetti in tempo reale consente ai robot di identificare e localizzare all’istante gli oggetti nel proprio campo visivo. Questo aiuta i robot a evitare ostacoli, pianificare percorsi dinamici e navigare autonomamente in ambienti interni ed esterni.
• Segmentazione delle istanze: identificando con precisione i contorni e le forme dei singoli oggetti, Ultralytics YOLO11 consente ai robot di eseguire operazioni precise di prelievo e posizionamento e attività di assemblaggio complesse.
• Classificazione delle immagini: Ultralytics YOLO11 può classificare gli oggetti nelle immagini, consentendo ai robot di categorizzare gli articoli, rilevare anomalie o prendere decisioni in base al tipo di oggetto, per esempio identificando forniture mediche in ambito sanitario.
• Stima della posa: il supporto di Ultralytics YOLO11 per la stima della posa consente ai robot di riconoscere e interpretare i movimenti e i gesti del corpo umano. È fondamentale affinché i robot collaborativi (cobot) possano lavorare in sicurezza accanto alle persone.
• Tracciamento degli oggetti: Ultralytics YOLO11 permette di tracciare gli oggetti in movimento nel tempo ed è quindi ideale per le applicazioni di robotica autonoma che devono monitorare l'ambiente circostante in tempo reale.

Fig. 3. Attività di visione artificiale supportate da Ultralytics YOLO11.

Applicazioni dell'IA nella robotica: con Ultralytics YOLO11#

Dall’apprendimento intelligente all’automazione industriale, modelli come Ultralytics YOLO11 possono contribuire a ridefinire le capacità dei robot. L’integrazione di YOLO11 nella robotica dimostra come i modelli di visione artificiale stiano favorendo i progressi nell’automazione. Esploriamo alcuni ambiti chiave in cui YOLO11 può avere un impatto significativo.

Insegnare ai robot con la visione artificiale#

La visione artificiale è ampiamente utilizzata nei robot umanoidi e permette loro di imparare osservando l'ambiente circostante. Modelli come Ultralytics YOLO11 possono migliorare questo processo grazie a funzionalità avanzate di rilevamento degli oggetti e stima della posa, che aiutano i robot a interpretare con precisione le azioni e i comportamenti umani.

Analizzando in tempo reale movimenti e interazioni sottili, è possibile addestrare i robot a replicare attività umane complesse. In questo modo, possono andare oltre le routine preprogrammate e imparare attività, come usare un telecomando o un cacciavite, semplicemente osservando una persona.

Fig. 4. Un robot imita l'azione di una persona.

Questo tipo di apprendimento può essere utile in diversi settori. Per esempio, in agricoltura i robot possono imparare attività come piantare, raccogliere e gestire le colture osservando i lavoratori. Imitando il modo in cui le persone svolgono queste attività, i robot possono adattarsi a diverse condizioni agricole senza dover essere programmati per ogni situazione.

Applicazioni della robotica in ambito sanitario#

Anche in ambito sanitario la visione artificiale sta diventando sempre più importante. Per esempio, Ultralytics YOLO11 può essere usato nei dispositivi medici per assistere i chirurghi nelle procedure complesse. Con funzionalità come il rilevamento degli oggetti e la segmentazione delle istanze, YOLO11 può aiutare i robot a individuare le strutture interne del corpo, gestire gli strumenti chirurgici ed eseguire movimenti precisi.

Potrebbe sembrare fantascienza, ma ricerche recenti dimostrano l'applicazione pratica della visione artificiale nelle procedure chirurgiche. In un interessante studio sulla dissezione robotica autonoma per la colecistectomia (asportazione della cistifellea), i ricercatori hanno integrato Ultralytics YOLO11 per la segmentazione dei tessuti (classificazione e separazione dei diversi tessuti in un'immagine) e il rilevamento dei punti chiave degli strumenti chirurgici (individuazione di punti di riferimento specifici sugli strumenti).

Il sistema è riuscito a distinguere con precisione i diversi tipi di tessuto, anche quando si deformavano (cambiavano forma) durante la procedura, e si è adattato dinamicamente a questi cambiamenti. Ciò ha consentito agli strumenti robotici di seguire traiettorie di dissezione precise (tagli chirurgici).

Produzione intelligente e automazione industriale#

I robot in grado di prelevare e posizionare oggetti svolgono un ruolo fondamentale nell’automazione delle operazioni di produzione e nell’ottimizzazione delle catene di approvvigionamento. La loro velocità e precisione consentono di eseguire attività con un intervento umano minimo, come identificare e smistare gli articoli.

Grazie alla precisa segmentazione delle istanze di Ultralytics YOLO11, è possibile addestrare bracci robotici a rilevare e segmentare gli oggetti che si spostano su un nastro trasportatore, prelevarli con precisione e collocarli nelle posizioni designate in base al tipo e alle dimensioni.

Per esempio, famosi produttori di automobili usano robot basati sulla visione per assemblare diverse parti, migliorando la velocità e la precisione della catena di montaggio. I modelli di visione artificiale come Ultralytics YOLO11 possono consentire a questi robot di lavorare insieme agli operatori, favorendo una perfetta integrazione dei sistemi automatizzati in ambienti di produzione dinamici. Questo progresso può portare a tempi di produzione più brevi, meno errori e prodotti di qualità superiore.

Fig. 5. Un braccio robotico con sistema di visione assembla un'auto.

Vantaggi dell'integrazione di Ultralytics YOLO11 nella robotica#

Ultralytics YOLO11 offre diversi vantaggi fondamentali che lo rendono particolarmente adatto ai sistemi di robotica autonoma. Ecco alcuni dei principali:

• Bassa latenza di inferenza: Ultralytics YOLO11 può fornire previsioni molto accurate con una latenza ridotta, anche in ambienti dinamici.
• Modelli leggeri: progettati per ottimizzare le prestazioni, i modelli leggeri di Ultralytics YOLO11 consentono anche ai robot più piccoli e dotati di minore capacità di elaborazione di disporre di funzionalità avanzate di visione senza sacrificare l'efficienza.
• Efficienza energetica: Ultralytics YOLO11 è progettato per essere efficiente dal punto di vista energetico ed è quindi ideale per i robot a batteria che devono risparmiare energia mantenendo prestazioni elevate.

Limiti dell'IA visiva nella robotica#

Sebbene i modelli di visione artificiale forniscano potenti strumenti per la visione robotica, è necessario considerare alcuni limiti quando li si integra nei sistemi robotici del mondo reale. Tra questi:

• Costi elevati di raccolta dei dati: addestrare modelli efficaci per attività robotiche specifiche richiede spesso dataset ampi, diversificati e ben etichettati, che sono costosi da acquisire.
• Variazioni ambientali: i robot operano in ambienti imprevedibili, in cui fattori come le condizioni di illuminazione o gli sfondi disordinati possono influire sulle prestazioni dei modelli di visione.
• Problemi di calibrazione e allineamento: assicurarsi che i sistemi di visione siano calibrati correttamente e allineati con gli altri sensori del robot è fondamentale per garantire prestazioni accurate; un disallineamento può causare errori decisionali.

Il futuro dei progressi nella robotica e nell'IA#

I sistemi di visione artificiale non sono solo strumenti per i robot di oggi: sono i mattoni su cui costruire un futuro in cui i robot operano autonomamente. Grazie alle capacità di rilevamento in tempo reale e al supporto di più attività, sono particolarmente adatti alla robotica di nuova generazione.

In effetti, le tendenze attuali del mercato mostrano che la visione artificiale sta diventando sempre più essenziale nella robotica. I rapporti di settore evidenziano che la visione artificiale è la seconda tecnologia più utilizzata nel mercato globale della robotica basata sull'IA.

Fig. 6. Quota di mercato globale dei robot con IA per tecnologia.

Punti chiave#

Grazie alla capacità di elaborare dati visivi in tempo reale, Ultralytics YOLO11 può aiutare i robot a rilevare, identificare e interagire con l’ambiente circostante con maggiore precisione. Questo è importante in ambiti come la produzione, dove i robot possono collaborare con le persone, e la sanità, dove possono assistere in interventi chirurgici complessi.

Con il continuo progresso della robotica, integrare la visione artificiale in questi sistemi sarà fondamentale per consentire ai robot di svolgere un’ampia gamma di attività in modo più efficiente. Il futuro della robotica è promettente: l’IA e la visione artificiale stanno dando vita a macchine sempre più intelligenti e adattabili.

Unisciti alla nostra community e consulta il nostro repository GitHub per saperne di più sui recenti sviluppi nell’AI. Scopri le diverse applicazioni dell’AI in ambito sanitario e della visione artificiale in agricoltura nelle nostre pagine dedicate alle soluzioni. Consulta i nostri piani di licenza per creare le tue soluzioni di visione artificiale.