Ultralytics YOLO27:
返回 Ultralytics 术语表

Graph Neural Network (GNN)

探索图神经网络(GNNs)如何处理非欧几里得数据。了解 GNNs 如何与 Ultralytics YOLO26 协同增强关系推理,推动高级视觉 AI 发展。

图神经网络 (GNN) 是一类专门用于处理以图形式表示的数据的深度学习架构。传统模型(例如针对图像等网格结构进行优化的卷积神经网络 (CNN),以及擅长处理文本或时间序列分析等序列数据的循环神经网络 (RNN))不同,GNN 独特地具备处理非欧几里得数据的能力。这意味着它们可以处理由节点(实体)和边(关系)定义的数据集,从而学习现实世界网络中复杂的相互依赖关系。通过同时捕获单个数据点的属性及其之间的结构连接,GNN 能够在关系与实体本身同等重要的领域中带来强大的洞察。

图神经网络的工作原理#

GNN 背后的基本机制通常称为“消息传递”或邻域聚合。在这一框架中,图中的每个节点都会通过收集其直接邻居的信息来更新自身表示。在模型训练期间,网络会学习生成有效的嵌入——即能够将节点特征及其局部邻域拓扑结构编码在一起的稠密向量表示。

经过多层处理后,一个节点最终可以整合图中更远处的信息,从而有效扩大其“感受野”。这使模型能够理解节点在更大结构中的上下文。现代框架(例如 PyTorch Geometric深度图学习库 (DGL))简化了这些复杂消息传递方案的实现,使开发者无需从零开始即可构建复杂的图应用。

GNN 与其他神经网络架构的比较#

要理解 GNN 的独特作用,可以将其与 AI 领域中常见的其他神经网络 (NN)类型进行区分:

  • 卷积神经网络 (CNNs):卷积神经网络是视觉任务的黄金标准,例如图像分类目标检测Ultralytics YOLO26 等模型依赖 CNNs 来处理固定网格的像素数据。然而,当每个节点的邻居数量不同时,CNNs 难以处理这种不规则结构。
  • 循环神经网络 (RNN):RNN 按特定顺序处理输入,因此非常适合语言任务或自然语言处理 (NLP)。相比之下,GNN 处理的是空间或关系层面的数据,其关系并不严格遵循时间或序列顺序。
  • 知识图谱:知识图谱是由事实(实体和关系)构成的结构化数据库,而 GNN 则是用于从这类结构中学习的计算模型。GNN 经常部署在知识图谱之上来执行链接预测等任务,从而增强检索增强生成 (RAG)流程。

实际应用#

对任意关系进行建模的能力,使 GNN 成为众多高影响力行业不可或缺的技术:

  1. 药物发现与医疗保健:在制药行业中,化学分子天然可以表示为图,其中原子是节点,化学键是边。GNN 通过预测分子属性和模拟蛋白质相互作用,正在推动医疗保健领域的 AI发展。Google DeepMind 的 AlphaFold 等创新凸显了几何深度学习在理解生物结构方面的强大能力。

  2. 社交网络分析与推荐:各类平台利用 GNN 分析规模庞大的用户交互网络。通过将用户建模为节点,将好友关系或点赞建模为边,这些网络能够驱动推荐系统,为用户推荐内容、产品或人际连接。这种方法与 Pinterest 的 GraphSage 所采用的方法类似,能够有效扩展到数十亿次交互。

  3. 物流与交通预测:在物流领域的 AI中,道路网络被视为图,其中交叉路口是节点,道路是边。GNN 可以通过分析不同道路路段之间的空间依赖关系来预测交通流量并优化配送路线,其表现远胜于简单的统计基线。

将图概念与视觉 AI 相结合#

图神经网络正越来越多地集成到多模态流程中。例如,一个综合系统可以使用图像分割识别场景中的不同物体,然后利用 GNN 推理这些物体之间的空间关系——这一过程通常称为“场景图”。这弥合了视觉感知与逻辑推理之间的鸿沟。

下面的 Python 示例演示了如何将视觉 AI 与图结构连接起来。该示例使用 Ultralytics YOLO26 模型检测物体,将这些物体作为节点,并使用 torch 准备一个基本的图结构。

import torch
from ultralytics import YOLO

# Load the latest YOLO26 model
model = YOLO("yolo26n.pt")

# Run inference on an image to find entities (nodes)
results = model("https://ultralytics.com/images/bus.jpg")

# Extract box centers to serve as node features
# Format: [center_x, center_y] derived from xywh
boxes = results[0].boxes.xywh[:, :2].cpu()
x = torch.tensor(boxes.numpy(), dtype=torch.float)

# Create a hypothetical edge index connecting the first two objects
# In a real GNN, edges might be defined by distance or interaction
edge_index = torch.tensor([[0, 1], [1, 0]], dtype=torch.long)

print(f"Graph constructed: {x.size(0)} nodes (objects) and {edge_index.size(1)} edges.")

希望管理这些复杂流程所需数据集的开发者可以使用 Ultralytics Platform,它简化了系统视觉组件的标注和训练流程。通过将强大的视觉模型与 GNN 的关系推理能力相结合,工程师可以构建具备上下文感知能力的自主系统,从而更好地理解周围的世界。

Explore solutions

用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多

让我们共同构建 AI 的未来!

开启你的机器学习未来之旅