YOLO Vision 2026:
返回 Ultralytics 术语表

Shadow AI

了解 Shadow AI 的安全风险,并学习如何保护数据。探索使用 Ultralytics YOLO26 进行安全的本地 AI 部署。

影子 AI 是指组织内部员工未经授权或批准使用人工智能工具、应用和机器学习模型,整个过程完全处于 IT 或安全部门的可见范围和治理之外。随着商业生成式 AI应用和易于访问的云端界面变得无处不在,员工自然倾向于使用这些工具来提高生产力。当这种使用未经过正式批准、风险评估或合规检查时,就会形成一个隐蔽的“影子 AI 经济”。根据 IBM 对影子 AI 的详细定义,这种不受监管的使用会使企业面临重大风险,尤其是在数据隐私和企业知识产权方面。

了解影子 AI 与影子 IT 的区别#

虽然影子 AI 在概念上类似于传统的“影子 IT”——后者涉及使用未经批准的软件,例如个人云存储或消息应用——但影子 AI 要复杂、危险得多。传统的影子 IT 应用可能只是暂时存储数据,而未经批准的 AI 应用,尤其是大型语言模型 (LLMs)和外部计算机视觉解决方案,会通过非确定性逻辑主动处理、转换和利用用户输入。在许多情况下,这些免费平台会将用户提供的查询内容纳入训练数据。这一根本差异意味着,看似无害的文档格式化或图像分析操作,可能会在不经意间将专有业务逻辑、商业机密或受监管的客户数据泄露到公共领域。为了在工作场所建立安全的模型,团队应严格遵循模型部署最佳实践。

影子 AI 的现实案例#

AI 快速融入现代工作流程意味着,未经批准的使用几乎可能出现在任何部门。常见的现实案例包括:

  • **软件开发与工程:**一名工程师在处理一段复杂代码时遇到困难,于是将专有算法粘贴到未经批准的公共 AI 聊天机器人(如 OpenAI 的 ChatGPT)中进行调试。虽然聊天机器人解决了错误,但专有源代码此时已经暴露给第三方服务提供商,违反了标准的数据安全协议。
  • **数据分析与计算机视觉:**营销团队希望分析近期活动中的客户互动照片。他们没有使用经过批准的内部流程,而是将敏感图像上传到公共应用中,从而损害用户隐私,并可能违反 GDPRHIPAA 等严格的监管框架。

如何检测影子 AI 并降低风险#

为了有效检测影子 AI 并管理其风险,组织必须实施全面的模型监控和稳健的 API 安全跟踪策略。传统安全工具通常难以捕捉动态的 AI 交互,因此现代网络安全团队会部署专门的云访问安全代理 (CASBs)和先进的数据丢失防护 (DLP)系统。这些工具利用异常检测来标记流向已知第三方 AI 端点的异常数据流,具体内容详见近期的 Palo Alto Networks 关于未经授权 AI 的分析

为了安全地应对这一趋势,公司应遵循 NIST AI 风险管理框架等框架,建立明确的治理机制。更有效的做法是,组织可以为员工提供易于访问且获得批准的 AI 替代方案。例如,开发者无需依赖外部计算机视觉 API,而可以在公司内部硬件上安全部署 Ultralytics YOLO26。通过在本地运行深度学习模型,团队可以在不将数据暴露到开放互联网的情况下,获得业界领先的性能。

from ultralytics import YOLO

# Load a sanctioned, locally hosted YOLO26 model to prevent Shadow AI risks
model = YOLO("yolo26n.pt")

# Perform inference securely on local hardware, keeping proprietary data in-house
results = model("sensitive_internal_document.jpg")

# Display results safely without relying on unapproved external web APIs
results[0].show()

提供安全、面向企业的工具,可以有效消除员工使用影子 AI 的诱因,在保持严格内部合规的同时推动快速创新。如果你的团队希望在完整的管理控制下,安全地协作处理数据集和模型训练,请了解 Ultralytics Platform 的功能。此外,你还可以通过我们全面的数据收集与标注指南了解如何以结构化方式安全管理数据。

Explore solutions

让我们共同构建 AI 的未来!

开启你的机器学习未来之旅