Ultralytics YOLO27:
返回 Ultralytics 术语表

AI Video Editing

了解 AI 视频编辑如何利用语音识别、目标检测、跟踪和分割来简化剪辑、重新构图、添加字幕并模糊处理人物。

AI 视频编辑利用机器学习帮助选择、编排或修改现有素材。编辑人员无需手动查找每位发言者、逐帧跟踪移动的主体,或找出每个镜头的结束点,而是可以使用 AI 识别这些元素,并建议或应用相应更改。最终结果可能是粗剪版本、重新构图的片段、字幕,或有针对性的视觉特效。编辑是否准确传达预期故事,仍由人的判断决定。

AI 视频编辑的工作原理#

视频编辑人员会在时间线上处理片段、音频和特效。AI 会补充时间线中发生事件的信息。系统可能会使用语音识别将对话转换为与时间对齐的文本,然后让编辑人员通过编辑文字稿来查找引言或剪掉停顿。Adobe Premiere 中的基于文本的编辑展示了文字与素材之间的这种联系。

对于视觉更改,目标检测会定位单帧中的主体,通常使用矩形边界框。目标跟踪会关联不同帧中的检测结果,让特效能够跟随移动中的同一主体。如果编辑需要主体的轮廓而非矩形,实例分割会提供像素级掩码。另外,镜头切换检测可以标记不同摄像机镜头之间的转场,让长时间录制的素材更容易审阅。

这些技术为剪辑提供不同的信息:检测指出某个对象在哪里,跟踪有助于确定它随时间变化时是哪个对象,而掩码则定义要更改哪些像素。单靠其中任何一项技术,都无法决定哪些时刻应该保留在最终剪辑中。

与相关术语的区别#

视频理解指解读片段中的内容或事件;编辑则利用这种解读来改变素材的呈现方式。视频生成会创建新素材,而 AI 视频编辑通常以现有素材为起点。编辑人员可以将生成的内容与录制的片段结合起来,但这两项任务并不能互相替代。

AI 辅助编辑也不同于普通的自动化编辑。诸如“将每一帧都裁剪到中心”的固定指令,无论内容如何都会应用同一规则。AI 辅助重新构图可以根据动作的位置变化作出调整,如Adobe 的自动重新构图概览所示。无论采用哪种方式,编辑人员都应检查重要主体是否始终清晰可见。

两个实际应用#

**将录制的访谈剪辑成短片。**制作团队可以转录一小时的对话,找到相关回答,并据此制作初步剪辑。自动语音转文字字幕可以作为字幕的起点。随后,编辑人员会将文字稿与音频核对、调整节奏,并确认删去附近的发言没有改变说话者的意思。这对字幕尤其重要:W3C 关于无障碍字幕的指南指出,自动生成的内容需要经过准确性审查。

**准备素材以便分享。**拍摄公共活动的团队可能需要遮挡旁观者,同时让活动内容保持可见。检测器可以定位每一帧中的人物,目标模糊处理工作流则可以对检测到的区域应用模糊效果。编辑人员必须检查输出:漏检可能导致某人仍然清晰可见,而过大的边界框则可能遮挡超出预期的场景内容。对检测到的人物进行模糊处理,并不等同于可靠地将所有人匿名化,也不等同于专门识别人脸。

实用视频工作流#

以下示例使用 Ultralytics YOLO26 对现有视频中检测到的人物进行模糊处理。安装 ultralytics 和 opencv-python,然后将名为 input.mp4 的视频与脚本放在同一目录中。

import cv2
from ultralytics import solutions

capture = cv2.VideoCapture("input.mp4")
assert capture.isOpened(), "Provide an input.mp4 video"

width = int(capture.get(cv2.CAP_PROP_FRAME_WIDTH))
height = int(capture.get(cv2.CAP_PROP_FRAME_HEIGHT))
fps = capture.get(cv2.CAP_PROP_FPS)
writer = cv2.VideoWriter("blurred.mp4", cv2.VideoWriter_fourcc(*"mp4v"), fps, (width, height))
assert writer.isOpened(), "Could not create the output video"

blurrer = solutions.ObjectBlurrer(model="yolo26n.pt", classes=[0])
while True:
    success, frame = capture.read()
    if not success:
        break
    result = blurrer(frame)
    writer.write(result.plot_im)

capture.release()
writer.release()

类别 0 会在预训练模型中选择人物,而不是人脸。模糊处理程序会逐帧处理,随后使用 OpenCV 的视频捕获和写入工具将处理后的帧合成为新文件。这个简短工作流处理的是视频帧,而不是原始音轨。完整的剪辑流程还需要一个能够处理音频的后期步骤;FFmpeg 的滤镜文档介绍了更多视频处理选项。

发布前需要检查的内容#

检查完整的输出,尤其要留意剪切点、快速运动、遮挡、字幕,以及每个特效的首尾帧。保留未经编辑的副本,以便修正错误剪切或不完整的模糊处理。对于分发的媒体,内容凭证和溯源信息有助于记录文件的来源和编辑历史,但无法证明其传达的信息是否属实。AI 可以加快重复性的编辑工作;编辑人员仍须对上下文、隐私和最终视频负责。

Explore solutions

航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为农业、水产养殖、环境监测、自然保护和地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 应用于航空监测。通过计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解更多
安全领域的计算机视觉

安全领域的计算机视觉

使用 Ultralytics YOLO 模型守护每一处场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人领域的计算机视觉

机器人领域的计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人领域的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流领域的计算机视觉

物流领域的计算机视觉

借助 Ultralytics YOLO 模型优化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售业计算机视觉

零售业计算机视觉

借助 Ultralytics YOLO 模型重新构想零售业。视觉 AI 可用于库存跟踪、货架监控、队列管理和更深入的客户洞察。
了解更多
医疗领域计算机视觉

医疗领域计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、提升诊断能力并监测患者。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

借助 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、PPE 合规检查和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

借助 Ultralytics YOLO 模型将计算机视觉应用于汽车行业。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路变得更智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 应用于智慧农业。支持作物监测、牲畜追踪和精准农业,提升产量与种植智慧。
了解更多
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为农业、水产养殖、环境监测、自然保护和地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 应用于航空监测。通过计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解更多
安全领域的计算机视觉

安全领域的计算机视觉

使用 Ultralytics YOLO 模型守护每一处场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人领域的计算机视觉

机器人领域的计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人领域的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流领域的计算机视觉

物流领域的计算机视觉

借助 Ultralytics YOLO 模型优化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售业计算机视觉

零售业计算机视觉

借助 Ultralytics YOLO 模型重新构想零售业。视觉 AI 可用于库存跟踪、货架监控、队列管理和更深入的客户洞察。
了解更多
医疗领域计算机视觉

医疗领域计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、提升诊断能力并监测患者。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

借助 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、PPE 合规检查和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

借助 Ultralytics YOLO 模型将计算机视觉应用于汽车行业。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路变得更智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 应用于智慧农业。支持作物监测、牲畜追踪和精准农业,提升产量与种植智慧。
了解更多
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为农业、水产养殖、环境监测、自然保护和地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 应用于航空监测。通过计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解更多
安全领域的计算机视觉

安全领域的计算机视觉

使用 Ultralytics YOLO 模型守护每一处场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人领域的计算机视觉

机器人领域的计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人领域的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流领域的计算机视觉

物流领域的计算机视觉

借助 Ultralytics YOLO 模型优化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售业计算机视觉

零售业计算机视觉

借助 Ultralytics YOLO 模型重新构想零售业。视觉 AI 可用于库存跟踪、货架监控、队列管理和更深入的客户洞察。
了解更多
医疗领域计算机视觉

医疗领域计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、提升诊断能力并监测患者。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

借助 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、PPE 合规检查和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

借助 Ultralytics YOLO 模型将计算机视觉应用于汽车行业。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路变得更智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 应用于智慧农业。支持作物监测、牲畜追踪和精准农业,提升产量与种植智慧。
了解更多

让我们一起构建 AI 的未来!

开启机器学习未来之旅