Deep-Live-Cam 中的视频处理模块提供了用于处理视频以执行换脸和增强操作的功能。本页面将解释视频如何被处理、可用的配置选项以及技术实现细节。有关处理静态图像的信息,请参阅图像处理,有关实时摄像头处理,请参阅摄像头模式。
视频处理工作流程通过使用源人脸图像应用换脸来转换目标视频。此过程涉及由核心处理引擎管理的多个步骤。
来源:modules/core.py177-239 modules/utilities.py63-97
来源:modules/core.py203-232 modules/utilities.py41-135
Deep-Live-Cam 提供了几个专门用于视频处理的配置选项,可以通过用户界面和命令行访问。
| 选项 | 描述 | 默认 |
|---|---|---|
| 保持帧率 | 保持原始视频的帧率 | 否 |
| 保留音频 | 保留原始音频 | 真 |
| 保留帧 | 处理后保留临时帧 | 否 |
| 视频编码器 | 输出视频使用的编解码器 | libx264 |
| 视频质量 | 质量设置(0-51,值越低越好) | 18 |
| 多人脸 | 处理每一帧中的所有面部 | 否 |
| 面部增强 | 应用人脸增强以提高质量 | 可选 |
| 色彩校正 | 调整颜色以修复偏蓝色调 | 否 |
来源:modules/core.py31-53 modules/ui.py93-114
视频处理的实现依赖于几个关键组件协同工作,以处理该过程的各个方面。
来源:modules/core.py177-239 modules/utilities.py23-167
使用 FFmpeg 将帧以 PNG 格式从目标视频中提取出来。提取过程会在临时目录中创建编号的图像文件(例如 0001.png、0002.png)。
来源:modules/utilities.py63-73 modules/core.py207-208
每个提取的帧都由选定的帧处理器(人脸交换器、人脸增强器)处理。这是视频处理工作流程的核心,换脸和增强操作在此进行。
所有帧处理完成后,将使用指定的编码器和质量设置将它们合成为视频。如果启用了音频保留,原始音频将被添加到输出视频中。
来源:modules/utilities.py76-118 modules/core.py216-232
视频处理可能非常消耗资源,特别是对于较长的视频或使用诸如人脸增强等要求苛刻的帧处理器时。以下是一些优化性能的注意事项:
执行提供程序:为您的硬件选择合适的执行提供程序。
内存使用:使用 --max-memory 参数根据您的系统能力调整最大内存使用量。
视频质量与速度:降低视频质量设置可以显著提高处理速度。
帧处理器:仅使用必需的帧处理器可以提高性能。例如,如果不需要,请禁用人脸增强。
视频处理的用户界面提供了一个简化的工作流程,用于选择源文件和目标文件、配置处理选项以及输出结果。
来源:modules/ui.py394-414 modules/ui.py649-673
如果在视频处理过程中遇到问题,请检查这些常见问题。