ffmpeg如何降低延迟

Question

使用如下命令，推流到rtsp服务器之后，使用opencv拉取下来，有差不多一秒的延迟，使用ffplay播放也有延迟？应该怎么推流才能降低延迟呢

ffmpeg_cmd = [
    'ffmpeg',
    '-hwaccel', 'cuda',
    '-f', 'rawvideo',
    '-vcodec', 'rawvideo',
    '-pix_fmt', 'bgr24',
    '-s', f'{w}x{h}',
    '-r', str(30),
    '-i', '-',
    '-c:v', 'h264_nvenc',
    '-preset', 'p1',
    '-crf', '10',
    '-g', '1',
    '-max_delay', '0',
    '-probesize', '32',
    '-analyzeduration', '0',
    '-tune', 'll',
    '-f', 'rtsp',
    rtsp_url
]

Answer 1

以下回复参考：皆我百晓生、券券喵儿等免费微信小程序作答:

降低使用ffmpeg推流时的延迟，可以从以下几个方面进行优化：

1. 调整编解码参数：在ffmpeg命令中，尝试调整视频编码参数以优化编码速度和质量之间的平衡。例如，使用较小的GOP（Group of Pictures）大小（'-g'参数）和较低的CRF（Constant Rate Factor，即编码质量参数）值可能会提高编码速度并减少延迟。同时，选择合适的编码预设（如'-preset p1'）也可以影响编码速度和延迟。
2. 使用更高效的编解码器：在你的命令中，使用了h264_nvenc编解码器，这是NVIDIA的硬件加速编解码器。虽然它提供了高效的编码性能，但也可能带来一定的延迟。尝试使用其他编解码器（如libx264或OpenH264等），看看是否能改善延迟情况。
3. 调整分析时间：通过减小分析时间（'-analyzeduration'参数），可以让ffmpeg更快地开始推流，从而减少延迟。你可以尝试将分析时间设置为较小的值，例如设置为零（'-analyzeduration 0'）。
4. 优化网络传输：在推流到RTSP服务器时，网络传输也是一个可能影响延迟的因素。确保网络连接稳定且带宽足够，以减少网络传输导致的延迟。另外，如果可能的话，尝试使用较低的网络延迟协议（如UDP），以提高数据传输速度并减少延迟。
5. 使用其他推流工具或库：除了ffmpeg之外，还有其他推流工具或库可供选择，它们可能具有更低的延迟性能。你可以尝试使用其他工具或库进行推流，看看是否能够改善延迟情况。

除了调整ffmpeg命令的参数外，还需要注意以下几点：

• 确保你的摄像头或视频源能够以足够的帧率提供视频数据，以满足推流的需求。
• 在推流之前，确保ffmpeg能够正确读取视频源的数据流，并且没有数据丢失或错误的情况。
• 检查RTSP服务器的配置和网络环境是否良好，以确保推流过程中没有网络瓶颈或传输延迟。

请注意，降低延迟是一个复杂的问题，可能需要综合考虑多个因素并进行调整和优化。你可以尝试上述建议来减少延迟，并根据实际情况进行调整和测试，以获得最佳的推流效果。