解码H264/RTSP流后未设置PTS

Question

问题：Libav/FFmpeg解码管道需要什么才能在解码的AVFrames中生成有效的表示时间戳（PTS）？

我正在解码通过RTSP接收的H264流。我使用Live555解析H264并将流提供给我的LibAV解码器。解码和显示效果很好，只是我没有使用时间戳信息，而且有些口吃。

获取带有avcodec_decode_video2的帧后，不设置演示时间戳（PTS）。

我需要PTS，以找出每帧需要显示多长时间，并避免任何口吃。

• 我通过Live555获取SPS/PPS信息，我将这些值复制到我的AVCodecContext-

• 我应该在哪里设置来自我的H264接收器（Live555）的NAL PTS？作为AVPacket-

RTP时间戳设置为内容的采样时间戳。必须使用90 kHz的时钟频率。

• 这是否意味着我必须始终为解码器计算1/90000的时基？如果在SPS中指定了其他值，该怎么办




Answer 1

avcodec_decode_video2（）对帧进行重新排序，使解码顺序和呈现顺序相同。即使您以某种方式说服ffmpeg在解码帧上为您提供PTS，它也应该与DTS相同。

//
// decode a video frame
//

avcodec_decode_video2
(
    ctxt->video_st->codec,
    frame,
    &is_finished,
    buffer
);

if (buffer->dts != AV_NOPTS_VALUE)
{
    //
    // you should end up here
    //
    pts = buffer->dts;
}
else
{
    pts = 0;
}

//
// adjust time base
//
pts *= av_q2d(ctxt->video_st->time_base);

Answer 2

将live555脚本复制到avpack脚本中。用avcodec_decode_video2处理数据包，然后从avframe-

除了在AVCodecContex外数据中设置SPS和PPS之外，无需在编解码器上下文中设置任何内容

您可以在VLC的github中找到一个很好的示例：设置AVPacket pts：https://github.com/videolan/vlc/blob/master/modules/codec/avcodec/video.c#L983

将AVPack解码为AVFrame：https://github.com/videolan/vlc/blob/master/modules/codec/avcodec/video.c#L1014

从AVFrame脚本检索：https://github.com/videolan/vlc/blob/master/modules/codec/avcodec/video.c#L1078