如何减少MediaCodec H264编码器延迟

Question

我正在尝试用Android6.0的MediaCodec将h264编码成实时低延迟的流。有大约6帧的延迟从编码器，我想知道如何减少

零件代码为：

while (true) {
     encoder->dequeueOutputBuffer(&bufIndex);
}

编码器以320×480 60 fps的速度由屏幕表面馈入,通过dequeueOutputBuffer（）输出流数据。大约有6个帧的数据没有被dequeueOutputBuffer（）及时返回到编码器。换句话说，当馈送第n帧时，编码器输出第(N-6)帧的数据。

问题1-如何减少编码器中缓冲的帧数？是否可以在第N帧被送进编码器后输出第N帧？

当表面图形内容突然变得静态时，没有更多的帧被馈送到编码器。奇怪的是，最新的6帧数据不能以它的“通常的速度”输出，他们是缓慢的输出在10秒左右。

问题2-当突然没有数据馈送到编码器时，如何减少最新帧输出的延迟？

Answer 1

缓冲由视频编码器决定。我不认为有很多你可以做的，除了选择一个视频编码器，不是这样的行为。

如果您不希望输出暂停，那么最简单的修复方法就是不暂停输入。继续输入同一帧。编码器应该认识到没有任何变化，并且生成很少的输出。screenrecord不是以这种方式工作的--它只是在获取帧时提交帧--所以您必须添加一个重新提交帧的超时。