使用MediaCodec和MediaMuxer将PCM编码为AAC时没有音频

Question

我正在使用MediaCodec将PCM数据转换为AAC，并使用MediaMuxer将此aac数据存储到m4a文件中。没有视频。

该文件会生成，甚至会播放。但是没有声音。如果我将aac文件导入Audacity，它不会显示任何数据。音频的长度甚至是预期的时间。我知道数据正在被编码，尽管我不确定这些数据是否被正确编码。

对pcm数据进行编码：

audioEncoder.setCallback(object : MediaCodec.Callback() {

    override fun onInputBufferAvailable(mc: MediaCodec, inputBufferId: Int) {
        updateRemoveAudioBufferIndex(inputBufferId)
    }

    override fun onOutputBufferAvailable(mc: MediaCodec, outputBufferId: Int, bufferInfo: MediaCodec.BufferInfo) {
        val outputBuffer = mc.getOutputBuffer(outputBufferId)

        if (bufferInfo.flags == MediaCodec.BUFFER_FLAG_CODEC_CONFIG) {
            audioEncoder.releaseOutputBuffer(outputBufferId, false)
            return
        }

        if (bufferInfo.size > 0) {
            outputBuffer?.position(bufferInfo.offset);
            outputBuffer?.limit(bufferInfo.offset + bufferInfo.size)

            muxer!!.writeSampleData(audioTrackIndex, outputBuffer!!, bufferInfo)
            audioEncoder.releaseOutputBuffer(outputBufferId, false)
        }

        if (bufferInfo.flags == BUFFER_FLAG_END_OF_STREAM) {
            cleanupAudioEncoder()
        }

    }

    override fun onError(mc: MediaCodec, ex: MediaCodec.CodecException) {
    }

    override fun onOutputFormatChanged(mc: MediaCodec, mf: MediaFormat) {
        audioTrackIndex = muxer!!.addTrack(audioEncoder.outputFormat)
        startMuxer()
    }
})

val format = MediaFormat()
format.setString(MediaFormat.KEY_MIME, "audio/mp4a-latm")
format.setInteger(MediaFormat.KEY_CHANNEL_COUNT, 1)
format.setInteger(MediaFormat.KEY_SAMPLE_RATE, 32000)
format.setInteger(MediaFormat.KEY_BIT_RATE, 128000)
format.setInteger(MediaFormat.KEY_AAC_PROFILE, MediaCodecInfo.CodecProfileLevel.AACObjectLC)

audioEncoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE)
audioEncoder.start()


fun encodeAudio(pcmData: ByteBuffer) {
    if (audioInputBufferIds.isNotEmpty()) {
        val bufferId = updateRemoveAudioBufferIndex()
        val buffer = audioEncoder.getInputBuffer(bufferId) as ByteBuffer
        buffer.clear()
        buffer.put(pcmData)

        val flags = if (encodingStopped) BUFFER_FLAG_END_OF_STREAM else 0

        audioEncoder.queueInputBuffer(bufferId, 0, pcmData.capacity(), presentationTimeAudio.toLong(), flags)
        presentationTimeAudio += bufferIntervalInMicroseconds
    }
}

我已经浏览了大量示例，我所做的一切似乎都是正确的。如果我在onOutputBuffer可用函数中放置断点，很明显我正在接收编码数据。

Answer 1

事实证明，将数据放入缓冲区后需要倒回缓冲区：

buffer.put(pcmData)
buffer.rewind()

老实说，我对我遇到的使用buffer.put但从不调用倒带的示例应用程序的数量感到非常惊讶。为什么它们甚至可以工作，我不明白。倒带时的留档声明如下：

回退此缓冲区。位置设置为零并丢弃标记。假设限制已适当设置，请在一系列通道写入或获取操作之前调用此方法。

https://docs.oracle.com/javase/7/docs/api/java/nio/Buffer.html#rewind（）

MediaCodec希望缓冲区在开始编码之前指向位置0。因为我没有调用rewind，put函数导致缓冲区位于最后一个位置，因此MediaCodec认为这意味着没有数据要编码。奇怪的是，当编解码器没有提供编码数据时，MediaMuxer甚至会费心写出数据。