在Android上使用MediaCodec API解码AAC

Question

我正在尝试使用Android上的MediaCodec API来解码AAC流。（它是原始AAC。）我尝试使用MediaFormat.createAudioFormat（）来创建要传递给MediaCodec.configure（）的格式对象，但我在使用AAC（音频/mp4a-latm）时一直出错。（不过它适用于MP3（音频/mpeg）...）

最后，我为一个AAC文件创建了一个MediaExtractor，并查看了它生成的format对象。我看到它包含一个字节缓冲区的键“csd-0”，该字节缓冲区由两个字节组成，两个字节的值均为0x12。如果我在用于配置AAC编解码器的format对象中包含该键和值，一切都会正常工作。

有人知道发生了什么吗？留档指出我不应该配置那个键。有人有指向MediaCodec示例的指针来解码AAC文件而不使用MediaExtractor生成格式对象吗？

Answer 1

我在我测试的几个设备上解码/播放AAC内容没有问题。我的方法是首先使用MediaExtractor设置数据源，然后初始化MediaFormat，最后在一个循环中完成工作，缓冲区从MediaCodec送入/送出。对于表面，我使用了null，因为这只是一个音频播放器，所以没有什么可显示的。

Answer 2

我使用了跟随代码并添加了删除ADTS头的ES，它可以很好地工作，但我真的不知道为什么要设置“csd-0”，否则编解码器会出现错误

      decoder = MediaCodec.createDecoderByType("audio/mp4a-latm");
      mMediaFormat = MediaFormat.createAudioFormat("audio/mp4a-latm", 44100,2);
      byte[] bytes = new byte[]{(byte) 0x12, (byte)0x12};
      ByteBuffer bb = ByteBuffer.wrap(bytes);
      mMediaFormat.setByteBuffer("csd-0", bb);

Answer 3

是的，编解码器配置2字节是你收到的初始数据。是的，它是原始aac数据块。你可以看到我在编码时是如何导出下面的格式的。我最初试图遵循留档，它说它们是latm格式的，并试图解析它。然后我在android留档上发现了一些“差异”，说输出确实是原始块。知道了这一点，这只是根据我的需要选择一个容器的问题。特别是，我需要adts容器而不是flv或mp4。

将有效负载数据复制到一个足以容纳您的容器的数组中，只需添加您的位。因此，在互联网上搜索我的解决方案后，我产生了以下代码：

profile = (configParams[0]>>3)&0x1f;

frequency_index = (this.configParams[0]&0x7) <<1 | (this.configParams[1]>>7) &0x1;

channel_config = (this.configParams[1]>>3) &0xf;

int finallength = encoded_length + 7;       
ENCodedByteArray[0] = (byte) 0xff;
ENCodedByteArray[1] = (byte) 0xf1;
ENCodedByteArray[2] = (byte) ( ((profile - 1) << 6) + (frequency_index << 2) +(channel_config >> 2));
ENCodedByteArray[3] = (byte) (((channel_config & 0x3) << 6) + (finallength >> 11));
ENCodedByteArray[4] = (byte)( (finallength & 0x7ff) >> 3);
ENCodedByteArray[5] = (byte) (((finallength & 7) << 5) + 0x1f) ;
ENCodedByteArray[6] = (byte) 0xfc;

用这样的方法：

byte chunkADTS[]=new byte[info.size + 7];
fillInADTSHeader(chunkADTS,info.size);
outputBuffers[bR].get(chunkADTS,7,info.size);
buffer.pushData(chunkADTS);