Как создать элементарный поток AAC ADTS с Android MediaCodec

Ответ 1

Наконец, я создал файлы AAC, которые можно воспроизводить как на Android-устройстве, так и на главном компьютере Windows. Я размещаю свое решение здесь, надеясь, что это может помочь другим.

Во-первых, мое предыдущее предположение о том, что кодировщик Android MediaCodec генерирует элементарный поток AAC, не является точным. Кодер MediaCodec генерирует необработанный поток AAC. Вот почему файлы не могли быть воспроизведены. Необработанный поток AAC необходимо преобразовать в воспроизводимый формат, например поток ADTS. Я изменил название этого сообщения, чтобы отразить мое новое понимание. Был другой пост, который задал аналогичный вопрос и получил отличный ответ. Однако новичок, возможно, не всегда понимает краткие описания. Я не совсем понял это в первый раз, когда прочитал этот пост.

Итак, чтобы генерировать бит-поток AAC, который может воспроизводиться медиа-проигрывателем, я начал с примера EncoderTest, данного fadden в его 1-м комментарии, но изменил исходный код, чтобы добавить заголовок ADTS на каждый выходной кадр (доступ блок) и записать полученный поток в файл (замените строки с 248 по 267 исходного кода на следующий фрагмент кода):

if (index >= 0) {
    int outBitsSize   = info.size;
    int outPacketSize = outBitsSize + 7;    // 7 is ADTS size
    ByteBuffer outBuf = codecOutputBuffers[index];

    outBuf.position(info.offset);
    outBuf.limit(info.offset + outBitsSize);
    try {
        byte[] data = new byte[outPacketSize];  //space for ADTS header included
        addADTStoPacket(data, outPacketSize);
        outBuf.get(data, 7, outBitsSize);
        outBuf.position(info.offset);
        mFileStream.write(data, 0, outPacketSize);  //open FileOutputStream beforehand
    } catch (IOException e) {
        Log.e(TAG, "failed writing bitstream data to file");
        e.printStackTrace();
    }

    numBytesDequeued += info.size;

    outBuf.clear();
    codec.releaseOutputBuffer(index, false /* render */);
    Log.d(TAG, "  dequeued " + outBitsSize + " bytes of output data.");
    Log.d(TAG, "  wrote " + outPacketSize + " bytes into output file.");
}
else if (index == MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED) {
}
else if (index == MediaCodec.INFO_OUTPUT_FORMAT_CHANGED) {
    codecOutputBuffers = codec.getOutputBuffers();
}

Вне цикла я определил функцию addADTStoPacket следующим образом:

/**
 *  Add ADTS header at the beginning of each and every AAC packet.
 *  This is needed as MediaCodec encoder generates a packet of raw
 *  AAC data.
 *
 *  Note the packetLen must count in the ADTS header itself.
 **/
private void addADTStoPacket(byte[] packet, int packetLen) {
    int profile = 2;  //AAC LC
                      //39=MediaCodecInfo.CodecProfileLevel.AACObjectELD;
    int freqIdx = 4;  //44.1KHz
    int chanCfg = 2;  //CPE

    // fill in ADTS data
    packet[0] = (byte)0xFF;
    packet[1] = (byte)0xF9;
    packet[2] = (byte)(((profile-1)<<6) + (freqIdx<<2) +(chanCfg>>2));
    packet[3] = (byte)(((chanCfg&3)<<6) + (packetLen>>11));
    packet[4] = (byte)((packetLen&0x7FF) >> 3);
    packet[5] = (byte)(((packetLen&7)<<5) + 0x1F);
    packet[6] = (byte)0xFC;
}

Я также добавил код для управления тем, как прекратить генерировать поток AAC ADTS, но это приложение специфично, поэтому я не буду здесь останавливаться. При всех этих изменениях сгенерированные файлы AAC можно воспроизводить на устройстве Android, на моем ПК с ОС Windows, и ffmpeg доволен ими.