MediaCodec：Android 媒体编解码利器

2024-01-30 12:05:31

揭秘 MediaCodec：Android 音视频编解码的秘密武器

MediaCodec 是 Android 系统中一项至关重要的技术，负责处理音视频数据的编解码。通过直接操作底层硬件编解码器，MediaCodec 可以实现远超软件编解码器的性能和功耗表现，让移动设备也能轻松应对复杂的音视频处理任务。

1. MediaCodec 工作原理

MediaCodec 的工作流程包含以下几个步骤：

创建 MediaCodec 实例： 根据要处理的媒体类型创建 MediaCodec 对象，指定所需编解码器。
配置 MediaCodec： 设置媒体格式，如视频分辨率、音频采样率等参数。
输入数据处理： 将输入数据送入 MediaCodec 的输入缓冲区。
输出数据获取： 从 MediaCodec 的输出缓冲区中获取已编解码的数据。
释放 MediaCodec： 结束后释放 MediaCodec 实例，释放系统资源。

2. 使用 MediaCodec 进行编解码

2.1. 创建 MediaCodec 实例

MediaCodec mediaCodec = MediaCodec.createDecoderByType(MIMETYPE);

其中 MIMETYPE 为要处理的媒体类型，如 "video/avc" 或 "audio/mp4a-latm"。

2.2. 配置 MediaCodec

MediaFormat mediaFormat = new MediaFormat();
mediaFormat.setString(MediaFormat.KEY_MIME, MIMETYPE);
mediaFormat.setInteger(MediaFormat.KEY_WIDTH, width);
mediaFormat.setInteger(MediaFormat.KEY_HEIGHT, height);
mediaCodec.configure(mediaFormat, null, null, 0);

其中 width 和 height 为视频或音频数据的宽高。

2.3. 输入数据处理

ByteBuffer[] inputBuffers = mediaCodec.getInputBuffers();
byte[] inputData = ...;
inputBuffers[0].put(inputData);
mediaCodec.queueInputBuffer(0, 0, inputData.length, 0, 0);

其中 inputBuffers 为 MediaCodec 的输入缓冲区，inputData 为要编解码的数据。

2.4. 输出数据获取

ByteBuffer[] outputBuffers = mediaCodec.getOutputBuffers();
MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();
while (true) {
  int outputIndex = mediaCodec.dequeueOutputBuffer(bufferInfo, TIMEOUT_US);
  if (outputIndex >= 0) {
    ByteBuffer outputData = outputBuffers[outputIndex];
    // ...
    mediaCodec.releaseOutputBuffer(outputIndex, true);
  } else if (outputIndex == MediaCodec.INFO_OUTPUT_FORMAT_CHANGED) {
    MediaFormat outputFormat = mediaCodec.getOutputFormat();
    // ...
  } else if (outputIndex == MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED) {
    outputBuffers = mediaCodec.getOutputBuffers();
  } else {
    break;
  }
}