硬核FFmpeg 6.0硬解码直达Surface，视频播放更流畅！

Android

2024-01-05 06:49:50

硬解码：视频播放的利器

随着视频技术的飞速发展，视频的分辨率不断提高，码率也水涨船高。这对视频播放设备的性能提出了严峻的挑战，而硬解码技术应运而生。它利用硬件加速技术，将视频解码任务交给专门的硬件处理，从而显著提升视频播放的流畅度和画质。

FFmpeg 6.0：硬解码的强大引擎

FFmpeg 是一款开源的多媒体框架，它为我们提供了丰富的视频解码库，支持多种视频格式的硬解码。其中，FFmpeg 6.0 版本对硬解码进行了全面优化，新增了直接硬解码到 Surface 的功能，进一步提升了视频播放的流畅度和画质。

直接硬解码到 Surface，体验丝滑流畅

直接硬解码到 Surface 是指将视频解码后的数据直接输出到 Surface 上，无需经过中间的 YUV 数据转换。这一优化避免了 YUV 数据转换带来的延迟和画质损失，极大地提升了视频播放的流畅度和画质。

如何使用 FFmpeg 6.0 直接硬解码到 Surface

1. 准备工作

安装 FFmpeg 6.0
准备一个支持硬解码的视频文件
创建一个 Surface 对象

2. 创建 FFmpeg 解码器

AVCodec *codec = avcodec_find_decoder(AV_CODEC_ID_H264);
if (!codec) {
    // 找不到合适的解码器
}

AVCodecContext *codec_ctx = avcodec_alloc_context3(codec);
if (!codec_ctx) {
    // 分配内存失败
}

3. 打开视频文件

int ret = avformat_open_input(&format_ctx, input_file, NULL, NULL);
if (ret < 0) {
    // 打开视频文件失败
}

4. 寻找视频流

int video_stream_index = -1;
for (int i = 0; i < format_ctx->nb_streams; i++) {
    if (format_ctx->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
        video_stream_index = i;
        break;
    }
}

if (video_stream_index == -1) {
    // 找不到视频流
}

5. 创建视频解码器

AVCodecContext *video_codec_ctx = format_ctx->streams[video_stream_index]->codec;

ret = avcodec_open2(video_codec_ctx, codec, NULL);
if (ret < 0) {
    // 打开视频解码器失败
}

6. 创建 SurfaceTexture

SurfaceTexture *surface_texture = new SurfaceTexture(EGL_NO_CONTEXT);

7. 将 SurfaceTexture 绑定到 Surface

surface_texture->attachToGLContext(EGL_NO_CONTEXT);

8. 创建 EGL 上下文

EGLDisplay display = eglGetDisplay(EGL_DEFAULT_DISPLAY);
EGLContext context = eglCreateContext(display, EGL_NO_CONFIG, EGL_NO_CONTEXT, NULL);

9. 将 SurfaceTexture 绑定到 EGL 上下文

eglMakeCurrent(display, surface_texture, surface_texture, context);

10. 创建 FFmpeg 硬解码器

FFmpegHardDecoder *decoder = new FFmpegHardDecoder(video_codec_ctx, surface_texture);

11. 开始解码视频

decoder->start();

12. 循环读取视频帧

while (true) {
    AVPacket *packet = av_read_frame(format_ctx);
    if (!packet) {
        break;
    }

    decoder->decode(packet);
    av_packet_free(&packet);
}

13. 停止解码视频

decoder->stop();

14. 释放资源

avcodec_close(video_codec_ctx);
avformat_close_input(&format_ctx);
eglDestroyContext(display, context);
eglMakeCurrent(display, EGL_NO_SURFACE, EGL_NO_SURFACE, EGL_NO_CONTEXT);
eglTerminate(display);
delete surface_texture;
delete decoder;

常见问题解答

1. 什么是硬解码？

硬解码是一种利用硬件加速技术，将视频解码任务交给专门的硬件处理的视频播放技术，能够有效提升视频播放的流畅度和画质。

2. FFmpeg 6.0 在硬解码方面有哪些优化？

FFmpeg 6.0 版本新增了直接硬解码到 Surface 的功能，避免了 YUV 数据转换带来的延迟和画质损失，进一步提升了视频播放的流畅度和画质。

3. 如何使用 FFmpeg 6.0 进行硬解码？

具体步骤请参考文章中的详细讲解。

4. 硬解码技术有哪些优势？

硬解码技术具有以下优势：