跳到主要内容

视频硬件编解码支持

RK3568/RK3566/RK3399/RK3288 集成的 VPU 具有优秀的视频编解码能力，Mpp 是 Rockchip 为 VPU 提供的一套视频编解码的 api, 并且基于 mpp。Rockchip 提供了一套 gstreamer 的编解码插件。用户可以根据自己的需求，基于 gstreamer 来做视频编解码的应用，或者直接调用 mpp，来实现硬件的编解码加速。

系统提供了一个测试视频文件，位于 /usr/local/test.mp4，测试文件为 1080P, 24Fps, H264 编码, Mp4 格式。

可以通过一下几种方式，验证和开发视频编解码相关应用。

11.1. Gstreamer​

  • Ubuntu 16.04 下，gstreamer 已经安装在 /opt/ 目录下。

  • Ubuntu 18.04 和 20.04 下，gstreamer 已经安装到系统中。

/usr/local/bin/h264dec.sh 测试硬件 H264 解码。

/usr/local/bin/h264enc.sh 测试硬件 H264 编码。

用户可以参照这两个脚本，配置自己的 gstreamer 应用。

11.2. Mpv​

系统提供的Mpv播放器，可以直接调用 rkmpp 解码插件。

11.3. FFmpeg​

FFmpeg 对于 Rockchip 暂时只支持通过 Mpp 实现硬件解码，暂时没有硬件编码的支持。

Firefly Ubuntu 已经安装了 FFmpeg，用户可以直接使用。

  • 确认rkmpp解码器

    $ ffmpeg -decoders | grep "rkmpp"

    V..... h264_rkmpp h264 (rkmpp) (codec h264) V..... hevc_rkmpp hevc (rkmpp) (codec hevc) V..... vp8_rkmpp vp8 (rkmpp) (codec vp8) V..... vp9_rkmpp vp9 (rkmpp) (codec vp9)

  • 测试命令

    $ ffmpeg -y -c:v h264_rkmpp -i /usr/local/test.mp4 -an output.yuv

特别注意： FFmpeg h264_rkmpp 解码获得的是 AV_PIX_FMT_DRM_PRIME，也就是 DRM 帧数据，如果是基于 drm 显示，可以直接输出帧，否则，需要用 hwdownload 进行转换。

更多内容可以参考 FFmpeg 官网。

11.4. Mpp​

  • Ubunut 系统下， mpp 相关dev包都已经安装到系统中。

更多相关资料,可参考 linux-sdk/docs/Linux/Multimedia 下的相关文档。