有了上一篇文章基础,这里就只关注 FFmpeg 如何解析的具体实践了。
在开始工程之前,第一步要做的就是编译 FFmpeg 源码,生成 Android 平台上使用的 so 库。
在生成完了之后,导入 Android 工程项目中,并且配置 CMake 文件,添加对应的库,就可以开始开发了。
如果觉得麻烦,也可以直接从网上找一个工程使用现成的东西,也可以参考的我的学习项目:https://github.com/glumes/FFMPEGLearn
FFmpeg 3.0 与 2.0 的不同之处
如果是刚开始学习,完全可以参照雷神的博客来写例子,而且还能运行成功。不过,既然 FFmpeg 都出了 3.0 版本了,还是要跟进学习一下。
FFmpeg 2.0 解码流程大致如下:
而 FFmpeg 3.0 就开始有点变化了。
可以看到,在具体解析操作时发生了变化,不再是之前的avcodec_decode_video2
函数,而是拆分成了两个函数,avcodec_send_packet
和avcodec_receive_frame
。
avcodec_send_packet
负责发送编码压缩后的数据,也就是 Packet 数据,而avcodec_receive_frame
负责接收解码后的原始数据,也就是 Frame 数据,这么一来一回的配合,每次从文件中读取一部分内容,直到将整个文件解码完成。
解码流程代码
FFmpge 的解码流程大都是相同的,只是在细节地方会有差异,主体流程还是没变,看了好多解码的代码,大多也是这样的,只是在解码成具体的某些格式时,对原始数据 Frame 的操作会有不同。
// 声明一堆待会要用到的变量
AVCodecContext *avCodecContext = nullptr;
AVCodec *avCodec = nullptr;
AVCodecParserContext *parserContext = nullptr;
AVPacket *packet;
AVFrame *frame;
// 为上面声明的变量在赋值,并且检查赋值是否成功
avcodec_register_all()
// 为解码器赋值,并制定解码器类型
avCodec = avcodec_find_decoder(AV_CODEC_ID_HEVC);
// 为 AVCodecParserContext 和 AVCodecContext 赋值
parserContext = av_parser_init(avCodec->id);
avCodecContext = avcodec_alloc_context3(avCodec);
// 打开解码器
avcodec_open2(avCodecContext, avCodec, nullptr);
// 为 Packet 和 Frame 赋值
frame = av_frame_alloc();
packet = av_packet_alloc();
while // 开始一点点的解码文件内容,直到文件末尾
// 解码从 while 中一次读取到的内容
av_parser_parse2
// 发送读取到的 packet
avcodec_send_packet
// 接收解析完的 frame
avcodec_receive_frame
// 对原生数据进行相关操作,解码成不同数据格式,操作不同。
// todo
//最后,释放上面声明的变量
av_frame_free
av_packet_free
avcodec_free_context
av_parser_close
MPEG->PCM 的解码
在了解视频文件的相关基础以及 FFmpeg 解码的大致流程后,就可以开始进行 MPEG->PCM的解码工作了。
不过,在这里还是少了两个重要的概念:
- FFmpeg 各种类以及变量的含义。
- 各种音视频文件的格式协议。
前半部分还好,对着雷神的博客一点点的看,还是能看懂的。至于各种音视频文件的协议,那就要靠慢慢积累了。
这里就不贴上全部的代码了,可以参考如下两个地方:
- http://ffmpeg.org/doxygen/trunk/decode_video_8c-example.html
- https://github.com/glumes/FFMPEGLearn/blob/master/FFmpegLib/src/main/cpp/ffmpeg_examples/decode_video.cpp
参考
知识星球
公众号音视频开发进阶对应的知识星球,一个编程开发领域的专业圈子,贩卖知识和技巧! ※ 入群须知:了解该星球能提供的价值和帮助,在提问时务必阐述好背景,附带相关的信息。 iOS 用户可以加我微信 ezglumes 邀请你进星球,有疑问也可以加我微信咨询。 ※ 星球内容: 基础教程: 在知识星球连载的干货教程,可以在专栏中找到,随着时间的推移,教程也会越来越多: - 音视频基础概念 - WebRTC 入门教程及源码实践 - 播放器教程及源码实践 - OpenGL 和特效开发教程 - Vulkan 入门教程 部分内容可以在博客 https://glumes.com 中检索到,后面会在星球里持续更新. 干货分享: 涵盖了移动开发和音视频工程领域的绝大部分,从项目实战角度出发,提升能力,包括但不限于以下领域: - Android/iOS 移动开发 - Camera 开发 - 短视频编辑 SDK 项目实践 - 在线直播和推流 - WebRTC 开发 - 播放器基础和提高 - OpenGL 图像渲染及特效开发 - C++ 基础和提高 - FFmpeg 使用和分析 - 干货资源和书籍分享 不止于技术方面的,各种 IT 新闻、茶余饭后、生活趣事也欢迎大家分享!!! 技术答疑解惑: 针对上述基础教程和干货分享的答疑,另外还有音视频和 IT 开发中的各种交流讨论。 - 基础知识点答疑 - 工业项目实践答疑 - 问题排查思路分析 一个 BUG 排查很久,不如来星球里提个问题,效率提升百倍。 求职和面试辅导: 一站式职场服务,每份工作都值得用心对待!!! - 面试题和面试经验分享 - 简历修改和模拟面试 - 大厂内推和信息同步 - 职场经验分享 - 职业规划和发展分析 ※ 星主和合伙人介绍 星主是公众号音视频开发进阶的作者,也是网站 https://glumes.com 的作者,曾参与过抖音、剪映等头部音视频 APP 底层 SDK 的开发。 合伙人也是在头条、快手从事音视频架构师的职位,具有多年的音视频开发经验,能力圈覆盖了音视频的绝大多数领域,资深音视频从业人员为你保驾护航。
微信公众号
扫描下面的二维码关注我的微信公众号《音视频开发进阶》,推送更多精彩内容!
添加我的微信 ezglumes 拉你入音视频与图形图像技术群一起交流学习~

原创文章,转载请注明来源: FFmpeg 3.0 版本视频解码浅析