Android 音视频难学？音视频（流媒体）开发学习也有套路

我们都知道音视频流媒体开发这块的知识比较纷繁复杂，对新手很不友好，自学难度大，想要们既需要比较扎实的C/C++基础，又需要有很多的工程/项目经验，今天就从音视频开发/开源框架/就业方向分析，为广大开发者学习音视频技术提供系统学习的方向。

先给大家推荐一个音视频学习视频：（H264/H265/webrtc等）

2022最新音视频开发视频

其实说白了，音视频开发，就是要掌握图像、音频、视频的基础知识，并且学会如何对它们进行采集、渲染、处理、传输等一系列的开发和应用，也就是下面这几项： l 采集：它解决的是，数据从哪里来的问题 l 渲染：它解决的是，数据怎么展现的问题 l 处理：它解决的是，数据怎么加工的问题 l 传输：它解决的是，数据怎么共享的问题

关于直播的风口已经吹了很多年，前几年斗鱼主播动不动就是千万级别签字费，现如今很多人开始唱衰，但就以音视频开发行业现状来看，至少在未来的十年时间内，至少还是会保持着一个蓬勃的发展势头的。 无论是现在的直播行业，还是过去两年因疫情的原因导致国内对在线教育和在线会议的需求，都会让音视频开发岗这个位置的需求将会存在缺口。

可以说是刚需岗位，所需要的人才缺口很大，坑多萝卜少。音视频开发岗位可以用“有钱途”来形容，在目前卷的一塌糊涂的IT市场里绝对算的上一股清流，可能会有人对我这种论调并不相信。

开篇就已经提到过，音视频开发的起始点就能将很多人拒之门外，这就导致公司在招聘需求上面是供小于求。 所以如果你是一名合格的音视频开发人员，少则年薪 30 w起，技术强的多则可以达 100w以上。这个绝非是空穴来风。（当然，这里说的是互联网龙头城市北上广深杭）

都说入门难，不信邪的可以看看下面这个音视频开发的学习路线：

那么如何学习音视频开发？

####基础知识少不了：

• 音视频的基础知识得要有所了解

• C/C++的基本知识必须会，但不必在这耗费过多精力，与音视频学习同步进行即可。

• JNI/NDK的基本知识：崩溃定位，Cmake语法等。

• OpenGL这个主要是在视频渲染或对视频进行逐帧加工处理会用到，属于高阶音视频开发技巧了。

• 还有像shell脚本等知识我先暂且不表，再说下去担心把大家劝退……

掌握扎实的基础知识之后，音视频学习路径可以这样规划：

• 初级 Java层面的一些API调用：使用AudioRecord进行录音得到PCM，使用AudioTrack播放PCM音频、使用Camera2采集摄像头数据、使用 MediaExtractor 和 MediaMuxer API 解析和封装 mp4 文件、使用MediaCodec进行硬件编解码等。

• 中级更多涉及到一些音视频开源库的编译和使用，需要NDK的相关知识：FFmpeg交叉编译，FFmpeg进行软件编解码、FFmpeg集成xh264，FFmpeg集成Rtmp推流等。

• 高级进阶：深入研究音视频相关的网络协议，如 rtmp，hls，以及封包格式，如：flv，mp4。深入学习一些音视频领域的开源项目，如 webrtc，ffmpeg，ijkplayer，librtmp 等等。尝试造一个ijkplayer的轮子、尝试使用OpenGL模仿各种抖音效果等等。

想要学习音视频的应届实习生、或者因本行业前景不佳想要转行、跳槽升薪的可以仔细看看这份《音视频开发进阶文档》，熟练掌握这些技术将大大提高你的音视频技术水平，帮助你拿下大厂高薪offer。

此份音视频开发文档是腾讯大佬总结的相关学习知识点，在这里分享给大家，（因文章篇幅限制，下面就放一些简略图，需要 音视频开发进阶文档 可以后台留言 【音视频】 领取。）

以下是这份开发文档的部分章节： 音视频初级入门

• Android 音视频开发(一)：通过三种方式绘制图片
• Android 音视频开发(二)：使用 AudioRecord 采集音频PCM并保存到文件
• Android 音视频开发(三)：使用 AudioTrack 播放PCM音频
• Android 音视频开发(四)：使用 Camera API 采集视频数据
• Android 音视频开发(五)：使用 MediaExtractor 和 MediaMuxer API 解析和封装 mp4 文件
• Android 音视频开发(六)：MediaCodec API 详解
• Android 音视频开发(七)：音视频录制流程总结
• ……

音视频中级进阶：OpenSL ES 学习

• Android OpenGL ES 开发（一）: OpenGL ES 介绍
• Android OpenGL ES 开发（二）: OpenGL ES 环境搭建
• Android OpenGL ES 开发（三）: OpenGL ES 定义形状
• Android OpenGL ES 开发（四）: OpenGL ES 绘制形状
• Android OpenGL ES 开发（五）: OpenGL ES 使用投影和相机视图
• Android OpenGL ES 开发（六）: OpenGL ES 添加运动效果
• Android OpenGL ES 开发（七）: OpenGL ES 响应触摸事件
• Android OpenGL ES 开发（八）: OpenGL ES 着色器语言GLSL
• Android OpenGL ES 开发（九）: OpenGL ES 纹理贴图
• Android OpenGL ES 开发（十）: 通过GLES20与着色器交互
• ……

Android音视频开发高级探究篇

• 音视频编解码技术： 音频编码技术
• 流媒体协议
• 多媒体文件格式
• FFmpeg 学习

互联网发展了这么多年，现如今的日常中，视频类应用占据了我们越来越多的时间，不管是抖音、快手等短视频，还是斗鱼、虎牙这类的直播平台，亦或者如企鹅课堂这种给自己充电的学习平台，都已经深入与我们的生活绑定，如果你想要了解音视频开发的知识，也缺乏系统学习的学习资料， 此份 音视频开发进阶文档 可以后台留言 【音视频】 领取。）