|
|
音视频领域的知识怎么开始学习？
关注者
43
被浏览
8,999
20 个回答
音视频的知识纷繁复杂，自学非常困难，既需要非常扎实的基础知识，又需要有很多的工程经验；本文就从音视频开发，开源框架，视频，业界大神，书籍推荐，就业方向分析，为广大开发者学习音视频技术提供便利。
视频教程推荐：
【鹅厂T8认证】2022年LinuxC/C++后台开发最强学习路线图
【备战秋招】互联网大厂秋招，嵌入式从入门到精通（小白零基础速学）
首先我们先需要了解音视频包含哪些内容，解决哪些问题？
说白了，音视频开发，就是要掌握图像、音频、视频的基础知识，并且学会如何对它们进行采集、渲染、处理、传输等一系列的开发和应用。
l 采集：它解决的是，数据从哪里来的问题
l 渲染：它解决的是，数据怎么展现的问题
l 处理：它解决的是，数据怎么加工的问题
l 传输：它解决的是，数据怎么共享的问题
一、音视频开发主要技术点
二、开源框架
实时音视频开源项目：
实时音视频应用共包括几个环节：采集、编码、前后处理、传输、解码、缓冲、渲染等很多环节。每一个细分环节，还有更细分的技术模块。
比如，前后处理环节有美颜、滤镜、回声消除、噪声抑制等，采集有麦克风阵列等，编解码有VP8、VP9、H.264、H.265等。
采集->前处理编码->传输->解码后处理->渲染
实时音视频开源项目思维导图：
三、音视频开发入门必学内容：ffmpeg
FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。
1. windows ffmpeg命令行环境搭建
2. FFMPEG如何查询命令帮助文档
3. ffmpeg音视频处理流程
4. ffmpeg命令分类查询
5. ffplay播放控制
6. ffplay命令选项
7. ffplay命令播放媒体
8. ffplay简单过滤器
9. ffmpeg命令参数说明
10. ffmpeg命令提取音视频数据
11. ffmpeg命令提取像素格式和PCM数据
12. ffmpeg命令转封装
13. ffmpeg命令裁剪和合并视频
14. fmpeg命令图片与视频互转
15. ffmpeg命令视频录制
16. ffmpeg命令直播
17. ffmpeg过滤器-裁剪
18. ffmpeg过滤器-文字水印
19. ffmpeg过滤器-图片水印
20. ffmpeg过滤器-画中画
21. ffmpeg过滤器-多宫格
四、音视频业界大神
刘岐
FFmpeg官方代码维护者之一，十余年一线技术研发与技术管理经验，人称“大师兄”。现任职于OnVideo公司，担任CTO，公司联合创立人，负责在线音视频云编辑与创作平台的开发和建设。曾任职蓝汛、高升、金山云等公司，担任视频部门架构师及技术专家。
赵文杰
擅长音视频编解码和渲染技术，客户端技术专家，开源流媒体服务器SRS开发者之一，现任好未来网校事业部高级架构师一职，负责端开发。
廖庆富
主要从事音视频驱动，多媒体中间件，流媒体服务器的高级开发，主导开发过即时通讯+音视频通话的大型项目。曾就职于联发科，现任职于零声教育，资深音视频讲师。主讲WebRTC,ffmpeg,流媒体。
雷霄骅
两届CSDN博客之星、微软MVP。主要从事与广播电视有关的视音频技术的研究。包括视音频质量评价，视音频编解码，流媒体，媒资检索等。
栗伟
资深音视频技术专家，曾任职于中科院计算所、CC视频，任职期间利用WebRTC技术开发了直播、在线课堂、视频会议等商业产品，并发用户数达到500万。开源社区的积极参与者，在GitHub上开源了视频会议项目WiLearning，免费供中小企业使用。
杨成立
阿里云RTC服务器团队负责人。负责中国最大CDN蓝汛科技流媒体分发系统开发项目。主导研发转码、P2P、流媒体服务器, 开源项目SRS主要开发者之一。
五、音视频开发推荐书籍
入门系列
先从FFmpeg入手，FFmpeg的学习建议大家先学FFmpeg命令行，然后再学习FFmpeg API的使用。先掌握FFmpeg命令行能让我们快速理解FFmpeg到底能够做什么，功能有多强大。
这里只推荐2本，一本是FFmpeg命令行相关的，另一本是FFmpeg API的使用（基于Android和IOS），其他的同类书籍内容是差不多的。
进阶系列
市面上进阶的书籍不多，主要是H264/265编码和WebRTC相关的：
（1）H264/H265编码，但大部分内容和H264/H265白皮书是重叠的，如果愿意啃白皮书那就没有必要买这类书籍。
《新一代高效视频编码H.265/HEVC：原理、标准与实现》现在出版社没有重新印刷了，纸质版的价格都比较高。
（2）WebRTC相关的书籍
《WebRTC权威指南(原书第3版)》书比较薄，适合了解WebRTC的基本通话原理，不适合作为WebRTC的进阶教程。
《WebRTC技术详解：从0到1构建多人视频会议系统》可以通过提供的范例实现音视频通话，适合新手快速上手WebRTC的开发。
有没有特别深入的WebRTC书籍呢，答案是：目前没有哪本书是深入讲解WebRTC，现有的WebRTC书籍都是入门级别，没有个七八百页的篇幅没法对WebRTC进行详细讲解。
五、音视频岗就业方向
主要是直播，短视频，教育直播，AR，VR，云游戏，视频会议等一些场景，方向上没多少变化，只是应用场景上多了一些包装，毕竟随5G带宽硬件加速，以及人们对视频交互的需求日盛，音视频的使用场景应该会越来越多，从最近的市场需求来说，也侧面证明了需求旺盛的这一点，1-3年的普遍薪资即可达到20K-30K！
对于是否要转音视频开发，主要还是看个人的兴趣点与坚持力，音视频属于跨平台技术，常年技术知识点变换不太频繁，广度和深度兼顾，可做工程优化，可做算法深入，嵌入式多媒体芯片等，关键看个人是否有决心在多媒体领域深耕，总体前景还是有的……
如决心进入，需风雨兼程! 加油！
小帅
音视频开发是一门涉及到很多内容的领域， 很多开发者都知道音视频开发这个概念，音视频开发不仅需要掌握 图像、音频、视频的基础知识， 并且还需要掌握如何对它们进行 采集、渲染、处理、传输等一系列的开发和应用
但既然我们前面已经提到了技术痛点这个关键词，那学习门槛还是有的。就比如：
- 抖音和快手的短视频需要应用图像处理和视频编码技术，如何在保持高画质的情况下，尽量减少视频文件的大小，是很难也很重要的；
- 连麦直播则需要懂 RTC 和直播技术，如何能够保证在各种网络状况下实现超低延时、降低卡顿率是一个非常难的问题；
- 视频会议则需要你十分熟悉 RTC 和转码合流服务等技术，几十上百人的大型视频会议，如何保证流畅度、卡顿率、画质等指标也是十分具有挑战性的。
目前市场上对于音视频人才的需求，市场招聘音视频岗位薪资亦是水涨船高，但音视频开发这块目前的确没有比较系统的教程或者书籍，网上的博客文章也都是比较零散的。 只能通过一点点的学习和积累把这块的知识串联积累起来。
这里给大家推荐一套学习路线，并附有相关《音视频开发核心知识点笔记》及《音视频源码解析》和配套视频，相信可以给大家提供一些帮助，都已经进行了整理好了，需要完整版的朋友，可以 点击这里查看获取方式 或直接点击下方小卡片 传送门直达！！！
音视频初级入门
音视频初级入门主要是接触Android多媒体展示相关的API，通过单独的列举和使用这些API，对Android音视频处理有一个基本的轮廓，虽然知识点相对来说是比较散的，但是点成线、线成面，基本的基础掌握了，通过学习Android音视频核心的API将音视频的流程串联起来，这样对于音视频的了解和控制就不仅仅局限于最外层的API了，而是能够通过相对底层的方式来加深对Android 音视频开发的认知。
音视频中级进阶：OpenSL ES 学习
学习 Android 平台 OpenSL ES API，了解 OpenSL 开发的基本流程，使用OpenSL播放PCM数据，并了解相关API的简单使用
音视频高级探究
音视频编解码技术
流媒体协议
多媒体文件格式
FFmpeg 学习
《音视频开发核心知识点笔记》已经进行了整理好了，需要完整版的朋友，可以 点击这里查看获取方式 或直接点击下方小卡片 传送门直达！！！
