元宇宙时代，音视频如何乘风破浪？｜极客时间

会员服务 ·

元宇宙时代，音视频如何乘风破浪？｜极客时间

2021 年 12 月 5 日 InfoQ

最近有读者留言，说“想转行音视频开发，怎么做”，正巧，前几天我还在某乎上，看到有人在问音视频的学习资料，还是个大一的学生。

想说一句：真有眼光。

如今这个时代，想赚钱，一个共识是，得先选对赛道。有些行业和领域，终其一生的天花板也不过如此。但有的朝阳行业，你一进去就可以获得大量的机会，就是“ROI（投入产出比）”很高。

那就聊聊为啥从事音视频技术，未来会很赚钱。

要说音视频技术，在这两年迎来爆发期。首先 5G 的发展提供了硬件条件，又受疫情的影响，生活场景线上化，大量的线上办公、线上教育、线上娱乐等需求，让几亿人涌入各类线上互动平台。比如：

抖音和快手的短视频，需要应用图像处理和视频编码技术，如何在保持高画质的情况下，尽量减少视频文件的大小；
连麦直播需要 RTC 和直播技术，如何能够保证在各种网络状况下实现超低延时、降低卡顿率；
视频会议需要 RTC 和转码合流服务等技术，几十上百人的大型视频会议，如何保证流畅度、卡顿率、画质等指标等；
随着线上体验的增加，人们对互动中的音频体验要求也在提升。除了听得到、听得清，还得好听、音质还原度高等。例如，Facebook 改名 Meta 进军元宇宙，TWS 耳机支持了空间音频渲染和主动降噪等等。

可以说，音视频技术就如同空气和水，无处不在，未来充满无限可能。而且这些真实场景都强调实时互动，延迟必须控制在毫秒级别内，如果在这个过程中，出现延时高、卡顿、画面模糊、杂音大等情况，你可以想象会出现什么样的体验吗？别说李佳琪双 11 直播带货 100 亿了，正常打一把沟通流畅的王者荣耀都不一定。

其实，早在疫情初期，很多 SaaS 平台甚至大厂都出现过卡顿问题，主要对突如其来的流量没有做好充分准备，而如今大家都看到了线上的市场，自然对音视频技术人才的需求就多了。

所以不夸张地说，音视频开发是一片蓝海，人少，钱多。而且未来，会更加炙手可热。

这张图供参考。但也能看出来，整体薪资待遇比普通开发者要优厚很多。不仅如此，从网上随手一搜，就能看到某某安卓转音视频，真香了、突破就业危机等等。

如今除了大厂，很多小公司也在寻找音视频的人才，稍微好点的音视频人才可能同时 3～4 家公司抢着要。就是因为从业人才基数低，高端人才缺乏，最重要的是，音视频技术有开发门槛，不好培养，也很难自学。但这也意味着，你跟别人相比有技术上的核心竞争优势，有分水岭。

快速入门音视频技术的方法，有吗？

音视频技术学起来并不容易，要懂的东西太多：音视频的采集、编码、传输、解码、渲染... 等等，网上也少见体系化的资料。

但就像左耳朵耗子所说，“要去知识的源头学习”。对学习者来说，找到优质的信息源可以让你事半功倍，不是二手加工的，也不会有信息损失或有误。

而在音视频技术领域，不得不提的就是「声网（Agora）」，作为实时音视频 PaaS 服务的开创者和引领者，实时音视频分钟数月均用量超 500 亿分钟，疫情期间我看过不少他们的报道，成立 7 年以来无全网事故，在音视频领域，确实是领头的。

最近，看到他们跟极客时间联合出了 2 门关于音频、视频技术相关的课，第一时间就订阅来看，不得不说，想学音视频技术，还得看声网的专家，在这个领域，没有比他们更有话语权的了。

靠谱的“信息源”

第一个专栏是《搞定音频技术》，作者是声网Agora音频算法专家「冯建元」，主要研究实时音频链路的 AI 化改造和美声音效算法的设计。攻读了美国伊利诺伊理工学院的博士学位，在 IEEE、AIChE、Journal of Process Control 等一线期刊上发表了 20 多篇论文，总被引用量高达 570 多次。也是国内第一个基于深度学习的语音编 / 解码器 Silver 的发明人。这履历，就说牛不牛。

专栏把音频技术的学习，分为音频基础知识、音频降噪、回声消除、音频网络传输、空间音频，以及音频特效生成与算法共 6 个模块，并抽丝剥茧带你看看技术演化的过程、不同技术的优缺点，还整理了大量的相关文献链接和课后思考题，帮读者充分理解。

这一套下来，基本就能掌握音频处理的全套链路和音频发展的脉络、方向了。