为什么要学音视频？

来源：来自 Twitter-X2Rtc

一直都在说“科技改变生活”，现实告诉我们这是真的。

随着通信技术和5G技术的不断发展和普及，不仅拉近了人与人之间的距离，还拉近了人与物，物与物之间的距离，万物互联也变得触手可及。

基于此背景下，音视频技术也成为了主流，与此同时，便催生出了大量的音视频需求，但目前具备音视频开发技术的开发者，可谓是少之又少。而且，现在音视频工程师的薪资比纯Android应用层开发高出40%。

为什么要学习音视频

就业方向：目前百分之九十以上的互联网产品都需要用到音视频技术，尤其还有大量的传统企业在进行数字化转型，让音视频技术显得更为重要。如线上办公、线上教育、物联网金融、远程医疗、物联网等等众多行业都是以音视频技术为基础的。

薪资水平：在BOOS直聘公开统计中，音视频行业的工资10k-20k占12%，20k-30k占45%，30k占35%，35k以上占13%。主要分布在20k-35k之间，想要取得一个不错的薪资，如果只是简简单单开发四大组件是不可能拿到这么高薪资的。音视频开发薪资这么高主要就是因为音视频技术人才非常稀缺，很少有人会完整的音视频开发。

技术壁垒：音视频开发相对门槛是较高的。首先你需要有c/c++的语言基础，从学习基础上来看，就已经筛选掉了一大批。其次，大部分对于音视频相关技术的运用止于ffmpeg,了解止于RTMP/RTSP/HLS等等，等等。对于SRS，webrtc更是很难找到系统学习的渠道和教程。

开发前景：首先市场需求大，无论是娱乐、教育、直播、社交媒体还是企业应用，都需要高质量的音视频技术和应用。而且技术还在不断更新，VR、AR和360°视频等技术给音视频开发带来了更多的机会。

什么是音视频技术

音视频技术其实就是音频技术和视频技术的一个统称，在技术处理上，其实音频和视频是要分开处理的。而且要注意一点，音视频从开始收集数据到最后展示都是离不开硬件设备的，也就是说，在做音视频开发时，就得做好和硬件打交道的准备。

音视频开发是指涉及音频和视频处理、编解码、传输、存储等方面的软件开发领域。它包括了实时音视频通信、流媒体服务、多媒体应用程序等内容。

在音视频开发中，常见的任务包括音频采集与录制、音频编解码、音频处理与增强（如降噪、消除回声等）、视频采集与录制、视频编解码、图像处理与分析等。此外，还需要关注实时传输和流媒体协议（如RTP/RTCP, RTMP, HLS）的使用，以及存储和播放相关技术。

在这个领域中，开发者通常会使用各种语言和框架来实现不同功能，例如C/C++、Java、Python以及相关库和工具，如FFmpeg, GStreamer, WebRTC等。通过掌握相关技术和工具，可以开发出高质量的音视频应用程序或服务。

音视频开源项目盘点

01、 OpenH323项目

上榜理由：最著名的H.323开源协议栈，视频会议开发必备协议栈，强烈推荐

最著名的H.323开源协议栈，包含了全部的H.323协议功能，并有大量视频会议实现的参考例子，如终端、MCU服务器、gk等H.323协议的核心组成部件，Openh323是H.323协议首选协议栈，同时也是我们视频会议开发最值得作为参考的开源项目之一。

02、 ffmpeg项目

上榜理由：最全面的开源编码器，包括了H.264、MPEG4、G.72x等音视频编码，效率也非常高，强烈推荐

目前最全面的开源编码器，其中包括常用的音视频编码协议 h.264、MPEG4、H.263、G.721、G.726、G.729等，ffmpeg虽然是基于linux的开源项目，但可以通过交叉编译的方式在windows下运行，其项目加入了很多优化效率的代码，如采用汇编替代C，大大提高了编码的效率，推荐ffmpeg用于视频会议的实时编码。

03、webrtc项目

上榜理由：Google收购GIPS后开源的基于浏览器的实时通信开源项目，强烈推荐

Google收购GIPS后开源的基于浏览器的实时通信开源项目，GIPS是目前世界上最好的音频传输库，但其授权费非常高，webrtc是Google收购GIPS后，公开的一个通信项目，其核心voiceEngine就是由GIPS建立的，因此视频会议的音频部分可以参考webrtc来实现。

04.X2RTC

扫码上方图中二维码，即可抢先体验X2Rtc

上榜理由：X2Rtc是基于WebRTC技术堆栈，拓展GB/T28181协议以及其他通信协议，支持 RTSP、RTMP、WebRTC、H.323、SIP、HTTP-FLV、SRT等。

X2Rtc不仅拥有接入简单、多样部署、全链路质量透明、灵活产品组合、可定制、RTC+X等六大功能；还可以灵活应用到视频会议、互动直播、应急安防、在线教育、远程医疗、物联网等六大场景。

05、OpenMeetings项目

上榜理由：基于java的浏览器的视频会议开源项目，java开发视频会议的首选

OpenMeetings主要是基于OpenLaszlo的流媒体格式和Red5服务器的开源视频会议项目，其包含的功能包括音视频、电子白板等，其项目是用java进行开发。项目的缺点是bug较多，效率不高，但可以作为flash视频会议的一个参考。

参考来源

01.《音视频领域的知识怎么开始学习？》-知乎（玩转Linux内核）

02.《音视频流媒体开发学习：视频会议及流媒体十大开源项目》-哔哩哔哩（linux技术栈）