首页 > 其他分享 >声网、新东方、伴鱼英语的音视频技术解读

声网、新东方、伴鱼英语的音视频技术解读

时间:2022-10-13 16:00:59浏览次数:41  
标签:难点 伴鱼 声网 测评 音视频 新东方


编辑:InfoQ 薛梁

互动直播、线上会议、在线医疗和在线教育是音视频技术应用的重要场景,而这些场景对高可用、高可靠、低延时有着苛刻的要求,很多团队在音视频产品开发过程中会遇到各种各样的问题。在 QCon 会议前期调研过程中,有用户说遇到过各种问题,例如:流畅性,如果在视频过程中频繁卡顿,基本上就很难有良好的互动;回声消除,经过环境反射被麦克风重新采集并传输,这也会影响互动效果;国内外互通,越来越多的产品选择出海,海内外互通也是技术上需要解决的点;海量并发,这对音视频产品的抗压能力而言是很大的挑战。

所以,在 5 月底的 QCon 北京全球软件开发大会上,我们邀请了声网 Agora、新东方、伴鱼英语的技术专家来会议上演讲,介绍下一代视频引擎架构、大规模实时音视频系统的难点与挑战、语音测评及本地化实践、前端音视频播放器的研究与实践话题。

声网 Agora 在大规模音视频技术解决方案领域有较为丰富的经验,不断的优化实时视频处理管线架构设计,李雅琪老师将会介绍声网 Agora 视频处理管线在实践中的落地情况,例如在多码率观众端、云端合图,和电商直播场景。

此外,董海冰老师将分享自研大规模实时音视频系统的难点与挑战话题,介绍自研 RTC 系统的架构设计和难点,包括客户端、服务端、运维、测试和质量监控的挑战和难点,这其中包含了董海冰老师多年以来在自研大规模 RTC 系统方面的实践经验。

伴鱼英语黄智超老师也会分享使用算法自动测评少儿口语水平案例,他们把测评服务部署在客户终端,极大地减低评测时延,提升评测服务的体验。帮助听众理解语音测评的算法思想和服务的搭建流程,本地化服务中模型压缩的方法,编译库如何和安卓和 iOS 各终端 APK 联系。

新东方云教室核心的交互基本由 H5 来完成,但是实时音视频除外。新东方李便茹老师届时会分享,他们是如何使用新的方法来避开传统的 H5 Video 标签播放限制的,以及前端音视频播放器的设计和架构过程中遇到了哪些问题和解决手段。




标签:难点,伴鱼,声网,测评,音视频,新东方
From: https://blog.51cto.com/u_12127193/5753628

相关文章

  • 2K 12|20倍HDMI\SDi\ip\Usb3.0全接口音视频同步输出会议摄像机
    一款支持1920*1080P(2K)会议PTZ摄像机,广播级图像,12倍和20倍智能变焦镜头可选,支持全接口音视频同步输出:SDI\HDMI\IP\USB3.0,最高支持1920×1080P/60Fps,250个精准预设位。在取多......
  • 深入浅出,聊聊实时音视频中的回声消除与降噪
    在实时音频互动场景中,回声消除、降噪、自动增益(即3A算法)是直接影响音质和体验的重要环节之一。如何降低计算量,提升处理效率,如何兼容更多的设备、环境等,让3A算法可以适应......
  • 音视频服务质量指标
    除了实时通信延迟指标外,音视频通信中还有业务服务质量指标,包括音频服务质量和视频服务质量。由于音频数据量比较小,受网络的影响不大,并且3A问题非常复杂,这里就不介绍了。接......
  • 音视频客户端需要解决的问题
    音视频不同步。音视频数据经网络传输后,由于网络抖动和延迟等问题,很可能造成音视频不同步。对此,可在音视频直播客户端增加音视频同步模块以保障音视频的同步。 回音。......
  • Python抖音视频去水印,并打包成exe可执行文件
    前言抖音里面的视频保存之后,会发现全都带有水印,所以如何解决视频去除水印就很有必要,所以教程来了,本次教程不仅会教大家如何去除视频里的水印,并且教大家将程序制作成exe可......
  • GB/T28181-2016 SDP定义和音视频传输模式解读
     SDP定义联网系统中SIP消息体中携带的SDP内容应符合IETFRFC2327的相关要求。应有如下字段:Sessiondescription:v=(protocolversion)o=(owner/creatorandsessioni......
  • im即时通讯_群聊+红包转账+朋友圈+在线聊天语音视频聊天
    群聊+红包转账+朋友圈+在线聊天语音视频聊天,安卓苹果双端APP,且支持H5网页端,带视频安装部署教程,小白也能搭建! 1,IM聊天uniapp版本带在线音视频红包等功能,2,后台自定义网......
  • 批量爬取抖音视频
    先创建dou_url.txt,其实不用创建也行,运行第一遍代码的时候程序会自动创建dou_url.txt里面可以填写多个视频url即可爬取,也可以填url加文字,因为用了正则表达式匹配。。。比......
  • FFmpeg入门详解--音视频原理及应用:梅会东:清华大学出版社
    大家好,我的第一本书正式出版了,可以在京东各大店铺抢购哦。《FFmpeg入门详解--音视频原理及应用:梅会东:清华大学出版社》         出书过程非常艰辛,来......
  • 音视频技术入门课-02 音频从采集到输出涉及哪些关键参数?
    我们平常听到的自然界的声音,比如说鸟鸣、水流,其实是一种模拟信号,声音是振动产生的一种声波,通过气态、液态、固态的物理介质传播并能被人或动物感知的波动现象。声音的频率......