点击一键订阅《云荐大咖》专栏,获取官方推荐精品内容,学技术不迷路!
近年来,实时音视频快速发展,WebRTC做为实时音视频的标准也快速发展,从直播到通讯,其应用场景也在不断丰富。如果您关注实时音视频方向的技术产品应用与创新,本文将会为您分享音视频方向的技术产品动态,助您第一时间获取业界信息。
腾讯会议发布3.0版本
11月4日,2021腾讯数字生态大会上发布了腾讯会议3.0版本,下面就分享几个小点。
•腾讯会议的定位是降低人们达成共识的成本,所以产品设计的时候都是围绕这个点
这个点深有感触,人们往往会说小团队/小公司比较敏捷,是小团队的人比大公司的人更牛嘛,明显不是。在大的团队中达成共识的成本是很高的,你要准备很多内容让协作的团队认可你的观点,但有时候观点一旦形成,外力是很难扭转的。
•腾讯会议发布了网络研讨会模式
腾讯会议终于像zoom 和 hopin看齐,补上了网络研讨会模式。目前可以以主持人,嘉宾,观众身份入会,单会议支持5W人参加。而且打通了活动报名,门票售卖,自定义会场主题,会中互动等等环节,让举办大型线上研讨会的成本大大降低。去年看到Hopin 快速崛起的时候就在想腾讯会议会不会补齐这部分,今年果然支持了。之前跟国外一位研究Hopin的投资人聊天的时候就问他怎么看Hopin这么快的崛起, 他的答案是:抛开疫情的影响之外,Hopin把线上活动的每个流程打磨的都很顺畅,真正的做到了线上开办一个活动的闭环。不确定腾讯会议有没有完成整个闭环,具体的体验又是怎样的?
对国内做活动直播的厂商SaaS来说,不得不考虑腾讯会议的竞争, 这个市场还很大如何做出差异化的竞争。
•腾讯会议开放平台
腾讯会议升级开放平台, 开放API + SDK + 第三方应用市场, 想要成为办公协同SaaS的入口, 初期开放了招聘类的MOKA、小画桌、面呗等SaaS的产品接入。我查了一下Zoom的数据, Zoom在疫情初期接入的第三方应有有200个, 一年之后这个数据变为了1000个, 一年的时间增长500%。
记得有人说过,一个好的开放平台要能长出超过这个平台价值的产品,我们期待腾讯会议的表现,一个朋友开玩笑说:腾讯会议有zoom的那味了。
•基于深度学习的Penguins 语音引擎
这个算是整个发布会的一个小惊喜, 会议也发布了基于深度学习的语音编解码方案, 可以在6kbps的超低码率下进行高质量的语音通话。今年以来基于深度学习的语音编码方案出来好几个,今年二月微软推出Satin方案, Google 推出Lyra方案,并且开源了出来, 几个月之后Google 又推出SoundStream方案,号称比Lyra 方案更优秀。期待这些方案能更快速的落地。
相关阅读: https://mp.weixin.qq.com/s/mdkFrKKyW5NUnYmScTNj7A
微软将推出元宇宙产品
11月2日微软在Ignite大会上也推出元宇宙的产品预告,微软的元宇宙产品还是基于Teams 和 之前已经出的Mesh 云服务。说到元宇宙微软一直在投入,比如HoloLens AR眼镜,我之前体验过一次Helolens2,效果很惊艳。但因为Helolens较高的售价以及对电脑配置的要求很高所以目前的客户局限在B端。微软基于Teams的元宇宙产品预计2022年上半年推出,用户将能够在虚拟世界中共享Office文件和功能,比如PowerPoint面板, 用户可以用虚拟人物或动画卡通形象出现在视频会议中。
今天,你元宇宙了嘛?
相关阅读: https://36kr.com/p/1468541718547209
Firefox启动最大一次WebRTC 升级
Firefox 曾经是先进浏览器的代名词,很多新的特性都会领先的支持,后因为Chrome的份额逐渐增大,Firefox 也逐渐走向落寞,很多特性支持的都会比Chrome慢。在WebRTC方向,Firefox的Bug也越来越多。不过最近迎来了一个好消息,Firefox 即将迎来最大的一次WebRTC升级,升级到M96, 整个升级过程持续了一年多。
确实有点唏嘘,从曾经的领先者到被Chrome超越,到被落下的越来越远。希望Firefox也有一个光明的未来。
相关阅读: https://bugzilla.mozilla.org/show_bug.cgi?id=1654112#c361
在M96中WebRTC已经默认打开Opus+Red 冗余编码
之前在WebRTC中如果想提升音频的弱网抗性,能做的就是增加NACK(重传)和开启Opus的FEC。如今我们有了更多的方案,在M96的WebRTC支持了通过red来发送音频冗余包来提升音频弱网抗性。RTP 的RED规范之前很早就存在,二十多年前就被提出,基本思路就是通过发送多余的冗余包,使用RED将一个或者两个冗余音频帧放入每个分组中,有时候也被称为"带外FEC"。当然,这些都是有代价的, 可以能将你的音频码率从30kbps 增加到60kbps 或者 90kbps,不过跟视频相比这些码率的增加并不算大,非常适合音频优先的场景。
在M96中可以通过setCodecPreferences 方法调整opus+red的顺序来开启, 默认Chrome中只会编码一个red 冗余包, 这样可以在不过多增加带宽的情况下提升弱网抗性。另外可以通过 WebRTC Encoded Insertable stream 来调整冗余度。github上已经有如何使用的demo https://github.com/fippo/opus-fec, 另外开源的Janus媒体服务器已经支持。
相关阅读:
https://groups.google.com/g/discuss-webrtc/c/5761etCrSuA/m/hEJto5xwBgAJ
https://webrtchacks.com/red-improving-audio-quality-with-redundancy/
WebEX 加入cPaaS 市场
WebEX是视频会议方向的黄埔军校, Zoom的创始人Eric Yuan, 声网的创始人赵斌, 拍乐云的创始人赵加雨都是出自WebEX。WebEX 之前聚焦于企业内部市场,作为在线会议的鼻祖,不知道是否关注或者探索过cPaaS市场,在声网上市一年之后才缓慢的加入cPaaS市场,这可能就是所谓的创新者的窘境吧。
WebEX这个阶段进入cPaaS市场也说明原来的企业内部会议市场也面临很大的竞争, Zoom的业务突飞猛进,微软的Teams来势汹汹,国内的腾讯会议也逐渐建立起一个平台, 还有各种各样的创新的会议软件在参与竞争。WebEX还列举了Gartner的一份报告,报告指出到2025年cPaaS市场都会保持30%以上的年增速, 到2025年cPaaS市场市场总值会达到217亿美元。
相关阅读:
https://blog.webex.com/contact-center/every-interaction-counts-with-enterprise-cpaas/
腾讯云推出5G实时远程超控方案 — “腾讯云无界”
腾讯云We5G正式推出5G远程实时产品及解决方案,该方案基于5G技术和腾讯实时音视频(TRTC),可实现时延100ms以内的车辆一对多几种远程实时控制。在两个大的场景下非常有用,一个是辅助驾驶,最新的自动驾驶分级标准中引入远程协助和远程驾驶概念,以及远程助手和远程驾驶。在全自动驾驶成熟之前,辅助驾驶会一直有市场,而远程驾驶则是辅助驾驶的一个很重要的实现方式。另一个是高危/复杂/恶劣环境作业,通过远程操控,可以使一线作业人员远离危险,为一线人员提供安全舒适的作业环境。像矿山场景下的无人矿卡,无人挖掘机,无人推土机,港口场景下的无人吊车,这些都需要远程控制/操作的能力。腾讯云已经三一重工达成战略合作,甚至在生态大会现场就可以通过远程操控方案驾驶一辆1500km之外的卡车。
相关阅读: https://mp.weixin.qq.com/s/LYgap0B_R0jyrvVXCPcQ5w
线上虚拟活动/办公平台Gather拿到5000万美金B轮融资
11月4日Gather宣布拿到5000W美元的B轮融资,去年知道Gather的时候认为他的定位的视频会议场景,只是一个场景化的会议产品。目前看产品的定位已经超过了视频会议, Gather在试图把线下办公,展会,活动搬到线上。
目前Gahter上列举的场景已经非常多,可以在上面加入各种房间一起游戏、学习、讨论。目前整个产品的数据也很不错,有 10000 多个团队将 Gather 作为自己虚拟办公室的构建平台,举办了 2 万多场专业的会议活动,用户则超过了 1000 万。
相关阅读: https://mp.weixin.qq.com/s/bzGrRO-Q2DCuyUjIQ7dHkg
References
[1] https://groups.google.com/g/discuss-webrtc/c/5761etCrSuA/m/hEJto5xwBgAJ: https://groups.google.com/g/discuss-webrtc/c/5761etCrSuA/m/hEJto5xwBgAJ
[2] https://webrtchacks.com/red-improving-audio-quality-with-redundancy/: https://webrtchacks.com/red-improving-audio-quality-with-redundancy/
[3] https://bugzilla.mozilla.org/show_bug.cgi?id=1654112#c361: https://bugzilla.mozilla.org/show_bug.cgi?id=1654112#c361
[4] https://blog.webex.com/contact-center/every-interaction-counts-with-enterprise-cpaas/: https://blog.webex.com/contact-center/every-interaction-counts-with-enterprise-cpaas/
[5] https://36kr.com/p/1468541718547209: https://36kr.com/p/1468541718547209
《云荐大咖》是腾讯云加社区精品内容专栏。云荐官特邀行业佼者,聚焦于前沿技术的落地及理论实践之上,持续为您解读云时代热点技术、探索行业发展新机。点击一键订阅,我们将为你定期推送精品内容。