Zoom支持自动生成字幕;SharePlay上线;Safari 更新导致大量bug |WebRTC风向
Posted QcloudCommunity
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Zoom支持自动生成字幕;SharePlay上线;Safari 更新导致大量bug |WebRTC风向相关的知识,希望对你有一定的参考价值。
Zoom支持自动生成字幕
Zoom正面临着很激励的竞争,前一段时间开始做RTC的PaaS服务, 以147亿美元收购five9,但最后以失败而告终。Zoom也在不断迭代提升其产品的粘性,最近自动生成字幕能力现在可用于所有免费的Zoom会议账号,目前只支持英文,后续会支持其他的语言。
以后我们在和外国人开会就再也不怕蹩脚的英文了。
自动生成的字幕可以在 Zoom 视频会议或网络研讨会上自动提供发言人字幕。若要启用该功能,需要访问 Zoom 网络门户。与会者仍可以私下要求会议主持人在会议期间使用会议工具栏启用现场转录。并且Zoom 还支持手动字幕以及跟第三方字幕服务的整合。
所以,腾讯会议什么时候支持上这个功能呢?
相关链接: https://www.cnbeta.com/articles/tech/1194821.htm
SharePlay上线
10月26日,Apple 推送了ios 15.1 正式版。本次更新修复了iOS 15.0 中无法通过Apple Watch解锁iPhone的 bug,同时还正式上线了 FaceTime 同播共享(SharePlay),并为 iPhone 13 Pro 系列机型带来了 Apple ProRes 视频拍摄功能。
同播共享(SharePlay)可以让用户在进行FaceTime通话时,和对方同步观看视频,听音乐,共享屏幕。
苹果利用自己生态的优势来提升自己产品的粘性,目前已经看到一些小游戏在尝试使用SharePlay,相信后面基于SharePlay 越来越多的创新玩法会涌现。
android平台目前还没有类似的玩法和生态系统,不知后续是否会进行更新。但不妨碍第三方公司会推出类似玩法和跨平台的方案的体验,但SharePlay利用了苹果特有的权限,第三方的实现可能很难达到类似的跨平台的体验。
目前可以看到体验共享方向的产品越来越多,比如 K歌体验共享:线下K歌可以与朋友对唱,及时听到好友演唱, 在超低延迟的加持下 ,线上K歌可以连麦,获得无感知延迟的合唱体验。听歌体验共享:“一起听”是在线听歌中的新的休闲娱乐模式,让听歌和社交互动完美结合。当两个陌生人配对成功并“一起听”, 还可以进行实时的语音视频以及其他的互动玩法。观影体验共享:和一起观影的人讨论电影可以增加观影乐趣,新技术驱动下,在线上观影场景中,逐渐产生了更多的共享体验模式。
同时也不难想象,未来会有更多类似体验共享的应用通过同播共享给自己的APP加入一些新的有创意功能的团队,这一功能的未来也是无可限量。
相关链接1: https://36kr.com/p/1452080810256521
相关链接2: https://36kr.com/p/1457374160955264
Safari 更新导致大量bug
在iOS 15.0 Safari的更新中,增加了很多WebRTC相关的特性,比如Insertable stream的支持,可以用来端到端加密,屏幕共享、HTTP3.0的支持,甚至支持在浏览器中跟facetime互通。但同时也出现了很多bug,对WebRTC影响比较大的是,iOS15.1系统在使用WebRTC推流的时候会导致crash, iOS 15.0的safari中websocket如果在服务端开启了压缩,会导致连不上。
WebRTC 要实现SVC了
其实WebRTC很早就支持了vp9的SVC, 但一直只能通过命令行开启,并不能默认打开。后来SVC成为WebRTC 1.0 API的扩展规范, 现在可实现完备的SVC支持。SVC在视频会议场景中很受用,但也带来了不少问题,比如在移动端开启了SVC后,可能就要放弃硬件编码, 一个很美好的技术到真正落地的时候总会带着很多遗憾和取舍。
咨询了Intel 给Chrome做硬件编解码支持的专家后,了解到这次SVC的实现并不是那么的完美:
“其实是给av1用的 vp9还不理睬这个api 264只会支持L1T2和L1T3。然而av1的硬件编码我只在windows上加了支持,且只会以后支持L1T2和L1T3。除非你只用软件编码”
现在让我们静静等待SVC, 有总好过没有。
相关链接:
https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ
两年后 Skype Web版本现在也能在Firefox上使用了
2020年,由于COVID-19的流行,线上视频会议这一沟通方式开始意外走红,微软也跳上了这一行列,这并不奇怪。Skype 作为VOIP鼻祖级别的公司,被微软收购之后反而走向了下坡路,很多人可能已经忘记了Skype。微软的Teams推出之后, 由于跟Office 套件的捆绑策略迅速抢占了大量的企业办公协同市场, 就在人们以为微软会放弃Skype之后, Skype终于让他的web版本,支持了firefox。
前一段时间甚至传出微软会重新定位Skype, 主打年轻人。那对于Skype为什么要支持web端,就像是苹果终于让FaceTime支持web端大概思路是一样, 虽然Web中WebRTC的体验没法跟native的体验相比,但Web所具有的一大优势就是不用下载,人人往往低估了这一优势, 个人的看法是当web端的功能或者体验能达到native 的70%的时候,人们会积极的拥抱Web的版本。
相关链接:https://www.cnbeta.com/articles/tech/1194519.htm
Edge浏览器将支持GeForce Now服务
自从微软将Edge从其自制的Edgehtml引擎切换到Chromium之后,对WebRTC的支持越来越好, 最近Edge浏览器将支持GeForce Now服务, XBox玩家可以把他们的PC游戏通过Edge浏览器串流到主机游戏上玩, 看起来这是一个基于WebRTC的局域网云游戏,好奇他们在局域网下基于WebRTC的云游戏可以做到端到端多少毫秒的延迟。
值得一提的是,今年9月的Edge浏览器更新,还添加了对另外一个云服务——谷歌Stadia的支持,允许玩家在Xbox主机上使用Edge浏览器在谷歌Stadia上玩游戏。
持续关注云游戏的发展。
相关链接:https://hot.cnbeta.com/articles/game/1194311.htm
References
[1] https://www.cnbeta.com/articles/tech/1194519.htm: https://www.cnbeta.com/articles/tech/1194519.htm
[2] https://hot.cnbeta.com/articles/game/1194311.htm: https://hot.cnbeta.com/articles/game/1194311.htm
[3] https://36kr.com/p/1452080810256521: https://36kr.com/p/1452080810256521
[4] https://36kr.com/p/1457374160955264: https://36kr.com/p/1457374160955264
[5] https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ: https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ
[6] https://www.cnbeta.com/articles/tech/1194821.htm: https://www.cnbeta.com/articles/tech/1194821.htm
欢迎点击一键订阅《云荐大咖》专栏,获取更多精品内容。
看云端技术起落,听大咖指点迷津。
以上是关于Zoom支持自动生成字幕;SharePlay上线;Safari 更新导致大量bug |WebRTC风向的主要内容,如果未能解决你的问题,请参考以下文章