沉浸式音视频互动要通过什么技术来实现？

Posted 2021-09-06 TSINGSEE

随着互联网技术的提升，大家在注重互联网稳定性的同时，也在对使用互联网的沉浸感提出了进一步的要求，人们逐渐沉浸网络之中，而追寻沉浸式音视频的互动成为众多开发商的共同目标。随着 AR、VR、5G、云计算等技术成熟度的提升，基于沉浸式音视频的通讯技术在元宇宙有望逐步从概念走向现实。根据IDC的市场评估，沉浸式视频云市场发展的趋势处于飞速发展的阶段。

完全的沉浸式音视频在现在还面临着诸多挑战，其中最重要的因素就是人眼。人眼相当于一个精密的仪器，对视频机制的追求大约要达到50K、120fps、20bit的分辨率和码率以及色域，而当前，即使是超高清视频的传输，也在8K左右，还远难以达到沉浸式的需求。

但这并不意味着现阶段以我们的技术对实现沉浸式音视频互动就无计可施了，对于现存的问题，我们可以择长而处。

无法实现深度的沉浸式，则可以加强视频上的互动能力，比如VR的技术，其中包括了低延迟的VR编解码、VR传输，其中还可以融入AI的智能技术，能够让沉浸式音视频互动获得更完美的体验感。无法达到50K的分辨率，则努力在8K分辨率上做到更加流畅，比如通过RTC+边缘计算技术带来低延迟的音视频传输的能力。TSINGSEE青犀视频根据RTC编译的视频通话平台EasyRTC提供了百人同时在线的音视频通话能力，同时还丰富了API接口，用户可以自由调用。

在音频的传输方面，比较合适的也是我们上文提到过的RTC 的音频传输技术，即通过采样、量化、编码、压缩，实现模拟信号到数字信号的传输。一般比较常见的音频采集是双声道的采样，即左右两个声道的立体声，再经过压缩处理，传输时占用带宽少，符合目前大部分业务场景对传输效率的需要。

沉浸式音视频互动可以在很多项目场景中带来新的体验，比如说泛娱乐的连麦，以及在线音视频的教育，VR、AR、5G、AI、专业引擎和平台等产业链的发展，也会继续带动用户对沉浸式体验的追求。沉浸式音频通讯将会成为未来通讯的主流，走在技术的前端就是在为我们自己探寻新的出路，在这方面，TSINGSEE青犀视频也将通过多个工具连接多个媒介，通过整个沉浸式视频的平台助推5G时代高清应用的发展。