广告

萤石发布ERTC实时音视频服务 助力远程互动更高效

2022-07-07 13:42 来源:智安物联网 作者:石旭

随着5G、AI、大数据的深度发展,万物互联的IoT时代之风席卷全球。

在疫情常态化背景下,无接触式的交互被广泛认可,诸如远程医疗、线上健身、线上招聘、远程办公、直播带货等成为常态。在这背后,是物联网厂商不断以音视频技术和服务赋能,带动产业向上发展的一个缩影。

7月6日下午,萤石举办了“触达万物·云见未来——2022ECDC萤石云开发者大会”,带来了萤石云服务的新升级与新组件,持续升级全栈开放的云服务体系。会上,萤石带来一项全新的开放服务——ERTC,即萤石实时音视频服务,协助开发者极大提升系统中音视频的交互能力,从而延伸更多实用、有趣的行业场景,助力打造更多行业的应用方案。

图片1.png

萤石在智能家居与物联网领域深耕多年,可以称得上实时音视频领域的老兵。其发布的视频客服,以及常用的萤石云APP与猫眼门铃、儿童手表、儿童陪护机器人等萤石的智能终端的音视频互动,现在互动的次数已经超过了每天300万次,稳定运行超过了1000天。

无论从RTC技术专业度,还是物联网应用与实践方面来看,通过一套标准的SDK开放出来,提供高可靠和易集成的RTC服务,是应萤石开放平台的开发者和合作伙伴所需,更是萤石自身拓展生态圈的杀手锏。

RTC市场崛起

开发者从0-1却很艰难

人类是靠视觉、听觉、触觉、嗅觉和味觉来感受外部物理世界的,在漫长的历史里,文字、图片是记录和传递信息的主要方式,直到1872年人类创造第一个视频、1877年爱迪生录出第一条音频,将信息记录的方式上升到了更高维度、也更具象化。

在20世纪里,音视频技术不断革新,逐渐从胶片、磁带上进入数字时代,在互联网的爆炸发展催化下,进入了多媒体时代。进入21世纪后,信息通信技术快速迭代,极大地改善了人们的音视频体验,激发了人们对数字空间向往。2020年的新冠疫情,是音视频产业发展的重要催化剂,物理空间上的限制,需要借助虚拟空间的延伸来弥补,远程办公、远程学习、远程管理等如雨后春笋。据咨询公司IDC数据披露,2020年中国视频会议市场规模增涨18.9%,达到约65.2亿元,2020年中国教育实时音视频市场规模较增长46.9%,达到47亿元。也是在这一年,全球IoT设备连接数量首次超过非IoT设备。2021年元宇宙又大火出圈,其沉浸、交互、实时的全真音视频无疑备受关注,虚实结合且具备强参与感、操控感的未来场景,让人心生向往。

RTC成为一项基础能力,从更靠近C端的泛娱乐场景(以中东市场社交APP为例,TOP100榜单中有26款产品用到了RTC技术),向教育、金融、医疗等场景不断渗透,受到市场的大量关注。超高清和沉浸式的多媒体终端设备快速增长,如:智能机器人、智能手表、智能猫眼、智能门锁等,而这些设备场景的互动都需要RTC技术的支持。

RTC需求趋势是显而易见的:平民化、产业化。当下,没有实时音视频,人们的快乐会减少。未来,没有实时音视频,企业的效率会下降。

不同领域、不同行业,都希望借助RTC,升级和改造现有生产场景,快速部署、提升效率、降低成本。但企业开发者也面临着对技术门槛和资源投入的担忧。

通常来讲,RTC技术栈可以分为两方面:边缘端和云端。

实时音视频物联网的开发门槛很高,需要面临对音视频的编解码处理、音视频渲染兼容性、三方协议支持、对抗弱网、分布式网络和调度等难题,个个都是技术大山,难以逾越。

萤石开放ERCT服务

立志做开发者的赋能者

萤石在实时音视频领域的深厚积累,得到了开发者和合作伙伴的高度认可。

在产品和技术方面,萤石正加速迭代软硬件产品的升级。通过多元化的增值服务和开放式AI算法服务切实赋能用户的智慧生活。针对行业客户,萤石聚焦于自身擅长的视觉技术,依托物联网云平台,通过开放云平台服务帮助客户完成智能化转型,或协助客户开发面向复杂场景的解决方案。

本次开发者大会上,萤石全新发布了ERTC(EZVIZRTC),ERTC是1对1或者多对多实时音视频互动的,适用于视频会议、互动课堂、远程医疗等场景。

在实现高效转码、降低延时、提升画质以及快速集成背后,萤石实时音视频可谓是诚意满满:ERTC端到端的延时一般低于400ms,远远低于云直播>2s的延时;SFU流媒体服务、MCU音视频合成服务、三方协议接入网关和互动扩展服务是其四大服务模块。

2.jpg

1、SFU负责对一个互动房间里的多方音视频的实时处理和转发;

2、MCU支持将多路音视频信号的合成为一路,同时提供转码能力,为其他需要合成信号的模块提供服务;

3、三方协议接入网关负责将使用三方标准协议的端或音视频信号接入互动;

4、互动扩展服务为开发者提供了在音视频互动过程中可能会用到的电子白板、消息发送、

云录制、云点播和旁路直播等服务。

各服务模块协作运行,支撑了ERTC的SDK各项功能的稳定运行。

3.jpg

正如上边所讲,RTC的门槛很高,开发者往往知难而退。那萤石开放给开发者的实时音视频的性能如何、有何优势?

兼容性好:ERTC的SDK兼容了主流的操作系统平台和三方标准协议,兼容了常用的音视频编解码标准和视频渲染引擎,兼容了复杂场景的音频3A算法。

稳定性佳:ERTC服务使用了多重机制来保障系统7*24稳定运行,实现高可用。在保障SDK的稳定性层面,ERTC使用了事前预防、事中处理、事后分析的策略。

抗网络抖动性强:ERTC发布了一系列的弱网对抗策略来提升音视频互动在带宽不足、丢包过高、网络抖动情况下的稳定性和流畅度。

集成速度快:ERTC兼容了各操作系统平台和终端的差异,提供了一套标准的SDK和DEMO,同步发布扩展服务组件,帮助开发者低代码快速实现音视频互动。

ERTC还支持灵活的专有云和混合云部署,可以满足一些专有云项目。不管是个人开发者还是组织、机构,都可以借此实现更为高效的开发,充分享受上云带来的高效率和低成本。

目前,ERTC正在为IoT、教育、金融、企业、医疗、公共服务、司法等近10个细分行业的40多个实时音视频的互动场景提供服务。

写在最后

这几年,我国对新基建、数字政企以及音视频产业的政策支持力度不断加大。技术突破、市场需求、政策引领叠加影响,使得RTC行业呈现爆发式发展。

萤石作为最具实时音视频感知特色的企业之一,在全栈开放的平台服务上,有着更大的责任,建立生态,赋能千行百业,推动RTC向更高阶迈进。

责任编辑:沈文