文档中心
实时音视频
产品简介
产品功能

产品功能

更新时间：2024-02-05 17:41

通信能力

基础功能

基础功能	功能描述	业务场景
音视频通话	用户加入同一个房间，并进行音视频通话。	1v1 视频通话多人视频会议
音视频直播	同一个房间，包含主播及观众，主播可以进行音视频直播，该房间内的观众可以观看直播。	秀场直播游戏直播电商直播
用户权限控制	使用 Token 对用户进行权限控制，如：指定用户可以进房/退房；指定用户发言/静音；指定用户。	视频会议
通话前检测	在进行音视频通话或直播前，对摄像头、麦克风、显示器等进行设备检测，确保通话或直播的正常运行。	正常的通话功能检测
通话质量监测	对音视频的质量进行检测，如分辨率、帧率、码率、采样率等多指标检测，确保质量稳定。	银行开户、远程鉴定等对音视频质量较高要求和限定的场景
网络测速	可在用户进行推/拉流前，检测上行和下行网络速度，判断当前网络环境下适合推/拉多大码率的音视频流。	通话场景、教育场景、直播场景

进阶功能

进阶功能	功能描述	业务场景
直播连麦	一个房间内，可以出现多个主播，进行同屏连麦直播。	多主播不同地区连麦多人 KTV 合唱秀场直播
同时推送多路流	一个用户可以推送多路音视频流，如分享屏幕的同时，将摄像头的视频流进行发送。	视频会议中播放 PPT 的同时，看到主讲人的画面
媒体补充增强信息（SEI）	文本信息与音视频内容打包在一起通过流媒体通道进行传输，以此实现文本数据与音视频内容的精准同步的目的。	视频画面的精准布局远端歌词同步直播答题
流量控制	ZEGO 业内领先技术。SDK 根据自己以及对端当前网络环境状态来动态调整视频推流的码率、帧率、分辨率，以及音频码率，自动适应当前网络环境及网络波动，从而保证视频能流畅发布。	所有希望有高质量实时音视频服务的场景
云代理	通过设置 SDK 的云代理接口，将 SDK 对应的所有流量通过云端的代理服务器中转，实现与 RTC、L3（超低延迟直播）通信。	医院、政府、公司内部等有内网等限制性的网络环境中
地理围栏	将音视频及信令数据传输限定在某一区域，用以满足地区数据隐私安全相关法规，即限定访问某一特定区域的音视频服务。	通话场景
音视频轨道替换	在浏览器中，本地存在两条及以上的媒体流（音轨、视轨）时，可以通过 ZEGO Express Web SDK 自由组合媒体流包含的音视轨。	直播场景
游戏语音	模仿真实世界，人根据声音的方位及距离等因素，从而有不同的听觉感受，例如距离越远，声音越小等。同时可以对能接收到音源的人进行分组限定，例如房间中，分组进行讨论，不同组听不到彼此声音等。	元宇宙同一房间，分组交流或对战

房间能力

基础功能

基础功能	功能描述	业务场景
房间连接状态说明	判断用户在房间内的连接状态，以及各个连接状态的转化过程。	-
实时消息与信令	实时消息主要提供纯文本消息的收发功能，可向同一房间内的其他用户发送广播消息和弹幕消息，或者对某些指定用户发送自定义消息，并可以根据需要自行实现点赞、送礼物、答题等互动功能。	秀场直播语聊房

进阶功能

进阶功能	功能描述	业务场景
登录多房间	一个用户可以同时进入多个房间进行音视频通话或观看直播。	老师多班在线教学

音频能力

基础功能

基础功能	功能描述	业务场景
音量变化	音量变化：即某条流音量的大小。	判断麦上的用户谁在说话、麦克风、扬声器等是否可用
耳返与声道设置	耳机采集监听，在设备上插入耳机（普通耳机或蓝牙耳机）后，能从本机耳机侧听到本设备麦克风采集的声音。双声道，指两个声音通道，听到声音时可以根据左耳和右耳对声音相位差来判断声源的具体位置。	秀场直播情感 FM 音乐教学等较为专业场景
音频 3A 处理	在实时音视频通话或直播时，可以对音频进行 3A 处理，以提高通话或直播质量和用户体验。 AEC（回声消除）：对采集到的音频数据进行过滤以减少音频中的回声。 AGC（自动增益控制）：开启该功能后，SDK 能够自动调节麦克风音量，适应远近拾音，保持音量稳定。 ANS（降噪）：识别声音中的背景噪声并进行消除，开启该功能后可以使人声更加清晰。	所有希望有高质量实时音视频服务的场景
变声/混响/立体声	为增加趣味性和互动性，用户可以通过变声来搞怪，通过混响烘托气氛，通过立体声使声音更具立体感。 ZEGO Express SDK 提供了多种预设的变声、混响、混响回声、立体声效果，开发者可以灵活设置自己想要的声音。	直播语聊房 K 歌房匿名社交游戏娱乐角色扮演

进阶功能

进阶功能	功能描述	业务场景
混音	SDK 从 App 获取一路音频数据，将 App 提供的音频数据与 SDK 采集的音频数据整合为一路音频数据，从而实现在通话或直播过程中播放自定义的声音、音乐文件，并且让房间内的其他人也听到的能力。	社交语聊直播
AI 降噪	ZEGO Express SDK 提供了 AI 降噪功能，开发者可以在使用麦克风采集声音时，对声音进行降噪处理；并在传统降噪消除稳态噪声的基础上，同步处理非稳态噪声（包括鼠标点击声、键盘声、敲击声、空调声、厨房碗碟碰撞声、餐厅嘈杂声、环境风声、咳嗽声、吹气声等非人声噪声），保留纯净语音，提升用户的通话体验。	语音房、会议、语音开黑等 1v1 或多人音视频通话场景，以及声卡、弹唱、近场音乐的直播或者在线 KTV 场景
自定义音频采集	开发者可以自行获取音频信息后，交给 SDK 进行传输。	在线或本地音频文件传输定制采集系统的音频文件进行传输

视频能力

基础功能

基础功能	功能描述	业务场景
常用视频配置	在视频通话或直播时，自定义设置采集及播放的视频的相关配置，如视频采集分辨率、视频编码输出分辨率、视频帧率、码率、视图模式和镜像模式等。	视频通话直播场景
屏幕共享	视频通话或互动直播过程中将屏幕内容以视频的方式共享给房间内的其他用户。	视频会议游戏直播
基础美颜	当在视频通话或直播时，希望向对方呈现出良好的肌肤状态，可结合 AI 美颜实现基础美颜功能。	秀场直播音视频通话

进阶功能

进阶功能	功能描述	业务场景
设置视频编码方式	可对视频的编解码进行详细设置，包括启用分层视频编码、使用硬件编解码和设置编码方式等。	对编解码有特殊要求时
设置视频编码属性	ZEGO Express Web SDK 支持 H.264 和 VP8 两种视频编码格式，开发者在视频通话时可以根据业务场景需要选择适合的视频编码格式，使不同端之间进行编码对齐，实现多端互通。	视频通话
自定义视频采集	自定义向 ZEGO Express SDK 提供视频输入源输入视频数据，并由 ZEGO Express SDK 进行编码推流的功能。	使用了第三方美颜厂商的美颜 SDK 摄像头无法被 SDK 正常使用直播非摄像头采集的数据
背景虚化及虚拟背景	将视频画面中的主体从原始画面中分离出来，并对主体外的区域做如下处理：虚化主体外的区域以自定义图片替换主体外的区域	在线会议远程教育视频通话

直播能力

基础功能

基础功能	功能描述	业务场景
混流	把多人的多路视频流混流为一路流，从而只需要拉取一条流就能看到房间内所有成员的画面，听到房间内所有成员的声音。	多人通话主播连麦
使用 CDN 直播	统一接入多家 CDN 能力，该功能支持推流到 CDN，打通 RTC 产品和 CDN 直播产品，方便用户从网页或第三方播放器直接观看直播内容。	高并发的基础直播、对直播延迟无强要求的场景
CDN 推流鉴权	为防止攻击者盗取开发者的推流 URL 地址在别处推流使用、或伪造开发者的服务器生成推流 URL 地址，从而造成流量损失，可以通过 ZEGO 控制台自助配置 CDN 推流鉴权。当开启鉴权后，需要在推流 URL 地址中拼接相关的鉴权参数，否则无法推流。	-

进阶功能

进阶功能	功能描述	业务场景
超低延迟直播	专注于提供稳定可靠的直播服务。相比于标准视频直播产品，音画延迟更低，同步性更强，弱网抗性更好，能为用户带来毫秒级的直播体验。	在线教育秀场直播电商直播一起看在线拍卖
使用本地导播	在本地对画面和声音进行混合，将多路音视频流或页面元素、合并为一路音视频流后推流，助力开发者实现更丰富的场景。	直播场景

其他能力

基础功能

基础功能	功能描述	业务场景
媒体播放器	提供播放音视频媒体文件的能力，并且支持将播放的媒体文件的音画数据推流出去。	播放测试音频播放背景音乐播放视频文件
音效文件播放器	提供音效播放器，并进行音效统一管理，实现增强真实感或者烘托场景氛围播放的简短效果音的播放控制等效果。	秀场直播游戏娱乐
音视频录制	在进行视频通话、直播、在线教学时，用户经常需要将视频录制保存下来，方便后续其他用户点播观看。ZEGO 提供了多种录制方案，满足不同场景下的录制需求。	会议录制直播录制通话录制在线课堂录制

进阶功能

进阶功能	功能描述	业务场景
将白板推送到第三方平台	利用 ZEGO Express SDK 的混流功能，将音视频流和 ZegoSuperBoard 内容合并成一路流，输出到第三方平台，例如微信、视频号等，从而达到更好的传播和营销效果。	在线教育直播卖货

本篇目录