实现互动直播
更新时间: 2024/08/05 15:02:55
网易云信互动直播产品的基本功能包括音视频通话和连麦直播,当您成功初始化 SDK 之后,您可以简单体验本产品的基本业务流程,例如主播加入房间、观众 CDN 拉流、连麦者上下麦、结束直播等。本文档为您展示互动直播提供的基本业务流程。
前提条件
请确认您已完成以下操作:
主播加入房间
1. 引用头文件
在您的工程中对应的文件里添加如下代码引入头文件:
javascriptconst NERtcSDK = require('nertc-electron-sdk').default
2. 初始化
在操作 SDK 接口前,需要完成初始化。
- 调用 NERtcEngine() 构造创建一个 NERtcEngine 实例。
- 调用 initialize 方法完成初始化。
javascript// 创建 RTC 引擎对象并返回对象。
const nertcEngine = new NERtcSDK.NERtcEngine()
let context = {}
// 设置已开通音视频功能的云信应用的AppKey。
context.app_key = ''
// 设置日志目录的完整路径,采用 UTF-8 编码。
context.log_dir_path = 'your log path'
// 设置日志级别,默认级别为 kNERtcLogLevelInfo。
context.log_level = log_level
// 指定 SDK 输出日志文件的大小上限,单位为 KB。如果设置为 0,则默认为 20 M。
context.log_file_max_size_KBytes = log_file_max_size_KBytes
// 设置SDK向应用发送回调事件的通知,此处只列举一个
nertcEngine.on('onError', (errorCode, msg) => {
})
// 初始化 NERTC SDK 服务。
if (0 !== nertcEngine.initialize(context)) {
// TODO
}
3. 设置本地视图
初始化成功后,可以设置本地视图,来预览本地图像。您可以在加入房间之前预览,或在加入房间后预览。
-
加入房间前预览。
- 通过 setupLocalVideoCanvas 与 startVideoPreview 方法,在加入房间前设置本地视图,预览本地图像。
javascript
// 示例 // 设置本地视频画布 let canvas = {} canvas.view = document.getElementById('localView') // 设置视频缩放模式。 TODO // canvas.scaling_mode = mode this.nertcEngine.setupLocalVideoCanvas(canvas) // 开启本地预览 this.nertcEngine.startVideoPreview()
- 若要结束预览,或者准备加入房间时,调用 stopVideoPreview 停止预览。
-
加入房间后预览。
在成功加入房间后,通过 enableLocalVideo 方法进行视频的采集发送与预览。
javascript
// 示例 // 设置本地视频画布 let canvas = {} canvas.view = document.getElementById('localView') // 设置视频缩放模式。 TODO // canvas.scaling_mode = mode this.nertcEngine.setupLocalVideoCanvas(canvas) // 启动视频流 this.nertcEngine.enableLocalVideo(true);
4. 设置直播模式
在互动直播的场景中,建议在加入房间前,设置房间模式为直播模式。当前默认为通信模式。
javascript //kNERtcChannelProfileCommunication(0)为通话模式,
//kNERtcChannelProfileLiveBroadcasting(1)为直播模式
this.nertcEngine.setChannelProfile(0);
5. 设置推流开关
在加入音视频通话房间前,还需要打开推流开关,以便将多媒体流推往CDN,这样拉流的观众可以拉取到该用户对应的音视频流。
javascript// 示例
this.nertcEngine.setParameters("{\"publish_self_stream_enabled\":true}");
6. 加入房间
加入房间前,请确保已完成初始化相关事项。
通过 joinChannel 方法加入房间。
javascript// 示例
this.nertcEngine.joinChannel(token, channel_name, uid);
重要参数说明
参数 | 说明 |
---|---|
token | 安全认证签名(NERTC Token)。可设置为:
|
channel_name | 房间名称,设置相同房间名称的用户会进入同一个通话房间。 **注意**:您也可以在加入通道前,通过创建房间接口创建房间。若通过 joinChannel 接口加入房间时,传入的 {channel_name} 未事先创建,则云信服务器内部将为其自动创建一个名为 {channel_name} 的通话房间。 |
uid | 用户的唯一标识 id,房间内每个用户的 uid 必须是唯一的。 |
SDK发起加入房间请求后,服务器会进行响应,开发者可以在初始化时调用 nertcEngine.on 接口监听 onJoinChannel 回调监听加入房间的结果,同时该回调会抛出当前通话房间的 channelId 与加入房间总耗时(毫秒)。
7. 推流任务管理
在成功加入房间后,需要设置推流任务,将通话房间内的多媒体数据推至 CDN。典型的业务场景里是由主播进行设置推流任务。推流任务也可以通过 服务端API 进行管理,请根据您的业务需求选择合适的方式。
注意:
- 此处的主播业务层面的角色,SDK 体系内不区分主播与连麦者。
- 推流任务中,需要设置互动直播的CDN推流地址,请在合适的时机创建直播房间,将获取到推流地址传入推流任务。
- 添加推流任务时,需要设置布局参数,您可以参考旁路推流画面布局完成设置。
- 推流任务与通话绑定,当通话结束后,推流任务也会自动随之销毁。
- 一通通话,即一个 channelId 同时最多对应 6 个不同的推流任务。
增加推流任务
音视频房间中默认没有推流任务,您需要在启动直播前通过 addLiveStreamTask 方法增加推流任务。增加推流任务的结果将调用 nertcEngine.on 接口监听 onAddLiveStreamTask 回调告知开发者。
javascript// 添加推流任务的异步callback , 更多错误码请参考onAddLiveStreamTask API文档
this.nertcEngine.on('onAddLiveStreamTask', (taskID, url, error) => {
if (code === kNERtcNoError) {
console.log("添加推流任务成功 : taskId " + taskId)
} else {
console.log("添加推流任务失败 : taskId " + taskId + " , code : " + code)
}
})
//推流任务数据结构
var lsTaskInfo = {}
//保证一个url 只能设置一个task , 要不然会有问题的,使用上层自己维护的task_id、url
lsTaskInfo.task_id = ''
lsTaskInfo.stream_url = ''
lsTaskInfo.ls_mode = 0 // kNERtcLsModeVideo(0)/kNERtcLsModeAudio(1)
lsTaskInfo.server_record_enabled = false
//设置整体布局
lsTaskInfo.layout.background_color = 0x3399ff // 整体背景色
lsTaskInfo.layout.width = 1280 //整体布局宽度
lsTaskInfo.layout.height = 640 //整体布局高度
lsTaskInfo.layout.user_count = 2
lsTaskInfo.layout.users = []
lsTaskInfo.layout.users[0].uid = uid
lsTaskInfo.layout.users[1].uid = remote_uid
for (let i = 0; i < lsTaskInfo.layout.user_count; i++)
{
lsTaskInfo.layout.users[i].adaption = 0 //kNERtcLsModeVideoScaleFit(0)/kNERtcLsModeVideoScaleCropFill(1)
lsTaskInfo.layout.users[i].video_push = true// 推流是否发布user的视频
lsTaskInfo.layout.users[i].x = 640 * i // user 的视频布局x偏移,相对整体布局的左上角
lsTaskInfo.layout.users[i].y = 0 // user 的视频布局y偏移,相对整体布局的左上角
lsTaskInfo.layout.users[i].width = 640 // user 的视频布局宽度
lsTaskInfo.layout.users[i].height = 640 //user1 的视频布局高度
lsTaskInfo.layout.users[i].audio_push = true// 推流是否发布user的音频
}
//TODO
lsTaskInfo.layout.bg_image = {}
lsTaskInfo.layout.bg_image.x = 0
lsTaskInfo.layout.bg_image.y = 0
lsTaskInfo.layout.bg_image.width = 640
lsTaskInfo.layout.bg_image.height = 480
lsTaskInfo.layout.bg_image.url = ''
// 如果需要,可以配置多个用户,配置的用户不用已经在房间中,如果用户不在房间中,那么会有相应的视频占位
// 之后用户以配置了的uid进入房间,开启推流开关即可推流
let ret = this.nertcEngine.addLiveStreamTask(lsTaskInfo);
if (ret !== 0) {
console.log("调用添加推流任务失败 , ret : " + ret);
}
更新推流任务
当音视频通话房间内有人员进出或其他情况时,可以使用 updateLiveStreamTask 方法更新推流任务。更新推流任务的结果将通过onUpdateLiveStreamTask回调。
更新推流任务时,会覆盖之前对于这条推流任务的所有配置。
javascript// 更新推流任务的异步callback , 更多错误码请参考onUpdateLiveStreamTask API文档
this.nertcEngine.on('onUpdateLiveStreamTask', (taskID, url, error) => {
if (code === kNERtcNoError) {
console.log("更新推流任务成功 : taskId " + taskId)
} else {
console.log("更新推流任务失败 : taskId " + taskId + " , code : " + code)
}
})
// todo 重新配置相关配置 , 具体的配置与添加推流任务时一模一样 ,唯一不能修改的就是 taskId
let taskInfo = {}
let ret = this.nertcEngine.updateLiveStreamTask(taskInfo);
if (ret !== 0) {
console.log("调用更新推流任务失败 , ret : " + ret);
}
删除推流任务
当本场互动直播准备结束时,可以通过 removeLiveStreamTask 方法主动删除推流任务。删除推流任务的结果将通过onRemoveLiveStreamTask回调。
javascript// 删除推流任务的异步callback , 更多错误码请参考onRemoveLiveStreamTask API文档
this.nertcEngine.on('onRemoveLiveStreamTask', (taskID, error) => {
if (code === kNERtcNoError) {
console.log("删除推流任务成功 : taskId " + taskId)
} else {
console.log("删除推流任务失败 : taskId " + taskId + " , code : " + code)
}
}
let ret = this.nertcEngine.removeLiveStreamTask(preLiveTask.taskId)
if (ret !== 0) {
console.log("调用删除推流任务失败 : ret : " + ret)
}
推流任务相关错误码
在增加、更新与删除推流任务时当发生错误时,回调出的错误码如下:
错误码 | 含义 |
---|---|
kNERtcNoError = 0 | 成功 |
kNERtcErrLsTaskRequestInvalid = 1301 | task请求无效,被后续操作覆盖 |
kNERtcErrLsTaskIsInvaild = 1400 | task参数格式错误 |
kNERtcErrLsTaskRoomExited = 1401 | 已经退出房间 |
kNERtcErrLsTaskNumLimit = 1402 | 推流任务超出上限 |
kNERtcErrLsTaskDuplicateId = 1403 | 推流ID重复 |
kNERtcErrLsTaskNotFound = 1404 | taskId任务不存在,或房间不存在 |
kNERtcErrLsTaskRequestErr = 1417 | 请求失败 |
kNERtcErrLsTaskInternalServerErr = 1500 | 服务器内部错误 |
kNERtcErrLsTaskInvalidLayout = 1501 | 布局参数错误 |
kNERtcErrLsTaskUserPicErr = 1502 | 用户图片错误 |
互动直播推流状态
主播/连麦者参与互动直播的过程中,可以通过 onLiveStreamState 来监听推流状态。
状态码 | 含义 |
---|---|
kNERtcLsStatePushing = 505 | 推流中 |
kNERtcLsStatePushFail = 506 | 互动直播推流失败 |
kNERtcLsStatePushStopped = 511 | 推流结束 |
kNERtcLsStateImageError = 512 | 背景图片设置出错 |
8. 设置远端视图
互动直播过程中,除了要显示本地的视频画面,通常也要显示参与互动的其他连麦者/主播的远端视频画面。
-
通过 nertcEngine.on 以下回调获取相关信息:
-
onUserJoined:监听远端用户加入通话房间的事件,并抛出对方的 uid。当本端加入房间后,也会通过此回调抛出通话房间内已有的其他用户。
-
onUserVideoStart :监听远端用户发布视频流的事件,回调中携带对方的 uid 与发布的视频分辨率。
-
-
在监听到远端用户加入房间或发布视频流后,本方可以通过 setupRemoteVideoCanvas 方法设置远端用户视频画布,用于显示其视频画面。
javascript// 示例
// 设置本地视频画布
let canvas = {}
canvas.view = document.getElementById(remoteUid)
// 设置视频缩放模式。 TODO
// canvas.scaling_mode = mode
this.nertcEngine. setupRemoteVideoCanvas(uid, canvas)
- 在监听到远端用户发布视频流后,本方可以通过 subscribeRemoteVideoStream 方法对其发起视频流的订阅,来将对方的视频流渲染到视频画布上。
javascript// 示例
// 订阅指定用户的 kNERtcRemoteVideoStreamTypeHigh(0) 类型的视频流
this.nertcEngine.subscribeRemoteVideoStream(uid, 0, true)
9. 音频流
本地音频的采集发布和远端音频订阅播放默认启动,正常情况下无需开发者主动干预。
观众进行 CDN 拉流
当通话房间内有主播/连麦者发布多媒体流,且正确设置了推流任务时,通话房间外的观众可以通过 CDN 直播拉流地址进行拉流播放。
连麦者上下麦
1. 上麦
若正在进行 CDN 拉流播放的普通观众要上麦参与互动时,必须先停止CDN拉流,并释放播放器相关资源。然后按照主播加入房间流程,进行初始化、设置本地视图、设置直播模式、设置推流开关、加入通话房间、设置远端视图。
注意:
- 由于有新连麦者的加入,需要更新推流任务将新连麦者设置到推流布局中。操作步骤请参考更新推流任务。更新推流的任务操作,可以由主播执行,也可以由连麦者执行,也可以通过服务端API完成。
- NERTC SDK 支持在直播场景下设置用户角色管理,角色包括主播和观众,默认以主播角色加入房间。调用 setChannelProfile 将通话设置为直播场景之后,可以通过 setClientRole 切换用户角色。
2. 下麦
若连麦者互动结束,需要下麦时,可以更新推流任务,在推流布局中剔除该连麦者。同时,连麦者退出通话房间,清理相关资源,重新进行播放器拉流或直接离开直播间。
通话房间内的其他用户可以通过 onUserLeft 来监听其他连麦者下麦。
结束互动直播
需要结束该场互动直播时,可以先删除推流任务,然后主播与连麦者退出通话房间,观众结束 CDN 拉流。
退出通话房间
通过 leaveChannel 接口退出通话房间。
javascript// 示例
this.nertcEngine.leaveChannel();
真正退出房间后,开发者可以通过初始化时调用 nertcEngine.on 接口监听 onLeaveChannel 的事件。
销毁实例
当确定短期内不再使用音视频通话实例时,可以释放对应的对象资源。
javascript// 示例
this.nertcEngine.release();