小程序直播进阶实践:实现小程序与原生 App 连麦互动
来源:战狼网络
|
作者:zwolftech
|
发布时间: 2018-09-11
|
52
|
分享到:
小程序直播进阶实践:实现小程序与原生 App 连麦互动
上周,在声网Agora 在线直播课中,声网Agora 研发工程师张乾泽分享了包括小程序直播组件的特点、实现小程序间连麦的方法,以及需要注意的产品化难题等干货。本文将回顾演讲内容,以及直播观众们提出的,同时也是开发者们最关心的那些问题。
演讲实录
微信小程序从1.7开始,为开发者提供了两个新接口,和,可以在小程序上实现单向的直播功能。通过与技术的结合,比如WebRTC,开发者们还可以进一步在小程序直播的基础上实现连麦功能,这也就是我们今天要主要分享的进阶经验。
目前小程序直播连麦的应用场景有很多,比如:
首先是视频通话。此前,该场景更多以原生应用的形态出现。现在,这两个新的接口,让小程序实现视频通话成为了可能,尤其是在那些需要强交互、低延时的应用场景,如在线教育、企业会议等。
另一个是在直播连麦中,具体应用场景也有很多,跨直播间 PK 就是最典型的一种。这个功能我们可以在熊猫直播中看到。在直播时,一个主播可以与另一个主播进行视频通话,并实时直播给两个主播的观众观看。
第三个是游戏互动,比如在线抓娃娃。用户此前可以通过原生应用、 PC 端浏览器或手机浏览器来玩抓娃娃,现在该场景已经扩展至小程序。
以上三种场景的共同点是,对延时、画质要求都很高。此前之前更多是在网页、PC 客户端、移动端 App 上实现这些场景,但在网页、手机浏览器中比较少。而微信小程序直播组件的出现,却改变了这个现状,为什么呢?接下来我们会讲到。
小程序直播连麦带来了什么改变?
首先,如果你做过H5端实时音视频,你应该了解,其中最大的问题之一就是采集。为了解决该问题,最常见且可靠的方案就是使用 WebRTC ,因为它提供了一套接口可以让开发者在浏览器中获取摄像头、麦克风的音视频流,在浏览器中实现音视频的采集,并转成我们可用的数据,通过服务端推送给观众。
不过 WebRTC 方案也并非万能,它在移动端也存在很多问题需要开发者自己解决,比如:
兼容性问题。尽管现在新版本已经得到了很多 PC 浏览器支持。但是在微信浏览器中,仅能在 Android 端使用。
用户体验问题。一方面,在网页端经常我们会收到“网页想获取摄像头、麦克风权限”的提示,以允许该页面进行音视频的采集。很多用户可能会选择“拒绝”,会直接导致产品不可用。另一方面,开发者需要保证网址是安全的,否则在一些移动应用内,比如在微信中无法获取摄像头权限。
但是,这些情况在小程序中情况则不一样。小程序提供了一套相对完善的接口。通过和两个原生组件,可以实现音视频的采集、推流、拉流、播放。同时,这两个组件还支持自带的美颜、美白、动态分辨率调整等功能。
那么问题来了,既然我们已经有了这两个组件,是不是在小程序中增加它们之后,就可以发布到线上直播连麦小程序,让别人使用了呢?
答案是否定的。你还需要搭建一个 rtmp 服务器,然后生成一个 rtmp 服务地址,利用小程序组件推流和拉流,但是这样的产品上线仍有些距离。而且,小程序的两个组件仅仅提供了直播功能,并不支持实现连麦。
如果还想要在小程序直播中进一步实现连麦,需要解决四方面问题:
可用性。如果很多人访问你的服务器,并同时发出推流、拉流的请求,你的服务器很可能会挂掉,所以要提高可用性。
信令控制。就像打电话一样,连麦双方需要知道对方的频道号、rtmp 地址才能互通,这就需要加入信令系统来控制。
互通性。比如,小程序之间如何视频互通,小程序与原生 App 之间如何互通。
音视频交互质量。比如,视频通话的低延时、画面与音质的清晰等。
除了自研,开发者也可以通过声网小程序直播连麦 SDK ,来解决以上四方面的问题。我们在 SDK 中提供一套完整API接口,帮开发者在小程序中快速实现直播连麦功能。