连麦互动直播的主要技术难点在于:
低延时互动:主播和互动观众之间就像电话沟通,为确保主播和互动观众之间能够实时互动,必须保证两者能在秒级以内听到对方的声音,看到对方的视频;
音画同步:互动直播中对音画同步的需求和单向直播中类似,只不过互动直播中的延迟要求更高,必须保证在音视频秒级传输情况下的秒级同步。
音视频实时合成:其他观众需要实时观看到对话结果,因此需要在客户端或者服务端将画面和声音实时合成,然后以低成本高品质的方式传输至观众端。
为了实现互动实时性高的连麦,首先需要有一套实现了类似微信、Skype 及 Facetime 的多人音视频实时通话系统。这套实时通话系统可以选择自主研发或者基于开源软件如 Google 的 WebRTC 做二次开发。下面简单介绍多人实时通话系统的一些重点技术细节。
无连麦,不直播 | 直播连麦技术点详解原文阅读:http://support.upyun.com/hc/kb/article/1026585/