网络直播基于HTML5的方案及相关技术介绍

Z时代
2024-01-10
分类：综合

直播发展如火如荼，为了满足火热的移动Web端直播需求，一系列基于HTML5的网络直播方案迅速的发展了起来。其实只要实现了直播的各个技术难点，通过HTML5进行视频直播并非难事。图玩智能科技为企业提供直播平台的二次开服务，欢迎随时咨询www.toivan.com.

常见的可用于HTML5的直播技术共有3种协议：HLS、WebSocket与WebRTC。本文将对基于这3种协议的HTML5网络直播方案实现做下基础的介绍。

一. HLS

优点：CDN支持比较好。

缺点：延时较高，无法进行互动直播。

HLS是一个由苹果公司提出的基于HTTP的流媒体网络传输协议，是苹果公司QuickTime X和iPhone软件系统的一部分。它的工作原理是把整个流分成一个个小的基于HTTP的文件，每次只下载一些。当媒体流正在播放时，客户端可以选择从许多不同的备用源中以不同的速率下载同样的资源，允许流媒体会话适应不同的数据速率。在开始一个流媒体会话时，客户端会下载一个包含元数据的extended M3U (m3u8)playlist文件，用于寻找可用的媒体流。

用HLS协议实现直播的延时比较高，是因为每一小段的视频文件都需要延迟时间比如文件列表里面包含5个TS文件，每个TS文件包含5秒视频，那么整体的延迟就是25秒。

当然也可以缩短列表的长度和单个TS文件的大小来降低延迟，甚至可以缩减列表长度为1，TS视频时长为1s。但是这样设置无疑会增加请求次数，服务器压力自然也会增大，而且当网速慢时这样的设置会造成更多的缓冲。苹果官方推荐的TS时长是10s，这样就会大约有30s的延迟。

二. WebSocket+MSE

优点：实时性比较好，可以用于互动直播，前端可操作性更大。

缺点：技术较新，一些旧浏览器不支持。

1. WebSocket

通常的Web应用都是围绕着HTTP的请求/响应模式而构建的。所有的HTTP通信都是通过客户端来控制的，都是由客户端向服务器发出一个请求，服务器接收和处理完毕后再返回结果给客户端，客户端再将数据展现出来。这种模式不能满足实时应用的需求，于是出现了SSE，Comet等“服务器推”的长连接技术。

WebSocket是直接基于TCP连接之上的通信协议，可以在单个TCP连接上进行全双工的通信。WebSocket是独立的创建在TCP上的协议，HTTP协议中的那些概念都不复存在，和HTTP的唯一关联是使用HTTP协议的101状态码进行协议切换，使用的TCP端口是80，可以用于绕过大多数防火墙的限制。

2. MSE

MSE是一个主流浏览器支持的新的Web API。MSE是一个W3C标准，允许Java动态的构建和的媒体流。它定义了对象，允许Java传输媒体流片段到一个HTMLMediaElement。

通过使用MSE，你可以动态地修改媒体流而不需要任何的插件。这让前端Java可以做更多的事情，我们可以在Java进行转封装，处理，甚至转码。

三. WebRTC

优点：实时性好，延时低，基于UDP协议。

缺点：缺少成熟的开源中转服务器方案。

WebRTC，网页即时通信，是一个支持网页浏览器进行实时语音对话或视频对话的API。它于2011年6月1日开源并在Google、Mozilla、Opera支持下被纳入万维网联盟的W3C推荐标准。

WebRTC 涉及到很多复杂技术，不过好在大多数复杂工作可以抽象成为下面三个 API：

MediaStream：获取音频和视频流；

RTCPeerConnection：用来建立和维护端到端连接，提供高效的音视频流传输；

RTCDataChannel：用于支持端到端的任意应用数据交换。

这里的MediaStream对应的是JS里的navigator.getUserMedia() 方法，它负责从底层平台获取音视频流。音视频流经过WebRTC音视频引擎的自动优化、编码和解码，可以直接读取或者传输到各种目的地。比如，我们可以用getUserMedia获取视频流，再把每一帧都转成ASCII字符播放。MediaStream这个API设计得很简单，使用起来也很方便。