HTTP 渐进下载流媒体播放 : 基于 TCP

yy 、乐视、爱奇艺、优酷土豆、搜狐视频、花椒直播,主要还是通过 rtmp&hls 来实现的,

但他们也意识到 rtmp 的天生缺陷,所以不管是技术预研也好,还是测试版也好,都已经或多或少在弄 WebRTC 了。

流媒体概述:

所谓流媒体是指采用流式传输的方式在 Internet 播放的媒体格式。
流媒体又叫流式媒体,它是指商家用一个视频传送服务器把节目当成数据包发出,传送到网络上。
用户通过解压设备对这些数据进行解压后,节目就会像发送前那样显示出来。
流媒体以流的方式在网络中传输音频、视频和多媒体文件的形式。
流媒体文件格式是支持采用流式传输及播放的媒体格式。
流式传输方式是将视频和音频等多媒体文件经过特殊的压缩方式分成一个个压缩包,
由服务器向用户计算机连续、实时传送。在采用流式传输方式的系统中,用户不必像非流式播放那样等到整个文件
全部下载完毕后才能看到当中的内容,而是只需要经过几秒钟或几十秒的启动延时即可在用户计算机上利用
相应的播放器对压缩的视频或音频等流式媒体文件进行播放,剩余的部分将继续进行下载,直至播放完毕。

RTP :(Real-time Transport Protocol)

是用于 Internet 上针对多媒体数据流的一种传输层协议 .RTP 协议和 RTP 控制协议 RTCP 一起使用,
而且它是建立在 UDP 协议上的 .
RTP
不像 http ftp 可完整的下载整个影视文件,它是以固定的数据率在网络上发送数据,客户端也是按照这种速度观看影视文件,当
影视画面播放过后,就不可以再重复播放,除非重新向服务器端要求数据。

RTCP:Real-time Transport Control Protocol RTP Control Protocol 或简写 RTCP)

实时传输控制协议 , 是实时传输协议 (RTP) 的一个姐妹协议 .

:--:RTP 协议和 RTP 控制协议 (RTCP) 一起使用,而且它是建立在 UDP 协议上的(一般用于视频会议)

RTSP:(Real Time Streaming Protocol)

实时流媒体会话协议 ,SDP( 会话描述协议 ) RTP( 实时传输协议 )

是用来控制声音或影像的多媒体串流协议 ,RTSP 提供了一个可扩展框架,使实时数据,如音频与视频的受控、点播成为可能。
媒体数据使用 rtp,rtcp 协议。
一般使用 udp 作为传输层。适合 IPTV 场景。
数据源包括现场数据与存储在剪辑中的数据。该协议目的在于控制多个数据发送连接,为选择发送通道,如 UDP 、多播 UDP TCP 提供途
径,并为选择基于 RTP 上发送机制提供方法
传输时所用的网络通讯协定并不在其定义的范围内,服务器端可以自行选择使用 TCP UDP 来传送串流内容,比较能容忍网络延迟 .


--->:RTSP
RTP 最大的区别在于: RTSP 是一种双向实时数据传输协议,它允许客户端向服务器端发送请求,如回放、快进、倒退等操作。当
然, RTSP 可基于 RTP 来传送数据,还可以选择 TCP UDP 、组播 UDP 等通道来发送数据,具有很好的扩展性。它时一种类似与 http 协议
的网络应用层协议 .

WebRTC:

web 端实现流媒体的协议。 google 刚推出 WebRTC 的时候巨头们要么冷眼旁观,要么抵触情绪很大。使用 RTP 协议传输。

RTMP(Real Time Messaging Protocol)

Macromedia 开发的一套视频直播协议,现在属于 Adobe 。和 HLS 一样都可以应用于视频直播,基于 TCP 不会丢失。
//
区别是 RTMP 基于 flash 无法在 iOS 的浏览器里播放,但是实时性比 HLS 要好。
实时消息传送协议是 Adobe Systems 公司为 Flash 播放器和服务器之间音频、视频和数据传输开发的开放协议 .
// iOS
代码里面一般常用的是使用 RTMP 推流,可以使用第三方库 librtmp-iOS 进行推流, librtmp 封装了一些核心的 API 供使用者调用
RTMP
协议也要客户端和服务器通过 " 握手 " 来建立 RTMP Connection ,然后在 Connection 上传输控制信息。 RTMP 协议传输时会对数据格式化,而实际传输的时候为了更好地实现多路复用、分包和信息的公平性,发送端会把 Message 划分为带有 Message ID Chunk ,每个 Chunk 可能是一个单独的 Message
也可能是 Message 的一部分,在接受端会根据 Chunk 中包含的 data 的长度, message id message 的长度把 chunk 还原成完整的 Message ,从而实现信息的收发。

HLS:HTTP Live Streaming(HLS)

是苹果公司 (Apple Inc.) 实现的基于 HTTP 的流媒体传输协议,

可实现流媒体的直播和点播 , 主要应用在 iOS
统,为 iOS 设备 ( iPhone iPad) 提供音视频直播和点播方案。
HLS
点播,基本上就是常见的分段 HTTP 点播,不同在于,它的分段非常小。
相对于常见的流媒体直播协议,例如 RTMP 协议、 RTSP 协议、 MMS 协议等, HLS 直播最大的不同在于,直播客户端获取到的,并不是一个完
整的数据流。
HLS
协议在服务器端将直播数据流存储为连续的、很短时长的媒体文件 (MPEG-TS 格式 ) ,而客户端则不断的下载并播放这些小文件,
因为服务器端总是会将最新的直播数据生成新的小文件,这样客户端只要不停的按顺序播放从服务器获取到的文件,就实现了直播。
由此可见,基本上可以认为, HLS 是以 >> 点播的技术方式来实现直播 << 。由于数据通过 HTTP 协议传输,所以完全不用考虑防火墙或者代理的问
, 而且分段文件的时长很短,客户端可以很快的选择和切换码率,以适应不同带宽条件下的播放。不过 HLS 的这种技术特点,决定了它的
延迟一般总是会高于普通的流媒体直播协议。
// iOS
Android 都天然支持这种协议,配置简单,直接使用 video 标签即可

***VLS
:是一种流服务器,专门用来解决流的各种问题,它也具有一些 VLC 的特征。 videolan 作为服务器可以输出 http rtp rtsp 的流。


原则上, RTSP RTMP HTTP 都可以做直播和点播,但一般做直播用 RTSP RTMP ,做点播用 HTTP 。我们选用的是 RTMP 协议。

各种协议延时及其原因

rtmp httpflv :这两种协议大致数据一致,所以延时原因都是差不多的。按理说 tcp 流式传输直播因该都是延时极低的,为什么 rtmp httpflv 还有延时呢?原因在 h264 上, rtmp httpflv 都是传输的 flv tag ,视频 tag 的数据平常就是 h264 数据, h264 解码有个 IBP I 是关键帧,是一帧完整的图像,必须要先有个 I 才能解码后面的 BP BP 帧可以随便少,但是 I 帧不能少,所以 I 帧必须是在 flv tag 传输中第二个传输的(第一个是 h264spspps ),但是 I 帧在 h264 流里不是常有的,是隔一段才有个 I 帧,这个一段的间隔,俗称 GOP ,当编码时候 GOP 设置很短,当客户端连接上来,服务器会以最快速度找到流中最近 I 帧,从 I 帧开始发送直播数据,然而当 GOP 很长, I 帧间隔很长,或者等待下一个 I 帧开始向新连接发送数据,或者在缓存里找最近的上一个 I 帧开始发送,这里就是 rtmp hls 协议延时的关键了,在各大 cdn 平台,叫 "rtmp 秒开技术 " ,原理就是将推流数据二次解编码,设置很小的 gop 。总的来说, gop 设置 1s ,在不考虑网络传输链路延时情况,数据延时最大就为 1s ,运气好刚好就是 I 帧就是 0 延时!

转自:http://blog.csdn.net/u011216417/article/details/72835402