码流研究

h264

2)        P:填充标志,占1位,如果P=1,则在该报文的尾部填充一个或多个额外的八位组,它们不是有效载荷的一部分。

5)        M: 标记,占1位,不同的有效载荷有不同的含义,对于视频,标记一帧的结束;对于音频,标记会话的开始。

带填充标志

不带填充标志

RTP荷载类型分析

荷载格式定义三个不同的基本荷载结构,接收者可以通过RTP荷载的第一个字节后5位(如图2)识别荷载结构。

1)   单个NAL单元包:荷载中只包含一个NAL单元。NAL头类型域等于原始 NAL单元类型,即在范围1到23之间

2)   聚合包:本类型用于聚合多个NAL单元到单个RTP荷载中。本包有四种版本,单时间聚合包类型A (STAP-A),单时间聚合包类型B (STAP-B),多时间聚合包类型(MTAP)16位位移(MTAP16), 多时间聚合包类型(MTAP)24位位移(MTAP24)。赋予STAP-A, STAP-B, MTAP16, MTAP24的NAL单元类型号分别是 24,25, 26, 27

3)   分片单元:用于分片单个NAL单元到多个RTP包。现存两个版本FU-A,FU-B,用NAL单元类型 28,29标识

常用的打包时的分包规则是:如果小于MTU采用单个NAL单元包,如果大于MTU就采用FUs分片方式。
因为常用的打包方式就是单个NAL包和FU-A方式,所以我们只解析这两种。
 

2.2、分片单元(FU-A)

                                       图4

分片只定义于单个NAL单元不用于任何聚合包。NAL单元的一个分片由整数个连续NAL单元字节组成。每个NAL单元字节必须正好是该NAL单元一个分片的一部分。相同NAL单元的分片必须使用递增的RTP序号连续顺序发送(第一和最后分片之间没有其他的RTP包)。相似,NAL单元必须按照RTP顺序号的顺序装配。

   当一个NAL单元被分片运送在分片单元(FUs)中时,被引用为分片NAL单元。STAPs,MTAPs不可以被分片。 FUs不可以嵌套。 即, 一个FU 不可以包含另一个FU。运送FU的RTP时戳被设置成分片NAL单元的NALU时刻。

   图 4 表示FU-A的RTP荷载格式。FU-A由1字节的分片单元指示(如图5),1字节的分片单元头(如图6),和分片单元荷载组成。

S: 1 bit 当设置成1,开始位指示分片NAL单元的开始。当跟随的FU荷载不是分片NAL单元荷载的开始,开始位设为0。

E: 1 bit 当设置成1, 结束位指示分片NAL单元的结束,即, 荷载的最后字节也是分片NAL单元的最后一个字节。当跟随的 FU荷载不是分片NAL单元的最后分片,结束位设置为0。

R: 1 bit 保留位必须设置为0,接收者必须忽略该位

图5的type表征的是一个NAL包该拆分组装荷载,图六中的type表征的是当前这一帧的类型(普通帧还是关键帧)

打包时,原始的NAL头的前三位为FU indicator的前三位,原始的NAL头的后五位为FU header的后五位。

7c81--》0111 1100 1000 0001

第一个字节后5位 1 1100  就是28   FU-A格式封装

因为是FU-A格式封装,所以有两个字节的分片单元头即 

7c是FU indicator
81是FU Header
0111 1100 1000 0001
 
0                            是F
11                          是NRI
11100                    是FU Type,这里是28,即FU-A,NAL单元类型
 
1                            是S,Start,说明是分片的第一包
0                            是E,End,如果是分片的最后一包,设置为1,这里不是
0                            是R,Remain,保留位,总是0
00001                   是NAl Type,这里是1,说明是普通帧
 
如果85是FU Header
1                            是S,Start,说明是分片的第一包
0                            是E,End,如果是分片的最后一包,设置为1,这里不是
0                            是R,Remain,保留位,总是0
00101                    是NAl Type,这里是5,说明是关键帧
如果01是FU Header
0                            是S,Start,说明不是分片的第一包
0                            是E,End,如果是分片的最后一包,设置为1,这里不是
0                            是R,Remain,保留位,总是0
00001                    是NAl Type,这里是1,说明是普通帧
如果41是FU Header
0                            是S,Start,说明不是分片的第一包
1                            是E,End,如果是分片的最后一包,设置为1
0                            是R,Remain,保留位,总是0
00001                    是NAl Type,这里是,说明是普通帧
 
 
 
 
原文地址:https://www.cnblogs.com/baldermurphy/p/7605375.html