h.264 NALU详细分析2

承接上集

h.264 NALU详细分析1_杀神李的博客-CSDN博客

上集我们已经讲到了帧是由一个或者多个NALU组成并且NALU除了存储帧的信息外还会存储一些其他的信息比如 SEI SPS PPS 看到这些名词别急等会我会一一解释

⼀个原始的H.264 NALU单元通常由[StartCode] [NALU Header] [NALU Payload]三部分组成，其中 Start Code ⽤于标示这是⼀个NALU 单元的开始，必须是"00 00 00 01" 或"00 00 01"，除此之外基本相当于⼀个NAL header + RBSP;

注意我上文说的是通常由 [StartCode] [NALU Header] [NALU Payload] 这三部分组成但是在某些情况下是没有StartCode这个字段的初学者不用考虑继续看文章下文省略掉StartCode ps:对于FFmpeg解复⽤后，MP4⽂件读取出来的packet是不带startcode，但TS⽂件读取出来的packet带了startcode

NALU结构单元的主体结构如下所示(除去StartCode):

首先我们来看NAL header里的信息 NAL header只占一个字节

T为负荷数据类型，占5bit 这是表明了这个NALU所携带的信息到底是啥比如可以是I帧 B帧 P帧或者其他SEI SPS PPS之类的信息 NALU不一定非要存储帧信息

R为重要性指示位，占2个bit 取00~11,似乎指示这个NALU的重要性,如00的NALU解码器可以丢弃它⽽不影响图像的回放,0～3，取值越⼤，表示当前NAL越重要，需要优先受到保护。如果当前 NAL是属于参考帧的⽚，或是序列参数集(SPS)，或是图像参数集(PPS)这些重要的单位时，本句法元素必需⼤于0。

发I帧之前，⾄少要发⼀次SPS和PPS。否则无法解析否则无法解析否则无法解析

最后的F为禁⽌位，占1bit forbidden_zero_bit：在 H.264 规范中规定了这⼀位必须为 0

有些地方看不懂没关系比如序列参数集图像参数集啥的等会我还会解释

我们来看一个例子当NAL header的值为67时他的头部信息表示什么意思呢

67：

转换为⼆进制：0110 0111

F=0 禁止位

R=11=3(十进制) 表示有点重要

T=00111= 7（⼗进制） 7对应的NALU的类型需要去查表表如下所示 查表可得他是一个SPS NALU单元

T	NAL 单元和 RBSP 语法结构的内容
0	未指定
1	⼀个⾮IDR图像的编码条带 slice_layer_without_partitioning_rbsp ( )
2	编码条带数据分割块A slice_data_partition_a_layer_rbsp( )
3	编码条带数据分割块B slice_data_partition_b_layer_rbsp( )
4	编码条带数据分割块C slice_data_partition_c_layer_rbsp( )
5	IDR图像的编码条带(⽚) slice_layer_without_partitioning_rbsp ( )
6	辅助增强信息 (SEI) sei_rbsp( ) 用的比较多
7	序列参数集 seq_parameter_set_rbsp( ) 也就是SPS
8	图像参数集 pic_parameter_set_rbsp( ) 也就是PPS
9	访问单元分隔符 access_unit_delimiter_rbsp( )
10	序列结尾 end_of_seq_rbsp( )
11	流结尾 end_of_stream_rbsp( )
12	填充数据 filler_data_rbsp( )
13	序列参数集扩展seq_parameter_set_extension_rbsp( )
14-18	保留
19	未分割的辅助编码图像的编码条带 slice_layer_without_partitioning_rbsp ( )
20-23	保留
24-31	未指定

SPS即Sequence Paramater Set，又称作序列参数集。SPS中保存了一组编码视频序列(Coded video sequence)的全局参数。所谓的编码视频序列即原始视频的一帧一帧的像素数据经过编码之后的结构组成的序列。而每一帧的编码后数据所依赖的参数保存于图像参数集中。一般情况SPS和PPS的NAL Unit通常位于整个码流的起始位置。但在某些特殊情况下，在码流中间也可能出现这两种结构，主要原因可能为：

1.解码器需要在码流中间开始解码；

2.编码器在编码的过程中改变了码流的参数（如图像分辨率等）；

总而言之这两个东西保存了一些全局参数和配置信息必须要先有SPS和PPS才能解析接下来的I帧关于SPS和PPS详细解析以后我还会出文章同理这两个东西也不是初学者应该去深入了解的

接下来我们还会去分析NAL header后的RBSP Raw Byte Sequence Payload 原始数据字节流

接下来的文章就请看NALU详细分析3了

h.264 NALU详细分析2相关推荐

H.264码流分析及编解码调试
一.H.264码流分析 1. 选择一个.mp4或者.264文件. 2. 在码流分析仪软件中打开该文件,从几个层次进行分析: (1) 分析SPS和PPS里都包含哪些主要的信息,给出参数值.(例如分辨率. ...
RTMP FLV H.264 NALU GOP
RTMP GOP (通常是 2倍的帧率, 2s左右) GOP说白了就是两个I帧之间的间隔.比较说GOP为120,如果是720p60的话,那就是2s一次I帧. IDR帧是I帧,但I帧不一定是IDR帧,比 ...
H.264 NALU分隔Annex B和avcC
文章目录分隔格式 Annex B avcC 编解码器的输入输出分隔符类型分隔格式 H.264常用的分隔方式有Annex B和avcC Annex B 这种分隔符通常用于视频会议还有文件存储例如TS ...
【数据压缩】第九次作业——H.264码流分析
目录 1. 选择一个.mp4或者.264文件 2. 在码流分析仪软件中打开该文件,从几个层次进行分析分析SPS和PPS里都包含哪些主要的信息,给出参数值.(例如分辨率.帧率.GOP结构等等) SPS ...
数据压缩作业：H.264视频格式分析
目录一.实验目的二.实验过程及结果 1.SPS分析 2.PPS分析 3.文件GOP分析 1)编码比特数统计: 2)QP值统计 3)I帧分析 4)B帧分析 5)p帧分析一.实验目的选择一个.m ...
H.264视频RTP负载格式/NALU的类型
1. 网络抽象层单元类型(NALU) NALU 头由一个字节组成, 它的语法如下: +===============+ |0|1|2|3|4|5|6|7| +=+= ...
H.264码流解析一个SPS的nalu及获取视频的分辨率
00 00 00 01 67 42 00 28 E9 00 A0 0B 77 FE 00 02 00 03 C4 80 00 00 03 00 80 00 00 1A 4D 88 10 9 ...
H.264 媒体流 AnnexB 和 AVCC 格式分析及 FFmpeg 解析mp4的H.264码流方法
H264码流分两种组织方式,一种是AnnexB格式,一种是AVCC格式. 作者:码农小明来源:https://blog.csdn.net/shaosunrise/article/details/12 ...
H.264的NALU，RTP封包说明(转自牛人)
H.264 RTP payload 格式 H.264 视频 RTP 负载格式 1. 网络抽象层单元类型 (NALU) NALU 头由一个字节组成, 它的语法如下: +---------------+ ...

h.264 NALU详细分析2

h.264 NALU详细分析2相关推荐

最新文章

热门文章