### H.264与RTP传输协议：RFC3984中文版解析
#### H.264编码概述
H.264是一种高效视频压缩标准，由国际电信联盟（ITU-T）推荐并被技术上等同的ISO/IEC国际标准14496-10所采纳。它在2005年5月被ITU-T正式发布，并自那时起成为广泛应用于各种应用场景中的视频编码标准。H.264编码器支持多种压缩级别，包括低比特率的会话通信、互联网视频流媒体传输以及高比特率的视频点播服务。
H.264编码的核心是将视频数据划分为网络抽象层单元（NAL Units）。每个NAL Unit包含一组视频编码层（VCL）的数据或者非视频编码层的信息，这些信息对于视频解码至关重要。VCL层负责处理实际的图像预测和变换编码，而非VCL层则负责管理元数据，如帧同步、错误检测等。
#### RTP负载格式详解
为了实现H.264视频通过RTP（实时传输协议）进行有效传输，RFC3984定义了一种特定的RTP负载格式。这种格式允许在一个RTP数据包中封装一个或多个NAL Units，从而满足了不同场景下的需求。
##### RTP头部使用
RTP数据包的头部包含了用于同步、识别和控制传输的关键信息，如时间戳、序列号等。这些字段确保了数据包能够按照正确的顺序被接收方解码。
##### RTP负载格式使用
负载格式的设计考虑到了H.264的特点，例如，它可以灵活地处理不同类型的NAL Units。每种类型的NAL Unit都有其特定的作用，如关键帧、预测帧等。
##### NAL单位类型
NAL Units根据其功能的不同被分为多个类型，每种类型都有其特定的应用场景。例如：
- **关键帧**：提供视频流的起始点。
- **预测帧**：基于前面的帧来预测当前帧的内容。
- **参考帧**：用于后续帧的预测。
- **SEI（补充增强信息）**：携带额外的辅助信息，如运动矢量精度提升。
##### FU-A/FU-B格式
对于那些较大的NAL Units，可能需要分成多个较小的数据包进行传输，这时就需要用到FU-A和FU-B格式。这两种格式可以将一个大的NAL Unit分割成若干个更小的分片，每个分片都被封装在单独的RTP数据包中，以便在网络中更有效地传输。
##### Display Order（显示顺序）
由于视频编码过程中可能会对帧进行重排序，因此需要有一种机制来恢复原始的显示顺序。显示顺序字段（DON）就起到了这个作用，它确保了接收端可以正确地按照原始顺序播放视频。
#### NAL单元细节
每个NAL Unit都包含了一个头部，用来标识其类型以及是否携带了任何特定的标志位。这些标志位可以帮助接收端更好地理解如何处理接收到的数据。
##### NAL头部格式
NAL头部包含了一个单字节的字段，其中的最后五个比特位表示NAL Unit的类型，而前三个比特位则保留用于其他用途。此外，头部还可能包含一个长度字段，用于指示NAL Unit的有效负载大小。
##### 负载类型
根据NAL Unit的类型不同，其负载也有所不同。例如，对于关键帧来说，其负载可能包含整个帧的数据；而对于预测帧，则可能只包含相对于前一帧的差异数据。
#### 安全性和可靠性
考虑到网络环境的复杂性，RFC3984还讨论了一些与安全性和可靠性相关的问题，如数据加密、错误检测等。
#### IANA注册信息
文档还包括了IANA（互联网编号分配机构）为RTP负载格式注册的相关信息，确保了标准化过程中的唯一性和一致性。
#### 参考文献和附录
文档末尾提供了详细的参考文献列表，这些文献涵盖了H.264编码的各种细节和技术背景，为读者提供了深入学习的途径。
RFC3984中文版详细介绍了H.264编码标准与RTP传输协议之间的交互机制，对于理解和实现高质量的视频通信系统具有重要的指导意义。
