初步了解了一些专有名词之后，我在同一个博主处找到“音频帧、视频帧及其同步”的资料，那么接下来就学习整理一下这篇博文，学习音频帧和视频帧的主要参数和分析方法，从而进一步了解音视频的相关知识。 【ps：本文的引用来源，见本文底部的参考资料】

音频帧的概念没有视频帧那么清晰，几乎所有视频编码格式都可以简单的认为一帧就是编码后的一副图像，而音频帧会因编码格式的不同而不同，如 PCM 音频流可以直接进行播放。

（1）原文定义：

帧大小指每帧的采样数，这个值的恒定的。

（2）我的理解：由上一篇博文《菜鸟修炼笔记-音视频开发基础知识-专有名词解析》可知，帧率是指每秒显示的帧数，采样率是每秒的采样数，根据三者定义可得：采样率=帧率*帧大小。

（1）原文定义：

（2）帧长度的计算公式：

公式的理解：

（1）定义：

即每一帧持续的时间。（单位：ms）

（2）每帧持续时间的计算公式：

公式的理解：

在视频压缩技术中，视频帧采用不同的压缩算法来减少数据量，通常只编码图像之间的差异之处，相同的元素信息则不必重复发送，视频帧的不同算法一般称之为图片类型（picture types）或者帧类型（frame types）

主要的三种图片类型分别是 I、P 和 B：

1. I 帧（帧内编码帧）：

（1）特点：

（2）用途：

2. P 帧（前向预测帧）（增量帧）：

（1）特点：

（2）用途：

3. B 帧（双向预测编码帧）：

（1）特点：

（2）用途：

PS:

在 H.264 / MPEG-4 AVC 标准中，预测类型的粒度降低到切片（Slice）级别，切片是帧的空间上不同的区域，该区域与同一帧中的任何其他区域分开进行编码，I 切片，P切片和 B 切片取代了 I、P 和 B 帧，这部分内容暂时了解这么多。

原博文无相关内容，待补充。

GOP的第一帧成为关键帧：IDR

IDR都是I帧，可以防止一帧解码出错，导致后面所有帧解码出错的问题。当解码器在解码到IDR的时候，会将之前的参考帧清空，重新开始一个新的序列，这样，即便前面一帧解码出现重大错误，也不会蔓延到后面的数据中。如下图所示：

解码时间戳，表示压缩帧的解码时间，相当于告诉播放器什么时候解码这一帧的数据。

显示时间戳，表示将压缩帧解码后得到的原始帧的显示时间，相当于告诉播放时什么时候显示这一阵的数据。

对于音频来说，DTS 和 PTS 是相同的，对于视频来说，由于 B 帧是双向预测帧，这就导致 DTS 与 PTS 不同，如果每个 GOP 没有 B 帧，则 DTS 和 PTS 相同，反之则 DTS 与 PTS 不同

（1）从摄像头和麦克风采集数据。 （2）进行音频、视频编码。 （3）将音视频进行格式封装，生成媒体文件。 （4）需要播放时，获取媒体文件。 （5）对媒体文件进行解复用，将音视频分开。 （6）对音频和视频进行解码。 （7）将音频和视频分开独立播放。

（1）音频：采样率。（每秒采样数） （2）视频：帧率。（每秒帧数）

（1）音频的每帧持续时间的计算方式见上文，即： 每帧持续时间（ms）= 每帧采样数(帧大小) / 采样率 *1000 （2）视频的每帧播放时长： 每帧持续时间（ms） = 1000/帧率

（1）调整音频和视频的每帧播放时间为基本相等。 （2）采用音视频同步方式（其实就是以那个时间为标准进行同步的问题）进行同步：

a.【视频同步到音频】：常采用这种方式，因为对于延迟以及卡顿，人的听觉较视觉更为敏感。 b.【音频同步到视频】 c.【音视频同步到外部时钟】

当视频慢于音频就要加快视频的播放速度，可以适当丢帧弥补追上音频，如果已经有延迟减小延迟也可以，反之则减小视频的播放速度。