DTS 和 PTS
DTS : decode timestamp 解码时间戳
PTS :present timestamp 展示时间戳
如果 H264 数据流中没有 B 帧,那么每一真的 DTS 和 PTS 都应该是一样的,如果有B帧,那么PTS是具体画面的时间戳,标注了每一帧画面的实际展示时的时间点,因此PTS的值是递增的,而DTS则不再递增。
例如:
正常画面帧顺序为 : I1 B1 B2 P1 I2 B3 B4 B5 P2
一般H264在流式传输的时候都是按照上面的顺序传输的,sink端同样也是按照这个顺序落地的,同时,上面的顺序也是 PTS 的顺序。
但是在解码时不能按照上面的顺序进行,因为 B1 B2 会依赖 I1 和 P1,B3 B4 B5 会依赖 I2 和P2,所以解码的顺序是 I1 P1 B1 B2 I2 P2 B3 B4 B5,这个顺序便是 DTS的递增顺序。
为什么要引入B帧?
B帧的拥有最高的压缩率,比P帧要高,因此在需要极高压缩率的场景下会使用B帧,但是B帧的解压缩比较耗CPU。
如何计算时间?
在进行时间计算的时候永远不会使用到 DTS 值,只会用到PTS,FFmpeg中通过定义时间基来获得一个最小时间粒度,时间基是一个大整数(倒数为真分数,或者说是一个小数),所有画面的真实时间都遵循如下公式:
Time = PTS * 1/时间基
因此一个视频的总时长为:
Time = Duration_PTS * 1/时间基