关于音视频同步的三种思路

Question

音频同步到视频或者同步到外部时钟的做法，都可能涉及到音频丢帧吧？这种情况下产生的音频卡顿怎么处理？实际的生产环境会采用这两种同步方式吗？

Answer 1

李超 2023-03-04 22:00:52

没有音频丢帧，当没有声音时，应静默音填充

• 提问者 jyau #1

  音频对齐视频有两种情况，
  （1）音频比视频慢的话才是填充静默音吧？中间填静默音听起来同样是声音卡顿了吧，这种做法生产环境能接受吗？
  （2）如果音频比视频快，不是需要丢掉一部分音频帧，才能对齐视频吗？

• 李超 回复 提问者 jyau #2

  音频与视频之间由于有时间戳，因此在播放一开始就要对齐时间，因此不存在快慢。只有在录制时，用户关闭麦克风这种情况，在这种情况下，只有视频没有音频，此时要对齐音视频时，音频要将没有录制声音的这段补上静默音。你现在担心的问题在实际操作中都不存在，这些细节你要自己做一遍，才能真正清楚

• 提问者 jyau 回复 李超 #3

  实践归实践，但老师你这个说法我不理解。如果一开始对齐时间之后就不存在快慢，那么音视频同步的意义在哪里？做同步本身就是因为音视频不同轨解码的速率不同，需要进行对齐，这不就是快慢了吗？

点开查看后面4条评论