音视频同步：为什么有时候声音和嘴型对不上？

音视频同步：为什么有时候声音和嘴型对不上？你看视频时，有没有遇到过：声音比画面快或者画面比声音快这就是音视频同步问题。今天聊聊为什么会不同步，以及怎么解决。什么是音视频同步？同步（理想状态）： 画面：第1帧 → 第2帧 → 第3帧 → 第4帧 → ... 声音：啊啊啊 ～～～～ 时间：0ms 33ms 66ms 100ms ... 不同步（问题状态）： 画面：第1帧 → 第2帧 → 第3帧 → 第4帧 → ... 声音：啊啊啊 ～～～～ 时间：0ms 33ms 66ms 100ms ... ↑ 声音比画面快了50ms为什么会不同步？原因1：编码时时间戳不准视频录制过程： 1. 摄像头采集画面 2. 麦克风采集声音 3. 各自加上时间戳 问题： - 摄像头和麦克风时钟可能不同步 - 导致时间戳有偏差原因2：传输延迟不一致视频流： 画面数据 ──→ 传输 ──→ 解码 ──→ 显示 声音数据 ──→ 传输 ──→ 解码 ──→ 播放 问题： - 视频帧比声音包大 - 传输时间可能不同 - 网络抖动导致延迟变化