YUV/PCM可視化器來測量脣部同步

Question

我有一個來自編碼器的原始視頻和原始音頻的兩個轉儲文件，我希望能夠測量「脣部同步」。想象一下錘子撞擊鐵砧的視頻。我想逐幀去看看，當錘子最後擊中鐵砧時，音軌上會出現尖峯振幅。

由於所有事情發生的速度，我不能只聽音頻，我需要看到時域波形。

是否有任何工具可以讓我看到視頻和音頻？

Answer 1

如果您擔心驗證解碼器，那麼通常從驗證的角度來看，目標是檢查音頻和視頻PTS值與通用實時時鐘。

原始YUV和PCM文件不包含時間戳。 如果你知道幀率和採樣率，你可以使用一個原始的yuv文件查看器（我自己寫的）來計算視頻中給定幀的時間（從文件開始）和一個像Audacity找出文件開始時間到音頻文件開始音調的時間。這仍然不能告訴你整個故事，因爲工具通常在ts/ps文件中的音頻和視頻之間嵌入延遲。或者你可以連接OScope並去舊學校。