1
下面是Android的MediaMuxer API示例代碼片段: https://developer.android.com/reference/android/media/MediaMuxer.htmlgetInpuBuffer Android中MediaCodec和MediaMuxer
MediaMuxer muxer = new MediaMuxer("temp.mp4", OutputFormat.MUXER_OUTPUT_MPEG_4);
// More often, the MediaFormat will be retrieved from MediaCodec.getOutputFormat()
// or MediaExtractor.getTrackFormat().
MediaFormat audioFormat = new MediaFormat(...);
MediaFormat videoFormat = new MediaFormat(...);
int audioTrackIndex = muxer.addTrack(audioFormat);
int videoTrackIndex = muxer.addTrack(videoFormat);
ByteBuffer inputBuffer = ByteBuffer.allocate(bufferSize);
boolean finished = false;
BufferInfo bufferInfo = new BufferInfo();
muxer.start();
while(!finished) {
// getInputBuffer() will fill the inputBuffer with one frame of encoded
// sample from either MediaCodec or MediaExtractor, set isAudioSample to
// true when the sample is audio data, set up all the fields of bufferInfo,
// and return true if there are no more samples.
finished = getInputBuffer(inputBuffer, isAudioSample, bufferInfo);
if (!finished) {
int currentTrackIndex = isAudioSample ? audioTrackIndex : videoTrackIndex;
muxer.writeSampleData(currentTrackIndex, inputBuffer, bufferInfo);
}
};
muxer.stop();
muxer.release();
對於此行:finished = getInputBuffer(inputBuffer, isAudioSample, bufferInfo);
我沒有找到這個功能getInputBuffer兩個MediaCodec.java和MediaMuxer。 java,是用戶定義的函數還是API函數?
假設我想記錄視頻(從表面)和使用MediaCodec和MediaMuxer API的音頻,我應該明確設置bufferInfo(包括視頻和音頻)的時間戳還是隻使用默認值?也許某些平臺對曲面和音頻使用不同的時間戳,例如開機時間和單調時間等。 – mewo1234
假設您有適當的輸入時間戳到編碼器,我認爲mediacodec的時間戳應該可以正常工作。 – mstorsjo
@ mewo1234當使用Surface輸入到MediaCodec時,您應該手動設置時間戳,因爲您無法將時間戳與來自Surface的MediaCodec輸入上的幀相關聯。根據我的經驗,如果不這樣做可能會導致一些跳幀。這意味着您需要爲編碼器的輸出緩衝區設置緩衝區信息'presentationTimeUs'。你不需要擔心音頻的時間戳; MediaCodec唯一關心輸入音頻時間戳的是他們正在嚴格增加。 MediaCodec應該使用其編碼的音頻樣本輸出正確的時間戳。 – nyttimangus