我在做一個應用程序來錄製視頻。我想要的是,當應用程序正在記錄視頻時,每個幀也保存在RGB值的數組列表中,以便從中提取特定信息。我知道兩個進程(視頻錄製和幀提取)是異步的,但這不是問題:在錄製視頻之後,提取過程可以完成。實時從視頻中提取幀android
有人能告訴我如何從視頻中提取幀?
非常感謝。
我在做一個應用程序來錄製視頻。我想要的是,當應用程序正在記錄視頻時,每個幀也保存在RGB值的數組列表中,以便從中提取特定信息。我知道兩個進程(視頻錄製和幀提取)是異步的,但這不是問題:在錄製視頻之後,提取過程可以完成。實時從視頻中提取幀android
有人能告訴我如何從視頻中提取幀?
非常感謝。
使用相機對象可以覆蓋功能setPreviewCallback
。從這個函數中你將得到一個字節數據的數組。您可以將其轉換爲位圖,或者可以將它們保存在一個數組數組中。
假設你伸出SurfaceView
和器具SurfaceHolder.Callback
碼的樣子,
mCamera.setPreviewCallback(new PreviewCallback() {
public void onPreviewFrame(byte[] data, Camera camera) {
//do some operations using data
}
});
如果你想獲得你可以使用這個功能的RGB值,
static public void decodeYUV420SP(int[] rgb, byte[] yuv420sp, int width,
int height) {
final int frameSize = width * height;
for (int j = 0, yp = 0; j < height; j++) {
int uvp = frameSize + (j >> 1) * width, u = 0, v = 0;
for (int i = 0; i < width; i++, yp++) {
int y = (0xff & ((int) yuv420sp[yp])) - 16;
if (y < 0)
y = 0;
if ((i & 1) == 0) {
v = (0xff & yuv420sp[uvp++]) - 128;
u = (0xff & yuv420sp[uvp++]) - 128;
}
int y1192 = 1192 * y;
int r = (y1192 + 1634 * v);
int g = (y1192 - 833 * v - 400 * u);
int b = (y1192 + 2066 * u);
if (r < 0)
r = 0;
else if (r > 262143)
r = 262143;
if (g < 0)
g = 0;
else if (g > 262143)
g = 262143;
if (b < 0)
b = 0;
else if (b > 262143)
b = 262143;
rgb[yp] = 0xff000000 | ((r << 6) & 0xff0000)
| ((g >> 2) & 0xff00) | ((b >> 10) & 0xff);
}
}
}
我認爲這是你想要的答案。如果我錯了,請讓我知道什麼是您的實際需求
爲了得到綠色值,可以使用下面的代碼,
static public void calculateColor(int[] rgb, int[] color,
int width, int height, int component) {
for (int bin = 0; bin < 256; bin++) {
color[bin] = 0;
} // bin
int start = 0;
int end = width * height;
if (component == 0) // red
{
for (int pix = start; pix < end; pix += 3) {
int pixVal = (rgb[pix] >> 16) & 0xff;
color[pixVal]++;
} // pix
} else if (component == 1) // green
{
for (int pix = start; pix < end; pix += 3) {
int pixVal = (rgb[pix] >> 8) & 0xff;
color[pixVal]++;
} // pix
} else // blue
{
for (int pix = start; pix < end; pix += 3) {
int pixVal = rgb[pix] & 0xff;
color[pixVal]++;
} // pix
}
}
調用此函數將返回的綠色價值爲每個像素。如果您想要特定像素的綠色值,則必須修改此代碼。
從.mp4文件中提取幀的示例代碼可在bigflake site上找到。它使用MediaCodec,API 16+上提供。如果您需要在較舊的設備上運行,您最好的選擇可能是ffmpeg。
RGB數據每個像素需要3個字節。在30 fps下的10秒720p視頻將需要1280 * 720 * 3 * 30 * 10 = 791兆字節。除非你的視頻幀相當小,否則保留大量視頻幀可能不實際(或可能)。
在我看來,您希望在錄製視頻的同時獲取圖像。
在這種情況下,您需要查看Build your camera app。本頁面介紹如何使用安卓相機類錄製視頻。
然後,您可以通過Camera preview callback獲得yuv圖像。
目前有三個答案,其中兩個用於在錄製過程中檢查相機預覽,一個用於檢查錄製後輸出。您應該澄清一下您的問題,以指定您正在嘗試執行的操作。 – fadden