攝像頭2，增加FPS

Question

我使用Camera 2 API將JPEG圖像保存在磁盤上。我目前在我的Nexus 5X上有3-4 fps，我想將其提高到20-30。可能嗎？

將圖像格式更改爲YUV我設法生成30 fps。是否有可能以這個幀率保存它們，還是應該放棄並以我的3-4 fps生活？

顯然我可以共享代碼，如果需要的話，但如果大家都認爲這是不可能的，我會放棄。使用NDK（例如libjpeg）是一個選項（但顯然我寧願避免它）。

由於

編輯：這裏是如何我轉換YUV android.media.Image到單個字節[]：

private byte[] toByteArray(Image image, File destination) { 

    ByteBuffer buffer0 = image.getPlanes()[0].getBuffer(); 
    ByteBuffer buffer2 = image.getPlanes()[2].getBuffer(); 
    int buffer0_size = buffer0.remaining(); 
    int buffer2_size = buffer2.remaining(); 

    byte[] bytes = new byte[buffer0_size + buffer2_size]; 

    buffer0.get(bytes, 0, buffer0_size); 
    buffer2.get(bytes, buffer0_size, buffer2_size); 

    return bytes; 
} 

編輯2：另一種方法，我發現了YUV圖像轉換成一個字節[]：在移動電話上

private byte[] toByteArray(Image image, File destination) { 

    Image.Plane yPlane = image.getPlanes()[0]; 
    Image.Plane uPlane = image.getPlanes()[1]; 
    Image.Plane vPlane = image.getPlanes()[2]; 

    int ySize = yPlane.getBuffer().remaining(); 

    // be aware that this size does not include the padding at the end, if there is any 
    // (e.g. if pixel stride is 2 the size is ySize/2 - 1) 
    int uSize = uPlane.getBuffer().remaining(); 
    int vSize = vPlane.getBuffer().remaining(); 

    byte[] data = new byte[ySize + (ySize/2)]; 

    yPlane.getBuffer().get(data, 0, ySize); 

    ByteBuffer ub = uPlane.getBuffer(); 
    ByteBuffer vb = vPlane.getBuffer(); 

    int uvPixelStride = uPlane.getPixelStride(); //stride guaranteed to be the same for u and v planes 

    if (uvPixelStride == 1) { 

     uPlane.getBuffer().get(data, ySize, uSize); 
     vPlane.getBuffer().get(data, ySize + uSize, vSize); 
    } 
    else { 

     // if pixel stride is 2 there is padding between each pixel 
     // converting it to NV21 by filling the gaps of the v plane with the u values 
     vb.get(data, ySize, vSize); 
     for (int i = 0; i < uSize; i += 2) { 
      data[ySize + i + 1] = ub.get(i); 
     } 
    } 

    return data; 
} 

Answer 1

專用JPEG編碼器單元是有效的，但通常不用於吞吐量優化。 （歷史上，用戶每隔一兩秒就拍一張照片）。在全分辨率下，5X的相機流水線不會以比FPS更快的速度生成JPEG。

如果您需要更高的費率，您需要捕獲未壓縮的YUV。正如CommonsWare所提到的，沒有足夠的磁盤帶寬來將全分辨率未壓縮的YUV流式傳輸到磁盤，因此在內存不足之前，只能保留一定數量的幀。

您可以使用libjpeg-turbo或其他一些高效JPEG編碼器，查看您可以自己壓縮多少幀 - 這可能比硬件JPEG單元更高。最大化速率的最簡單方法是以30fps捕獲YUV，並行運行一些JPEG編碼線程。爲了獲得最大速度，您需要手動編寫與JPEG編碼器交談的代碼，因爲您的源數據是YUV，而不是RGB，而大多數JPEG編碼接口傾向於接受這些數據（即使通常編碼的JPEG的色彩空間實際上是YUV）。當編碼器線程完成前一幀時，它可以抓取來自攝像機的下一幀（您可以保留最新YUV圖像的小型循環緩衝區，以使其更簡單）。