訪問ARCore中的圖像數據字節

Question

我創建了一個ARCore Session，並通過Session#setCameraTextureName方法附加了OpenGL紋理ID以顯示我的相機數據。我想訪問紋理上顯示的相機圖像數據字節。

ARKit和Tango爲每個幀提供對圖像字節的訪問權限，但在ARCore API中似乎沒有任何容易提供的內容。

使用ARCore時，有沒有其他方式可以訪問圖像字節？

Answer 1

目前，訪問圖像數據的最佳選擇可能是將紋理繪製到渲染緩衝區，並將glReadPixels用於持久映射像素解包緩衝區。使用柵欄同步來檢測glReadPixels何時完成。

另一種選擇是使用計算着色器並直接寫入 持久映射的 SSBO。 （忽略永久映射的建議。我想EXT_buffer_storage有更廣泛的支持）

後來可能是更少的副本（在渲染的像素可能仍然打DRAM即使你glReadPixels後無效），但它也是一個less-共同的代碼路徑，並導致渲染/計算轉換，所以我沒有直覺哪種方法更有效。

Answer 2

也許這可以幫助你我想獲得位圖形式的相機視圖。我已經在三星s8上測試過。

int w=1080; 
    int h = 2220; 
    int b[]=new int[w*(0+h)]; 
    int bt[]=new int[w*h]; 
    IntBuffer ib = IntBuffer.wrap(b); 
    ib.position(0); 
    GLES20.glReadPixels(0, 0, w, h, GLES20.GL_RGBA, GLES20.GL_UNSIGNED_BYTE, ib); 

    for(int i=0, k=0; i<h; i++, k++) 
    {//remember, that OpenGL bitmap is incompatible with Android bitmap 
     //and so, some correction need. 
     for(int j=0; j<w; j++) 
     { 
      int pix=b[i*w+j]; 
      int pb=(pix>>16)&0xff; 
      int pr=(pix<<16)&0x00ff0000; 
      int pix1=(pix&0xff00ff00) | pr | pb; 
      bt[(h-k-1)*w+j]=pix1; 
     } 
    } 

    sb=Bitmap.createBitmap(bt, w, h, Bitmap.Config.ARGB_8888);