如何使用JNI在C中获取原始的Android相机缓冲区？

Question

我一直在详尽搜索Google，但是找不到。也许我缺少明显的东西。谢谢！

（这是因为预览回调（即使使用缓冲区）的Java实现效率也很低。）

Answer 1

我对这个话题做了一些调查。该演讲（来自第277页，中文）很有帮助。

相机预览通话链

如其他人所述，您可以使用Camera.setPreviewCallback方法获得缓冲区。
这是那里发生的情况（详细版本）：

1. 用户调用Camera.startPreview()这是一个本机函数。
2. android_hardware_Camera_startPreview调用startPreviewC ++ Camera类的方法。
3. Camera调用接口startPreview方法ICamera
4. ICamera使一个IPC远程客户端调用。
5. 它调用类的setCameraMode方法CameraService。
6. CameraService设置一个窗口以显示预览并调用类的startPreview方法CameraHardwareInterface。

7. 后者尝试start_preview在特定camera_device_t设备上调用方法。
   我没有进一步查找，但是它应该执行呼叫驱动程序。
   

8. 当图像到达时，dataCallback的CameraService被调用。

9. 它将数据传递给handlePreviewData客户端的方法。
10. 客户端要么复制缓冲区，要么直接将其发送到ICameraClient。
11. ICameraClient将其发送IPC到Camera。
12. Camera调用注册的侦听器并将缓冲区传递给JNI。
13. 它调用Java类中的回调。如果用户提供了缓冲区，Camera.addCallbackBuffer则它将首先复制到缓冲区。
14. 最后，Java类Camera处理消息并调用的onPreviewFrame方法Camera.PreviewCallback。

如您所见IPC，在步骤10、11上，调用了2个调用，并且缓冲区被复制了至少两次。所返回的raw缓冲区的第一个实例camera_device_t托管在另一个进程中，由于中的安全检查，您无法访问它CameraService。

预览表面

但是，当您使用Camera.setPreviewTexture或设置预览图面时，或将Camera.setPreviewDisplay其直接传递到摄像头设备并实时刷新，而无需上面所有链条的参与。正如文档所述：

处理到由屏幕合成器管理的原始缓冲区。

Java类Surface具有一种检索其内容的方法：

public static native Bitmap screenshot(int width, int height, int minLayer, int maxLayer);

但是此API是隐藏的。请参阅此问题以获取使用方法。