如何强制Android摄像头以纵向模式显示，或让我进行旋转

Question

我是新来发帖的，所以请友善些！我已经研究了几乎所有其他与此相关的问题，并尝试了大多数，但我完全感到沮丧。我只想让我的Android手机以纵向模式显示摄像头，而不是横向模式。我只是修改opencv提供的ImageManipulations示例。

我使用的是opencv 3.01、Android sdk版本23、Android Studio 2.0和Android版本6.0.1的Nexus 5手机。这是2016年4月28日，这几乎是最新的稳定版本。

我已经在AndroidManifest中强制应用程序进入肖像模式。包含以下内容的xml文件：

              android:screenOrientation="portrait"

整个应用程序在纵向模式下正确显示，但显示的相机图像旋转了90度。换句话说，如果你将头向左倾斜90度，你将看到合适的图像。所以我需要将图像向右旋转。

我尝试使用opencv教程3代码和setDisplayOrientation（90）：

public void setResolution(Size resolution) {
    disconnectCamera();
    mMaxHeight = resolution.height;
    mMaxWidth = resolution.width;
    // mCamera.setDisplayOrientation(90);  //* Crashes if placed here
    connectCamera(getWidth(), getHeight());
    mCamera.setDisplayOrientation(90);  //* Doesn't crash if here, but doesn't work either
}

但那没用。在任何情况下，本教程都使用了Android版本21中不推荐使用的“camera”类，并被“camera2”类取代。我没有在这方面做更多的工作，因为我想使用最新的API，但也许camera2中的某些东西可以工作？

一些人发布了关于使用“转置”和“翻转”函数旋转图像的帖子，我尝试了onCameraFrame方法中的多种方法：

原始的，作品的，但旋转的：

    public Mat onCameraFrame(CvCameraViewFrame inputFrame) {
    Mat rgba = inputFrame.rgba();
    ... do stuff to the image ...
    return rgba;

图像显示变暗，我的FPS计算变为零（奇怪）::

    public Mat onCameraFrame(CvCameraViewFrame inputFrame) {
    Mat rgba = inputFrame.rgba();

    // Rotate clockwise 90 degrees
    Core.transpose(rgba, rgba);
    Core.flip(rgba, rgba, 1);
    ... do stuff to the image ...
    return rgba;

旋转180度并再次显示视频，现在翻转，但仍然是横向模式：

    public Mat onCameraFrame(CvCameraViewFrame inputFrame) {
    Mat rgba = inputFrame.rgba();

    // Rotate clockwise 90 degrees, then 90 degrees again
    Core.transpose(rgba, rgba);
    Core.flip(rgba, rgba, 1);
    Core.transpose(rgba, rgba);
    Core.flip(rgba, rgba, 1);
    ... do stuff to the image ...
    return rgba;

因此，如果onCameraFrame返回的Mat分辨率与原始分辨率不同，则显示将变为空白。onCameraFrame上的文档很粗略——那么，这是真的吗？

在调用onCameraFrame之前，是否还有其他地方可以尝试进行图像旋转？是否有其他方法可以简单地强制相机以纵向模式提供帧？

Answer 1

setDisplayOrientation适用于相机的标准预览输出（直接连接到相机的SurfaceView或TextureView），但OpenCV位于中间，它接收数据的方式不受setDisplayOrientation的影响。

转置将改变图像数组的尺寸，除非样本的其余部分知道如何处理，否则您将遇到问题。您必须跟踪代码以查看缓冲区大小的假设（例如，绘制到UI的输出缓冲区），并相应地更新它们，使其成为超出插入转置点的转置大小。

理想情况下，有一些方法可以在OpenCV绘制的输出视图上设置方向，但我对OpenCV的示例了解不足，无法判断是否存在这样的控件。