java opencv png图像与alpha通道视频问题

Question

每个人我试图使用java和opencv将“.png”图像置于视频捕获之上。

我从opencv java官方网站上执行了教程http://opencv-java-tutorials.readthedocs.io/en/latest/04-opencv-basics.html

在本教程中，使用本教程中的png图像，一切都很好。但当我尝试用alpha通道加载自己的png图像时，我得到了错误的结果。Png图像显示为空白。

这两个屏幕上的图像都是打印的：

正确输出

输出不正确

我的png图像

这是加载图像的代码：

@FXML
protected void loadLogo() {
    if(logoCheckBox.isSelected()) {
        this.logo = Imgcodecs.imread("resources/Poli.png", Imgcodecs.IMREAD_COLOR);
    }
}

这是视频捕获和放置png图像的代码：

Mat frame = new Mat();

// read the current frame
this.capture.read(frame);
Rect roi = new Rect(frame.cols() - logo.cols(), frame.rows() - logo.rows(), logo.cols(), logo.rows());
Mat imageROI = frame.submat(roi);

Core.addWeighted(imageROI, 1.0, logo, 1.0f, 0.0, imageROI);

以下是输出图像在ImageView中的放置方式：

MatOfByte buffer = new MatOfByte();
Imgcodecs.imencode(".png", frame, buffer);
Image imageToShow = new Image(new ByteArrayInputStream(buffer.toArray()));
Image imageToShow = Utils.mat2Image(frame);
currentFrame.setImage(imageToShow);

我知道参数Imgcodecs。IMREAD_彩色加载图像，有3个通道，没有alpha，但当我将此参数更改为IMREAD_UNCHANGED时，我得到了以下错误：

OpenCV错误：输入参数的大小不匹配（操作既不是“数组op array”（其中数组的大小和通道数相同）

出现这种情况是因为带有视频捕获的输入垫仅包含3个通道。

我的问题是：如何在视频捕获上正确加载和放置png图像？

P. S当我用黑色填充png图像的背景时，它的显示是正确的，但图像仍然保持透明。

Answer 1

答案是RGBA图像不能放置在RGB视频捕获之上。仅放置png图像的RBG组件会产生“错误结果”。

目前，我找到的最好的解决方案是在RBGA模式下加载png图像，使用4个通道，使用第4个alpha通道，并将其用作显示图像的遮罩，使用函数“copyTo”而不是“addWeighted”。

但这种方法不适用于PNG图像的半透明部分，如阴影和低不透明度的对象。

下面是使用单独的RGB和alpha通道加载图像的代码：

Mat logo = new Mat();
Mat logo_alpha = new Mat();
Mat logo_with_alpha = Imgcodecs.imread("resources/TREE_1.png", Imgcodecs.IMREAD_UNCHANGED);         
Vector<Mat> rgba = new Vector<Mat>();
// split RBGA image for separate channels
Core.split(logo_with_alpha, rgba);
// get alpha channel
logo_alpha = rgba.get(3);
// remove alpha channel to get RGB image
rgba.remove(rgba.size()-1);
// get image with only RGB components
Core.merge(rgba, this.logo);

以下是视频捕获和在其上放置png图像的代码：

Mat frame = new Mat();
// read the current frame
this.capture.read(frame);
Rect roi = new Rect(frame.cols() - logo.cols(), frame.rows() - logo.rows(), logo.cols(), logo.rows());
Mat imageROI = frame.submat(roi);
// place logo with alpha on the frame
logo.copyTo(imageROI, logo_alpha);