c opencv获取编码的网络摄像头流

Question

我目前正在做一个项目，从网络摄像头捕捉视频，并通过UDP发送编码流来做实时流。

#include "opencv2/highgui/highgui.hpp"
#include <iostream>

using namespace cv;
using namespace std;

int main(int argc, char* argv[])
{
VideoCapture cap(0); // open the video camera no. 0

double dWidth = cap.get(CV_CAP_PROP_FRAME_WIDTH); //get the width of frames of the video
double dHeight = cap.get(CV_CAP_PROP_FRAME_HEIGHT); //get the height of frames of the video

while (1)
{
    Mat frame;

    bool bSuccess = cap.read(frame); // read a new frame from video

if (!bSuccess) //if not success, break loop
{
cout << "Cannot read a frame from video stream" << endl;
break;
}
return 0;
}

有人说从cap.read得到的帧已经是解码帧，我不知道这是如何以及何时发生的。我想要的是编码的帧或流。我应该怎么做才能得到它？我应该再编码一次吗？

Answer 1

OpenCV API不提供对编码帧的访问权限。

您将不得不使用更低级的库，可能依赖于设备和平台。如果您的操作系统是Linux，Video4Linux2可能是一个选项，那么必须为Windows/MacOS提供等效的库。您还可以看看mjpg streamer，它的功能与您想要实现的功能非常相似（仅在linux上）。

请注意，图像的确切编码将取决于您的网络摄像头，一些usb网络摄像头支持mjpeg压缩（甚至h264），但其他只能发送原始数据（通常在yuv色彩空间）。

另一个选项是使用Opencv获取解码图像，并对其重新编码，例如使用imencode。它具有简单性和可移植性的优点，但图像再编码会占用更多的资源。

Answer 2

根据文档，调用VideoCapture:：read（）相当于调用VideoCapture:：grab（）然后调用VideoCapture:：retrieve（）。

检索函数的文档说它确实解码了帧。

为什么不直接使用解码帧；想必你无论如何都会在远端解码？