GStreamer-从Raspberry到VLC-PC的网络摄像头流

Question

我正在尝试使用gstreamer 1.0将网络摄像头视频从树莓流到VLC播放器。现在，我对覆盆子有以下命令：

gst-launch-1.0 -vv -e v4l2src device=/dev/video0  \
! videoscale \
! "video/x-raw,width=352,height=288,framerate=10/1" \
! queue  \
! x264enc \
! h264parse \
! rtph264pay config-interval=10 pt=96 \
! udpsink host=239.255.12.42 port=5004

以及以下sdp文件，以使用vlc播放流：

c=IN IP4 239.255.12.42
m=video 5004 RTP/AVP 96
a=rtpmap:96 H264/90000

当我运行gst-Launst-1.0命令时，我可以通过wireshark看到它正在发送udp数据包，但当我尝试使用vlc和sdp文件播放流时，我什么也没有得到。vlc日志说：

es error: cannot peek
es error: cannot peek
live555 error: no data received in 10s, aborting

我不知道怎么了。我可能没有正确地构建管道，这就是为什么vlc不能将该流识别为正确的视频流。有什么想法吗？

提前感谢您的帮助。

Answer 1

VLC结合RTP协议理解ts流。该方法是在MPEGTSUM之后使用rtp payloader，它将对生成的ts缓冲区（数据包）进行有效负载。

所以代替这个：

src ! queue ! x264enc ! h264parse ! rtph264pay ! udpsink

您可以这样做：

src ! queue ! x264enc ! h264parse ! mpegtsmux ! rtpmp2tpay ! udpsink

然后在vlc中只使用rtp://@:port，这样MPEGTSUM将封装关于它包含哪些流的信息

我应该注意到，您的方法没有错误，可能更有效（mpegtsmux将视频分割成188字节的数据包，但您的方法将分割成约1400字节的udp数据包），但您需要为vlc提供正确的SDP文件，以便对其进行流式处理。例如，像这样，但我对此没有太多经验。。

这是您当前使用的管道：

gst-launch-1.0 -vv -e v4l2src device=/dev/video0 ! "video/x-raw,width=352,height=288,framerate=25/1"\ ! queue ! x264enc speed-preset=1 ! h264parse ! mpegtsmux ! rtpmp2tpay ! udpsink host=192.255.10.41 port=5004

您可以在使用zerolatency时获得更好的结果：

这样，它将丢弃所有其他质量参数，如速度预设等。。

这是关于tune属性的文档：

tune : Preset name for non-psychovisual tuning options
       flags: readable, writable
       Flags "GstX264EncTune" Default: 0x00000000, "(none)"
       (0x00000001): stillimage       - Still image
       (0x00000002): fastdecode       - Fast decode
       (0x00000004): zerolatency      - Zero latency