您当前的位置:首页产经 >  >> 
Qt中使用vlc-qt处理音视频 焦点滚动
来源:QT教程      时间:2023-05-13 02:07:39

Qt中使用vlc-qt处理音视频需要下载vlc-qt或者自己编译 ​(linux配置vlc-qt)​​​。播放本地视频或者连接网络摄像头感觉都挺流畅,画面质量很不错。此外看到vlc-qt可以实现一个窗口内多个控件显示视频的功能,非常厉害(这个我没有试过,不知道效果如何)。

(那几天用opencv读视频和QtAV,vlc-qt我都尝试过,感觉vlc-qt性能最佳,并且非常容易使用)。

效果如下,这里我是获取视频,抽帧之后转RGB图,在上面画了一个绿框:


(资料图片仅供参考)

这个代码我放到了github,可以了解一下。​​ ​https://github.com/Whu-wxy/Qt-VLC-Demo​​​

这两天用了一点点vlc-qt,简要记录一下:

处理视频时需要的几个类:

VlcInstance,VlcMedia(连接视频),VlcMediaPlayer(控制播放)

VlcVideoStream(视频抽帧)

VlcWidgetVideo(显示视频的控件)

帮助文档(写的比较简略):

​​ ​https://vlc-qt.tano.si/reference/​​​ vlc-qt github源码:​ ​https://github.com/vlc-qt/vlc-qt​​视频抽帧:

从VlcVideoStream派生一个类,比如ZNDKVideoStream,实现virtual void frameUpdated(),但是发现控件VlcWidgetVideo上就不显示了,我理解的是图片被VlcVideoStream截获,因此不能在VlcWidgetVideo显示。获得的图是YUV格式的,需要转换为RGB才可以方便自定义的图片处理。

这里找到一段YUV转cv::Mat的代码,得到Mat图片后我们进一步可以转为RGB。https://github.com/vlc-qt/vlc-qt/issues/230 。网上有些资料说用公式转换的效果不好,还有说可以用OpenGL转,以后有空可以尝试,这样就可以完全不依赖于opencv了。

void ZNDKVideoStream::frameUpdated(){//获得帧std::shared_ptrpFrame = std::dynamic_pointer_cast(renderFrame());if (!pFrame) {return; //LCOV_EXCL_LINE}//YUV图转Mat,再转QImageint rows = pFrame->height + pFrame->height / 2;int cols = pFrame->width;int matType = CV_8UC1 ;cv::Mat myuv(rows,cols,matType,(void*)pFrame->frameBuffer.data());cv::Mat mrgb(pFrame->height, pFrame->width, CV_8UC3);cv::cvtColor(myuv, mrgb, CV_YUV2RGB_I420);QImage img((const unsigned char *)(mrgb.data), mrgb.cols, mrgb.rows, mrgb.cols * 3, QImage::Format_RGB888);img.rgbSwapped();}

在这里图片可以选择用信号发出去:

emit sendImage(img);

视频缓存:

​​ ​https://github.com/vlc-qt/vlc-qt/issues/201​​​ 设置(也就是VlcMedia) media->setOption(\":network-caching=100\")

然鹅好像有点问题。

运行时报错:

core libvlc error: No plugins found! Check your VLC installation.VLC-Qt Error: libvlc failed to load!

解决:

sudo apt-get install libvlc-devsudo apt-get install vlc

【领 QT开发教程 学习资料, 点击下方链接莬费领取↓↓ ,先码住不迷路~】

点击这里:

标签:

X 关闭

X 关闭