vlc源码分析（二）播放流程

痛定思痛。 2022-06-12 07:14 194阅读 0赞

当点击播放文件或者输入要播放的文件后，vlc会执行一系列的流程。

首先需要了解[视频以及流媒体处理及播放的流程][Link 1]，由链接中的描述，视频以及流媒体处理时，首先要解协议（http，rtmp，rtsp等），然后是解封装（mp4，mkv，avi等），获得音频码流和视频码流，分别解码后，再根据时间戳进行同步。使用vlc点击播放后，就是这一系列的流程。

点击播放支持RTSP协议的摄像头后，vlc会开启线程对输入的文件或者url进行分析(src/playlist/preparser.c)，根据视频源属性做一些准备工作，包括：

->InputSourceInit()

->input\_SplitMRL()分解url

->demux\_New()创建分离器，如果是一个mp4文件，则会动态加载libmp4库，以此类推

->demux\_Control()调用libmp4的Control函数，以此类推

......

->InitPrograms()根据文件或url属性创建解码器（decoder），创建过程会加载对应模块

之后就是从网络或者本地获取数据，堆栈如下。从堆栈中可以看到，接收线程从网络中接收数据，如果数据有封包格式（如mp4,mkv,ts等，也就是编码后的裸数据），则首先进行的是解封装，将解封包后的数据组成block（可以理解为是一个结构体，这个结构体可以用来保存一帧图像，也可以用来保存一帧图像的一部分数据），放入数据fifo中；解码线程从数据fifo中取出block来解码，交由其他渲染模块去显示。不同的是，摄像头并没有封装视频格式，而是传输的编码后的裸数据。

![1016266-20170423132018288-748537833.png][]

同理，播放一个本地mp4文件的堆栈如下。播放本地文件就没有了解协议的步骤，但是使用了libmp4进行了拆包。

![1016266-20170423133228132-164549483.png][]

放入数据fifo中的数据还没有被解码，另外还有两个解码线程（音频和视频）不断的从各自的队列中取数据解码，视频解码线程的堆栈如下。解码线程首先从上述数据fifo中取出数据，使用已经根据数据源格式创建好的解码器解码，之后将解码后的数据放到图像fifo中。

![1016266-20170423134410538-1919687420.png][]

最后是渲染线程的堆栈，渲染线程不断的从图像fifo中取出数据渲染到窗体上。

![1016266-20170423134945491-836580973.png][]

程序的整体框图如下。当RTSP session建立的时候，程序根据RTSP会话得到的SDP信息创建视频解码器和音频解码器，两个解码器有各自的fifo，用于存放需要解码的数据。RTP数据到来后，经过Demux，分别放入两个fifo中，然后两个解码线程分别从各自的fifo中取出视频和音频数据解码。解码后的音频数据直接播放，解码后的视频数据放入picture\_fifo\_t中，由渲染线程负责显示。

![1016266-20170522182915867-1370608253.png][]

附：

配置好的Windows版vlc工程下载：[https://github.com/jiayayao/vlc\_2.1.0-vs\_2010][https_github.com_jiayayao_vlc_2.1.0-vs_2010]，下载后使用vs2010可以直接编译运行，调试学习非常方便。

http://www.cnblogs.com/jiayayao/p/6752388.html

[Link 1]: http://blog.csdn.net/leixiaohua1020/article/details/50534369
[1016266-20170423132018288-748537833.png]: /images/20220612/e54d2656e3b144b88fc232e3ac355023.png
[1016266-20170423133228132-164549483.png]: /images/20220612/91b3ac0db5fa42409895f2b48d9798d9.png
[1016266-20170423134410538-1919687420.png]: /images/20220612/85af20d64c3c44a28030356df3ff072e.png
[1016266-20170423134945491-836580973.png]: /images/20220612/71d962c7601d46a5bfb459f29fe2670d.png
[1016266-20170522182915867-1370608253.png]: /images/20220612/781f4eb48e0344b4bed85eac17e3920f.png
[https_github.com_jiayayao_vlc_2.1.0-vs_2010]: https://github.com/jiayayao/vlc_2.1.0-vs_2010