一、前言

为什么需要判断视频文件是否含有B帧，这个在推流的时候很容易遇到这个问题，一般来说，没有B帧的视频文件，解码后的数据帧pts和dts都是顺序递增的，而有B帧的则未必，可能有些需要先解码后面显示，B帧也是双向预测图像B，对它的编码，即是对它前后帧的像素值之差进行编码，B帧是双向差别帧，也就是B帧记录的是本帧与前后帧的差别换言之，要解码B帧，不仅要取得之前的缓存画面，还要解码之后的画面，通过前后画面的与本帧数据的叠加取得最终的画面。B帧压缩率高，但是解码时CPU会比较累。所以一般编码保存成文件的时候习惯把B帧去掉，但是为什么又要有B帧这个东西呢？因为可以增加压缩率，减少文件体积，在传输的时候也可降低带宽。所以用户可以根据实际需要选择。

一、前言

用ffmpeg做音视频保存到mp4文件，都会遇到一个问题，尤其是在视频监控行业，就是监控摄像头设置的音频是PCM/G711A/G711U，解码后对应的格式是
pcm_s16be/pcm_alaw/pcm_mulaw，将这个原始的音频流保存到mp4文件是会报错的，在调用avformat_write_header写文件头的时候提示(-22) Invalid argument，非法的参数，翻阅源码得知，ffmpeg中的mp4封装并不支持pcma和pcmu，除非手动更改源码加入。mp4封装格式默认支持的音频格式是aac和mp3，其实mp4文件本身是可以支持pcm音频数据的，不知道为何ffmpeg中不加入。通过个更改源码的形式尽管可以支持，个人还是推荐用另外一种方法，那就是在调用

一、前言

内核ffmpeg除了支持本地文件、网络文件、各种视频流播放以外，还支持打开本地摄像头，和正常的解析流程一致，唯一的区别就是在avformat_open_input第三个参数传入个AVInputFormat参数，这个参数用于指定输入设备的格式，不同系统对应不同的格式名称，windows上是dshow或者vfwcap，linux上是video4linux2或者v4l2，mac上是avfoundation。同时本地摄像头涉及到分辨率帧率等参数的设置，这个需要在最开始调用av_dict_set的时候就设置好，用video_size来设置分辨率，格式是 640x480 这样，用framerate来设置帧率，以上的几个参数成功生效的前提是要设备本身支持对应的分辨率帧率等，比如设备本身只有720P你硬是要设置个1080P的分辨率那肯定不行的，应该会打印I/O error这类错误提示。

一、前言

从代码层面以及自由度来说，用ffmpeg来写全能播放组件是最佳方案（跨平台最好最多、编解码能力最强），尽管已经有优秀的vlc/mpv等方案可以直接用，但是vlc/mpv对标主要是播放器应用层面，其他层面比如视频监控行业领域就比较鸡肋，所以还是从底层一点一滴做解码编码会让自己更熟练。关于网上很多ffmpeg的示例，尤其是播放的示例，数不胜数，比较适合用来入门学习，问题是随着ffmpeg官方不断的迭代更新，很多代码都不可用，因为api变了，尤其是最近5年迭代的特别快，从2017年开始直接猛飚版本，现在直接干到了ffmpeg6版本，一般在安排取消或者改动某些api接口前几个版本，都会打上对应的标记，既有新方法，也兼容旧的api，一般会放在下一个大版本将旧的api接口移除，以便减轻历史包袱，在核心功能编解码这块，一直是兼容的，不会说新版本不兼容以前旧版本的一些编解码格式。

一、前言

这个解码线程基类的设计，是到目前为止个人觉得自己设计的最好的基类之一，当然也不是一开始就知道这样设计，没有个三五年的摸爬滚打以及社会的毒打，是想不到要这样设计的，一方面是要不断提炼各种视频类视频组件的共性作为局部变量，比如通用的参数有视频画面宽度videoWidth、视频画面高度videoHeight、视频画面帧率frameRate、视频旋转角度rotate、音频采样率sampleRate、音频通道数channelCount等。这些共性参数都是在疯狂实战的过程中提炼的，久而久之就出来了。

基于Qt Widgets的

一、前言

以前一直以为只有Qt5以后才有QAudioOutput播放音频，其实从Qt4.6开始就有，在Qt6中变成了QAudioSink，功能一样。用QAudioOutput播放音频pcm数据极其方便，只需要指定音频播放设备（可能电脑上有多个音频输出设备），设置音频数据格式（采样率、通道数量、比特率等）。当ffmpeg采集到音频数据后，就是原始的pcm格式数据，直接发给QAudioOutput播放就行，这样就不需要sdl，sdl可以很方便的用来播放音视频，但是和Qt结合显示不大方便，嵌入到Qt界面中比较繁琐，所以最后采用的策略是视频用qopenglwidget或者painter绘制，音频用qaudiooutput播放，这样就只需要依赖ffmpeg即可，打完收工完美。

Qt 5.6新功能预览

目录：

• 1.新功能
• 2.其他变化
• 3.弃用模块
• 4.删除模块
• 5.技术预览模块
• 6.新配置

新功能

Qt Core

• 减少动态属性的内存使用
• 允许日志直接体现在Linux系统记录上

绘图框架类