参考链接
- FFMpeg视频播放器的制作-雷霄骅（去除电流音版本）_哔哩哔哩_bilibili
视频播放器原理
- 播放视频文件的流程
- YUV是一张屏幕中像素点的数值
封装格式
- MP4 RMVB TS FLV AVI
- 将视频和音频码流按照一定的格式存储在一个文件中
- 封装格式分析工具：Elecard Format Analyzer
- 数字电视支持的格式 MPEG2-TS
- 数据大小固定，每个都是188Byte
- 单个数据包损坏不会影响其余数据包
- FLV包含Header头文件，一旦损坏，无法播放数据
视频编码数据
- H.264 MPEG2 VC-1
- 将视频像素数据（RGB，YUV等）压缩成视频码流，从而降低视频的数据量
- 视频编码分析工具 Elecard Stream Eye
- I帧 ：红色的帧 将图片作为数据直接压缩，不依赖
- P帧 ：蓝色的帧 依赖前面的I帧，存储与I帧不同的地方
- B帧 ：绿色的帧 依赖左右的视频帧，参考的东西更多
音频编码数据
- AAC MP3 AC-3
- 将音频采样数据（PCM等）压缩成音频码流，从而降低音频的数据量
- WAV格式的数据是未经压缩的音频数据
视频像素数据
- 解码之后的数据，送到显卡进行数据显示
- YUV420P RGB
- 视频像素数据的作用：保存了屏幕每个像素点的像素值
- 格式：常见的像素数据格式有RGB24、RGB32、YUV420P、YUV422P和YUV444P等
- YUV是基于RGB进行转换
- Y 亮度
- UV 色调和饱和度
- 压缩编码中一般使用的是YUV格式的像素数据，最为常见的是YUV420P
- 特点
- 视频像素数据体积很大，一般情况下1小时高清视频的RGB24格式的数据体积为：
- 3600*25*1920*1080*3=559.9GByte
- 这里假定帧率为25Hz，取样精度8bit
- YUV格式像素数据查看工具 YUV Player
音频采样数据
- PCM
- 音频采样数据的作用：保存了音频中每个采样点的数值
- 特点：音频采样数据体积很大，一般情况下一首4分钟的PCM格式的歌曲体积为
- 4*60*44100*2*2=42.3MByte
- 第一个2表示声道
- 第二个2表示字节 8*2=16
- PS：这里假定采样率为44100Hz，采样精度为16bit
- 音频采样数据查看工具：Adobe Audition
