h264裸流打包成mp4注意事项

需求：Android 设备端实时获取网络摄像头捕获的画面流数据，并在按下录制按钮后启动录制过程

实现： ffmpeg + x264 + sdl;

h264 格式的裸流经过压缩打包生成MP4文件，在相关论坛和博客上也讨论了许多关于这一技术的资料；同时，在ffmpeg开源项目中提供了muxing功能的一个示例代码段。其基本操作流程与ffmpeg中的muxing.c函数实现基本一致。为了记录学习过程中的疑问和思考，在此将遇到的问题逐一记录下来...这些问题困扰了我很长时间才得以解决...谁叫我是视频方面的小白呢？

这三个问题其本质并不复杂；然而，在缺乏对该领域的基本了解的情况下，耗费的时间成本依然较高。这一现象在当前快速发展的背景下更为明显。

1，dts,pts:

在调用write_frame()前

2，sps,pps;

接收裸流的信息中包含了SPS、PPS以及I帧，并且这些关键的信息块都被整合在一个NALU（网络元）中进行处理。在将这些信息转换为MP4格式时,SPS信息至关重要,因为其对视频的时间同步有决定性作用;如果我在编码过程中未预先配置必要的编码参数,则会导致最终生成的文件无法被普通的视频播放程序正确解析;因此必须确保在压缩流程中对所有相关参数进行精确配置才能保证输出文件的质量

在构建编码器的过程中,sps会将其传递给编码器; 它是一个由一系列二进制数组成的代码