书店网站建设设计方案,网页前端开发教程,苏州做外贸网站,做图标的网站实时流和普通文件
1 实时流 实时流编码时#xff0c;我们一般不进行b帧编码#xff0c;但是文件存储时为了减小大小#xff0c;会增加b帧#xff0c;实时流只带了I#xff0c;P帧#xff0c;那就会好很多 2 普通文件 很多文件带了b帧#xff0c;所以要使用解码时间去同…实时流和普通文件
1 实时流 实时流编码时我们一般不进行b帧编码但是文件存储时为了减小大小会增加b帧实时流只带了IP帧那就会好很多 2 普通文件 很多文件带了b帧所以要使用解码时间去同步如果使用pts很多人一定会被其时间搞混。
我们可以正确使用AVFrame 的pts 和pkt-dts 去保存正常的时间如果不给其正确赋值那么值就如下所示是novalue。 那么获取pts和dts 去赋值给avframe就行了注意时间基。如果不进行时间延时那么文件会被cpu 快速读完这就看cpu有多强了当然为了仅仅是测试当然可以直接使用帧率间隔时间延时就行如果做播放器就不能这样了我们要严格掐时间按照秒表去对。
int main()
{c_test test;std::thread t([test]() {// 在这里编写你的匿名函数的代码std::cout Hello from the new thread! std::endl;test.func_init(G:/record/A1_.mp4);test.Start();});while (1){AVFrame* f test.GetData();if (f ! NULL){int h f-height;int w f-width;cv::Mat mat(h, w, CV_8UC3,f-data[0]);cv::Mat matBGR;cv::cvtColor(mat, matBGR,cv::COLOR_RGB2BGR/* cv::COLOR_BGR2YUV_I420*/);cv::imshow(show, matBGR);std::cout the pts is : f-ptsstd::endl;av_freep(f-data[0]);av_frame_free(f);}if (cv::waitKey(30) q)break;}test.Stop();std::cout end of this thread std::endl;//test.func_seek(10);t.join();
}以上代码的RGB到BGR的转化其实没有必要使用 实际播放的时候我们直接渲染RGB24RGBA甚至YUVNV12 都可以这里为了方便把这个转化成了BGR24不过是想让opencv 直接渲染由于opencv 中 bgr的rgb的颜色交换播放时看起来不舒服所以转化一下更符合实际不转化也没什么。如果不想转化甚至直接使用nv12yuv420rgb24为了方便演示可以使用sdl去播放如果对opengl熟悉自己就写一段代码去播放。文章可以到我其他的文章里面找我应该都写过。
正确的播放延时
获取时间基 AVRational time_base input_ctx-streams[video_stream]-time_base;AVRational time_base_q { 1,AV_TIME_BASE }; // AV_TIME_BASE_Q;要正确播放一定要使用dts也就是解码时间而非pts对于带b帧的视频来说一定是如此。
if (v_isrealtime false video_stream packet.stream_index)
{//这里需要更加精确的计算if (v_starttime -1)v_starttime av_gettime();//av_usleep(30 * 1000);int64_t pts_time av_rescale_q(packet.dts, time_base, time_base_q);if (v_startptstime -1)v_startptstime pts_time;int64_t N av_gettime() - v_starttime;int64_t S pts_time - v_startptstime;if (S N){av_usleep(S-N);std::cout sleep: S - N std::endl;}
}播放测试的时候可以使用pc上有秒表卡住时间没有就使用手机也可以两个相差一直是同样的描述持续时间长一点 正确的同步
同步时一定要使用系统时间和播放时间相对应如果文件有跳帧拖拉进度条和快放的需求更加要注意其实以上代码已经包含了跳帧和快放的基本需求研究一下就知道了。
