当前位置: 首页 > 编程日记 > 正文

解密FFmpeg播放track mode控制

上一篇文章(http://www.cnblogs.com/yangdanny/p/4421130.html)我们解决了在FFmpeg下如何处理H264AAC的扩展数据,根据解出的NALU长度恢复了H264的起始码和AACADTS头,这样一般来说播放是没有问题。本篇文章来谈谈如何实现基于FFmpegtrack mode控制,也就是如何用FFmpeg提供的功能来实现基本的seek、快进、快退。好了,废话少了,下面开始基于FFmpegtrack mode之旅。

FFmpeg提供了一个seek函数,原型如下:

int av_seek_frame(AVFormatContext *s, int stream_index, int64_t timestamp,                   int flags);

参数说明:

s:操作上下文;

stream_index:基本流索引,表示当前的seek是针对哪个基本流,比如视频或者音频等等。

timestamp:要seek的时间点,以time_base或者AV_TIME_BASE为单位。

Flagsseek标志,可以设置为按字节,在按时间seek时取该点之前还是之后的关键帧,以及不按关键帧seek等,详细请参考FFmpegavformat.h说明。基于FFmpeg的所有track mode几乎都是用这个函数来直接或间接实现的。

 

  • 文件的seek功能实现

要转跳到视频100秒(100 000毫秒)处的第一个I帧(如果没有则向前找第一个):

av_seek_frame(pFormatCtx, vid_index, 100000*vid_time_scale/time_base, AVSEEK_FLAG_BACKWARD);

跳到音频80秒(80 000毫秒)处的帧(采样):

av_seek_frame(pFormatCtx, aud_index, 80000*aud_time_scale/ time_base, AVSEEK_FLAG_BACKWARD);

跳到文件开始的地方开始播放:

av_seek_frame(pFormatCtx, vid_index, 0, AVSEEK_FLAG_BACKWARD);

上面的time_scaletime_base都能通过流信息获取到,请参考前面的文章。有的文件不一定能seek成功,可以考虑在失败的情况下将AVSEEK_FLAG_BACKWARD改为AVSEEK_FLAG_ANY再次seek,不过seek到的视频帧可能不是I帧。

这个函数不管你当前在什么时间点上,都可以seek到任何合理位置。比如要实现在当前的基础上向后或向前跳转10秒,我们可以在av_read_frame函数拿到的包中含有当前时间戳的基础上增加或较少一个10000(换算成播放时间单位)再seek即可。所以这个函数可以用做进度的拖放、前进/后退一定时间、循环播放等功能。

  1. 快进快退

对于快进来说,一般解码器能实现2倍甚至再高倍速的播放,这种情况直接按照上一篇文章的基本播放流程就可以了。但对于4倍、8倍、16倍、32倍等高速播放,一般不能像传统播放那样一帧一帧的送数据,不只是解码能力问题,数据读取也可能因为带宽不够跟不上,我们只能提取其中的I帧进行播放,将B帧和P帧丢掉。下面我们就来讨论这个过程的实现流程。

快进时,通过当前数据包获得当前的时间PTS,将该PTS换算成时间再加上一小段时间,作为seek时间点向后找关键帧,此时flags可设置为AVSEEK_FLAG_FRAME。之后用av_read_frame获取到该关键帧。完成该帧解码显示后,再在该帧的PTS时间上增加一小段时间后seek,这样一直重复上述过程,流程如下图:

                  

 

快退时,通过当前数据包获得当前的时间PTS,将该PTS换算成时间再减去一小段时间,作为seek时间点向前找关键帧,此时flags可设置为AVSEEK_FLAG_BACKWARD。之后用av_read_frame获取到该关键帧。完成该帧解码显示后,再在该帧的PTS时间上减去一小段时间后seek,这样一直重复上述结果,过程如下图:

这样,我们通过以上对av_seek_frame函数的运用,即可完成文件playback的各种track mode实现,其实理解了这个函数后,你还会有很多其他办法来实现,这里只是提供了一种简单且占内存少的办法。在特定的情况下还可以先全部走一遍所有帧,并记录下全部的I帧的时间戳、帧编号、位置信息等需要的信息,然后直接从该表里面获取信息后进行seek和读取这些关键帧进行快速播放。

 

想第一时间获得更多原创文章,请关注个人微信公众平台:程序员互动联盟(coder_online),扫一扫下方二维码或者搜索微信号coder_online即可关注,里面有大量AndroidChromiumLinux,编程技巧等相关文章等着您,我们还可以在线交流。

如需转载本文,请注明出处:http://www.cnblogs.com/yangdanny/

谢谢合作!

转载于:https://www.cnblogs.com/yangdanny/p/4440217.html

相关文章:

UIButton防止按钮和手势的暴力点击

首先理解下几个概念 1、IMP:它是指向一个方法具体实现的指针,每一个方法都有一个对应的IMP,当你发起一个消息之后,最终它会执行的那段代码,就是由IMP这个函数指针指向了这个方法实现的 2、SEL:方法名称的描…

使用Windows7上的VS Code打开远程机Ubuntu上的文件操作步骤

之前在https://blog.csdn.net/fengbingchun/article/details/118991855 中介绍过在Windows10通过VS Code打开Ubuntu 16.04上的文件或文件夹的操作步骤。Windows7上的操作与Windows10有所不同,这里记录下。 Visual Studio Code Remote - SSH扩展允许你在任何远程机器…

微众银行殷磊:AI+卫星,从上帝视角洞察资产管理|BDTC 2019

出品 | AI科技大本营(ID:rgznai100)12月5日-7日,2019中国大数据技术大会(BDTC)于北京隆重举办,大会已成功举办十二届,是大数据领域极具影响力的行业盛会。本届大会汇聚了学术界、企业界上千位知…

【二分答案】【最短路】bzoj1614 [Usaco2007 Jan]Telephone Lines架设电话线

对于二分出的答案x而言&#xff0c;验证答案等价于将所有边权>x的边赋成1&#xff0c;否则赋成0&#xff0c;然后判断从1到n的最短路是否<K。 #include<cstdio> #include<cstring> #include<queue> using namespace std; #define N 1001 #define M 100…

Python3中装饰器@typing.overload的使用

typing.py的源码在&#xff1a;https://github.com/python/cpython/blob/main/Lib/typing.py 。此模块为类型提示(Type Hints)提供运行时支持。这里介绍下typing.overload的使用&#xff0c;从python 3.5版本开始将Typing作为标准库引入。 python3中增加了Function Annotation(…

19年NAACL纪实:自然语言处理的实用性见解 | CSDN博文精选

作者 | Nikita Zhiltsov翻译 | 王威力校对 | 李海明本文为你概述处理不同NLP问题时的具有卓越性能的方法、技术和框架等。计算语言&#xff1a;人类语言技术学会北美分会2019年年会&#xff08;North American Chapter of the Association for Computational Linguistics: Huma…

高并发场景下数据库的常见问题及解决方案

一、分库分表 &#xff08;1&#xff09;为什么要分库分表 随着系统访问量的增加&#xff0c;QPS越来越高&#xff0c;数据库磁盘容量不断增加&#xff0c;一般数据库服务器的QPS在800-1200的时候性能最佳&#xff0c;当超过2000的时候sql就会变得很慢并且很容易被请求打死&a…

典型用户 persona

persona 典型用户 1、姓名&#xff1a;王涛 2、年龄&#xff1a;22 3、收入&#xff1a;基本无收入 4、代表用户在市场上的比例和重要性&#xff1a;王涛为铁道学生。本软件的用户主要是学生和老师&#xff0c;尤其是广大的铁大学子&#xff0c;所以此典型用户的重要性不言而喻…

PyTorch中nn.Module类简介

torch.nn.Module类是所有神经网络模块(modules)的基类&#xff0c;它的实现在torch/nn/modules/module.py中。你的模型也应该继承这个类&#xff0c;主要重载__init__、forward和extra_repr函数。Modules还可以包含其它Modules&#xff0c;从而可以将它们嵌套在树结构中。 只要…

什么是三层交换机、网关、DNS、子网掩码、MAC地址

一、什么是vlan? 二、单臂路由与三层交换机 三、什么是网关 一、什么是网关 二、如何来理解网关 三、网关的ip地址 四、网关是如何实现通信&#xff1f; 五、什么是默认网关&#xff1f; 四、什么是DNS 五、MAC地址 六、子网掩码 很多朋友多次问到什么是网关、dns、子网掩码&…

20行代码发一篇NeurIPS:梯度共享已经不安全了

整理 | 夕颜&#xff0c;Jane出品 | AI科技大本营&#xff08;ID:rgznai100&#xff09;【导读】12 月 8 日-14 日&#xff0c;NeurIPS 2019 在加拿大温哥华举行&#xff0c;和往常一样&#xff0c;今年大会吸引了数万名专家参会&#xff0c;并展示了计算机领域的最新进展。其中…

关于页面打印window.print()的样式问题

当我们打印网页的时候。有时候会发现。打印出来的。跟网页上看到的样式的差别有点大。这其中可能有的问题是。样式问题。 当调用打印(window.print())方法时。打印机会在网页的样式中查找 media print{}的样式&#xff0c;并适应到要打印的网页中。 所以 如果要打印的页面符合看…

Python3中参数*args和**kwargs介绍

在Python中&#xff0c;我们可以使用两种特殊符号将可变数量的参数传递给函数&#xff1a;*args和**kwargs。你可以使用任何单词代替args和kwargs&#xff0c;但通常做法是使用args和kwargs。 *args允许函数接受任意数量的位置参数(positional arguments)。 **kwargs收集所有未…

4大主流CPU处理器技术架构,不知道就out了!

作者 | 王艺威责编 | 阿秃RISC&#xff08;精简指令集计算机&#xff09;是一种执行较少类型计算机指令的微处理器&#xff0c;起源于80年代的MIPS主机&#xff08;即RISC机&#xff09;&#xff0c;RISC机中采用的微处理器统称RISC处理器。这样一来&#xff0c;它能够以更快的…

grunt-connect-proxy解决开发时跨域问题

最近的项目中前后端是完全分离开发的&#xff0c;前端用grunt管理项目。这样就会导致一个问题&#xff1a;开发时前端调用后台的接口时因为不在一个服务器&#xff0c;所以会出现跨域问题。但是也不能用JSONP或CROS方式实现真正的跨域&#xff0c;因为项目发布时其实是在同一个…

混合推荐系统就是多个推荐系统“大杂烩”吗?

作者丨gongyouliu编辑丨zandy【导读】在本篇文章中&#xff0c;我们会介绍混合推荐系统(Hybrid Recommender Systems)&#xff0c;就是利用多种推荐算法配合起来做推荐&#xff0c;期望避免单个推荐算法存在的问题&#xff0c;最终获得比单个算法更好的推荐效果。本篇文章我们从…

Python3中collections.OrderedDict介绍

Python3中的collections模块实现了特定目标的容器&#xff0c;以提供Python标准内建容器dict、list、set和tuple的替代选择&#xff0c;包括namedtuple、deque、ChainMap、Counter、OrderedDict、defaultdict、UserDict、UserList、UserString。这里介绍下OrderedDict&#xff…

汗!雅虎中国个人空间

今天发现雅虎中国有了个人空间&#xff0c;偷偷试了下&#xff0c;让人失望到极点&#xff0c;几乎没有什么特点&#xff0c;和MSN很相似&#xff0c;空间相册放着好好的Flickr不用&#xff0c;偏偏弄了个很垃圾的相册&#xff0c;还有整合能力也不行。都不知道del.icio.us和Fl…

关于v$process与v$session中process的理解

v$session有个process字段&#xff0c;V$PROCESS有个SPID字段&#xff0c;这两个字段是不是一个意思呢&#xff1f;是不是都代表会话的操作系统进程呢&#xff1f;官方文档上的解释&#xff1a;SPID VARCHAR2(12) Operating system process identifierPROCESS VARCHAR2…

Python3中lambda表达式介绍

Python3中的lambda表达式或lambda函数是匿名函数(anonymous function)&#xff0c;意味着该函数没有名称。def关键字用于在Python3中创建一个普通函数&#xff0c;类似地&#xff0c;lambda关键字用于在Python3中创建匿名函数。 Python3 lambda函数语法&#xff1a; lambda pa…

6大理由,告诉你为什么这个大会你不能错过! | 文末有福利

作者 | Carol出品 | 区块链大本营&#xff08;blockchain_camp&#xff09;* 文末可参与活动赢赠票&#xff01;如果说有一个什么领域&#xff0c;能让中科院、华为、腾讯、京东、360、微众银行的大咖汇聚在一起&#xff0c;那一定是——区块链。悄咪咪地给大家剧透一下&#x…

魔与道的反复较量 反垃圾邮件技术

反垃圾邮件武器库不同的反垃圾邮件产品采用的技术有所不同&#xff0c;但总体来说&#xff0c;不外乎以下几种技术&#xff0c;其中&#xff0c;针对垃圾邮件的核心技术有贝叶斯智能分析、垃圾邮件评分、垃圾邮件指纹识别。转载于:https://blog.51cto.com/aonlin/17074

在Centos 7下编译openwrt+njit-client

首先要有一个centos7 step1:更新系统的源&#xff1a; yum install update 但是发现官方的源好像被墙了&#xff0c;于是自己又去换源&#xff0c;找163的源换。具体的操作最后的链接。 可是换完源之后发现163的源只支持到centos6、、、、、、但是就泪崩了。于是又把源换了回来…

Python3中内置函数callable介绍

Python3中的内置函数callable接受一个对象参数&#xff0c;如果此对象参数看起来可调用&#xff0c;则callable函数返回True&#xff0c;否则返回False。如果返回True&#xff0c;则调用仍有可能失败&#xff1b;但如果返回False&#xff0c;则调用对象将永远不会成功。 类是可…

户外广告新创意

近来&#xff0c;各大城市纷纷加大了对户外广告的监管力度&#xff0c;部分城市甚至停止审批户外广告牌。这让户外广告运营者和广告发布商甚为头疼。 长期以来&#xff0c;户外广告牌扮演着截然相反的“双重角色”&#xff0c;在户外广告运营者和广告发布商眼中&#xff0c;“寸…

百度重新定义「智能屏」,瞄准10后

加入「公开课」交流群&#xff0c;获取更多学习资料、课程及热招岗位等信息记者 | 阿司匹林作为中国智能音箱主力推手中的一员&#xff0c;百度从 2017 年已经开始布局。根据数据机构Strategy Analytics发布智能音箱市场报告&#xff0c;2019年第三季度&#xff0c;百度旗下人工…

jQuery最简单的表单提交方式

第一步&#xff1a;绑定事件 常用的与ajax相关的事件参考如下&#xff1a; &#xff11;、$(selector).click(function) &#xff12;、$(selector).change(function) &#xff13;、$(selector).keyup(function) &#xff14;、$(selector).submit(function) 提交表单前&#…

Python3中typing模块介绍

typing.py的源码在&#xff1a;https://github.com/python/cpython/blob/main/Lib/typing.py。此模块为类型提示(Type Hints)提供运行时支持(This module provides runtime support for type hints)。从python 3.5版本开始将Typing作为标准库引入。 python3中增加了Function An…

显示所有文件和文件夹无论如何 无法被设置

问题&#xff1a;XP系统选显示所有文件和文件夹确定后没有任何反应再次打开文件夹选项里面仍是不显示隐藏的文件和文件夹 答案&#xff1a;在记事本粘贴下面文字&#xff0c;另存为所有文件&#xff0c; .reg 格式。成功的话图标变为绿色碎方块。在双击它。 Windows Registry E…

工作5年后才明白的道理:不起眼的技能中,藏着你的未来

编程圈儿一直都流传着一个调侃的段子&#xff1a;一流程序员靠数学二流靠算法三流靠逻辑四流靠SDK五流靠Google和StackOverFlow六流靠百度和自己琢磨低端的看高端的就是黑魔法&#xff01;从过来人的角度看&#xff0c;这不仅仅是个段子&#xff0c;而是目前程序员的真实写照。…