当前位置: 首页 > article >正文

Android 13 - Media框架(14)- OpenMax(四)

这一节继续了解 openmax 目录下的内容。

1、OMX_Core.h

1.1、OMX_BUFFERHEADERTYPE

这是一个比较关键的结构体,上层ACodec/MediaCodec用到的 buffer id、OMXNode 与 OMX component 进行 buffer 传递都是通过该结构体完成,这里将会初步了解结构体中的部分成员意义:

  • OMX_U32 nSize:结构体的大小,用的不多;
  • OMX_U8* pBuffer:指向真正存储数据的 buffer;
  • OMX_U32 nAllocLen:分配的 buffer 的字节数;
  • OMX_U32 nFilledLen:buffer中填充的数据的字节数;
  • OMX_U32 nOffset:buffer 有效数据的偏移量;
  • OMX_PTR pAppPrivate:指向应用层与之关联的 buffer;
  • OMX_PTR pPlatformPrivate:指向平台与之关联的 buffer;
  • OMX_PTR pInputPortPrivate:指向 input 端口与之关联的 buffer;
  • OMX_PTR pOutputPortPrivate:指向 output 端口与之关联的 buffer;
  • OMX_TICKS nTimeStamp:buffer 对应的 pts;
  • OMX_U32 nFlags:buffer 所携带的标志位;
  • OMX_U32 nOutputPortIndex:输出端口上的索引;
  • OMX_U32 nInputPortIndex:输入端口上的索引;

结构体中 pBuffer、pAppPrivate、pPlatformPrivate 指向的内容这里暂时不做了解,后面了解 OMXNode 时再做研究。

1.2、OMX_EVENTTYPE

这个枚举类型定义了 OMX 组件的 callback 事件:

  • OMX_EventCmdComplete:组件执行完成一个命令;
  • OMX_EventError:组件发生错误;
  • OMX_EventMark:组件检测到 buffer 标识,用的较少;
  • OMX_EventPortSettingsChanged:组件的端口设置发生变化;
  • OMX_EventBufferFlag:组件收到 EOS;
  • OMX_EventComponentResumed:组件恢复工作;
  • OMX_EventOutputRendered :用作 tunnel mode 下 pts 上传给上层
  • OMX_EventDataSpaceChanged:数据空间发生变化;
  • OMX_EventOnFirstTunnelFrameReady:tunnel mode下第一帧被解出并且准备好渲染;

1.3、OMX_CALLBACKTYPE

这个结构体定义了 OMX 组件的 callback 类型,总共包含三个函数指针:

  • EventHandler:这个方法用于通知应用层OMX组件有事件发生;
  • EmptyBufferDone:这个方法用于将 input 端口的使用完的(空的) buffer 返回给应用层;这个方法是阻塞调用的,所以应用层不应该再其他线程中填充这块buffer;
  • FillBufferDone:这个方法用于将 output 端口的填充完的(满的)buffer 返回给应用层,同样的这个方法也是阻塞调用的;

1.4 OMX_BUFFERSUPPLIERTYPE

tunnel mode 相关,暂不了解。


2、OMX_Component.h

OMX_Component 头文件下定义了一个OMX组件所必要的公有接口,这个头文件将会被组件层和应用层共同使用。

2.1、struct OMX_PARAM_PORTDEFINITIONTYPE

每个组件都会有input 和 output 两个端口,每个端口都会有一个详细的信息描述,比如端口有几个buffer、端口当前的状态等等,这些信息就用 OMX_PARAM_PORTDEFINITIONTYPE来描述,结构体中有如下内容:

  • nPortIndex:端口的索引,使用较少;
  • eDir:表示当前 port 是 input 还是 output;
  • nBufferCountActual:当前端口上实际分配的buffer的数量;
  • nBufferCountMin:当前端口最少应该分配的buffer的数量;
  • nBufferSize:端口上每个buffer的大小;
  • bEnabled:当前端口是否被使能,默认是 enabled;
  • bPopulated:当前端口的数量是否已经被充满(数量等于nBufferCountActual),disable状态下端口将不会被认为是充满的;
  • eDomain:当前端口中buffer存储的数据的类型,video数据还是audio数据,用于决定端口的format类型;
  • format:表示端口中buffer的格式,不同数据类型对应于不同的格式,这将在后续了解;
  • bBuffersContiguous:buffer是否连续;
  • nBufferAlignment:buffer的对齐方式;

ACodec 中分配buffer时会先获取 port 定义,读取端口对应的 buffer 数量,后续也可能修改端口的buffer数量,另外读取输入输出格式时就是从端口定义的format中读取的。

2.2 struct OMX_COMPONENTTYPE

我们在OMX中见到的OMX_HANDLETYPE指代的就是这里的OMX_COMPONENTTYPE,它表示一个组件的句柄,通过这个句柄我们可以调用到组件的公有方法,也可以获取到组件的私有数据块(每个组件实现的方式与细节)。组件句柄由OMX Core创建,组件加载完成后,应用层可以安全的调用组件的方法。

接下来了解这个结构体中的部分内容:

  • pComponentPrivate:指向组件的私有数据块(内部实现);
  • pApplicationPrivate:指向OMX组件的调用者(client),也就是OMXNode;
  • 公有函数指针:由OMX组件实现,给client调用。

调用一个 OMX 方法后,组件的处理流程应该是这样:

  • 调用 OMX_COMPONENTTYPE 的标准方法,传入参数为 OMX_COMPONENTTYPE 自身;
  • 标准方法实现中对内部实现 pComponentPrivate 进行处理和调用,比如说 SetCallbacks 应该会把回调函数注册给 pComponentPrivate 的一个成员。

OMX Core 创建的是一个基类对象,实际调用的是我们的子类实现,大致就是这个意思。


http://www.kler.cn/news/148874.html

相关文章:

  • 开源C++智能语音识别库whisper.cpp开发使用入门
  • Pytest自动化测试框架完美结合Allure
  • 微服务--05--配置管理
  • 大模型训练为什么用A100不用4090
  • Python编写的爬虫为什么受欢迎?
  • 【PHP】MySQL简介与MySQLi函数(含PHP与MySQL交互)
  • Android手电筒、闪光灯、torch、flash
  • CMake中的变量: CTest,CPack,CMake内部定义的变量
  • 封装websocket并在vuejs中调用
  • 动态库与静态库
  • Python与设计模式--设计原则
  • 九、LuaTable(表)
  • Nginx访问控制
  • 力扣142. 环形链表 II
  • 面试问题--智能指针
  • linux网络编程之UDP编程
  • 详细讲解1.js处理日期对象输出标准的“2000年12月22日 周三“ 的格式
  • 杂记 | 使用Docker安装并配置MongoDB以支持事务(单副本,并解决了证书文件错误的问题)
  • centos7.9 + gitlab12.3.0安装
  • PyQt6 QLineEdit单行文本框控件
  • 使用python提取出身份证的出生日期(18位和15位)
  • C# freesql技术 常用的增删改查sql命令
  • linux安装终端连接工具Tabby
  • DjiTello + YoloV5的无人机的抽烟检测
  • 创建Dataloader基础篇【一】
  • 拆解按摩器:有意思的按键与LED控制电路,学习借鉴一下!
  • <Linux>(极简关键、省时省力)《Linux操作系统原理分析之Linux 进程管理 9》(13)
  • IELTS学习笔记_grammar_新东方
  • 基于MBC调制方法的准Z源三相逆变器Simulink建模与仿真
  • 目标检测YOLO系列从入门到精通技术详解100篇-【目标检测】特征点检测与匹配