当前位置: 首页 > article >正文

webrtc音频模块(五) AudioState和AudioDeviceBuffer

AudioStateAudioDeviceBuffer是音频处理模块的两个功能类。两者没有直接的关系,只是放在这里一起总结。

AudioState

它是WebRtVoiceEngine的大管家,如下图所示类的关系:

如下类图:

它的作用:

  1. 外面访问Engine中AudioDeviceModuleAudioProcessingAudioMixer都是通过AudioState接口。
  2. 各个Call中的Stream对象会被映射到AudioState对象中,进而更新AudioTransportImpl的状态。

AudioDeviceBuffer

它有两个作用:

  1. AudioDeviceBuffer是ADM和Audio Core API间的数据缓存区。

ADM播放和采集的数据,总会通过 AudioDeviceBuffer 拿进来或者送出去 10 ms 的音频数据。对于不支持采集和播放 10 ms 音频数据的平台,在平台的AudioDeviceModule 和 AudioDeviceBuffer 还会插入一个 FineAudioBuffer(比如IOS),用于将平台的音频数据格式转换为 10 ms 的 WebRTC 能处理的音频帧。

  1. 记录音频设备的工作情况,每10s打印一次,记录的值有播放的sample数,最大音量等信息,可用于检测当前硬件的工作状态。

[037:814][152844] (audio_device_buffer.cc:440): [PLAY: 10000msec, 48kHz] callbacks: 1000, samples: 480000, rate: 48000, rate diff: 0%, level: 705

[047:815][152844] (audio_device_buffer.cc:440): [PLAY: 10001msec, 48kHz] callbacks: 1001, samples: 480480, rate: 48043, rate diff: 0%, level: 1076

如下类图,

音频引擎数据流转

从下面这个图中可以看到AudioStateAudioDeviceBuffer的角色。




http://www.kler.cn/a/459503.html

相关文章:

  • 瑞_Linux中部署配置Java服务并设置开机自启动
  • 电子应用设计方案82:智能 AI 椅子系统设计
  • AI知识库与用户行为分析:优化用户体验的深度洞察
  • 数据结构与算法之动态规划: LeetCode 674. 最长连续递增序列 (Ts版)
  • [算法] [leetcode-70] 爬楼梯
  • 7-58 输出不重复的数组元素
  • 服务器nfs文件共享
  • 实验室课程|基于SprinBoot+vue的实验室课程管理系统(源码+数据库+文档)
  • 使 el-input 内部的内容紧贴左边
  • 013-spring的注解整合第三方框架
  • 「下载」智慧园区及重点区域安全防范解决方案:框架统一规划,建设集成管理平台
  • 适合发布人工智能主题文章的英文网站和平台
  • AutoDL服务器深度学习使用过程
  • Spring Cloud由入门到精通
  • C++ ——— 单/多参数构造函数的隐式类型转换和 explicit 关键字
  • Prompt Engineering:提示词工程最佳实践与应用
  • DPIN基金会在曼谷发布全球去中心化GPU算力网络计划
  • Pip 简介与工作原理技术分享
  • 比分网站开发全流程/快速搭建比分网直播站/用现代技术实现高效架构
  • 什么是 PyPI(Python Package Index,Python 包索引)?
  • 面试经典150题——数组/字符串(三)
  • 自研国产零依赖前端UI框架实战006 实现表格分页的功能
  • 解决PS 撤销卡顿
  • 【 CSS 】sass 扩展语言的安装
  • IPC$远程植入木马
  • 【YashanDB知识库】yasql / as sysdba无法登录